CN110781133A - 一种row快照方法、系统、设备及计算机可读存储介质 - Google Patents
一种row快照方法、系统、设备及计算机可读存储介质 Download PDFInfo
- Publication number
- CN110781133A CN110781133A CN201911026019.2A CN201911026019A CN110781133A CN 110781133 A CN110781133 A CN 110781133A CN 201911026019 A CN201911026019 A CN 201911026019A CN 110781133 A CN110781133 A CN 110781133A
- Authority
- CN
- China
- Prior art keywords
- data
- written
- target file
- writing
- snapshot
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/11—File system administration, e.g. details of archiving or snapshots
- G06F16/128—Details of file system snapshots on the file-level, e.g. snapshot creation, administration, deletion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/17—Details of further file system functions
- G06F16/172—Caching, prefetching or hoarding of files
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/1805—Append-only file systems, e.g. using logs or journals to store data
- G06F16/1815—Journaling file systems
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请公开了一种ROW快照方法、系统、设备及计算机可读存储介质,在应用ROW快照方法写入数据的过程中,获取待写入数据;确定源卷对应的目标快照卷的目标文件写入状态,目标文件写入状态为目标快照卷写入待写入数据后的状态;将待写入数据和目标文件写入状态封装成目标文件;将目标文件写入目标快照卷。本申请提供的一种ROW快照方法,在应用ROW快照方法写入数据的过程中,通过一次写操作将待写入数据及目标快照卷的目标文件写入状态写入目标快照卷,使得在应用ROW快照方法写入数据时,只需执行一次写操作,与现有技术相比,本申请降低了应用ROW快照方法写入数据时的写操作次数,提高了ROW快照方法的快照效率。
Description
技术领域
本申请涉及存储技术领域,更具体地说,涉及一种ROW快照方法、系统、设备及计算机可读存储介质。
背景技术
在存储领域中,超融合架构(Hyper-Converged Infrastructure,HCT)是指在同一套单元设备(x86服务器)中不仅仅具备计算、网络、存储和服务器虚拟化等资源和技术,还包括缓存加速、重复数据删除、在线数据压缩、备份软件、快照技术等元素,而多节点可以通过网络聚合起来,实现模块化的无缝横向扩展(scale-out),形成统一的资源池。相比于传统的纯硬件系统和传统的计算存储分离的虚拟化系统,超融合架构有着以下优势:分布式架构,无单点故障;智能HDD(Hard Disk Drive,硬盘驱动器)/SSD(Solid State Disk,固态驱动器)混合存储,极致I/O性能;统一管理平台,简化运维等。正是由于这些优点,超融合架构被应用在越来越多的存储场景中,而且在超融合架构的应用过程中,为了对数据进行保护,会对虚拟机进行快照操作,保存当前完整数据,后续即使由于操作不当或病毒入侵导致数据损坏等,均可以通过恢复快照的方式来回到之前保存的快照点,从而恢复数据。
现有的一种快照方法是写时重定向(Redirect-on-write,ROW),也即快照后的写操作会进行重定向,所有的写操作都被重新发往到新的快照文件中,而所有的旧数据均保留于只读的源文件中。然而,ROW快照方法的快照效率较低。
综上所述,如何提高ROW快照方法的快照效率是目前本领域技术人员亟待解决的问题。
发明内容
本申请的目的是提供一种ROW快照方法,其能在一定程度上解决如何提高ROW快照方法的快照效率的技术问题。本申请还提供了一种ROW快照系统、设备及计算机可读存储介质。
为了实现上述目的,本申请提供如下技术方案:
一种ROW快照方法,包括:
在应用所述ROW快照方法写入数据的过程中,获取待写入数据;
确定源卷对应的目标快照卷的目标文件写入状态,所述目标文件写入状态为所述目标快照卷写入所述待写入数据后的状态;
将所述待写入数据和所述目标文件写入状态封装成目标文件;
将所述目标文件写入所述目标快照卷。
优选的,所述确定源卷对应的目标快照卷的目标文件写入状态之后,所述将所述待写入数据和所述目标文件写入状态封装成目标文件之前,还包括:
缓存所述待写入数据和所述目标文件写入状态。
优选的,所述将所述目标文件写入所述目标快照卷之后,还包括:
在应用所述ROW快照方法读取数据的过程中,基于缓存的所述目标文件写入状态及缓存的所述待写入数据确定待读取数据。
优选的,所述基于缓存的所述目标文件写入状态及缓存的所述待写入数据确定待读取数据,包括:
判断缓存的所述待写入数据中是否存在所述待读取数据;
若缓存的所述待写入数据中存在所述待读取数据,则判断缓存的所述待写入数据中是否存在全部的所述待读取数据;
若缓存的所述待写入数据中存在全部的所述待读取数据,则在缓存的所述待写入数据中确定出所述待读取数据;
若缓存的所述待写入数据中不存在全部的所述待读取数据,则在缓存的所述待写入数据中确定出已有的所述待读取数据,并基于所述目标快照卷、所述源卷对应的其他快照卷及缓存的所述目标文件写入状态获取剩余的所述待读取数据;
若缓存的所述待写入数据中不存在所述待读取数据,则基于所述目标快照卷、所述源卷对应的其他快照卷及缓存的所述目标文件写入状态获取所述待读取数据。
优选的,所述将所述待写入数据和所述目标文件写入状态封装成目标文件,包括:
将所述待写入数据和所述目标文件写入状态封装成日志文件。
优选的,所述将所述待写入数据和所述目标文件写入状态封装成目标文件之前,还包括:
判断是否满足预设写入条件,若是,则执行所述将所述待写入数据和所述目标文件写入状态封装成目标文件的步骤。
优选的,所述判断是否满足预设写入条件,包括:
获取数据实时写入性能值;
判断所述数据实时写入性能值是否小于预设写入性能值,若是,则判定满足所述预设写入条件,若否,则判定不满足所述预设写入条件。
一种ROW快照系统,包括:
第一获取模块,用于在应用所述ROW快照方法写入数据的过程中,获取待写入数据;
第一确定模块,用于确定源卷对应的目标快照卷的目标文件写入状态,所述目标文件写入状态为所述目标快照卷写入所述待写入数据后的状态;
第一封装模块,用于将所述待写入数据和所述目标文件写入状态封装成目标文件;
第一写入模块,用于将所述目标文件写入所述目标快照卷。
一种ROW快照设备,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如上任一所述ROW快照方法的步骤。
一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机程序,所述计算机程序被处理器执行时实现如上任一所述ROW快照方法的步骤。
本申请提供的一种ROW快照方法,在应用ROW快照方法写入数据的过程中,获取待写入数据;确定源卷对应的目标快照卷的目标文件写入状态,目标文件写入状态为目标快照卷写入待写入数据后的状态;将待写入数据和目标文件写入状态封装成目标文件;将目标文件写入目标快照卷。本申请提供的一种ROW快照方法,在应用ROW快照方法写入数据的过程中,将待写入数据和目标文件写入状态封装成目标文件;将目标文件写入目标快照卷,也即通过一次写操作将待写入数据及目标快照卷的目标文件写入状态写入目标快照卷,使得在应用ROW快照方法写入数据时,只需执行一次写操作,而现有技术中,需要执行两次写操作分别将待写入数据及目标快照卷的目标文件写入状态写入目标快照卷,与现有技术相比,本申请降低了应用ROW快照方法写入数据时的写操作次数,提高了写性能,进而提高了ROW快照方法的快照效率。本申请提供的一种ROW快照系统、设备及计算机可读存储介质也解决了相应技术问题。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本申请实施例提供的一种ROW快照方法的第一流程图;
图2为ROW快照方法写数据的示意图;
图3为本申请实施例提供的一种ROW快照方法的第二流程图;
图4为本申请实施例提供的一种ROW快照系统的结构示意图;
图5为实际应用中一种ROW快照系统的结构示意图;
图6为本申请实施例提供的一种ROW快照设备的结构示意图;
图7为本申请实施例提供的一种ROW快照设备的另一结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
在存储领域中,超融合架构(Hyper-Converged Infrastructure,HCT)是指在同一套单元设备(x86服务器)中不仅仅具备计算、网络、存储和服务器虚拟化等资源和技术,还包括缓存加速、重复数据删除、在线数据压缩、备份软件、快照技术等元素,而多节点可以通过网络聚合起来,实现模块化的无缝横向扩展(scale-out),形成统一的资源池。相比于传统的纯硬件系统和传统的计算存储分离的虚拟化系统,超融合架构有着以下优势:分布式架构,无单点故障;智能HDD(Hard Disk Drive,硬盘驱动器)/SSD(Solid State Disk,固态驱动器)混合存储,极致I/O性能;统一管理平台,简化运维等。正是由于这些优点,超融合架构被应用在越来越多的存储场景中,而且在超融合架构的应用过程中,为了对数据进行保护,会对虚拟机进行快照操作,保存当前完整数据,后续即使由于操作不当或病毒入侵导致数据损坏等,均可以通过恢复快照的方式来回到之前保存的快照点,从而恢复数据。现有的一种快照方法是写时重定向(Redirect-on-write,ROW),也即快照后的写操作会进行重定向,所有的写操作都被重新发往到新的快照文件中,而所有的旧数据均保留于只读的源文件中。然而,现有的ROW快照方法在一次写入数据的过程中,需要执行两次写入操作,快照效率较低。本申请提供的ROW快照方法在一次写入数据的过程中,只需执行一次写入操作,可以提高快照效率。
请参阅图1,图1为本申请实施例提供的一种ROW快照方法的第一流程图。
本申请实施例提供的一种ROW快照方法,可以包括以下步骤:
步骤S101:在应用ROW快照方法写入数据的过程中,获取待写入数据。
实际应用中,待写入数据的类型可以根据实际需要确定,比如待写入数据可以为服务器在运行过程中生成的运行数据、用户在应用客户端的过程中输入的数据等;此外,本申请中在应用ROW快照方法写入数据的写入方法也可以根据实际需要,比如可以为按照新增写方式应用ROW快照方法写入数据、按照覆盖写方式应用ROW快照方法写入数据等,新增写及覆盖写的过程可以参阅图2,在图2中,base file表示快照的源文件,snap file表示快照卷,R/W表示读/写。
步骤S102:确定源卷对应的目标快照卷写入待写入数据后的目标文件写入状态。
实际应用中,由于在应用ROW快照方法写入数据的过程中,创建快照后会使用新文件来存储快照后的数据,新文件的每个数据区间都应该有两种状态,一种是写过数据,一种是未写过数据,为了确定待写入数据在快照卷中的写入位置,需要知道每个数据区间的文件写入状态,因此,在每次写入数据后,均需记录快照卷的文件写入状态。本申请中,在确定源卷对应的目标快照卷写入待写入数据后的目标文件写入状态时,可以先根据目标快照卷未写入待写入数据前的文件写入状态,确定待写入数据在目标快照卷中的写入位置,再确定目标快照卷写入待写入数据后的目标文件写入状态。
步骤S103:通过一次写操作将待写入数据及目标文件写入状态写入目标快照卷。
实际应用中,现有技术在应用ROW快照方法写入数据的过程中,需将待写入数据写入目标快照卷,再将目标快照卷的目标文件写入状态写入目标快照卷,也即现有技术中需执行两次写操作,两次写操作会降低ROW快照方法的快照效率,而本申请中,只需通过一次写操作便可以将待写入数据及目标文件写入状态写入目标快照卷,降低了ROW快照方法中的数据写入次数,提高了快照效率。
本申请提供的一种ROW快照方法,在应用ROW快照方法写入数据的过程中,获取待写入数据;获取源卷对应的目标快照卷的目标文件写入状态;通过一次写操作将待写入数据及目标文件写入状态写入目标快照卷。本申请提供的一种ROW快照方法,在应用ROW快照方法写入数据的过程中,通过一次写操作将待写入数据及目标快照卷的目标文件写入状态写入目标快照卷,使得在应用ROW快照方法写入数据时,只需执行一次写操作,而现有技术中,需要执行两次写操作分别将待写入数据及目标快照卷的目标文件写入状态写入目标快照卷,与现有技术相比,本申请降低了应用ROW快照方法写入数据时的写操作次数,提高了写性能,进而提高了ROW快照方法的快照效率。
请参阅图3,图3为本申请实施例提供的一种ROW快照方法的第二流程图。
本申请实施例提供的一种ROW快照方法,可以包括以下步骤:
步骤S201:在应用ROW快照方法写入数据的过程中,获取待写入数据。
步骤S202:确定源卷对应的目标快照卷写入待写入数据后的目标文件写入状态。
步骤S203:将待写入数据和目标文件写入状态封装成目标文件。
步骤S204:将目标文件写入目标快照卷。
本申请实施例提供的一种ROW快照方法中,为了便于通过一次写操作将待写入数据及目标文件写入状态写入目标快照卷,可以通过封装方式将待写入数据和目标文件写入状态封装成一个文件,再对封装后的文件进行写入,也即通过一次写操作将待写入数据及目标文件写入状态写入目标快照卷时,可以将待写入数据和目标文件写入状态封装成目标文件;将目标文件写入目标快照卷。
实际应用中,由于将待写入数据与目标文件写入状态封装后,再次应用待写入数据或者目标文件写入状态时,便需要对目标文件解封装,影响待写入数据或者目标文件写入状态的使用效率,为了保证待写入数据或者目标文件写入状态的使用效率,在确定源卷对应的目标快照卷写入待写入数据后的目标文件写入状态之后,在将待写入数据和目标文件写入状态封装成目标文件之前,还可以缓存待写入数据和目标文件写入状态,以便直接应用缓存的待写入数据和目标文件写入状态。
实际应用中,为了提高对数据的读取效率,在将目标文件写入目标快照卷之后,可以直接在应用ROW快照方法读取数据的过程中,基于缓存的目标文件写入状态及缓存的待写入数据确定待读取数据。
具体应用场景中,由于待读取数据在快照中的分布没有规律,比如待读取数据可能只存在一个快照中,待读取数据分散存在多个快照中等,使得在应用ROW快照方法读取数据时,查找到全部待读取的难度较大,影响待读取数据的读取效率,为了保证待读取数据的读取效率,在基于缓存的目标文件写入状态及缓存的待写入数据确定待读取数据时,可以判断缓存的待写入数据中是否存在待读取数据;若缓存的待写入数据中存在待读取数据,则判断缓存的待写入数据中是否存在全部的待读取数据;若缓存的待写入数据中存在全部的待读取数据,则在缓存的待写入数据中确定出待读取数据;若缓存的待写入数据中不存在全部的待读取数据,则在缓存的待写入数据中确定出已有的待读取数据,并基于目标快照卷、源卷对应的其他快照卷及缓存的目标文件写入状态获取剩余的待读取数据;若缓存的待写入数据中不存在待读取数据,则基于目标快照卷、源卷对应的其他快照卷及缓存的目标文件写入状态获取待读取数据。
应当指出,本申请中提供的ROW快照方法中,待写入数据的数据写入原理与现有技术中相同,区别是本申请待写入数据的落盘过程与现有技术不同,比如在ROW快照方法的覆盖写过程中,先在目标快照卷中分配写入待写入数据的数据块,确定目标快照卷写入待写入数据后的文件写入状态,将待写入数据和该文件写入状态封装成目标文件,将目标文件写入至分配的数据块中;ROW快照方法的新增写过程与覆盖写过程一致,在此不再赘述。
本申请实施例提供的一种ROW快照方法中,可以借助日志格式来快速封装待写入数据和目标文件写入状态,也即将待写入数据和目标文件写入状态封装成目标文件时,可以将待写入数据和目标文件写入状态封装成日志文件。
本申请实施例提供的一种ROW快照方法中,由于将待写入数据与目标文件写入状态封装后,会使得待写入数据与目标文件写入状态的应用较困难,因此可以通过设置预设写入条件来决定是否封装待写入数据和目标文件写入状态,也即在通过一次写操作将待写入数据及目标文件写入状态写入目标快照卷之前,还可以先判断是否满足预设写入条件,若是,则再执行通过一次写操作将待写入数据及目标文件写入状态写入目标快照卷的步骤。
具体应用场景中,由于通过一次写操作能够提高写性能,提高ROW快照效率;而一次写操作时,需要将待写入数据及目标文件写入状态封装在一起,影响待写入数据及目标文件写入状态的应用效率;因此,可以兼顾写性能与待写入数据及目标文件写入状态的应用效率来设置预设写入条件,比如在设置预设写入条件为ROW快照方法的实时写性能低于预设写性能时,需执行通过一次写操作将待写入数据及目标文件写入状态写入目标快照卷的步骤等。
请参阅图4,图4为本申请实施例提供的一种ROW快照系统的结构示意图。
本申请实施例提供的一种ROW快照系统,可以包括:
第一获取模块101,用于在应用ROW快照方法写入数据的过程中,获取待写入数据;
第一确定模块102,用于确定源卷对应的目标快照卷的目标文件写入状态,目标文件写入状态为目标快照卷写入待写入数据后的状态;
第一封装模块103,用于将所述待写入数据和所述目标文件写入状态封装成目标文件;;
第一写入模块104,用于将所述目标文件写入所述目标快照卷。
本申请实施例提供的一种ROW快照系统,还可以包括:
第一缓存模块,用于第一确定模块确定源卷对应的目标快照卷的目标文件写入状态之后,第一封装模块将待写入数据和目标文件写入状态封装成目标文件之前,缓存待写入数据和目标文件写入状态。
本申请实施例提供的一种ROW快照系统,还可以包括:
第二确定模块,用于第一写入模块将目标文件写入目标快照卷之后,在应用ROW快照方法读取数据的过程中,基于缓存的目标文件写入状态及缓存的待写入数据确定待读取数据。
本申请实施例提供的一种ROW快照系统,第二确定模块可以包括:
第一判断单元,用于判断缓存的待写入数据中是否存在待读取数据;若缓存的待写入数据中存在待读取数据,则判断缓存的待写入数据中是否存在全部的待读取数据;若缓存的待写入数据中存在全部的待读取数据,则在缓存的待写入数据中确定出待读取数据;若缓存的待写入数据中不存在全部的待读取数据,则在缓存的待写入数据中确定出已有的待读取数据,并基于目标快照卷、源卷对应的其他快照卷及缓存的目标文件写入状态获取剩余的待读取数据;若缓存的待写入数据中不存在待读取数据,则基于目标快照卷、源卷对应的其他快照卷及缓存的目标文件写入状态获取待读取数据。
本申请实施例提供的一种ROW快照系统,第一封装模块可以包括:
第一封装单元,用于将待写入数据和目标文件写入状态封装成日志文件。
本申请实施例提供的一种ROW快照系统,还可以包括:
第一判断模块,用于第一封装模块将待写入数据和目标文件写入状态封装成目标文件之前,判断是否满足预设写入条件,若是,则提示第一封装模块执行将待写入数据和目标文件写入状态封装成目标文件的步骤。
本申请实施例提供的一种ROW快照系统,第一判断模块可以包括:
第一获取单元,用于获取数据实时写入性能值;
第一判断单元,用于判断数据实时写入性能值是否小于预设写入性能值,若是,则判定满足预设写入条件,若否,则判定不满足预设写入条件。
请参阅图5,图5为实际应用中一种ROW快照系统的结构示意图。在图5中,本申请提供的ROW快照系统包括ZIL模块、io-cache模块、快照数据管理模块、接口层等;其中,接口层负责处理快照读写请求以及快照操作请求;ZIL模块负责将待写入数据及目标快照卷的目标文件写入状态封装成日志文件;io-cache模块负责缓存待写入数据及目标文件写入状态、负责读取待读取数据;快照数据管理模块负责快照数据的操作,比如落盘等、快照调测、快照性能分析等。
实际应用中,在应用图5所示的ROW快照系统时,接口层接收到快照写指令后,若是一次写操作对应的指令,可以先将待写入数据及目标文件写入状态交由io-cache模块缓存,再将待写入数据及目标数据交由ZIL模块处理;ZIL模块接收到待写入数据及目标文件写入状态后,将待写入数据及目标文件写入状态封装成日志文件,将日志文件交由快照数据管理模块处理;快照数据管理模块接收到日志文件后,将日志文件落盘。而在接口层接收到不是一次写操作对应的指令时,接口层可以通过io-cache模块或者ZIL模块直接将待写入数据及目标文件写入状态发送给快照数据管理模块,快照数据管理模块再通过两次写操作将待写入数据及目标文件写入状态落盘等。在此过程中,可以通过设置来控制ZIL模块是否对待写入数据及目标文件写入状态执行日志封装操作,比如可以设置ZIL模块接收到与自身保存的执行日志封装指令一致的用户指令时,执行对待写入数据及目标文件写入状态的日志封装操作等;此外,在需要设置ZIL模块持续执行日志封装操作时,可以在ZIL模块通报前将相应设置信息更新到ZIL模块的控制文件中,而在需要设置ZIL模块持续不执行日志封装操作时,可以在ZIL模块收到切换的第一个请求时将相应指令更新到ZIL模块的控制文件中等。
本申请还提供了一种ROW快照设备及计算机可读存储介质,其均具有本申请实施例提供的一种ROW快照方法具有的对应效果。请参阅图6,图6为本申请实施例提供的一种ROW快照设备的结构示意图。
本申请实施例提供的一种ROW快照设备,包括存储器201和处理器202,存储器201中存储有计算机程序,处理器202执行计算机程序时实现如下步骤:
在应用ROW快照方法写入数据的过程中,获取待写入数据;
确定源卷对应的目标快照卷写入待写入数据后的目标文件写入状态;
通过一次写操作将待写入数据及目标文件写入状态写入目标快照卷。
本申请实施例提供的一种ROW快照设备,包括存储器201和处理器202,存储器201中存储有计算机程序,处理器202执行计算机程序时实现如下步骤:将待写入数据和目标文件写入状态封装成目标文件;将目标文件写入目标快照卷。
本申请实施例提供的一种ROW快照设备,包括存储器201和处理器202,存储器201中存储有计算机程序,处理器202执行计算机程序时实现如下步骤:确定源卷对应的目标快照卷写入待写入数据后的目标文件写入状态之后,将待写入数据和目标文件写入状态封装成目标文件之前,缓存待写入数据和目标文件写入状态。
本申请实施例提供的一种ROW快照设备,包括存储器201和处理器202,存储器201中存储有计算机程序,处理器202执行计算机程序时实现如下步骤:将目标文件写入目标快照卷之后,在应用ROW快照方法读取数据的过程中,基于缓存的目标文件写入状态及缓存的待写入数据确定待读取数据。
本申请实施例提供的一种ROW快照设备,包括存储器201和处理器202,存储器201中存储有计算机程序,处理器202执行计算机程序时实现如下步骤:判断缓存的待写入数据中是否存在待读取数据;若缓存的待写入数据中存在待读取数据,则判断缓存的待写入数据中是否存在全部的待读取数据;若缓存的待写入数据中存在全部的待读取数据,则在缓存的待写入数据中确定出待读取数据;若缓存的待写入数据中不存在全部的待读取数据,则在缓存的待写入数据中确定出已有的待读取数据,并基于目标快照卷、源卷对应的其他快照卷及缓存的目标文件写入状态获取剩余的待读取数据;若缓存的待写入数据中不存在待读取数据,则基于目标快照卷、源卷对应的其他快照卷及缓存的目标文件写入状态获取待读取数据。
本申请实施例提供的一种ROW快照设备,包括存储器201和处理器202,存储器201中存储有计算机程序,处理器202执行计算机程序时实现如下步骤:将待写入数据和目标文件写入状态封装成日志文件。
本申请实施例提供的一种ROW快照设备,包括存储器201和处理器202,存储器201中存储有计算机程序,处理器202执行计算机程序时实现如下步骤:通过一次写操作将待写入数据及目标文件写入状态写入目标快照卷之前,判断是否满足预设写入条件,若是,则执行将待写入数据和目标文件写入状态封装成目标文件的步骤。
本申请实施例提供的一种ROW快照设备,包括存储器201和处理器202,存储器201中存储有计算机程序,处理器202执行计算机程序时实现如下步骤:获取数据实时写入性能值;判断数据实时写入性能值是否小于预设写入性能值,若是,则判定满足预设写入条件,若否,则判定不满足预设写入条件。
请参阅图7,本申请实施例提供的另一种ROW快照设备中还可以包括:与处理器202连接的输入端口203,用于传输外界输入的命令至处理器202;与处理器202连接的显示单元204,用于显示处理器202的处理结果至外界;与处理器202连接的通信模块205,用于实现ROW快照设备与外界的通信。显示单元204可以为显示面板、激光扫描使显示器等;通信模块205所采用的通信方式包括但不局限于移动高清链接技术(HML)、通用串行总线(USB)、高清多媒体接口(HDMI)、无线连接:无线保真技术(WiFi)、蓝牙通信技术、低功耗蓝牙通信技术、基于IEEE802.11s的通信技术。
本申请实施例提供的一种计算机可读存储介质,计算机可读存储介质中存储有计算机程序,计算机程序被处理器执行时实现如下步骤:
在应用ROW快照方法写入数据的过程中,获取待写入数据;
确定源卷对应的目标快照卷写入待写入数据后的目标文件写入状态;
通过一次写操作将待写入数据及目标文件写入状态写入目标快照卷。
本申请实施例提供的一种计算机可读存储介质,计算机可读存储介质中存储有计算机程序,计算机程序被处理器执行时实现如下步骤:将待写入数据和目标文件写入状态封装成目标文件;将目标文件写入目标快照卷。
本申请实施例提供的一种计算机可读存储介质,计算机可读存储介质中存储有计算机程序,计算机程序被处理器执行时实现如下步骤:确定源卷对应的目标快照卷写入待写入数据后的目标文件写入状态之后,将待写入数据和目标文件写入状态封装成目标文件之前,缓存待写入数据和目标文件写入状态。
本申请实施例提供的一种计算机可读存储介质,计算机可读存储介质中存储有计算机程序,计算机程序被处理器执行时实现如下步骤:将目标文件写入目标快照卷之后,在应用ROW快照方法读取数据的过程中,基于缓存的目标文件写入状态及缓存的待写入数据确定待读取数据。
本申请实施例提供的一种计算机可读存储介质,计算机可读存储介质中存储有计算机程序,计算机程序被处理器执行时实现如下步骤:判断缓存的待写入数据中是否存在待读取数据;若缓存的待写入数据中存在待读取数据,则判断缓存的待写入数据中是否存在全部的待读取数据;若缓存的待写入数据中存在全部的待读取数据,则在缓存的待写入数据中确定出待读取数据;若缓存的待写入数据中不存在全部的待读取数据,则在缓存的待写入数据中确定出已有的待读取数据,并基于目标快照卷、源卷对应的其他快照卷及缓存的目标文件写入状态获取剩余的待读取数据;若缓存的待写入数据中不存在待读取数据,则基于目标快照卷、源卷对应的其他快照卷及缓存的目标文件写入状态获取待读取数据。
本申请实施例提供的一种计算机可读存储介质,计算机可读存储介质中存储有计算机程序,计算机程序被处理器执行时实现如下步骤:将待写入数据和目标文件写入状态封装成日志文件。
本申请实施例提供的一种计算机可读存储介质,计算机可读存储介质中存储有计算机程序,计算机程序被处理器执行时实现如下步骤:通过一次写操作将待写入数据及目标文件写入状态写入目标快照卷之前,判断是否满足预设写入条件,若是,则执行将待写入数据和目标文件写入状态封装成目标文件的步骤。
本申请实施例提供的一种计算机可读存储介质,计算机可读存储介质中存储有计算机程序,计算机程序被处理器执行时实现如下步骤:获取数据实时写入性能值;判断数据实时写入性能值是否小于预设写入性能值,若是,则判定满足预设写入条件,若否,则判定不满足预设写入条件。
本申请所涉及的计算机可读存储介质包括随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质。
本申请实施例提供的一种ROW快照系统、设备及计算机可读存储介质中相关部分的说明请参见本申请实施例提供的一种ROW快照方法中对应部分的详细说明,在此不再赘述。另外,本申请实施例提供的上述技术方案中与现有技术中对应技术方案实现原理一致的部分并未详细说明,以免过多赘述。
还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
对所公开的实施例的上述说明,使本领域技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下,在其它实施例中实现。因此,本申请将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (10)
1.一种ROW快照方法,其特征在于,包括:
在应用所述ROW快照方法写入数据的过程中,获取待写入数据;
确定源卷对应的目标快照卷的目标文件写入状态,所述目标文件写入状态为所述目标快照卷写入所述待写入数据后的状态;
将所述待写入数据和所述目标文件写入状态封装成目标文件;
将所述目标文件写入所述目标快照卷。
2.根据权利要求1所述的方法,其特征在于,所述确定源卷对应的目标快照卷的目标文件写入状态之后,所述将所述待写入数据和所述目标文件写入状态封装成目标文件之前,还包括:
缓存所述待写入数据和所述目标文件写入状态。
3.根据权利要求2所述的方法,其特征在于,所述将所述目标文件写入所述目标快照卷之后,还包括:
在应用所述ROW快照方法读取数据的过程中,基于缓存的所述目标文件写入状态及缓存的所述待写入数据确定待读取数据。
4.根据权利要求3所述的方法,其特征在于,所述基于缓存的所述目标文件写入状态及缓存的所述待写入数据确定待读取数据,包括:
判断缓存的所述待写入数据中是否存在所述待读取数据;
若缓存的所述待写入数据中存在所述待读取数据,则判断缓存的所述待写入数据中是否存在全部的所述待读取数据;
若缓存的所述待写入数据中存在全部的所述待读取数据,则在缓存的所述待写入数据中确定出所述待读取数据;
若缓存的所述待写入数据中不存在全部的所述待读取数据,则在缓存的所述待写入数据中确定出已有的所述待读取数据,并基于所述目标快照卷、所述源卷对应的其他快照卷及缓存的所述目标文件写入状态获取剩余的所述待读取数据;
若缓存的所述待写入数据中不存在所述待读取数据,则基于所述目标快照卷、所述源卷对应的其他快照卷及缓存的所述目标文件写入状态获取所述待读取数据。
5.根据权利要求1至4任一项所述的方法,其特征在于,所述将所述待写入数据和所述目标文件写入状态封装成目标文件,包括:
将所述待写入数据和所述目标文件写入状态封装成日志文件。
6.根据权利要求5所述的方法,其特征在于,所述将所述待写入数据和所述目标文件写入状态封装成目标文件之前,还包括:
判断是否满足预设写入条件,若是,则执行所述将所述待写入数据和所述目标文件写入状态封装成目标文件的步骤。
7.根据权利要求6所述的方法,其特征在于,所述判断是否满足预设写入条件,包括:
获取数据实时写入性能值;
判断所述数据实时写入性能值是否小于预设写入性能值,若是,则判定满足所述预设写入条件,若否,则判定不满足所述预设写入条件。
8.一种ROW快照系统,其特征在于,包括:
第一获取模块,用于在应用所述ROW快照方法写入数据的过程中,获取待写入数据;
第一确定模块,用于确定源卷对应的目标快照卷的目标文件写入状态,所述目标文件写入状态为所述目标快照卷写入所述待写入数据后的状态;
第一封装模块,用于将所述待写入数据和所述目标文件写入状态封装成目标文件;
第一写入模块,用于将所述目标文件写入所述目标快照卷。
9.一种ROW快照设备,其特征在于,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如权利要求1至7任一项所述ROW快照方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述ROW快照方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911026019.2A CN110781133B (zh) | 2019-10-25 | 2019-10-25 | 一种row快照方法、系统、设备及计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911026019.2A CN110781133B (zh) | 2019-10-25 | 2019-10-25 | 一种row快照方法、系统、设备及计算机可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110781133A true CN110781133A (zh) | 2020-02-11 |
CN110781133B CN110781133B (zh) | 2023-03-21 |
Family
ID=69386707
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911026019.2A Active CN110781133B (zh) | 2019-10-25 | 2019-10-25 | 一种row快照方法、系统、设备及计算机可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110781133B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111966531A (zh) * | 2020-07-21 | 2020-11-20 | 苏州浪潮智能科技有限公司 | 数据快照方法、装置、计算机设备及存储介质 |
CN113779083A (zh) * | 2021-01-29 | 2021-12-10 | 北京京东拓先科技有限公司 | 数据处理方法、装置、服务器以及存储介质 |
Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110178972A1 (en) * | 2008-10-07 | 2011-07-21 | Guillermo Navarro | Creating snapshots of data using a selected one of different snapshot algorithms |
US20120151245A1 (en) * | 2010-12-08 | 2012-06-14 | International Business Machines Corporation | In-flight block map for a clustered redirect-on-write filesystem |
CN104169864A (zh) * | 2014-03-13 | 2014-11-26 | 华为技术有限公司 | 重定向写入方法及装置 |
CN104407936A (zh) * | 2014-11-18 | 2015-03-11 | 华为数字技术(成都)有限公司 | 一种数据快照方法及装置 |
WO2015066698A1 (en) * | 2013-11-04 | 2015-05-07 | Falconstor, Inc. | Snapshots using copy on predicted write |
US20160342520A1 (en) * | 2015-05-21 | 2016-11-24 | Dell Products L.P. | Preserving user changes to a shared layered resource |
US20160366226A1 (en) * | 2015-06-11 | 2016-12-15 | E8 Storage Systems Ltd. | Deduplication in a highly-distributed shared topology with direct-memory-access capable interconnect |
CN107798130A (zh) * | 2017-11-17 | 2018-03-13 | 广西广播电视信息网络股份有限公司 | 一种分布式存储的快照方法 |
CN107924293A (zh) * | 2015-09-21 | 2018-04-17 | 国际商业机器公司 | 写时拷贝重定向 |
CN109032507A (zh) * | 2018-06-28 | 2018-12-18 | 郑州云海信息技术有限公司 | 一种生成源卷存储快照的方法、系统及相关组件 |
CN109522273A (zh) * | 2018-11-15 | 2019-03-26 | 郑州云海信息技术有限公司 | 一种实现数据写入的方法及装置 |
CN109598156A (zh) * | 2018-11-19 | 2019-04-09 | 杭州信核数据科技股份有限公司 | 一种写时重定向引擎快照流方法 |
CN110018983A (zh) * | 2017-09-27 | 2019-07-16 | 华为技术有限公司 | 一种元数据查询方法及装置 |
-
2019
- 2019-10-25 CN CN201911026019.2A patent/CN110781133B/zh active Active
Patent Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110178972A1 (en) * | 2008-10-07 | 2011-07-21 | Guillermo Navarro | Creating snapshots of data using a selected one of different snapshot algorithms |
US20120151245A1 (en) * | 2010-12-08 | 2012-06-14 | International Business Machines Corporation | In-flight block map for a clustered redirect-on-write filesystem |
WO2015066698A1 (en) * | 2013-11-04 | 2015-05-07 | Falconstor, Inc. | Snapshots using copy on predicted write |
CN104169864A (zh) * | 2014-03-13 | 2014-11-26 | 华为技术有限公司 | 重定向写入方法及装置 |
CN104407936A (zh) * | 2014-11-18 | 2015-03-11 | 华为数字技术(成都)有限公司 | 一种数据快照方法及装置 |
US20160342520A1 (en) * | 2015-05-21 | 2016-11-24 | Dell Products L.P. | Preserving user changes to a shared layered resource |
US20160366226A1 (en) * | 2015-06-11 | 2016-12-15 | E8 Storage Systems Ltd. | Deduplication in a highly-distributed shared topology with direct-memory-access capable interconnect |
CN107924293A (zh) * | 2015-09-21 | 2018-04-17 | 国际商业机器公司 | 写时拷贝重定向 |
CN110018983A (zh) * | 2017-09-27 | 2019-07-16 | 华为技术有限公司 | 一种元数据查询方法及装置 |
CN107798130A (zh) * | 2017-11-17 | 2018-03-13 | 广西广播电视信息网络股份有限公司 | 一种分布式存储的快照方法 |
CN109032507A (zh) * | 2018-06-28 | 2018-12-18 | 郑州云海信息技术有限公司 | 一种生成源卷存储快照的方法、系统及相关组件 |
CN109522273A (zh) * | 2018-11-15 | 2019-03-26 | 郑州云海信息技术有限公司 | 一种实现数据写入的方法及装置 |
CN109598156A (zh) * | 2018-11-19 | 2019-04-09 | 杭州信核数据科技股份有限公司 | 一种写时重定向引擎快照流方法 |
Non-Patent Citations (3)
Title |
---|
张权等: "一种基于Linux标准分区的快照方法", 《现代计算机(专业版)》 * |
朱正义等: "高性能块级CDP系统的研究与设计", 《计算机工程与设计》 * |
杨树庆等: "复合式快照算法及其两种变型的分析与比较", 《计算机工程》 * |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111966531A (zh) * | 2020-07-21 | 2020-11-20 | 苏州浪潮智能科技有限公司 | 数据快照方法、装置、计算机设备及存储介质 |
CN111966531B (zh) * | 2020-07-21 | 2022-07-12 | 苏州浪潮智能科技有限公司 | 数据快照方法、装置、计算机设备及存储介质 |
US11907076B2 (en) | 2020-07-21 | 2024-02-20 | Inspur Suzhou Intelligent Technology Co., Ltd. | Data snapshot method and apparatus, computer device, and storage medium |
CN113779083A (zh) * | 2021-01-29 | 2021-12-10 | 北京京东拓先科技有限公司 | 数据处理方法、装置、服务器以及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN110781133B (zh) | 2023-03-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9304804B2 (en) | Replicating virtual machines across different virtualization platforms | |
US10346248B2 (en) | Failure resistant volume creation in a shared storage environment | |
US10884645B2 (en) | Virtual machine hot migration method, host machine and storage medium | |
US7343465B2 (en) | Storage system | |
US9335931B2 (en) | System and method for making snapshots of storage devices | |
CN110609730B (zh) | 一种实现虚拟处理器间中断透传的方法及设备 | |
KR20200070085A (ko) | 정보를 처리하기 위한 방법 및 장치 | |
CN114089926B (zh) | 分布式存储空间的管理方法、计算设备及存储介质 | |
CN103793258A (zh) | 基于管理程序的服务器复制系统及其方法 | |
CN110046026B (zh) | 云主机指定虚拟磁盘限速方法、计算设备及云平台 | |
US8868877B2 (en) | Creating encrypted storage volumes based on thin-provisioning mode information | |
CN103532731A (zh) | 一种防止虚拟机网络配置丢失的方法和装置 | |
WO2015090113A1 (zh) | 数据处理的方法及设备 | |
CN110781133B (zh) | 一种row快照方法、系统、设备及计算机可读存储介质 | |
US12019521B2 (en) | Logical backup using a storage system | |
WO2019028682A1 (zh) | 一种多系统共享内存的管理方法及装置 | |
CN106777394B (zh) | 一种集群文件系统 | |
CN104104705A (zh) | 分布式存储系统的接入方法和设备 | |
KR20230170024A (ko) | 구역 세그먼트 드라이브 관리 | |
CN112596950A (zh) | 虚拟机数据备份方法、装置、设备及存储介质 | |
US20230222092A1 (en) | Method of managing storage space based on robust determinations of durations for deleting snapshots | |
US20130262532A1 (en) | Garbage collection for virtual environments | |
CN115686932A (zh) | 备份集文件恢复方法、装置和计算机设备 | |
CN104517067A (zh) | 访问数据的方法、装置及系统 | |
CN107168774B (zh) | 一种基于本地存储的虚拟机迁移方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |