CN109344001A - 一种虚拟机文件的并发备份方法及系统 - Google Patents
一种虚拟机文件的并发备份方法及系统 Download PDFInfo
- Publication number
- CN109344001A CN109344001A CN201810996899.5A CN201810996899A CN109344001A CN 109344001 A CN109344001 A CN 109344001A CN 201810996899 A CN201810996899 A CN 201810996899A CN 109344001 A CN109344001 A CN 109344001A
- Authority
- CN
- China
- Prior art keywords
- backup
- file
- virtual machine
- server
- backed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1458—Management of the backup or restore process
- G06F11/1464—Management of the backup or restore process for networked environments
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种虚拟机文件的并发备份方法及系统，属于数据备份技术领域，该方法为：备份执行服务器挂载并扫描待备份的虚拟机的镜像获得待备份文件列表，对所述待备份文件列表进行拆分获得至少两个备份文件子列表；所述备份执行服务器将所述至少两个备份文件子列表分别发送到对应数量的代理备份读写服务器；每个代理备份读写服务器根据接收到的备份文件子列表拷贝对应虚拟机的镜像中的文件到备份存储服务器。本发明主要解决虚拟机文件备份时容易受到网速限制的问题，能以并发方式把待备份文件备份到存储服务器，充分利用了网络资源，提高备份速度。
Description
技术领域
本发明涉及数据备份技术领域，特别是涉及一种虚拟机文件的并发备份方法及系统。
背景技术
数据对每个计算机用户来说都是至关重要的，一旦丢失数据就可能造成巨大的损失，数据备份是保护用户数据的重要途径。
目前，在数据备份时，服务器一般会对虚拟机文件进行完整备份，具体来说，备份读写服务器压缩并复制完整的虚拟机文件到存储服务器。
桌面虚拟化系统通常是分布式存储系统，即虚拟机硬盘位于一台服务器，备份读写服务器是另一台服务器，存储服务器则是又一台服务器，这种情况下，这些服务器通过网络连接，目前的服务器一般采用千兆网卡，读写网络文件的速度在100MB/s左右，而服务器本地的SCSI接口硬盘外部传输速率可以达到160MB/s，SCSI即Small Computer SystemInterface，小型计算机系统接口，如果使用固态硬盘，传输速率能轻松达到500MB/s；因此，虚拟机文件备份时容易受到网速限制。
发明内容
为解决上述的问题，本发明提供了一种虚拟机文件的并发备份方法及系统，能以并发方式把待备份文件备份到备份存储服务器，该方法不易受网速限制，提高了备份速度。
本发明所采取的技术方案是：一种虚拟机文件的并发备份方法，该方法为：备份执行服务器挂载并扫描待备份的虚拟机的镜像获得待备份文件列表，对所述待备份文件列表进行拆分获得至少两个备份文件子列表；所述备份执行服务器将所述至少两个备份文件子列表分别发送到对应数量的代理备份读写服务器；每个代理备份读写服务器根据接收到的备份文件子列表拷贝对应虚拟机的镜像中的文件到备份存储服务器。
上述方法中，所述备份执行服务器挂载并扫描待备份的虚拟机的镜像获得待备份文件列表之前，该方法还包括：所述备份执行服务器主动扫描集群中所有虚拟机和虚拟机组，根据预设的备份策略确定集群中待备份的虚拟机。
上述方法中，所述根据预设的备份策略确定集群中待备份的虚拟机之后，该方法还包括：所述备份执行服务器检测备份环境，当备份环境满足要求后，备份执行服务器挂载并扫描待备份的虚拟机的镜像。
上述方法中，所述对所述待备份文件列表进行拆分获得至少两个备份文件子列表，具体为：所述备份执行服务器根据待备份文件列表中的文件大小或者文件类型拆分获得至少两个备份文件子列表。
上述方法中，每个所述代理备份读写服务器直至所述备份文件子列表中的文件拷贝完成后，向所述备份执行服务器发送备份完成通知。
一种虚拟机文件的并发备份系统，该系统包括备份执行服务器、至少两个代理备份读写服务器、备份存储服务器；
所述备份执行服务器，用于挂载并扫描待备份的虚拟机的镜像获得待备份文件列表，对所述待备份文件列表进行拆分获得至少两个备份文件子列表；将所述至少两个备份文件子列表分别发送到对应数量的代理备份读写服务器；
所述至少两个代理备份读写服务器中，每个代理备份读写服务器用于根据接收到的备份文件子列表拷贝对应虚拟机的镜像中的文件到备份存储服务器；
所述备份存储服务器，用于接收所有代理备份读写服务器拷贝的文件，并且直至接收到所有代理备份读写服务器拷贝的文件后存储备份文件。
上述技术方案中，所述备份执行服务器，还用于主动扫描集群中所有虚拟机和虚拟机组，根据预设的备份策略确定集群中待备份的虚拟机。
上述技术方案中，所述备份执行服务器，还用于检测备份环境，当备份环境满足要求后，备份执行服务器挂载并扫描待备份的虚拟机的镜像。
上述技术方案中，所述备份执行服务器，具体用于根据待备份文件列表中的文件大小或者文件类型拆分获得至少两个备份文件子列表。
上述技术方案中，所述代理备份读写服务器，还用于直至所述备份文件子列表中的文件拷贝完成后，向所述备份执行服务器发送备份完成通知。
本发明的有益效果是：
该种虚拟机文件的并发备份方法及系统，备份执行服务器对待备份文件列表进行拆分获得至少两个备份文件子列表，将所述至少两个备份文件子列表分别发送到对应数量的代理备份读写服务器，每个代理备份读写服务器根据接收到的备份文件子列表拷贝对应虚拟机的镜像中的文件到备份存储服务器，使得代理备份读写服务器能以并发方式把待备份文件备份到备份存储服务器，充分利用了网络资源，使备份过程不易受网速限制，提高了备份速度。
附图说明
图1是本发明的一种虚拟机文件的并发备份方法的流程图；
图2是本发明的一种虚拟机文件的并发备份方法的步骤S1流程图；
图3是本发明的一种虚拟机文件的并发备份系统的系统图。
具体实施方式
下面结合附图对本发明作进一步详细的说明。
本发明实施例提供一种虚拟机文件的并发备份方法，应用在虚拟化桌面服务器集群中，为虚拟机集群进行文件备份，该方法包括：
S1、备份管理服务器预设备份策略，备份策略预设完成后，所述备份管理服务器开启备份执行服务器并向所述备份执行服务器发送所述备份策略。
具体地，所述备份策略包括备份范围设定、备份内容设定、备份目标位置设定以及备份时间设定。
所述备份范围设定定义了需要被备份的虚拟机或虚拟机组；通过虚拟机编号或用户标识来唯一区分虚拟机，即在备份范围设定中添加虚拟机编号或用户标识即可定义需要被备份的虚拟机，在备份范围设定中去除虚拟机编号或用户标识即可把该虚拟机从需要被备份的虚拟机定义中去除。
通过虚拟机组编号或分组名来唯一区分虚拟机组，即在备份范围设定中添加虚拟机组编号或分组名即可定义需要被备份的虚拟机组，在备份范围设定中去除虚拟机组编号或分组名即可把该虚拟机组从需要被备份的虚拟机组定义中去除。
创建虚拟机组时，形成虚拟机组列表，所述虚拟机组列表中保存有该虚拟机组的成员，通过虚拟机编号或用户标识来区分虚拟机组中的成员，以及通过虚拟机编号或用户标识来确定该虚拟机是否在所述虚拟机组中，即所述虚拟机组列表中保存的是虚拟机编号或用户标识，若该虚拟机的虚拟机编号或用户标识在所述虚拟机组列表中，则该虚拟机为所述虚拟机组的成员，若该虚拟机的虚拟机编号或用户标识不在所述虚拟机组列表中，则该虚拟机不是所述虚拟机组的成员。
备份内容设定定义了需要被备份的文件或内容，备份内容设定包括文件目录和文件类型。
在备份内容设定中定义文件目录后，可以实现仅对被定义的文件目录进行备份。在虚拟化技术的应用中，很多时候，用户文件集中储存在用户文件目录，例如，将用户文件集中储存在名称为用户或Users的文件夹中，在备份内容设定中，把文件目录定义为用户或Users，则在备份过程中，仅对虚拟机镜像中的用户或Users文件夹内容进行备份。若未定义文件目录或将文件目录定义为全盘，则对虚拟机镜像全盘进行备份。
在备份内容设定中定义文件类型后，可以实现仅对被定义的文件类型进行备份。在计算机应用过程中，普通用户的用户文件类型通常比较集中，例如，很多用户创建或保存的文件类型为docx、xlsx以及ppt，即Microsoft Office套件中的文档文件、工作表文件以及演示文稿文件，也有很多情况下，用户创建或保存的文件类型为DWG以及psd文件，即AutoCAD图形文件以及Adobe Photoshop专用文件，在备份内容设定中，把文件目录定义为用户后，把文件类型定义为docx和DWG，则在备份过程中，仅对虚拟机镜像中的用户文件夹中的docx和DWG文件进行备份；在备份内容设定中，把文件目录定义为User后，把文件类型定义为psd，则在备份过程中，仅对虚拟机镜像中的User文件夹中的psd文件进行备份；在备份内容设定中，未定义文件目录，而把文件类型定义为xlsx和ppt，则在备份过程中，对虚拟机镜像全盘的xlsx和ppt文件进行备份。
使用虚拟机或个人计算机时，都必须使用应用程序，而一般的应用程序的安装文件容易获得，可以重新安装，因此，应用程序的文件不需要被反复备份，配置所述备份内容设定可以实现仅备份应用程序以外的文件，有效提高备份效率。
备份目标位置设定定义了备份文件的存放位置，在虚拟化技术中，通常会专门设置一台或多台备份存储服务器，用于存储备份文件。定义备份目标位置时，只需把备份目标位置定义为备份存储服务器的IP地址及路径即可。
备份时间设定定义了开启备份执行服务器的时间点，该时间点可以为定期，例如每月的固定日期、每周的非工作日或者每日的下班时间段，该时间点也可以为预设时间，例如公众假期。
S2、所述备份执行服务器主动扫描集群中所有虚拟机和虚拟机组，根据预设的所述备份策略确定集群中待备份的虚拟机。
具体地，根据预设的所述备份策略确定集群中待备份的虚拟机，具体来说，是根据预设的所述备份策略的所述备份范围设定来确定集群中待备份的虚拟机。
扫描服务器集群中所有的虚拟机，并判断所述虚拟机是否被定义为需要被备份的虚拟机，若是，将该虚拟机确定为待备份的虚拟机，若否，进一步判断所述虚拟机是否属于被定义为需要被备份的虚拟机组的成员，若是，将该虚拟机确定为待备份的虚拟机，若否，忽略该虚拟机。
判断所述虚拟机是否被定义为需要被备份的虚拟机，具体方法是读取所述虚拟机的虚拟机编号或用户标识，判断所述虚拟机编号或所述用户标识是否在所述备份范围设定中。
判断所述虚拟机是否属于被定义为需要被备份的虚拟机组的成员，具体方法是读取所述虚拟机的虚拟机编号或用户标识，判断所述虚拟机编号或所述用户标识是否属于在所述备份范围设定中的虚拟机组的成员。
S3、所述备份执行服务器检测备份环境是否满足要求，当备份环境满足要求后，执行步骤S4，若备份环境不满足要求，作出相应处理并延时后再次执行本步骤。
具体地，所述备份执行服务器全面检测所有备份环境，以帮助使用者或工作人员一次排除所有备份故障。
所述备份环境包括虚拟机运行状态、备份存储服务器的存储空间以及代理备份读写服务器的在线状态。
虚拟机在运行时，其镜像被计算节点所挂载，因此所述备份执行服务器无法挂载虚拟机的镜像，为避免所述备份执行服务器挂载所述虚拟机的镜像失败，需要检测虚拟机运行状态。
备份存储服务器的存储空间不足时将无法写入备份文件，因此需要检测备份存储服务器的存储空间，以便提醒使用者或工作人员及时清理备份存储服务器的存储空间，以便顺利完成后续操作。
所述代理备份读写服务器用于读取所述虚拟机镜像中的文件，并根据所述备份设定，把需要被备份的虚拟机或虚拟机组中的备份内容定义的文件压缩并发送到所述备份存储服务器。所述代理备份读写服务器不在线时，无法读取所述虚拟机镜像中的文件，故需要检测代理备份读写服务器的在线状态。
步骤S3具体包括：
S3.1、所述备份执行服务器检测虚拟机是否处于运行状态，若是，表明虚拟机镜像被计算节点所挂载，执行步骤S3.2，若否，表明虚拟机镜像可以被所述备份执行服务器所挂载，执行步骤S3.3；
S3.2、所述备份执行服务器关闭所述虚拟机；
S3.3、所述备份执行服务器检测所述备份存储服务器的存储空间是否充足，若不充足，则执行步骤S3.4，若充足，则执行步骤S3.5；
S3.4、所述备份执行服务器发送清理指令至所述备份存储服务器；所述备份存储服务器收到所述清理指令后，清理自身的存储空间；
S3.5、所述备份执行服务器检测所述代理备份读写服务器的在线状态，若不在线，则执行步骤S3.6，若在线，则执行步骤S4；
S3.6、所述备份执行服务器向所述代理备份读写服务器发送远程唤醒命令。
上述的，执行步骤S3.2、步骤S3.4和步骤S3.6完成时，延时后跳转回步骤S3.1。
上述的，步骤S3.2中，所述备份执行服务器关闭所述虚拟机的方法是向所述虚拟机发送关机命令，或者向运行所述虚拟机的计算节点发送关闭所述虚拟机的命令。
可以理解，执行步骤S3使备份执行服务器全面检测所有备份环境，以帮助使用者或工作人员一次排除所有备份故障，基于该目的，步骤S3.1、步骤S3.3以及步骤S3.5的顺序可以任意互换，同时步骤S3.2、步骤S3.4以及步骤S3.6也相应互换。
S4、所述备份执行服务器挂载并扫描所述待备份的虚拟机的镜像获得待备份文件列表。
具体地，所述备份执行服务器挂载所述待备份的虚拟机的镜像，具体是，所述备份执行服务器创建临时目录，并根据所述备份范围设定将所述待备份的虚拟机的镜像挂载到所述临时目录。
虚拟机的镜像文件的格式为.img，img文件是一种镜像文件，可以被虚拟机软件所挂载，例如VMware、Qemu和VirtualBox，在所述备份执行服务器中创建临时目录后，通过所述备份执行服务器中的虚拟机软件，把所述虚拟机的镜像挂载到所述临时目录中。
S5、所述备份执行服务器对所述待备份文件列表进行拆分获得至少两个备份文件子列表。
具体地，所述备份执行服务器根据待备份文件列表中的文件大小或者文件类型拆分所述待备份文件列表，获得至少两个备份文件子列表。
例如，用户在所述备份内容设定的文件类型中定义了两种以上文件类型，则所述备份执行服务器可以根据待备份文件列表中的文件类型拆分所述待备份文件列表，具体来说，将所述待备份文件列表按文件类型拆分成与文件类型数相同数目的备份文件子列表，每个备份文件子列表中均分别对应记录了其中一种文件类型的待备份文件的全路径。可以理解的是，即使用户未定义所述备份内容设定的文件类型，也可以按所述待备份文件列表的文件类型拆分所述待备份文件列表，即按照所述待备份文件列表中对应的文件类型，生成相应数目的备份文件子列表，每个备份文件子列表中均分别对应记录了每种文件类型的待备份文件的全路径。
再例如，所述备份执行服务器根据待备份文件列表中的文件大小拆分所述待备份文件列表时，可以根据在线且空闲的所述代理备份读写服务器的数目来拆分所述待备份文件列表，假如用户的待备份文件总大小为3GB，在线且空闲的所述代理备份读写服务器为6个，则把所述待备份文件列表拆分为6个所述备份文件子列表，每个所述备份文件子列表中记录的文件大小为500MB。在拆分时，从所述待备份文件列表中提取待备份文件的路径，写入某个所述备份文件子列表，直至该备份文件子列表记录的相应待备份文件的总大小大于500MB，然后继续写入下一个所述备份文件子列表，直至所有所述待备份文件列表中记录的文件被全部写入所述备份文件子列表。
S6、所述备份执行服务器将所述至少两个备份文件子列表分别发送到对应数量的代理备份读写服务器。
具体地，所述备份执行服务器将所述至少两个备份文件子列表写为对应数量的子任务，把所述子任务分别发送给对应数量的所述代理备份读写服务器。
所述子任务包括所述备份文件子列表、所述虚拟机的镜像路径以及所述备份目标位置。
所述备份执行服务器将所述子任务通过网络端口分别发送到所述代理备份读写服务器，每个所述代理备份读写服务器均接收到一个所述子任务。
S7、每个所述代理备份读写服务器根据接收到的备份文件子列表拷贝对应虚拟机的镜像中的文件到备份存储服务器。
具体地，每个所述代理备份读写服务器根据接收到的所述子任务，读取所述子任务的所述备份文件子列表、所述虚拟机的镜像路径以及所述备份目标位置设定，根据所述备份文件子列表中拷贝对应虚拟机的镜像中的文件到所述备份目标位置定义的备份存储服务器。
拷贝对应虚拟机的镜像中的文件到备份存储服务器时，把所述虚拟机的镜像挂载到两个以上的节点，所述节点数目与所述代理备份读写服务器数目相同，每个所述代理备份读写服务器分别从不同的所述节点中读取所述虚拟机的文件，并把所述备份文件子列表中的文件拷贝到所述备份存储服务器。
所述代理备份读写服务器有一个以上，可以并发读取待备份文件，而且并发地发送所述待备份文件到所述备份存储服务器，使得所述备份执行服务器和所述备份存储服务器的多个网络接口被利用，完成并发备份过程，从而使备份过程突破网速限制，提高备份速度。
S8、所述备份存储服务器直至接收到所有代理备份读写服务器拷贝的文件后存储备份文件。
具体地，存储备份文件的位置由所述备份策略的备份目标位置设定来定义。
S9、每个所述代理备份读写服务器直至所述备份文件子列表中的文件拷贝完成后，向所述备份执行服务器发送备份完成通知。
具体地，所述备份执行服务器收到所述备份完成通知后，记录下备份耗时信息。
S10、所述备份执行服务器转发所述备份完成通知到所述备份管理服务器，所述备份管理服务器收到所述备份完成通知后，刷新前端显示的备份状态。
以下为本发明的一种虚拟机文件的并发备份方法的一个应用实例。
某用户的虚拟机操作系统为Windows 7，该虚拟机运行在一个虚拟化桌面集群系统中，该虚拟化桌面集群系统采用sheepdog方式的分布式储存，sheepdog可以为虚拟机提供块设备。
该虚拟机的镜像文件名为User1.img，其中，User1为该用户的虚拟机的用户标识,同时也是该虚拟机操作系统中的用户账户名，该虚拟机的镜像位于IP地址为192.168.1.100:7000的服务器中。
该用户的文件全部存放在“我的文档”，即/Users/User1文件夹。
该用户使用虚拟机时，创建了4个Microsoft Office文档文件，分别为“2018年一月工作计划.docx”、“2018年二月工作计划.docx”、“2018年三月工作计划.docx”以及“2018年四月工作计划.docx”。
该用户使用虚拟机时，还创建了6个AutoCAD图形文件，分别为“一楼平面图.DWG”、“二楼平面图.DWG”、“三楼平面图.DWG”、“四楼平面图.DWG”、“五楼平面图.DWG”以及“六楼平面图.DWG”。
该用户使用虚拟机时，还创建了3个Microsoft Office演示文稿，分别为“制图基础培训.ppt”、“2017年总结汇报.ppt”以及“项目总结.ppt”。
上述的文件是用户需要进行备份的文件。
在备份时，该用户想要把上述的文件保存到某台备份存储服务器的backup文件夹中，该备份存储服务器的IP地址为192.168.1.200。
该用户在所述备份管理服务器上配置所述备份内容设定，使所述备份内容设定的文件目录定义为/Users/User1文件夹，即“我的文档”，使所述文件类型定义为MicrosoftOffice文档文件、AutoCAD图形文件和Microsoft Office演示文稿，即docx、DWG和ppt。配置所述备份目标位置设定，使所述备份目标位置设定定义为//192.168.1.200/backup/。配置所述备份时间设定，使所述备份时间设定定义为每天凌晨1:00。
当到达所述备份时间设定定义的时间点，即每天凌晨1:00时，所述备份管理服务器在服务器集群中寻找一台空闲服务器，并开启该空闲服务器作为备份执行服务器，例如到达了2018年5月1日的凌晨1:00，所述备份执行服务器检测所述备份环境，若User1虚拟机已不在运行状态同时所述代理备份读写服务器在线，而且备份存储服务器的存储空间充足，表明所述备份环境已满足要求。
所述备份执行服务器创建一个临时目录，该目录名为tmp，在该目录下进一步创建以虚拟机的用户标识为名的文件夹，以区分不同的虚拟机，在本例子中，该目录名为User1。随后，所述备份执行服务器挂载sheepdog:192.168.1.100:7000:User1.img到/tmp/User1/目录。
由于所述备份内容设定的文件目录定义为/Users/User1文件夹，而且所述文件类型docx、DWG和ppt，故所述备份执行服务器在/tmp/User1/Users/User1目录下搜索docx、DWG和ppt三种类型的文件，把该目录下的所有docx、DWG和ppt文件的全路径记录在待备份文件列表中。
所述待备份文件列表中记录有以下信息：
/tmp/User1/Users/User1/2018年一月工作计划.docx
/tmp/User1/Users/User1/2018年二月工作计划.docx
/tmp/User1/Users/User1/2018年三月工作计划.docx
/tmp/User1/Users/User1/2018年四月工作计划.docx
/tmp/User1/Users/User1/一楼平面图.DWG
/tmp/User1/Users/User1/二楼平面图.DWG
/tmp/User1/Users/User1/三楼平面图.DWG
/tmp/User1/Users/User1/四楼平面图.DWG
/tmp/User1/Users/User1/五楼平面图.DWG
/tmp/User1/Users/User1/六楼平面图.DWG
/tmp/User1/Users/User1/制图基础培训.ppt
/tmp/User1/Users/User1/2017年总结汇报.ppt
/tmp/User1/Users/User1/项目总结.ppt
所述备份执行服务器按照文件类型拆分所述待备份文件列表，即每种文件类型的文件全路径分别记录在一个备份文件子列表中，从而形成三个备份文件子列表，分别为第一备份文件子列表、第二备份文件子列表以及第三备份文件子列表。
所述第一备份文件子列表记录有以下信息：
/tmp/User1/Users/User1/2018年一月工作计划.docx
/tmp/User1/Users/User1/2018年二月工作计划.docx
/tmp/User1/Users/User1/2018年三月工作计划.docx
/tmp/User1/Users/User1/2018年四月工作计划.docx
所述第二备份文件子列表记录有以下信息：
/tmp/User1/Users/User1/一楼平面图.DWG
/tmp/User1/Users/User1/二楼平面图.DWG
/tmp/User1/Users/User1/三楼平面图.DWG
/tmp/User1/Users/User1/四楼平面图.DWG
/tmp/User1/Users/User1/五楼平面图.DWG
/tmp/User1/Users/User1/六楼平面图.DWG
所述第三备份文件子列表记录有以下信息：
/tmp/User1/Users/User1/制图基础培训.ppt
/tmp/User1/Users/User1/2017年总结汇报.ppt
/tmp/User1/Users/User1/项目总结.ppt
所述备份执行服务器将三个所述备份文件子列表分别写为三个子任务，并且分别发送给三个所述代理备份读写服务器，每个所述子任务均包括一个所述备份文件子列表、所述虚拟机的镜像路径以及所述备份目标位置。
由所述第一备份文件子列表写成的所述子任务为第一子任务，所述第一子任务记录有以下信息：
/tmp/User1/Users/User1/2018年一月工作计划.docx
/tmp/User1/Users/User1/2018年二月工作计划.docx
/tmp/User1/Users/User1/2018年三月工作计划.docx
/tmp/User1/Users/User1/2018年四月工作计划.docx,
sheepdog:192.168.1.101:7000:User1.img,
//192.168.1.200/backup/User1.img/20180501/
其中，sheepdog:192.168.1.101:7000:User1.img为所述虚拟机的镜像路径，//192.168.1.200/backup/User1.img/20180501/为所述备份目标位置，User1.img/目录用于在backup/目录下区分虚拟机用户，20180501/目录用于在User1.img/目录下区分备份日期。
由所述第二备份文件子列表写成的所述子任务为第二子任务，所述第二子任务记录有以下信息：
/tmp/User1/Users/User1/一楼平面图.DWG
/tmp/User1/Users/User1/二楼平面图.DWG
/tmp/User1/Users/User1/三楼平面图.DWG
/tmp/User1/Users/User1/四楼平面图.DWG
/tmp/User1/Users/User1/五楼平面图.DWG
/tmp/User1/Users/User1/六楼平面图.DWG,
sheepdog:192.168.1.102:7000:User1.img,
//192.168.1.200/backup/User1.img/20180501/
其中，sheepdog:192.168.1.102:7000:User1.img为所述虚拟机的镜像路径，//192.168.1.200/backup/User1.img/20180501/为所述备份目标位置，User1.img/目录用于在backup/目录下区分虚拟机用户，20180501/目录用于在User1.img/目录下区分备份日期。
由所述第三备份文件子列表写成的所述子任务为第三子任务，所述第三子任务记录有以下信息：
/tmp/User1/Users/User1/制图基础培训.ppt
/tmp/User1/Users/User1/2017年总结汇报.ppt
/tmp/User1/Users/User1/项目总结.ppt
sheepdog:192.168.1.103:7000:User1.img,
//192.168.1.200/backup/User1.img/20180501/
其中，sheepdog:192.168.1.103:7000:User1.img为所述虚拟机的镜像路径，//192.168.1.200/backup/User1.img/20180501/为所述备份目标位置，User1.img/目录用于在backup/目录下区分虚拟机用户，20180501/目录用于在User1.img/目录下区分备份日期。
把虚拟机镜像分别从sheepdog:192.168.1.101:7000、sheepdog:192.168.1.102:7000以及sheepdog:192.168.1.103:7000三个存储节点挂载到三个代理备份读写服务器上，实现所述代理备份读写服务器的并发读取。
三个所述代理备份读写服务器分别接收所述子任务后，把三个所述备份文件子列表中的文件压缩并拷贝到所述备份存储服务器的backup/User1.img/20180501/目录。
此时，所述备份存储服务器的/backup/User1.img/20180501/目录下新增“2018年一月工作计划.docx”、“2018年二月工作计划.docx”、“2018年三月工作计划.docx”、“2018年四月工作计划.docx”、“一楼平面图.DWG”、“二楼平面图.DWG”、“三楼平面图.DWG”、“四楼平面图.DWG”、“五楼平面图.DWG”以及“六楼平面图.DWG”、“制图基础培训.ppt”、“2017年总结汇报.ppt”以及“项目总结.ppt”，共计13个文件，备份完成。
每个所述代理备份读写服务器直至所述备份文件子列表中的文件拷贝完成后，向所述备份执行服务器发送备份完成通知。
本发明实施例还提供一种虚拟机文件的并发备份系统，包括备份执行服务器、至少两个代理备份读写服务器、备份存储服务器。
所述备份执行服务器，用于主动扫描集群中所有虚拟机和虚拟机组，根据预设的备份策略确定集群中待备份的虚拟机；检测备份环境，当备份环境满足要求后，挂载并扫描待备份的虚拟机的镜像，获得待备份文件列表，对所述待备份文件列表进行拆分获得至少两个备份文件子列表；将所述至少两个备份文件子列表分别发送到对应数量的代理备份读写服务器。
所述备份执行服务器，对所述待备份文件列表进行拆分获得至少两个备份文件子列表时，具体根据待备份文件列表中的文件大小或者文件类型拆分获得至少两个备份文件子列表。
所述至少两个代理备份读写服务器中，每个代理备份读写服务器用于根据接收到的备份文件子列表拷贝对应虚拟机的镜像中的文件到备份存储服务器；所述代理备份读写服务器还用于直至所述备份文件子列表中的文件拷贝完成后，向所述备份执行服务器发送备份完成通知。
所述备份存储服务器，用于接收所有代理备份读写服务器拷贝的文件，并且直至接收到所有代理备份读写服务器拷贝的文件后存储备份文件。
以上的实施例只是在于说明而不是限制本发明，故凡依本发明专利申请范围所述的方法所做的等效变化或修饰，均包括于本发明专利申请范围内。
Claims (10)
1.一种虚拟机文件的并发备份方法，其特征在于，该方法为：
备份执行服务器挂载并扫描待备份的虚拟机的镜像获得待备份文件列表，对所述待备份文件列表进行拆分获得至少两个备份文件子列表；所述备份执行服务器将所述至少两个备份文件子列表分别发送到对应数量的代理备份读写服务器；每个代理备份读写服务器根据接收到的备份文件子列表拷贝对应虚拟机的镜像中的文件到备份存储服务器。
2.根据权利要求1所述的虚拟机文件的并发备份方法，其特征在于，所述备份执行服务器挂载并扫描待备份的虚拟机的镜像获得待备份文件列表之前，该方法还包括：所述备份执行服务器主动扫描集群中所有虚拟机和虚拟机组，根据预设的备份策略确定集群中待备份的虚拟机。
3.根据权利要求2所述的虚拟机文件的并发备份方法，其特征在于，所述根据预设的备份策略确定集群中待备份的虚拟机之后，该方法还包括：所述备份执行服务器检测备份环境，当备份环境满足要求后，备份执行服务器挂载并扫描待备份的虚拟机的镜像。
4.根据权利要求1-3任意一项所述的虚拟机文件的并发备份方法，其特征在于，所述对所述待备份文件列表进行拆分获得至少两个备份文件子列表，具体为：所述备份执行服务器根据待备份文件列表中的文件大小或者文件类型拆分获得至少两个备份文件子列表。
5.根据权利要求4所述的虚拟机文件的并发备份方法，其特征在于：每个所述代理备份读写服务器直至所述备份文件子列表中的文件拷贝完成后，向所述备份执行服务器发送备份完成通知。
6.一种虚拟机文件的并发备份系统，其特征在于，该系统包括备份执行服务器、至少两个代理备份读写服务器、备份存储服务器；
所述备份执行服务器，用于挂载并扫描待备份的虚拟机的镜像获得待备份文件列表，对所述待备份文件列表进行拆分获得至少两个备份文件子列表；将所述至少两个备份文件子列表分别发送到对应数量的代理备份读写服务器；
所述至少两个代理备份读写服务器中，每个代理备份读写服务器用于根据接收到的备份文件子列表拷贝对应虚拟机的镜像中的文件到备份存储服务器；
所述备份存储服务器，用于接收所有代理备份读写服务器拷贝的文件，并且直至接收到所有代理备份读写服务器拷贝的文件后存储备份文件。
7.根据权利要求6所述的虚拟机文件的并发备份系统，其特征在于，所述备份执行服务器，还用于主动扫描集群中所有虚拟机和虚拟机组，根据预设的备份策略确定集群中待备份的虚拟机。
8.根据权利要求7所述的虚拟机文件的并发备份系统，其特征在于，所述备份执行服务器，还用于检测备份环境，当备份环境满足要求后，备份执行服务器挂载并扫描待备份的虚拟机的镜像。
9.根据权利要求6-8任意一项所述的虚拟机文件的并发备份系统，其特征在于，所述备份执行服务器，具体用于根据待备份文件列表中的文件大小或者文件类型拆分获得至少两个备份文件子列表。
10.根据权利要求9所述的虚拟机文件的并发备份系统，其特征在于：所述代理备份读写服务器，还用于直至所述备份文件子列表中的文件拷贝完成后，向所述备份执行服务器发送备份完成通知。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810996899.5A CN109344001B (zh) | 2018-08-29 | 2018-08-29 | 一种虚拟机文件的并发备份方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810996899.5A CN109344001B (zh) | 2018-08-29 | 2018-08-29 | 一种虚拟机文件的并发备份方法及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN109344001A true CN109344001A (zh) | 2019-02-15 |
| CN109344001B CN109344001B (zh) | 2022-01-11 |
Family
ID=65297073
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201810996899.5A Active CN109344001B (zh) | 2018-08-29 | 2018-08-29 | 一种虚拟机文件的并发备份方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109344001B (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112685223A (zh) * | 2019-10-17 | 2021-04-20 | 伊姆西Ip控股有限责任公司 | 基于文件类型的文件备份 |
| CN113986621A (zh) * | 2021-12-29 | 2022-01-28 | 深圳市科力锐科技有限公司 | 数据备份性能的优化方法、装置、设备及存储介质 |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102253871A (zh) * | 2011-07-13 | 2011-11-23 | 重庆大学 | 一种数据备份、还原方法、装置及系统 |
| CN102521014A (zh) * | 2011-12-06 | 2012-06-27 | 北京航空航天大学 | 虚拟机的部署方法及装置 |
| CN105068856A (zh) * | 2015-07-16 | 2015-11-18 | 武汉噢易云计算有限公司 | 基于镜像快照的虚拟机备份系统及备份方法 |
| CN106095619A (zh) * | 2016-06-08 | 2016-11-09 | 杭州华三通信技术有限公司 | 一种虚拟机备份方法及装置 |
| CN107003893A (zh) * | 2016-02-03 | 2017-08-01 | 华为技术有限公司 | 虚拟机备份方法、备份装置及宿主机 |
| CN107145409A (zh) * | 2017-05-31 | 2017-09-08 | 广州鼎甲计算机科技有限公司 | 一种文件多通道备份的方法 |
| US9977704B1 (en) * | 2014-09-26 | 2018-05-22 | EMC IP Holding Company LLC | Automated backup and replication of virtual machine data centers |
-
2018
- 2018-08-29 CN CN201810996899.5A patent/CN109344001B/zh active Active
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102253871A (zh) * | 2011-07-13 | 2011-11-23 | 重庆大学 | 一种数据备份、还原方法、装置及系统 |
| CN102521014A (zh) * | 2011-12-06 | 2012-06-27 | 北京航空航天大学 | 虚拟机的部署方法及装置 |
| US9977704B1 (en) * | 2014-09-26 | 2018-05-22 | EMC IP Holding Company LLC | Automated backup and replication of virtual machine data centers |
| CN105068856A (zh) * | 2015-07-16 | 2015-11-18 | 武汉噢易云计算有限公司 | 基于镜像快照的虚拟机备份系统及备份方法 |
| CN107003893A (zh) * | 2016-02-03 | 2017-08-01 | 华为技术有限公司 | 虚拟机备份方法、备份装置及宿主机 |
| CN106095619A (zh) * | 2016-06-08 | 2016-11-09 | 杭州华三通信技术有限公司 | 一种虚拟机备份方法及装置 |
| CN107145409A (zh) * | 2017-05-31 | 2017-09-08 | 广州鼎甲计算机科技有限公司 | 一种文件多通道备份的方法 |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112685223A (zh) * | 2019-10-17 | 2021-04-20 | 伊姆西Ip控股有限责任公司 | 基于文件类型的文件备份 |
| CN113986621A (zh) * | 2021-12-29 | 2022-01-28 | 深圳市科力锐科技有限公司 | 数据备份性能的优化方法、装置、设备及存储介质 |
| CN113986621B (zh) * | 2021-12-29 | 2022-03-25 | 深圳市科力锐科技有限公司 | 数据备份性能的优化方法、装置、设备及存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN109344001B (zh) | 2022-01-11 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11036679B2 (en) | Auto summarization of content | |
| US8010495B1 (en) | Method and system for fast generation of file system snapshot bitmap in virtual environment | |
| US10284437B2 (en) | Cloud-based virtual machines and offices | |
| US7383327B1 (en) | Management of virtual and physical servers using graphic control panels | |
| US8011010B2 (en) | Using antimalware technologies to perform offline scanning of virtual machine images | |
| US7941510B1 (en) | Management of virtual and physical servers using central console | |
| AU2011248305B2 (en) | Schedule based data lifecycle management | |
| US10353790B1 (en) | Disaster recovery rehearsals | |
| US8122212B2 (en) | Method and apparatus for logical volume management for virtual machine environment | |
| US9275060B1 (en) | Method and system for using high availability attributes to define data protection plans | |
| JP5871583B2 (ja) | 文書管理装置及びその制御方法、並びにプログラム | |
| US8112665B1 (en) | Methods and systems for rapid rollback and rapid retry of a data migration | |
| US20110246922A1 (en) | Enhanced Virtualization System | |
| CN104216801B (zh) | 一种面向虚拟化环境的数据复制方法及系统 | |
| KR100736235B1 (ko) | 스토리지 서비스들 및 시스템들 | |
| US20140297597A1 (en) | Computer system and management method for the same | |
| US10922283B2 (en) | File synchronization | |
| US20080033902A1 (en) | A Method for Providing Live File Transfer Between Machines | |
| US20090063486A1 (en) | Data replication using a shared resource | |
| CN109344001A (zh) | 一种虚拟机文件的并发备份方法及系统 | |
| US8429125B2 (en) | Conversion of physical computers to virtualized environments method and system | |
| WO2023240995A1 (zh) | 一种双机热备系统的数据恢复方法、装置及介质 | |
| US9075635B1 (en) | Systems and methods for merging virtual layers | |
| CN117093332B (zh) | 一种虚拟机克隆的实现方法和装置 | |
| CN117033085B (zh) | kvm虚拟机备份方法、装置、计算机设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |