CN113986621A - 数据备份性能的优化方法、装置、设备及存储介质 - Google Patents
数据备份性能的优化方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN113986621A CN113986621A CN202111627507.6A CN202111627507A CN113986621A CN 113986621 A CN113986621 A CN 113986621A CN 202111627507 A CN202111627507 A CN 202111627507A CN 113986621 A CN113986621 A CN 113986621A
- Authority
- CN
- China
- Prior art keywords
- mounting
- path
- nas
- backed
- sub
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1458—Management of the backup or restore process
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及数据灾备技术领域,公开了一种数据备份性能的优化方法、装置、设备及存储介质,所述方法包括:根据待备份NAS服务器访问路径和目标备份系统的可访问路径确定待备份子路径;根据所述待备份子路径确定对应的挂载点;在挂载点为多个时,根据目标备份系统的配置参数确定对应的目标NAS挂载策略;根据目标NAS挂载策略,使用对应NAS协议,将待备份子路径挂载至多个挂载点;由于本发明是在挂载点为多个时,根据目标备份系统的配置参数确定对应的目标NAS挂载策略,再通过目标NAS挂载策略挂载待备份子路径至多个挂载点,接着通过多个挂载点执行并行数据读取与备份;相较于现有技术通过单一挂载点执行数据读取与备份,能够有效提高备份NAS数据的效率。
Description
技术领域
本发明涉及数据灾备技术领域,尤其涉及数据备份性能的优化方法、装置、设备及存储介质。
背景技术
随着计算机的普及和信息技术的发展,信息安全与数据存储技术也越来越引起各大企业的重视,通过备份数据能够有效防止数据的丢失,而对于备份NAS服务器中的数据来说,目前常用的现有方式是将NAS服务器共享的目录通过NAS协议挂载至备份系统中,然后通过挂载的文件系统进行数据复制,但是对于同一挂载点仅会创建单个“套接字对”,而在网络传输层,对于同一“套接字对”一方面无法通过多网络出口和LACP等链路聚合等方式来提升传输带宽,另一方面由于NAS协议的请求应答机制,TCP/IP的拥塞机制、ACK机制以及乱序传递等影响,导致额外的网络延时和请求排队,造成最终备份NAS数据的效率较低。
上述内容仅用于辅助理解本发明的技术方案,并不代表承认上述内容是现有技术。
发明内容
本发明的主要目的在于提供一种数据备份性能的优化方法、装置、设备及存储介质,旨在解决现有技术备份NAS数据的效率较低的技术问题。
为实现上述目的,本发明提供了一种数据备份性能的优化方法,所述数据备份性能的优化方法包括以下步骤:
根据待备份NAS服务器访问路径和目标备份系统的可访问路径确定待备份子路径;
根据所述待备份子路径确定对应的挂载点;
在所述挂载点为多个时,根据目标备份系统的配置参数确定对应的目标NAS挂载策略;
根据所述目标NAS挂载策略,使用对应NAS协议,将所述待备份子路径挂载至多个挂载点。
可选地,所述根据所述待备份子路径确定对应的挂载点,包括:
根据所述目标备份系统的可访问路径和预设枚举深度规则得到对应的文件数量和文件容量;
判断所述路径中文件数量是否大于预设数量阈值和所述文件容量是否大于预设容量阈值;
在所述文件数量大于预设数量阈值和/或所述文件容量大于预设容量阈值时,根据所述待备份子路径确定对应的挂载点。
可选地,所述在所述挂载点为多个时,根据目标备份系统的配置参数确定对应的目标NAS挂载策略,包括:
获取目标灾备设备的软硬件配置参数与目标灾备系统的运行参数;
将用户指定的挂载策略参数与NAS服务器的访问参数保存为所述目标备份系统的配置参数;
根据所述挂载点需求信息和目标备份系统的配置参数确定对应的目标NAS挂载策略。
可选地,所述根据所述目标NAS挂载策略,使用对应NAS协议,将所述待备份子路径挂载至多个挂载点,包括:
根据待备份子路径和所述NAS服务器的访问参数得到挂载NAS访问路径的指令;
在同一操作系统中通过执行所述挂载NAS访问路径的指令,将所述待备份子路径挂载至多个挂载点。
可选地,所述根据所述目标NAS挂载策略,使用对应NAS协议,将所述待备份子路径挂载至多个挂载点,包括:
获取目标备份系统中虚拟机的当前状态;
在所述当前状态为未创建状态时,通过预设创建指令创建所述虚拟机,在所述当前状态为关闭状态时,通过预设开启指令启动所述虚拟机;
根据待备份子路径和待备份NAS服务器的访问参数得到挂载NAS访问路径的指令;
在所述虚拟机中通过执行所述挂载NAS访问路径的指令将所述待备份子路径挂载至多个挂载点。
可选地,所述根据所述目标NAS挂载策略,使用对应NAS协议,将所述待备份子路径挂载至多个挂载点,包括:
根据待备份NAS服务器的访问参数得到对应的所有访问IP地址,在所述所有访问IP地址为多个时,根据所述待备份NAS服务器的访问参数得到未挂载的访问IP地址;
根据待备份子路径、所述未挂载的访问IP地址以及所述待备份NAS服务器的访问参数得到挂载NAS访问路径的指令;
通过执行所述挂载NAS访问路径的指令,将所述待备份子路径挂载至多个挂载点。
可选地,所述根据所述目标NAS挂载策略,使用对应NAS协议,将所述待备份子路径挂载至多个挂载点之后,还包括:
通过所述多个挂载点并发读取所述待备份子路径的目标数据;
将所述目标数据备份至对应的备份存储中,在备份完成时获取当前备份性能统计;
在所述当前备份性能统计大于历史备份性能统计时,实现对数据备份性能的优化。
此外,为实现上述目的,本发明还提出一种数据备份性能的优化装置,所述数据备份性能的优化装置包括:
确定模块,用于根据待备份NAS服务器访问路径和目标备份系统的可访问路径确定待备份子路径;
所述确定模块,还用于根据所述待备份子路径确定对应的挂载点;
判断模块,用于在所述挂载点为多个时,根据目标备份系统的配置参数确定对应的目标NAS挂载策略;
挂载模块,用于根据所述目标NAS挂载策略,使用对应NAS协议,将所述待备份子路径挂载至多个挂载点。
此外,为实现上述目的,本发明还提出一种数据备份性能的优化设备,所述数据备份性能的优化设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的数据备份性能的优化程序,所述数据备份性能的优化程序配置为实现如上文所述的数据备份性能的优化方法。
此外,为实现上述目的,本发明还提出一种存储介质,所述存储介质上存储有数据备份性能的优化程序,所述数据备份性能的优化程序被处理器执行时实现如上文所述的数据备份性能的优化方法。
本发明提出的数据备份性能的优化方法,根据待备份NAS服务器访问路径和目标备份系统的可访问路径确定待备份子路径;根据待备份子路径确定对应的挂载点;在挂载点为多个时,根据目标备份系统的配置参数确定对应的目标NAS挂载策略;根据目标NAS挂载策略,使用对应NAS协议,将待备份子路径挂载至多个挂载点;由于本发明是在挂载点为多个时,根据目标备份系统的配置参数确定对应的目标NAS挂载策略,再通过目标NAS挂载策略挂载待备份子路径至多个挂载点,接着通过多个挂载点执行数据读取与备份;相较于现有技术通过单一挂载点执行数据读取与备份,能够有效提高备份NAS数据的效率。
附图说明
图1是本发明实施例方案涉及的硬件运行环境的数据备份性能的优化设备的结构示意图;
图2为本发明数据备份性能的优化方法第一实施例的流程示意图;
图3为本发明数据备份性能的优化方法第二实施例的流程示意图;
图4为本发明数据备份性能的优化方法第三实施例的流程示意图;
图5为本发明数据备份性能的优化方法第四实施例的流程示意图;
图6为本发明数据备份性能的优化方法第五实施例的流程示意图;
图7为本发明数据备份性能的优化方法一实施例的通过多虚拟机挂载示意图;
图8为本发明数据备份性能的优化方法一实施例的通过多子路径挂载示意图;
图9为本发明数据备份性能的优化方法一实施例的通过多IP挂载示意图;
图10为本发明数据备份性能的优化装置第一实施例的功能模块示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。
参照图1,图1为本发明实施例方案涉及的硬件运行环境的数据备份性能的优化设备结构示意图。
如图1所示,该数据备份性能的优化设备可以包括:处理器1001,例如中央处理器(Central Processing Unit,CPU),通信总线1002、用户接口1003,网络接口1004,存储器1005。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如无线保真(Wireless-Fidelity,Wi-Fi)接口)。存储器1005可以是高速的随机存取存储器(RandomAccess Memory,RAM)存储器,也可以是稳定的非易失性存储器(Non-Volatile Memory,NVM),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解,图1中示出的结构并不构成对数据备份性能的优化设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图1所示,作为一种存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及数据备份性能的优化程序。
在图1所示的数据备份性能的优化设备中,网络接口1004主要用于与网络一体化平台工作站进行数据通信;用户接口1003主要用于与用户进行数据交互;本发明数据备份性能的优化设备中的处理器1001、存储器1005可以设置在数据备份性能的优化设备中,所述数据备份性能的优化设备通过处理器1001调用存储器1005中存储的数据备份性能的优化程序,并执行本发明实施例提供的数据备份性能的优化方法。
基于上述硬件结构,提出本发明数据备份性能的优化方法实施例。
参照图2,图2为本发明数据备份性能的优化方法第一实施例的流程示意图。
在第一实施例中,所述数据备份性能的优化方法包括以下步骤:
步骤S10,根据待备份NAS服务器访问路径和目标备份系统的可访问路径确定待备份子路径。
需要说明的是,本实施例的执行主体为数据备份性能的优化设备,还可为其他可实现相同或相似功能的设备,例如备份服务器等,本实施例对此不作限制,在本实施例中,以备份服务器为例进行说明。
应当理解的是,所述NAS服务器指的是存储待备份数据的NAS服务器,而NAS服务器指的是使用NAS协议提供文件存储的服务器,该待备份NAS服务器使用以文件为单位的数据共享协议,该NAS(Network Attached Storage)协议包括网络文件协议(Network FileSystem,NFS)、通用网络文件协议(Common Internet File System,CIFS)、苹果文件传输协议(Apple Filing Protocol,AFP)等;NFS协议常见于Linux操作系统,CIFS协议常见于Windows操作系统,AFP协议常见于macOS操作系统。
可以理解的是,所述待备份NAS服务器访问路径指的是外部可以通过NAS协议访问到NAS服务器下的待备份文件的路径;目标备份系统的可访问路径指的是从所述待备份NAS服务器访问路径映射到目标备份系统的文件系统路径,目标备份系统可以通过所述文件路径读取到NAS服务器访问路径中的数据;备份系统读取所述可访问路径的文件时,和读取其他本地文件是一模一样的,并不感知其实际上是存储在另外一台服务器中(NAS服务器中)的,且也不感知其需要透过NAS协议才能读取到文件数据;待备份子路径指的是通过枚举所述可访问路径,获得待备份文件后,再根据所述可访问路径对应的NAS服务器访问路径计算得出的待备份文件的NAS服务器访问路径。
需要了解的是,将“NAS服务器访问路径”在文件系统中映射为“可访问路径”过程的中文术语为“挂载”,英文术语为:“mount”。
举例:
假设当前“待备份NAS服务器访问路径”为“\\172.16.1.3\abc”;
假设上述“NAS服务器访问路径”的“目标备份系统的可访问路径”为“/mnt/nfs_abc”;
假设通过上述“备份系统的可访问路径”枚举到其中有目录(文件)“123”;
可计算出上述待备份目录(文件)的“待备份NAS服务器访问路径”为“\\172.16.1.3\abc\123”,即为待备份子路径。
步骤S20,根据所述待备份子路径确定对应的挂载点。
应当理解的是,挂载点指的是在所述目标备份系统中挂载NAS服务器访问路径的文件系统位置点。所述挂载点在进行挂载操作后,即为前述中的“目标备份系统的可访问路径”。
可以理解的是,在得到待备份子路径后,根据该待备份子路径确定对应的挂载点,具体为:根据所述目标备份系统的可访问路径和预设枚举深度规则得到对应的文件数量和文件容量;判断所述路径中文件的数量是否大于预设数量阈值和/或文件的容量是否大于预设容量阈值,若满足其中任一条件,表明需要加载多个挂载点进行数据的备份,反之,如果所述路径下的文件的数量小于等于预设数量阈值且文件的容量小于等于预设容量阈值,则通过当前挂载点即可实现对数据的备份。
步骤S30,在所述挂载点为多个时,根据目标备份系统的配置参数确定对应的目标NAS挂载策略。
应当理解的是,所述目标NAS挂载策略指的是在挂载点为多个时,确定挂载操作关键参数的策略。本发明提出三种确定挂载操作关键参数的策略:通过多子路径的挂载策略、通过多虚拟机的挂载策略以及通过多IP的挂载策略。所述配置参数指的是上述三种策略的必要配置参数,如:启用/禁用,NAS协议类型,虚拟机运行参数,多IP列表参数等。在确定挂载点后,需要判断是否需要多个挂载点,若是,则表明待备份子路径下文件的数量大于预设数量阈值和/或文件的容量大于预设容量阈值,此时根据目标备份系统的配置参数确定对应的目标NAS挂载策略。
进一步地,为了有效提高确定目标NAS挂载策略的准确性,步骤S30,包括:获取目标灾备设备的软硬件配置参数与运行参数;将用户指定的挂载策略参数与NAS服务器的访问参数保存为所述目标备份系统的配置参数;根据所述挂载点需求信息和目标备份系统的配置参数确定对应的目标NAS挂载策略。
可以理解的是,用户能够通过目标灾备设备的软硬件配置参数与运行参数确定适当的目标备份系统的配置参数。例如,目标灾备设备的软硬件性能等级较高时,可以配置更多的虚拟机,更多的挂载点,更多的IP地址,以及任意组合三种策略等。
步骤S40,根据所述目标NAS挂载策略,使用对应NAS协议,将所述待备份子路径挂载至多个挂载点。
可以理解的是,NAS协议指的是与待备份NAS服务器进行交互时所遵循的协议,该NAS协议包括NFS协议、CIFS协议、AFP协议以及其他协议;在确定目标NAS挂载策略后,根据目标NAS挂载策略,使用对应NAS协议,将待备份子路径挂载至多个挂载点。
应当理解的是,挂载指的是将“NAS服务器访问路径”在文件系统中映射为“可访问路径”的过程,即将待备份子路径挂载至挂载点后,目标备份系统既可以通过该挂载点读取该待备份子路径中的目标数据,也可以通过其他挂载点读取该待备份子路径中的目标数据。其他挂载点为,能够读取到该待备份子路径中目标数据的挂载点;如:在步骤S10中,目标备份系统的可访问路径。
举例:
假设当前“待备份NAS服务器访问路径”为“\\172.16.1.3\abc”;
假设上述“NAS服务器访问路径”的“目标备份系统的可访问路径”为“/mnt/nfs_abc”;
假设通过上述“备份系统的可访问路径”枚举到其中有目录(文件)“123”;
可计算出上述待备份目录(文件)的“待备份NAS服务器访问路径”为“\\172.16.1.3\abc\123”,即为待备份子路径;
假设上述待备份子路径被挂载到挂载点“/mnt/nfs_123”;
此时通过“/mnt/nfs_abc/123”读取到的数据,与通过“/mnt/nfs_123”是一致的;并且其传输数据的套接字为不同的套接字;
通过上述两个路径(挂载点)并行读取数据的性能,大于仅通过上述一个路径(挂载点)并行/串行读取数据的性能。
进一步地,为了有效确定备份NAS数据性能的提高率,步骤S40之后,还包括:通过所述多个挂载点并发读取所述待备份子路径的目标数据;将所述目标数据备份至对应的备份存储中,在备份完成时获取当前备份性能统计;在所述当前备份性能统计大于历史备份性能统计时,实现对数据备份性能的优化。
应当理解的是,目标数据指的是待备份子路径中的数据,备份存储指的是存储备份数据的区域,而当前备份性能统计指的是通过多挂载点时单位时长备份目标数据的容量,历史备份性能统计指的是通过单个挂载点时单位时长备份目标数据的容量;在将待备份子路径挂载至多个挂载点后,通过该多个挂载点并发读取该路径下的目标数据,然后将该目标数据拷贝至备份存储,以得到对应的当前备份性能统计。
可以理解的是,在得到当前备份性能统计后,判断当前备份性能统计是否大于历史备份性能统计,若是,则表明数据备份的性能得到了优化,而备份NAS数据性能的提高率是通过当前备份性能统计和历史备份性能统计进行计算,例如,当前备份性能统计为S1,历史备份性能统计为S2,则备份NAS数据的提高率为(S1-S2)/S2*100%。
本实施例根据待备份NAS服务器访问路径和目标备份系统的可访问路径确定待备份子路径;根据待备份子路径确定对应的挂载点;在挂载点为多个时,根据目标备份系统的配置参数确定对应的目标NAS挂载策略;根据目标NAS挂载策略,使用对应NAS协议,将待备份子路径挂载至多个挂载点;由于本实施例是在挂载点为多个时,根据目标备份系统的配置参数确定对应的目标NAS挂载策略,再通过目标NAS挂载策略挂载待备份子路径至多个挂载点,接着通过多个挂载点执行并行数据读取与备份;相较于现有技术通过单一挂载点执行数据读取与备份,能够有效提高备份NAS数据的效率。
在一实施例中,如图3所述,基于第一实施例提出本发明数据备份性能的优化方法第二实施例,所述步骤S20,包括:
步骤S201,根据所述目标备份系统的可访问路径和预设枚举深度规则得到对应的文件数量和文件容量。
应当理解的是,所述文件数量既是所述目标备份系统的可访问路径中文件的数量,也是待备份子路径中的文件的数量,在确定备份子路径后,统计待备份子路径对应的目标备份系统的可访问路径下文件的数量,即得到文件数量;文件容量指的是所述路径中文件所占用的空间大小;预设枚举深度规则指的是枚举文件系统的规则。
步骤S202,判断所述路径中文件数量是否大于预设数量阈值和所述文件容量是否大于预设容量阈值。
可以理解的是,预设数量阈值指的是加载多个挂载点时的最小文件数量,该预设数量阈值可以为十万级文件数量,同样,预设容量阈值指的是加载多个挂载点是的最小文件容量,该待备份子路径可以为TB级文件容量,在得到文件数量和文件容量后,需要分别判断文件数量是否大于预设数量阈值和文件容量是否大于预设容量阈值。
步骤S203,在所述文件数量大于预设数量阈值和/或所述文件容量大于预设容量阈值时,根据所述待备份子路径确定对应的挂载点。
应当理解的是,在判定文件数量大于预设数量阈值和文件容量大于预设容量阈值中的至少一个条件时,表明需要加载多个挂载点进行数据备份,具体是根据待备份子路径确定对应的挂载点,例如,待备份子路径包括文件a和文件b,而文件b容量大于预设容量阈值时,需要加载另外挂载点单独拷贝文件b。
本实施例根据所述目标备份系统的可访问路径和预设枚举深度规则得到对应的文件数量和文件容量;判断所述路径中文件数量是否大于预设数量阈值和所述文件容量是否大于预设容量阈值;在所述文件数量大于预设数量阈值和/或所述文件容量大于预设容量阈值时,根据所述待备份子路径确定对应的挂载点;由于本实施例是通过目标备份系统的可访问路径和预设枚举深度规则得到对应的文件数量和文件容量,然后判断文件数量是否大于预设数量阈值和文件容量是否大于预设容量阈值,若满足其中一个条件,则确定待备份子路径需要挂载多个挂载点,从而能够有效提高确定是否需要挂载多个挂载点的准确性。
在一实施例中,如图4所述,基于第一实施例提出本发明数据备份性能的优化方法第三实施例,该实施例为通过多虚拟机的目标NAS挂载策略,所述步骤S40,包括:
步骤S401,获取备份服务器中虚拟机的当前状态。
可以理解的是,当前状态指的是虚拟机的当前运行状态,而虚拟机运行于目标备份系统中,该当前状态包括未创建状态、已创建状态、开启状态以及关闭状态,而备份服务器中虚拟机的数量为多台,本实施例对此不作限制,并以三台虚拟机为例进行说明。
步骤S402,在所述当前状态为未创建状态时,通过预设创建指令创建所述虚拟机;在所述当前状态为关闭状态时,通过预设开启指令启动所述虚拟机。
应当理解的是,预设创建指令指的是创建虚拟机的指令,在得到备份系统中虚拟机的当前状态后,需要判断虚拟机是否为未创建状态,若是,则通过创建虚拟机指令,按需创建虚拟机实例,并在创建成功后重复执行步骤S402,执行开启虚拟机指令;预设开启指令指的是启动虚拟机的指令,在得到备份服务器中虚拟机的当前状态后,需要判断虚拟机的当前状态是否为关闭状态,若是,则通过预设开启指令开启备份系统中对应的虚拟机,在虚拟机的当前状态为开启状态时,在虚拟机中挂载待备份子路径。
步骤S403,根据待备份子路径和所述NAS服务器的访问参数得到挂载NAS访问路径的指令。
可以理解的是,所述NAS服务器的访问参数指的是挂载NAS服务器挂载路径的必要参数,如:NAS协议类型与版本、NAS服务器IP地址以及NAS服务器访问身份认证信息等。
进一步地,还需要将所述虚拟机接收挂载指令的接口信息也放入挂载NAS访问路径的指令中。
步骤S404,在所述虚拟机中通过执行所述挂载NAS访问路径的指令将所述待备份子路径挂载至多个挂载点。
应当理解的是,在不同虚拟机中挂载相同/不同所述待备份子路径到多个挂载点中,此时每个挂载点都具有不同的“套接字对”;可知并发读取所述挂载点中的目标数据,不会出现因为单个“套接字对”导致的网络延时与请求队列问题,提升了备份NAS数据的效率。
可以理解的是,在虚拟机中通过运行挂载NAS访问路径的指令将待备份子路径分别挂载至多个挂载点上,参考图7,图7为通过多虚拟机挂载示意图,具体是备份服务器中虚拟机为三台,且通过预设创建和开启指令启动后的虚拟机均为开启状态,此时待备份子路径也为多个,在不同操作系统中将多个待备份子路径分别挂载至对应虚拟机上的挂载点。
本实施例通过获取目标备份系统中虚拟机的当前状态;在所述当前状态为未创建状态时,通过预设创建指令创建所述虚拟机;在所述当前状态为关闭状态时,通过预设开启指令启动所述虚拟机;根据待备份子路径和待备份NAS服务器的访问参数得到挂载NAS访问路径的指令;在所述虚拟机中通过执行所述挂载NAS访问路径的指令将所述待备份子路径挂载至所述多个挂载点,由于本实施是通过在虚拟机的当前状态为不同状态时,通过预设指令启动虚拟机,再根据待备份子路径和待备份NAS服务器的访问参数得到挂载NAS访问路径的指令,然后在虚拟机中通过挂载NAS访问路径的指令挂载待备份子路径至对应虚拟机上的挂载点,从而能够实现在不同操作系统中分别挂载多个待备份子路径至对应虚拟机上的挂载点。
在一实施例中,如图5所述,基于第一实施例提出本发明数据备份性能的优化方法第四实施例,该实施例为通过多子路径的目标NAS挂载策略,所述步骤S40,包括:
步骤S405,根据待备份子路径和所述NAS服务器的访问参数得到挂载NAS访问路径的指令。
可以理解的是,所述NAS服务器的访问参数指的是挂载NAS服务器挂载路径的必要参数,如:NAS协议类型与版本,NAS服务器IP地址,NAS服务器访问身份认证信息,等。
步骤S406,在同一操作系统中通过执行所述挂载NAS访问路径的指令将所述待备份子路径挂载至多个挂载点。
应当理解的是,所述同一操作系统指的是所述备份系统中的执行数据备份的操作系统,在所述同一操作系统中挂载不同所述待备份子路径到多个挂载点中,此时每个挂载点都具有不同的“套接字对”;可知并发读取所述挂载点中的目标数据,不会出现因为单个“套接字对”导致的网络延时与请求队列问题,提升了备份NAS数据的效率。参考图8,图8为通过多子路径挂载示意图,具体为:在同一操作系统中,将多个待备份子路径分别挂载至多个挂载点。
本实施例根据待备份子路径和所述NAS服务器的访问参数得到挂载NAS访问路径的指令;在同一操作系统中通过执行所述挂载NAS访问路径的指令将所述待备份子路径挂载至所述挂载点;由于本实施例是通过待备份子路径和NAS服务器的访问参数得到挂载NAS访问路径的指令,然后在同一系统中通过执行挂载NAS访问路径的指令挂载待备份子路径至多个挂载点,从而能够实现在同一系统中将多个待备份子路径挂载至多个挂载点。
在一实施例中,如图6所述,基于第一实施例提出本发明数据备份性能的优化方法第五实施例,该实施例为通过多IP的目标NAS挂载策略,所述步骤S40,包括:
步骤S407,根据所述待备份NAS服务器的访问参数得到对应的所有访问IP地址;在所述所有访问IP地址为多个时,根据所述待备份NAS服务器的访问参数得到未挂载的访问IP地址。
可以理解的是,所述所有访问IP地址指的是从所述备份系统能够访问到待备份NAS服务器的全部IP地址,该IP地址包括已挂载IP地址和未挂载IP地址,未挂载IP地址指的是没有被所述待备份子路径的挂载点使用的IP地址。
步骤S408,根据待备份子路径、所述未挂载的访问IP地址以及所述待备份NAS服务器的访问参数得到挂载NAS访问路径的指令。
可以理解的是,所述NAS服务器的访问参数指的是挂载NAS服务器挂载路径的必要参数,如:NAS协议类型与版本,NAS服务器访问身份认证信息,等。
步骤S409,通过执行所述挂载NAS访问路径的指令,将所述待备份子路径挂载至多个挂载点。
应当理解的是,不同IP地址对相同/不同所述待备份子路径的多个挂载点,此时每个挂载点都具有不同的“套接字对”;可知并发读取所述挂载点中的目标数据,不会出现因为单个“套接字对”导致的网络延时与请求队列问题;同时使用多个IP,可以让数据链路层有更多的传输通道,进而能够通过LACP等链路聚合技术提高传输带宽;提升了备份NAS数据的效率。参考图9,图9为通过多IP挂载示意图,具体为:使用不同的NAS服务器的IP地址,将待备份子路径分别挂载至多个挂载点。
本实施例根据所述待备份NAS服务器的访问参数得到对应的所有访问IP地址;在所述所有访问IP地址为多个时,根据所述待备份NAS服务器的访问参数得到未挂载的访问IP地址;根据待备份子路径、所述未挂载的访问IP地址以及所述待备份NAS服务器的访问参数得到挂载NAS访问路径的指令;通过执行所述挂载NAS访问路径的指令,将所述待备份子路径挂载至所述多个挂载点;由于本实施例是通过判断所有访问IP地址是否多个,若是,则根据待备份子路径、未挂载的访问IP地址以及待备份NAS服务器的访问参数得到挂载NAS访问路径的指令,然后通过执行挂载NAS访问路径的指令将待备份子路径挂载至多个挂载点,从而能够实现通过使用多个IP地址挂载待备份子路径至多个挂载点。
此外,本发明实施例还提出一种存储介质,所述存储介质上存储有数据备份性能的优化程序,所述数据备份性能的优化程序被处理器执行时实现如上文所述的数据备份性能的优化方法的步骤。
由于本存储介质采用了上述所有实施例的全部技术方案,因此至少具有上述实施例的技术方案所带来的所有有益效果,在此不再一一赘述。
此外,参照图10,本发明实施例还提出一种数据备份性能的优化装置,所述数据备份性能的优化装置包括:
确定模块10,用于根据待备份NAS服务器访问路径和目标备份系统的可访问路径确定待备份子路径。
所述确定模块10,还用于根据所述待备份子路径确定对应的挂载点。
判断模块20,用于在所述挂载点为多个时,根据目标备份系统的配置参数确定对应的目标NAS挂载策略。
挂载模块30,用于根据所述目标NAS挂载策略,使用对应NAS协议,将所述待备份子路径挂载至多个挂载点。
本实施例根据待备份NAS服务器访问路径和目标备份系统的可访问路径确定待备份子路径;根据待备份子路径确定对应的挂载点;在挂载点为多个时,根据目标备份系统的配置参数确定对应的目标NAS挂载策略;根据目标NAS挂载策略,使用对应NAS协议,将待备份子路径挂载至多个挂载点;由于本发明是在挂载点为多个时,根据目标备份系统的配置参数确定对应的目标NAS挂载策略,再通过目标NAS挂载策略挂载待备份子路径至多个挂载点,接着通过多个挂载点执行并行数据读取与备份;相较于现有技术通过单一挂载点执行数据读取与备份,能够有效提高备份NAS数据的效率。
需要说明的是,以上所描述的工作流程仅仅是示意性的,并不对本发明的保护范围构成限定,在实际应用中,本领域的技术人员可以根据实际的需要选择其中的部分或者全部来实现本实施例方案的目的,此处不做限制。
另外,未在本实施例中详尽描述的技术细节,可参见本发明任意实施例所提供的数据备份性能的优化方法,此处不再赘述。
在一实施例中,所述确定模块10,还用于根据所述目标备份系统的可访问路径和预设枚举深度规则得到对应的文件数量和文件容量;判断所述路径中文件数量是否大于预设数量阈值和所述文件容量是否大于预设容量阈值;在所述文件数量大于预设数量阈值和/或所述文件容量大于预设容量阈值时,根据所述待备份子路径确定对应的挂载点。
在一实施例中,所述判断模块20,还用于获取目标灾备设备的软硬件参数与目标灾备系统的运行参数;将用户指定的挂载策略参数与NAS服务器的访问参数保存为所述目标备份系统的配置参数;根据所述挂载点需求信息和目标备份系统的配置参数确定对应的目标NAS挂载策略。
在一实施例中,所述挂载模块30,还用于根据待备份子路径和所述NAS服务器的访问参数得到挂载NAS访问路径的指令;在同一操作系统中通过执行所述挂载NAS访问路径的指令,将所述待备份子路径挂载至多个挂载点。
在一实施例中,所述挂载模块30,还用于获取备份服务器中虚拟机的当前状态;在所述当前状态为未创建状态时,通过预设创建指令创建所述虚拟机,在所述当前状态为关闭状态时,通过预设开启指令启动所述虚拟机;根据待备份子路径和待备份NAS服务器的访问参数得到挂载NAS访问路径的指令;在所述虚拟机中通过执行所述挂载NAS访问路径的指令将所述待备份子路径挂载至多个挂载点。
在一实施例中,所述挂载模块30,还用于根据待备份NAS服务器的访问参数得到对应的所有访问IP地址;在所述所有访问IP地址为多个时,根据所述待备份NAS服务器的访问参数得到未挂载的访问IP地址;根据待备份子路径、所述未挂载的访问IP地址以及所述待备份NAS服务器的访问参数得到挂载NAS访问路径的指令;通过执行所述挂载NAS访问路径的指令将所述待备份子路径挂载至多个挂载点。
在一实施例中,所述挂载模块30,还用于通过所述多个挂载点并发读取所述待备份子路径的目标数据;将所述目标数据备份至对应的备份存储中,在备份完成时获取当前备份性能统计;在所述当前备份性能统计大于历史备份性能统计时,实现对数据备份性能的优化。
本发明所述数据备份性能的优化装置的其他实施例或具有实现方法可参照上述各方法实施例,此处不在赘述。
此外,需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如只读存储器(Read Only Memory,ROM)/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,一体化平台工作站,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (10)
1.一种数据备份性能的优化方法,其特征在于,所述数据备份性能的优化方法包括以下步骤:
根据待备份NAS服务器访问路径和目标备份系统的可访问路径确定待备份子路径;
根据所述待备份子路径确定对应的挂载点;
在所述挂载点为多个时,根据目标备份系统的配置参数确定对应的目标NAS挂载策略;
根据所述目标NAS挂载策略,使用对应NAS协议,将所述待备份子路径挂载至多个挂载点。
2.如权利要求1所述的数据备份性能的优化方法,其特征在于,所述根据所述待备份子路径确定对应的挂载点,包括:
根据所述目标备份系统的可访问路径和预设枚举深度规则得到对应的文件数量和文件容量;
判断所述路径中文件数量是否大于预设数量阈值和所述文件容量是否大于预设容量阈值;
在所述文件数量大于预设数量阈值和/或所述文件容量大于预设容量阈值时,根据所述待备份子路径确定对应的挂载点。
3.如权利要求1所述的数据备份性能的优化方法,其特征在于,所述在所述挂载点为多个时,根据目标备份系统的配置参数确定对应的目标NAS挂载策略,包括:
获取目标灾备设备的软硬件配置参数与运行参数;
将用户指定的挂载策略参数与NAS服务器的访问参数保存为所述目标备份系统的配置参数;
根据所述挂载点需求信息和目标备份系统的配置参数确定对应的目标NAS挂载策略。
4.如权利要求1至3中任一项所述的数据备份性能的优化方法,其特征在于,所述根据所述目标NAS挂载策略,使用对应NAS协议,将所述待备份子路径挂载至多个挂载点,包括:
根据待备份子路径和所述NAS服务器的访问参数得到挂载NAS访问路径的指令;
在同一操作系统中通过执行所述挂载NAS访问路径的指令,将所述待备份子路径挂载至多个挂载点。
5.如权利要求1至3中任一项所述的数据备份性能的优化方法,其特征在于,根据所述目标NAS挂载策略,使用对应NAS协议,将所述待备份子路径挂载至多个挂载点,包括:
获取目标备份系统中虚拟机的当前状态;
在所述当前状态为未创建状态时,通过预设创建指令创建所述虚拟机,在所述当前状态为关闭状态时,通过预设开启指令启动所述虚拟机;
根据待备份子路径和待备份NAS服务器的访问参数得到挂载NAS访问路径的指令;
在所述虚拟机中通过执行所述挂载NAS访问路径的指令将所述待备份子路径挂载至多个挂载点。
6.如权利要求1至3中任一项所述的数据备份性能的优化方法,其特征在于,根据所述目标NAS挂载策略,使用对应NAS协议,将所述待备份子路径挂载至多个挂载点,包括:
根据待备份NAS服务器的访问参数得到对应的所有访问IP地址;在所述所有访问IP地址为多个时,根据所述待备份NAS服务器的访问参数得到未挂载的访问IP地址;
根据待备份子路径、所述未挂载的访问IP地址以及所述待备份NAS服务器的访问参数得到挂载NAS访问路径的指令;
通过执行所述挂载NAS访问路径的指令,将所述待备份子路径挂载至多个挂载点。
7.如权利要求1至3中任一项所述的数据备份性能的优化方法,其特征在于,所述根据所述目标NAS挂载策略,使用对应NAS协议,将所述待备份子路径挂载至多个挂载点之后,还包括:
通过所述多个挂载点并发读取所述待备份子路径的目标数据;
将所述目标数据备份至对应的备份存储中,在备份完成时获取当前备份性能统计;
在所述当前备份性能统计大于历史备份性能统计时,实现对数据备份性能的优化。
8.一种数据备份性能的优化装置,其特征在于,所述数据备份性能的优化装置包括:
确定模块,用于根据待备份NAS服务器访问路径和目标备份系统的可访问路径确定待备份子路径;
所述确定模块,还用于根据所述待备份子路径确定对应的挂载点;
判断模块,用于在所述挂载点为多个时,根据目标备份系统的配置参数确定对应的目标NAS挂载策略;
挂载模块,用于根据所述目标NAS挂载策略,使用对应NAS协议,将所述待备份子路径挂载至多个挂载点。
9.一种数据备份性能的优化设备,其特征在于,所述数据备份性能的优化设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的数据备份性能的优化程序,所述数据备份性能的优化程序配置有实现如权利要求1至7中任一项所述的数据备份性能的优化方法。
10.一种存储介质,其特征在于,所述存储介质上存储有数据备份性能的优化程序,所述数据备份性能的优化程序被处理器执行时实现如权利要求1至7中任一项所述的数据备份性能的优化方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111627507.6A CN113986621B (zh) | 2021-12-29 | 2021-12-29 | 数据备份性能的优化方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111627507.6A CN113986621B (zh) | 2021-12-29 | 2021-12-29 | 数据备份性能的优化方法、装置、设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113986621A true CN113986621A (zh) | 2022-01-28 |
CN113986621B CN113986621B (zh) | 2022-03-25 |
Family
ID=79734834
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111627507.6A Active CN113986621B (zh) | 2021-12-29 | 2021-12-29 | 数据备份性能的优化方法、装置、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113986621B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116543822A (zh) * | 2023-05-15 | 2023-08-04 | 深圳市领德创科技有限公司 | 一种应用于固态硬盘的闪存测试及处理方法和系统 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050223278A1 (en) * | 2004-03-25 | 2005-10-06 | Nobuyuki Saika | Control system of NAS, backup method, and program therefor |
US20150286430A1 (en) * | 2014-04-02 | 2015-10-08 | International Business Machines Corporation | Efficient flashcopy backup and mount, clone, or restore collision avoidance using dynamic volume allocation from a shared resource pool |
CN106815298A (zh) * | 2016-12-09 | 2017-06-09 | 中电科华云信息技术有限公司 | 基于块存储的分布式共享文件系统 |
CN108874580A (zh) * | 2017-05-09 | 2018-11-23 | 上海爱数信息技术股份有限公司 | 一种数据库的并行备份的方法、系统、装置及介质 |
CN109344001A (zh) * | 2018-08-29 | 2019-02-15 | 广东微云科技股份有限公司 | 一种虚拟机文件的并发备份方法及系统 |
CN112148678A (zh) * | 2020-09-18 | 2020-12-29 | 苏州浪潮智能科技有限公司 | 一种文件访问方法、系统、设备以及介质 |
CN112187875A (zh) * | 2020-09-09 | 2021-01-05 | 苏州浪潮智能科技有限公司 | 一种分布式系统多目标集群挂载策略自动匹配方法、系统 |
-
2021
- 2021-12-29 CN CN202111627507.6A patent/CN113986621B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050223278A1 (en) * | 2004-03-25 | 2005-10-06 | Nobuyuki Saika | Control system of NAS, backup method, and program therefor |
US20150286430A1 (en) * | 2014-04-02 | 2015-10-08 | International Business Machines Corporation | Efficient flashcopy backup and mount, clone, or restore collision avoidance using dynamic volume allocation from a shared resource pool |
CN106815298A (zh) * | 2016-12-09 | 2017-06-09 | 中电科华云信息技术有限公司 | 基于块存储的分布式共享文件系统 |
CN108874580A (zh) * | 2017-05-09 | 2018-11-23 | 上海爱数信息技术股份有限公司 | 一种数据库的并行备份的方法、系统、装置及介质 |
CN109344001A (zh) * | 2018-08-29 | 2019-02-15 | 广东微云科技股份有限公司 | 一种虚拟机文件的并发备份方法及系统 |
CN112187875A (zh) * | 2020-09-09 | 2021-01-05 | 苏州浪潮智能科技有限公司 | 一种分布式系统多目标集群挂载策略自动匹配方法、系统 |
CN112148678A (zh) * | 2020-09-18 | 2020-12-29 | 苏州浪潮智能科技有限公司 | 一种文件访问方法、系统、设备以及介质 |
Non-Patent Citations (1)
Title |
---|
苏公瑾: "SAN和NAS融合的无线电容灾备份系统的设计与实现", 《中国优秀博硕士学位论文全文数据库(硕士)信息科技辑》 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116543822A (zh) * | 2023-05-15 | 2023-08-04 | 深圳市领德创科技有限公司 | 一种应用于固态硬盘的闪存测试及处理方法和系统 |
CN116543822B (zh) * | 2023-05-15 | 2024-04-05 | 深圳市领德创科技有限公司 | 一种应用于固态硬盘的闪存测试及处理方法和系统 |
Also Published As
Publication number | Publication date |
---|---|
CN113986621B (zh) | 2022-03-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11729073B2 (en) | Dynamic scaling of storage volumes for storage client file systems | |
US9983825B2 (en) | Efficient data volume replication for block-based storage | |
US10657061B1 (en) | Resource distribution using attributes of versioned hash rings | |
US10938668B1 (en) | Safe deployment using versioned hash rings | |
US10489422B2 (en) | Reducing data volume durability state for block-based storage | |
US9971823B2 (en) | Dynamic replica failure detection and healing | |
CN109791471B (zh) | 虚拟化外围装置处的非易失性存储装置 | |
US8516509B2 (en) | Methods and computer program products for monitoring system calls using safely removable system function table chaining | |
US20120290718A1 (en) | Methods and Computer Program Products for Collecting Storage Resource Performance Data Using File System Hooks | |
US20200272452A1 (en) | Automated transparent distribution of updates to server computer systems in a fleet | |
US20170153909A1 (en) | Methods and Devices for Acquiring Data Using Virtual Machine and Host Machine | |
US20150248247A1 (en) | Multi-mode hybrid storage drive | |
CN111885184A (zh) | 高并发场景下热点访问关键字处理方法和装置 | |
CN113986621B (zh) | 数据备份性能的优化方法、装置、设备及存储介质 | |
US9612776B2 (en) | Dynamically updated user data cache for persistent productivity | |
CN108829340B (zh) | 存储处理方法、装置、存储介质及处理器 | |
CN107844360B (zh) | 一种硬盘执行应用代码的方法及装置 | |
JP5884566B2 (ja) | バッチ処理システム、進捗状況確認装置、進捗状況確認方法、及びプログラム | |
CN114449040A (zh) | 基于云平台的配置下发方法及装置 | |
CN108959405B (zh) | 数据的强一致性读取方法及终端设备 | |
EP3374882B1 (en) | File system with distributed entity state | |
KR101754713B1 (ko) | 비대칭 분산 파일 시스템, 연산 분배 장치 및 방법 | |
US11210254B2 (en) | Methods, electronic devices, storage systems, and computer program products for storage management | |
CN109960682B (zh) | 快照点数据访问方法、装置、服务器及存储介质 | |
CN110442471B (zh) | 一种检测网络系统中内存信息的方法、设备和介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |