CN112835740A - 用于管理数据备份的方法、电子设备和计算机程序产品 - Google Patents

用于管理数据备份的方法、电子设备和计算机程序产品 Download PDF

Info

Publication number
CN112835740A
CN112835740A CN201911158177.3A CN201911158177A CN112835740A CN 112835740 A CN112835740 A CN 112835740A CN 201911158177 A CN201911158177 A CN 201911158177A CN 112835740 A CN112835740 A CN 112835740A
Authority
CN
China
Prior art keywords
performance parameters
backup
data
historical
historical performance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911158177.3A
Other languages
English (en)
Inventor
孙莉
郑庆霄
廖兰君
王靖
王雪清
白冰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
EMC Corp
Original Assignee
EMC IP Holding Co LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by EMC IP Holding Co LLC filed Critical EMC IP Holding Co LLC
Priority to CN201911158177.3A priority Critical patent/CN112835740A/zh
Priority to US16/838,667 priority patent/US11487629B2/en
Publication of CN112835740A publication Critical patent/CN112835740A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1446—Point-in-time backing up or restoration of persistent data
    • G06F11/1456—Hardware arrangements for backup
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1446—Point-in-time backing up or restoration of persistent data
    • G06F11/1448—Management of the data involved in backup or backup restore
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1446—Point-in-time backing up or restoration of persistent data
    • G06F11/1458—Management of the backup or restore process
    • G06F11/1469—Backup restoration techniques
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
    • G06F2201/80—Database-specific techniques

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本公开的实施例涉及用于管理数据备份的方法、电子设备和计算机程序产品。一种用于管理数据备份的方法包括：获取备份客户端在执行数据备份前的第一组性能参数，该备份客户端用于将数据发送至备份服务器进行备份，并且将关于已备份数据的信息记录在缓存中，以避免重复数据被发送至备份服务器；从备份客户端执行多次历史数据备份时所收集的多组历史性能参数中，确定与第一组性能参数的相似度较高的至少一组历史性能参数；从至少一组历史性能参数中确定指示最佳性能的一组历史性能参数；以及基于该组历史性能参数，调整缓存在数据备份期间的可用容量。本公开的实施例能够显著提高数据备份的性能。

Description

用于管理数据备份的方法、电子设备和计算机程序产品
技术领域
本公开的实施例总体涉及数据存储领域，具体涉及用于管理数据备份的方法、电子设备和计算机程序产品。
背景技术
数据备份系统通常包括备份客户端和备份服务器，其中备份客户端用于将要备份的数据发送至备份服务器进行备份。在支持去重(De-duplication)功能的数据备份系统中，备份客户端的存储器中可以设置有缓存，用于记录与已经发送至备份服务器的数据有关的信息，从而避免重复数据被发送至备份服务器。以此方式，备份客户端仅向备份服务器发送要备份的新数据进行备份，从而节省网络流量。缓存通常由备份客户端来管理，其可用容量(也即，缓存可占用的最大存储器大小)通常被设置为相对于备份客户端的总存储器大小的固定比值。然而，这样的机制往往无法适应环境变化，甚至在某些情况下可能严重影响数据备份系统的性能。
发明内容
本公开的实施例提供了用于管理数据备份的方法、电子设备和计算机程序产品。
在本公开的第一方面，提供了一种用于提供信息的方法。该方法包括：获取备份客户端在执行数据备份前的第一组性能参数，该备份客户端用于将数据发送至备份服务器进行备份，并且将关于已备份数据的信息记录在缓存中，以避免重复数据被发送至备份服务器；从备份客户端执行多次历史数据备份时所收集的多组历史性能参数中，确定与第一组性能参数的相似度较高的至少一组历史性能参数；从至少一组历史性能参数中确定指示最佳性能的一组历史性能参数；以及基于该组历史性能参数，调整缓存在数据备份期间的可用容量。
在本公开的第二方面，提供了一种电子设备。该设备包括至少一个处理单元和至少一个存储器。至少一个存储器被耦合到至少一个处理单元并且存储用于由至少一个处理单元执行的指令。该指令当由至少一个处理单元执行时使得设备执行动作，动作包括：获取备份客户端在执行数据备份前的第一组性能参数，该备份客户端用于将数据发送至备份服务器进行备份，并且将关于已备份数据的信息记录在缓存中，以避免重复数据被发送至备份服务器；从备份客户端执行多次历史数据备份时所收集的多组历史性能参数中，确定与第一组性能参数的相似度较高的至少一组历史性能参数；从至少一组历史性能参数中确定指示最佳性能的一组历史性能参数；以及基于该组历史性能参数，调整缓存在数据备份期间的可用容量。
在本公开的第三方面，提供了一种计算机程序产品。该计算机程序产品被有形地存储在非瞬态计算机存储介质中并且包括机器可执行指令。该机器可执行指令在由设备执行时使该设备执行根据本公开的第一方面所描述的方法的任意步骤。
提供发明内容部分是为了以简化的形式来介绍对概念的选择，它们在下文的具体实施方式中将被进一步描述。发明内容部分无意标识本公开的关键特征或必要特征，也无意限制本公开的范围。
附图说明
通过结合附图对本公开示例性实施例进行更详细的描述，本公开的上述以及其它目的、特征和优势将变得更加明显，其中，在本公开示例性实施例中，相同的参考标号通常代表相同部件。
图1示出了本公开的实施例能够在其中被实施的示例备份系统的框图；
图2示出了根据本公开的实施例的用于管理数据备份的示例方法的流程图；
图3示出了根据本公开的实施例的用于确定多组历史性能参数的示例方法的流程图；
图4示出了根据本公开的实施例的用于从多组历史性能参数中确定与当前性能参数的相似度较高的至少一组历史性能参数的示例方法的流程图；以及
图5示出了可以用来实施本公开内容的实施例的示例设备的示意性框图。
在各个附图中，相同或对应的标号表示相同或对应的部分。
具体实施方式
下面将参照附图更详细地描述本公开的优选实施例。虽然附图中显示了本公开的优选实施例，然而应该理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了使本公开更加透彻和完整，并且能够将本公开的范围完整地传达给本领域的技术人员。
在本文中使用的术语“包括”及其变形表示开放性包括，即“包括但不限于”。除非特别申明，术语“或”表示“和/或”。术语“基于”表示“至少部分地基于”。术语“一个示例实施例”和“一个实施例”表示“至少一个示例实施例”。术语“另一实施例”表示“至少一个另外的实施例”。术语“第一”、“第二”等等可以指代不同的或相同的对象。下文还可能包括其他明确的和隐含的定义。
如上所述，数据备份系统通常包括备份客户端和备份服务器，其中备份客户端用于将要备份的数据发送至备份服务器进行备份。在支持去重(De-duplication)功能的数据备份系统中，备份客户端的存储器中可以设置有缓存，用于记录与已经发送至备份服务器的数据有关的信息，从而避免重复数据被发送至备份服务器。以此方式，备份客户端仅向备份服务器发送要备份的新数据进行备份，从而节省网络流量。
缓存通常由备份客户端来管理。在一些传统方案中，缓存实际占用的存储器大小(也称为缓存的“实际容量”)可以根据需要而自动增加，然而缓存可占用的最大存储器大小(也称为缓存的“可用容量”，即缓存实际容量的最大值)通常被设置为相对于备份客户端的总存储器大小的固定比值。这样的机制往往无法适应不同环境的要求。例如，当备份客户端处大量存储器被使用并且CPU占用率较高时，缓存的可用容量无法自动降低以提高系统的性能。又例如，如果备份客户端处存在大量空闲的存储器资源，而缓存的实际容量已经达到其上限时，这些空闲的存储器资源无法被缓存利用以进一步提高系统的性能。不同类型的备份客户端往往具有不同的系统资源，如CPU、存储器、操作系统等。这些是影响备份客户端的存储器占用的重要因素，而在传统方案中在设置缓存的可用容量时并未考虑到这些因素。此外，不同种类的数据往往具有不同的重复率，其所对应的缓存容量应当是不同的。如果将缓存的可用容量设置为相对于总存储器大小的固定比值，则无法实现对存储器和/或缓存的充分利用。
本公开的实施例提出了一种用于管理数据备份的方案，以解决上述问题和/或其他潜在问题。该方案获取备份客户端在执行数据备份前的第一组性能参数，然后从备份客户端执行多次历史数据备份时所收集的多组历史性能参数中确定与第一组性能参数的相似度较高的至少一组历史性能参数。该方案进一步从至少一组历史性能参数中确定指示最佳性能的一组历史性能参数，并且基于该组历史性能参数，调整缓存在数据备份期间的可用容量。以此方式，本公开的实施例能够显著提高数据备份系统的性能。
以下将进一步结合附图来详细描述本公开的实施例。图1示出了本公开的实施例能够在其中被实现的示例备份系统100的框图。应当理解，仅出于示例性的目的描述示例备份系统100的结构，而不暗示对于本公开的范围的任何限制。
如图1所示，备份系统100可以包括备份服务器110和备份客户端120。例如，备份服务器110和备份客户端120可以分别利用任何物理主机、虚拟机或其他设备来实现。备份服务器110可以与备份客户端120经由网络(例如，互联网)彼此通信。备份客户端120可以被配置为将要备份的数据发送至备份服务器110进行备份。
备份系统100例如可以支持去重功能。如图1所示，备份客户端120可以(例如，在其存储器中)设置有缓存121，用于记录与已经被发送至备份服务器110的数据有关的信息(例如，哈希值)。在每次数据备份前，备份客户端120可以通过查询缓存121来确定其要备份的数据是否已经被发送至备份服务器110。如果备份客户端120确定其要备份的数据已经被发送至备份服务器110，则备份客户端120可以不再向备份服务器110发送该数据。如果备份客户端120确定其要备份的数据未被发送至备份服务器110，则备份客户端120可以向备份服务器110发送该数据以进行备份。以此方式，备份客户端120能够避免将重复数据发送至备份服务器110，从而节省网络带宽。
在一些实施例中，缓存121的实际容量可以被动态地调整。例如，随着被备份的数据的增加，缓存121的实际容量可以相应地增加，直至达到其上限(也即“可用容量”)。此时，如果新数据被备份至备份服务器110，则关于该新数据的信息(例如，哈希值)可以替换掉缓存121中记录的关于已备份数据的最老信息。
在一些实施例中，缓存121的可用容量(也即，缓存121的实际容量的最大值)可以被动态地调整，以提高备份系统的性能。在一些实施例中，当备份客户端120处的资源使用情况(例如，存储器空闲率或CPU空闲率等)发生变化并且变化幅度超过预定阈值时，备份客户端120可以动态地调整缓存121的可用容量。
在一些实施例中，为了实现对缓存121的可用容量的动态调整，备份客户端120可以将执行每次数据备份时的相应性能参数记录在列表中。在一些实施例中，当备份客户端120处的资源使用情况(例如，存储器空闲率或CPU空闲率等)发生变化并且变化幅度超过预定阈值时，备份客户端120可以基于列表中所记录的历史性能参数来调整缓存121的可用容量。
在一些实施例中，备份客户端120可以被配置为针对一种或多种数据类型(诸如，数据库数据、虚拟机数据和/或文件系统数据等)进行备份。针对每种数据类型，备份客户端120可以将执行针对该数据类型的每次数据备份时的相应性能参数记录在与该数据类型相关联的列表中。在一些实施例中，响应于备份客户端120处的资源使用情况(例如，存储器空闲率或CPU空闲率等)发生变化并且变化幅度超过预定阈值，在备份客户端120执行针对该数据类型的数据备份前，备份客户端120可以基于与该数据类型相关联的列表中所记录的历史性能参数来调整在针对该数据类型的数据备份期间缓存121的可用容量。
图2示出了根据本公开的实施例的用于管理数据备份的示例方法200的流程图。方法200可以在如图1所示的备份客户端120处执行。在一些实施例中，备份客户端120可以在执行每次数据备份之前执行方法200。备选地或附加地，在一些实施例中，当备份客户端120处的资源使用情况(例如，存储器空闲率或CPU空闲率)发生变化并且变化幅度超过预定阈值时，方法200可以被执行。应当理解，方法200还可以包括未示出的附加框和/或可以省略所示出的框，本公开的范围在此方面不受限制。以下结合图1来详细描述方法200。
如图2所示，在框210处，备份客户端120获取备份客户端120在执行数据备份前的第一组性能参数。在一些实施例中，第一组性能参数可以至少包括备份客户端120处的存储器使用情况(例如，存储器占用率和/或存储器空闲率等)、CPU使用情况(例如，CPU占用率和/或CPU空闲率等)、当前设置的缓存121的可用容量、以及备份客户端120处的数据访问性能(例如，数据访问速度等)。备份客户端120可以利用任何已知或将来开发的手段(例如，经由系统提供的相应应用编程接口或其他手段)来获取备份客户端120的性能参数。
在框220处，备份客户端120从执行多次历史数据备份时所收集的多组历史性能参数中，确定与第一组性能参数的相似度较高的至少一组历史性能参数。
在一些实施例中，在确定与第一组性能参数的相似度较高的至少一组历史性能参数之前，备份客户端120可以基于要执行的数据备份所针对的数据类型来获取多组历史性能参数。
图3示出了根据本公开的实施例的用于获取多组历史性能参数的示例方法300的流程图。方法300可以在如图1所示的备份客户端120处执行。
如图3所示，在框310处，备份客户端120确定要执行的数据备份所针对的数据类型。数据类型的示例包括但不限于数据库数据、虚拟机数据、文件系统数据等。在一些实施例中，每次数据备份可以仅针对数据库数据、虚拟机数据、文件系统数据等中的一种数据类型。
在框320处，备份客户端120获取备份客户端120针对该数据类型执行多次历史数据备份时所收集的多组历史性能参数。在一些实施例中，如上所述，备份客户端120可以将执行针对每种数据类型的数据备份时的相应性能参数记录在与该数据类型相关联的列表中。备份客户端120可以从相应列表中获取多组历史性能参数。
在一些实施例中，多组历史性能参数中的每一组可以至少包括：备份客户端120在执行对应历史数据备份时的平均存储器使用情况(例如，平均存储器占用率和/或平均存储器空闲率等)；备份客户端120在执行对应历史数据备份时的平均CPU使用情况(例如，平均CPU占用率和/或平均CPU空闲率等)；缓存121在对应历史数据备份期间的可用容量；以及备份客户端120在执行对应历史数据备份时的平均数据访问性能(例如，平均数据访问速度等)。
图4示出了根据本公开的实施例的用于获取多组历史性能参数的示例方法400的流程图。方法400可以在如图1所示的备份客户端120处执行。
如图4所示，在框410处，备份客户端120确定第一组性能参数与多组历史性能参数之间的相应相似度。在一些实施例中，针对多组历史性能参数中给定的一组历史性能参数，备份客户端120可以至少基于给定的一组历史性能参数中的平均存储器使用情况和平均CPU使用情况、以及第一组性能参数中的存储器使用情况和CPU使用情况，确定第一组性能参数与给定的一组历史性能参数之间的相似度。
在一些实施例中，备份客户端120可以至少基于给定的一组历史性能参数中的平均存储器使用情况和平均CPU使用情况、以及第一组性能参数中的存储器使用情况和CPU使用情况，来确定第一组性能参数与给定的一组历史性能参数之间的欧式(Euclidean)距离：
Figure BDA0002285364720000081
其中，x表示第一组性能参数，y表示给定的一组历史性能参数，S1x表示第一组性能参数中的存储器使用情况(例如，存储器空闲率)，S2x表示第一组性能参数中的CPU使用情况(例如，CPU空闲率)，S1y表示给定的一组历史性能参数中的平均存储器使用情况(例如，平均存储器空闲率)，S2y表示给定的一组历史性能参数中的平均CPU使用情况(例如，平均CPU空闲率)。欧式距离D(x,y)越小，则表示第一组性能参数与给定的一组历史性能参数之间的相似度越高。
备选地，在一些实施例中，备份客户端120可以至少基于给定的一组历史性能参数中的平均存储器使用情况和平均CPU使用情况、以及第一组性能参数中的存储器使用情况和CPU使用情况，来确定第一组性能参数与给定的一组历史性能参数之间的曼哈顿(Manhattan)距离：
Figure BDA0002285364720000082
其中，x表示第一组性能参数，y表示给定的一组历史性能参数，S1x表示第一组性能参数中的存储器使用情况(例如，存储器空闲率)，S2x表示第一组性能参数中的CPU使用情况(例如，CPU空闲率)，S1y表示给定的一组历史性能参数中的平均存储器使用情况(例如，平均存储器空闲率)，S2y表示给定的一组历史性能参数中的平均CPU使用情况(例如，平均CPU空闲率)。曼哈顿距离D(x,y)越小，则表示第一组性能参数与给定的一组历史性能参数之间的相似度越高。
在框420处，备份客户端120基于第一组性能参数与多组历史性能参数之间的相应相似度，对多组历史性能参数进行排序。然后，在框430处，备份客户端120基于排序的结果，从多组历史性能参数中选择与第一组性能参数的相似度较高的至少一组历史性能参数。在一些实施例中，备份客户端120可以基于排序的结果从多组历史性能参数中选择预定数目(例如，10)组历史性能参数。
返回图2，在框230处，备份客户端120从至少一组历史性能参数中确定指示最佳性能的一组历史性能参数。在一些实施例中，备份客户端120可以从至少一组历史性能参数中确定指示最佳平均数据访问性能(例如，最高数据访问速度)的一组历史性能参数。
在框240处，备份客户端120基于该组历史性能参数，调整缓存121在将要执行的数据备份期间的可用容量。例如，该组历史性能参数可以指示在对应历史数据备份期间所设置的缓存121的可用容量。在一些实施例中，备份客户端120可以基于该组历史性能参数所指示的缓存121在对应历史数据备份期间的可用容量，来调整缓存121在将要执行的数据备份期间的可用容量。
应当理解，由于该组历史性能参数所对应的系统资源使用情况与系统当前资源使用情况类似，并且该组历史性能参数指示所设置的缓存121的可用容量能够实现最佳平均数据访问性能，因此通过基于该组历史性能参数所指示的缓存121的可用容量来调整缓存121在将要执行的数据备份期间的可用容量，能够实现较好的数据访问性能。
附加地，备份客户端120基于经调整的缓存121的可用容量来执行当前数据备份，并且收集备份客户端在执行当前数据备份时的第二组性能参数。类似地，第二组性能参数可以至少包括：备份客户端120在执行该数据备份时的平均存储器使用情况(例如，平均存储器占用率和/或平均存储器空闲率等)；备份客户端120在执行该数据备份时的平均CPU使用情况(例如，平均CPU占用率和/或平均CPU空闲率等)；经调整的缓存121的可用容量；以及备份客户端120在执行该数据备份时的平均数据访问性能(例如，平均数据访问速度等)。第二组性能参数可以被记录在相应列表中，以供后续调整缓存121容量时使用。
通过以上描述能够看出，本公开的实施例提出了一种管理备份客户端处的缓存的方案。该方案获取备份客户端在执行数据备份前的第一组性能参数，然后从备份客户端执行多次历史数据备份时所收集的多组历史性能参数中确定与第一组性能参数的相似度较高的至少一组历史性能参数。该方案进一步从至少一组历史性能参数中确定指示最佳性能的一组历史性能参数，并且基于该组历史性能参数，调整缓存在数据备份期间的可用容量。以此方式，备份客户端能够智能地调整缓存可占用的最大存储器大小，以动态适应系统资源的变化。此外，备份客户端将更好地利用可用的系统资源，从而提高数据备份的性能。
与传统方案相比，该方案具有以下优点：(1)该方案考虑到不同系统资源对存储器占用的影响并且考虑到不同数据类型的数据重复率，因此提高了数据备份的性能；(2)随着时间的流逝和历史记录的增加，该方案将通过对历史记录的持续学习而变得越来越智能；(3)由于缓存可占用的最大存储器大小将被设置为最合适的值，因此系统资源将得到充分利用，从而提高备份客户端的去重能力；(4)由于缓存可占用的最大存储器大小将被设置为最合适的值，并且备份客户端的去重能力得以提高，因此可以进一步节省用于数据备份的网络流量；(5)受益于以上优点，备份系统的客户满意度将得到提高。
图5示出了可以用来实施本公开内容的实施例的示例设备500的示意性框图。例如，如图1所示的备份服务器110和/或备份客户端120可以由设备500实施。如图5所示，设备500包括中央处理单元(CPU)501，其可以根据存储在只读存储器(ROM)502中的计算机程序指令或者从存储页面508加载到随机访问存储器(RAM)503中的计算机程序指令，来执行各种适当的动作和处理。在RAM 503中，还可存储设备500操作所需的各种程序和数据。CPU501、ROM 502以及RAM 503通过总线504彼此相连。输入/输出(I/O)接口505也连接至总线504。
设备500中的多个部件连接至I/O接口505，包括：输入单元506，例如键盘、鼠标等；输出单元507，例如各种类型的显示器、扬声器等；存储页面508，例如磁盘、光盘等；以及通信单元509，例如网卡、调制解调器、无线通信收发机等。通信单元509允许设备500通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
上文所描述的各个过程和处理，例如方法200、300和/或400，可由处理单元501执行。例如，在一些实施例中，方法200、300和/或400可被实现为计算机软件程序，其被有形地包含于机器可读介质，例如存储页面508。在一些实施例中，计算机程序的部分或者全部可以经由ROM 502和/或通信单元509而被载入和/或安装到设备500上。当计算机程序被加载到RAM 503并由CPU 501执行时，可以执行上文描述的方法200、300和/或400的一个或多个动作。
本公开可以是方法、设备、系统和/或计算机程序产品。计算机程序产品可以包括计算机可读存储介质，其上载有用于执行本公开的各个方面的计算机可读程序指令。
计算机可读存储介质可以是可以保持和存储由指令执行设备使用的指令的有形设备。计算机可读存储介质例如可以是——但不限于——电存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备或者上述的任意合适的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、静态随机存取存储器(SRAM)、便携式压缩盘只读存储器(CD-ROM)、数字多功能盘(DVD)、记忆棒、软盘、机械编码设备、例如其上存储有指令的打孔卡或凹槽内凸起结构、以及上述的任意合适的组合。这里所使用的计算机可读存储介质不被解释为瞬时信号本身，诸如无线电波或者其他自由传播的电磁波、通过波导或其他传输媒介传播的电磁波(例如，通过光纤电缆的光脉冲)、或者通过电线传输的电信号。
这里所描述的计算机可读程序指令可以从计算机可读存储介质下载到各个计算/处理设备，或者通过网络、例如因特网、局域网、广域网和/或无线网下载到外部计算机或外部存储设备。网络可以包括铜传输电缆、光纤传输、无线传输、路由器、防火墙、交换机、网关计算机和/或边缘服务器。每个计算/处理设备中的网络适配卡或者网络接口从网络接收计算机可读程序指令，并转发该计算机可读程序指令，以供存储在各个计算/处理设备中的计算机可读存储介质中。
用于执行本公开操作的计算机程序指令可以是汇编指令、指令集架构(ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、或者以一种或多种编程语言的任意组合编写的源代码或目标代码，所述编程语言包括面向对象的编程语言—诸如Smalltalk、C++等，以及常规的过程式编程语言—诸如“C”语言或类似的编程语言。计算机可读程序指令可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络—包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。在一些实施例中，通过利用计算机可读程序指令的状态信息来个性化定制电子电路，例如可编程逻辑电路、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA)，该电子电路可以执行计算机可读程序指令，从而实现本公开的各个方面。
这里参照根据本公开实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图描述了本公开的各个方面。应当理解，流程图和/或框图的每个方框以及流程图和/或框图中各方框的组合，都可以由计算机可读程序指令实现。
这些计算机可读程序指令可以提供给通用计算机、专用计算机或其它可编程数据处理装置的处理单元，从而生产出一种机器，使得这些指令在通过计算机或其它可编程数据处理装置的处理单元执行时，产生了实现流程图和/或框图中的一个或多个方框中规定的功能/动作的装置。也可以把这些计算机可读程序指令存储在计算机可读存储介质中，这些指令使得计算机、可编程数据处理装置和/或其他设备以特定方式工作，从而，存储有指令的计算机可读介质则包括一个制造品，其包括实现流程图和/或框图中的一个或多个方框中规定的功能/动作的各个方面的指令。
也可以把计算机可读程序指令加载到计算机、其它可编程数据处理装置、或其它设备上，使得在计算机、其它可编程数据处理装置或其它设备上执行一系列操作步骤，以产生计算机实现的过程，从而使得在计算机、其它可编程数据处理装置、或其它设备上执行的指令实现流程图和/或框图中的一个或多个方框中规定的功能/动作。
附图中的流程图和框图显示了根据本公开的多个实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或指令的一部分，所述模块、程序段或指令的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
以上已经描述了本公开的各实施例，上述说明是示例性的，并非穷尽性的，并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下，对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择，旨在最好地解释各实施例的原理、实际应用或对市场中的技术的技术改进，或者使本技术领域的其它普通技术人员能理解本文披露的各实施例。

Claims (21)

1.一种用于管理数据备份的方法，包括：
获取备份客户端在执行数据备份前的第一组性能参数，所述备份客户端用于将数据发送至备份服务器进行备份，并且将关于已备份数据的信息记录在缓存中，以避免重复数据被发送至所述备份服务器；
从所述备份客户端执行多次历史数据备份时所收集的多组历史性能参数中，确定与所述第一组性能参数的相似度较高的至少一组历史性能参数；
从所述至少一组历史性能参数中确定指示最佳性能的一组历史性能参数；以及
基于所述一组历史性能参数，调整所述缓存在所述数据备份期间的可用容量。
2.根据权利要求1所述的方法，还包括：
在确定所述至少一组历史性能参数之前，
确定所述数据备份所针对的数据类型；以及
获取所述备份客户端针对所述数据类型执行所述多次历史数据备份时所收集的所述多组历史性能参数。
3.根据权利要求1所述的方法，其中所述多组历史性能参数之一至少包括：
所述备份客户端在执行对应历史数据备份时的平均存储器使用情况；
所述备份客户端在执行所述对应历史数据备份时的平均CPU使用情况；
所述缓存在所述对应历史数据备份期间的可用容量；以及
所述备份客户端在执行所述对应历史数据备份时的平均数据访问性能。
4.根据权利要求3所述的方法，其中所述第一组性能参数至少包括：
所述备份客户端处的存储器使用情况；
所述备份客户端处的CPU使用情况；
所述缓存的可用容量；以及
所述备份客户端处的数据访问性能。
5.根据权利要求4所述的方法，其中确定所述至少一组历史性能参数包括：
确定所述第一组性能参数与所述多组历史性能参数之间的相应相似度；
基于所述第一组性能参数与所述多组历史性能参数之间的相应相似度，对所述多组历史性能参数进行排序；以及
基于所述排序的结果，从所述多组历史性能参数中选择与所述第一组性能参数的相似度较高的所述至少一组历史性能参数。
6.根据权利要求5所述的方法，其中确定所述第一组性能参数与所述多组历史性能参数之间的相应相似度包括：
针对所述多组历史性能参数中给定的一组历史性能参数，
至少基于所述给定的一组历史性能参数中的所述平均存储器使用情况和所述平均CPU使用情况、以及所述第一组性能参数中的所述存储器使用情况和所述CPU使用情况，确定所述第一组性能参数与所述给定的一组历史性能参数之间的相似度。
7.根据权利要求3所述的方法，其中确定指示最佳性能的所述一组历史性能参数包括：
从所述至少一组历史性能参数中确定与最佳平均数据访问性能相关联的所述一组历史性能参数。
8.根据权利要求1所述的方法，其中所述一组历史性能参数指示所述缓存在对应历史数据备份期间的可用容量，并且调整所述缓存在所述数据备份期间的可用容量包括：
基于所述缓存在所述对应历史数据备份期间的所述可用容量，调整调整所述缓存在所述数据备份期间的所述可用容量。
9.根据权利要求1所述的方法，还包括：
基于经调整的所述缓存的所述可用容量，执行所述数据备份；以及
收集所述备份客户端在执行所述数据备份时的第二组性能参数。
10.根据权利要求9所述的方法，其中所述第二组性能参数至少包括：
所述备份客户端在执行所述数据备份时的平均存储器使用情况；
所述备份客户端在执行所述数据备份时的平均CPU使用情况；
经调整的所述缓存的所述可用容量；以及
所述备份客户端在执行所述数据备份时的平均数据访问性能。
11.一种电子设备，包括：
至少一个处理单元；
至少一个存储器，所述至少一个存储器被耦合到所述至少一个处理单元并且存储用于由所述至少一个处理单元执行的指令，所述指令当由所述至少一个处理单元执行时，使得所述设备执行动作，所述动作包括：
获取备份客户端在执行数据备份前的第一组性能参数，所述备份客户端用于将数据发送至备份服务器进行备份，并且将关于已备份数据的信息记录在缓存中，以避免重复数据被发送至所述备份服务器；
从所述备份客户端执行多次历史数据备份时所收集的多组历史性能参数中，确定与所述第一组性能参数的相似度较高的至少一组历史性能参数；
从所述至少一组历史性能参数中确定指示最佳性能的一组历史性能参数；以及
基于所述一组历史性能参数，调整所述缓存在所述数据备份期间的可用容量。
12.根据权利要求11所述的设备，其中所述动作还包括：
在确定所述至少一组历史性能参数之前，
确定所述数据备份所针对的数据类型；以及
获取所述备份客户端针对所述数据类型执行所述多次历史数据备份时所收集的所述多组历史性能参数。
13.根据权利要求11所述的设备，其中所述多组历史性能参数之一至少包括：
所述备份客户端在执行对应历史数据备份时的平均存储器使用情况；
所述备份客户端在执行所述对应历史数据备份时的平均CPU使用情况；
所述缓存在所述对应历史数据备份期间的可用容量；以及
所述备份客户端在执行所述对应历史数据备份时的平均数据访问性能。
14.根据权利要求13所述的设备，其中所述第一组性能参数至少包括：
所述备份客户端处的存储器使用情况；
所述备份客户端处的CPU使用情况；
所述缓存的可用容量；以及
所述备份客户端处的数据访问性能。
15.根据权利要求14所述的设备，其中确定所述至少一组历史性能参数包括：
确定所述第一组性能参数与所述多组历史性能参数之间的相应相似度；
基于所述第一组性能参数与所述多组历史性能参数之间的相应相似度，对所述多组历史性能参数进行排序；以及
基于所述排序的结果，从所述多组历史性能参数中选择与所述第一组性能参数的相似度较高的所述至少一组历史性能参数。
16.根据权利要求15所述的设备，其中确定所述第一组性能参数与所述多组历史性能参数之间的相应相似度包括：
针对所述多组历史性能参数中给定的一组历史性能参数，
至少基于所述给定的一组历史性能参数中的所述平均存储器使用情况和所述平均CPU使用情况、以及所述第一组性能参数中的所述存储器使用情况和所述CPU使用情况，确定所述第一组性能参数与所述给定的一组历史性能参数之间的相似度。
17.根据权利要求13所述的设备，其中确定指示最佳性能的所述一组历史性能参数包括：
从所述至少一组历史性能参数中确定与最佳平均数据访问性能相关联的所述一组历史性能参数。
18.根据权利要求11所述的设备，其中所述一组历史性能参数指示所述缓存在对应历史数据备份期间的可用容量，并且调整所述缓存在所述数据备份期间的可用容量包括：
基于所述缓存在所述对应历史数据备份期间的所述可用容量，调整调整所述缓存在所述数据备份期间的所述可用容量。
19.根据权利要求11所述的设备，其中所述动作还包括：
基于经调整的所述缓存的所述可用容量，执行所述数据备份；以及
收集所述备份客户端在执行所述数据备份时的第二组性能参数。
20.根据权利要求19所述的设备，其中所述第二组性能参数至少包括：
所述备份客户端在执行所述数据备份时的平均存储器使用情况；
所述备份客户端在执行所述数据备份时的平均CPU使用情况；
经调整的所述缓存的所述可用容量；以及
所述备份客户端在执行所述数据备份时的平均数据访问性能。
21.一种计算机程序产品，所述计算机程序产品被有形地存储在计算机存储介质中并且包括机器可执行指令，所述机器可执行指令在由设备执行时使所述设备执行根据权利要求1-10中的任一项所述的方法。
CN201911158177.3A 2019-11-22 2019-11-22 用于管理数据备份的方法、电子设备和计算机程序产品 Pending CN112835740A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201911158177.3A CN112835740A (zh) 2019-11-22 2019-11-22 用于管理数据备份的方法、电子设备和计算机程序产品
US16/838,667 US11487629B2 (en) 2019-11-22 2020-04-02 Method, device and computer program product for managing data backup

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911158177.3A CN112835740A (zh) 2019-11-22 2019-11-22 用于管理数据备份的方法、电子设备和计算机程序产品

Publications (1)

Publication Number Publication Date
CN112835740A true CN112835740A (zh) 2021-05-25

Family

ID=75921823

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911158177.3A Pending CN112835740A (zh) 2019-11-22 2019-11-22 用于管理数据备份的方法、电子设备和计算机程序产品

Country Status (2)

Country Link
US (1) US11487629B2 (zh)
CN (1) CN112835740A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113364814A (zh) * 2021-08-10 2021-09-07 北京翔东智能科技有限公司 基于rtp的抗弱网传输方法

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114040019B (zh) * 2021-11-09 2023-10-27 合肥城市云数据中心股份有限公司 一种基于客户端代理的备份灾备装置数据采集传输方法
CN115016433B (zh) * 2022-06-01 2024-06-28 哈尔滨工业大学（威海） 一种车载can总线流量异常检测方法及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103548003A (zh) * 2011-02-11 2014-01-29 赛门铁克公司 用于提高去重复系统备份性能的客户端侧指纹缓存的过程和方法
CN104581779A (zh) * 2014-12-11 2015-04-29 华为技术有限公司 一种业务处理方法以及装置
US20180232162A1 (en) * 2017-02-13 2018-08-16 International Business Machines Corporation Headless resilient backup and restore software ecosystem
CN109213694A (zh) * 2017-06-30 2019-01-15 伊姆西Ip控股有限责任公司 用于缓存管理的方法和设备
CN110300134A (zh) * 2018-03-22 2019-10-01 杭州海康威视系统技术有限公司 云存储资源池的存储空间调整方法、装置及云存储系统

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20210240575A1 (en) * 2015-01-13 2021-08-05 Wells Fargo Bank, N.A. Dynamic backup management
US9800466B1 (en) * 2015-06-12 2017-10-24 Amazon Technologies, Inc. Tunable parameter settings for a distributed application
US10871922B2 (en) * 2018-05-22 2020-12-22 Pure Storage, Inc. Integrated storage management between storage systems and container orchestrators
US11036610B2 (en) * 2019-05-31 2021-06-15 Apple Inc. Logging techniques for third party application data
US11669400B2 (en) * 2019-08-28 2023-06-06 Commvault Systems, Inc. Lightweight metadata handling for file indexing and live browse of backup copies

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103548003A (zh) * 2011-02-11 2014-01-29 赛门铁克公司 用于提高去重复系统备份性能的客户端侧指纹缓存的过程和方法
CN104581779A (zh) * 2014-12-11 2015-04-29 华为技术有限公司 一种业务处理方法以及装置
US20180232162A1 (en) * 2017-02-13 2018-08-16 International Business Machines Corporation Headless resilient backup and restore software ecosystem
CN109213694A (zh) * 2017-06-30 2019-01-15 伊姆西Ip控股有限责任公司 用于缓存管理的方法和设备
CN110300134A (zh) * 2018-03-22 2019-10-01 杭州海康威视系统技术有限公司 云存储资源池的存储空间调整方法、装置及云存储系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113364814A (zh) * 2021-08-10 2021-09-07 北京翔东智能科技有限公司 基于rtp的抗弱网传输方法
CN113364814B (zh) * 2021-08-10 2021-11-30 北京翔东智能科技有限公司 基于rtp的抗弱网传输方法

Also Published As

Publication number Publication date
US11487629B2 (en) 2022-11-01
US20210157683A1 (en) 2021-05-27

Similar Documents

Publication Publication Date Title
US10795615B2 (en) Method and device for storage management in a hierarchical storage system
CN108733507B (zh) 文件备份和恢复的方法和设备
CN107870728B (zh) 用于移动数据的方法和设备
CN112748863B (zh) 用于处理数据的方法、电子设备和计算机程序产品
CN110737399B (zh) 用于管理存储系统的方法、设备和计算机程序产品
CN112835740A (zh) 用于管理数据备份的方法、电子设备和计算机程序产品
US10540238B2 (en) Adjusting replication operations in a distributed environment
CN111143113B (zh) 复制元数据的方法、电子设备和计算机程序产品
CN112749145A (zh) 存储和访问数据的方法、设备和计算机程序产品
CN112068765A (zh) 管理存储系统的方法、设备和计算机程序产品
CN112148644A (zh) 处理输入/输出请求的方法、装置和计算机程序产品
CN111158837B (zh) 银行软件功能界面生成方法和装置
CN114647363A (zh) 用于数据处理的方法、电子设备和计算机程序产品
US10761940B2 (en) Method, device and program product for reducing data recovery time of storage system
CN113742131A (zh) 用于存储管理的方法、电子设备和计算机程序产品
CN112306371A (zh) 存储管理的方法、设备和计算机程序产品
US11662927B2 (en) Redirecting access requests between access engines of respective disk management devices
CN112667434B (zh) 用于恢复数据的方法、装置和计算机程序产品
US11321205B2 (en) Enterprise-scale time series graphite backend infrastructure
US10712959B2 (en) Method, device and computer program product for storing data
CN114691011A (zh) 管理数据块的方法、电子设备和计算机程序产品
CN113297003A (zh) 管理备份数据的方法、电子设备和计算机程序产品
CN112148551A (zh) 用于确定存储系统的使用变化率的方法、设备和计算机程序产品
CN111213130A (zh) 基于分散位置的去重的性能改进
CN114063891B (zh) 管理数据传输的方法、设备和计算机程序产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination