CN115599605A - 一种边缘节点的数据备份方法、系统及相关组件 - Google Patents
一种边缘节点的数据备份方法、系统及相关组件 Download PDFInfo
- Publication number
- CN115599605A CN115599605A CN202211378806.5A CN202211378806A CN115599605A CN 115599605 A CN115599605 A CN 115599605A CN 202211378806 A CN202211378806 A CN 202211378806A CN 115599605 A CN115599605 A CN 115599605A
- Authority
- CN
- China
- Prior art keywords
- backup
- data
- backed
- node
- space
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1448—Management of the data involved in backup or backup restore
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1458—Management of the backup or restore process
- G06F11/1464—Management of the backup or restore process for networked environments
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请公开了一种边缘节点的数据备份方法、系统及相关组件，涉及云平台领域，应用于集群中任一边缘节点，该方法包括：获取集群中边缘节点与其他节点的网络连接状态；根据网络连接状态，在其他节点中确定为边缘节点提供空余备份空间的备份节点，并将所有备份节点的空余备份空间组成节点组备份池；获取边缘节点内待备份应用对应的备份策略；根据备份策略确定备份位置；备份位置包括本地备份空间、和/或节点组备份池、和/或云端备份池；确定待备份数据；根据备份策略，将待备份数据分级备份到对应的备份位置。本申请应用的待备份数据到不同备份位置的距离、备份时间、备份数据量均存在级别上的差异，保证了边缘节点中数据备份高可用。
Description
技术领域
本发明涉及云平台领域，特别涉及一种边缘节点的数据备份方法、系统及相关组件。
背景技术
随着边缘计算的不断发展，越来越多的用户将原本部署在云上的应用部署到边缘侧，以解决现场到中心云的网络带宽低和时延高等问题。业务连续性对于应用运行极为重要，一般通过备份实现，传统云计算模式下，应用部署在数据中心内，通过存储系统的远程复制或第三方软件将本地数据复制到异地备份中心。边缘场景下，业务连续性更加重要，这是因为边缘的环境比数据中心更为恶劣，硬件或软件发生故障的概率更高，备份恢复方案更为迫切。然而，由于边缘计算具有分散、网络不稳定、边缘场景复杂、不标准等特性，原本数据中心的备份方法难以应用在边缘计算中。
因此，如何提供一种解决上述技术问题的方案是目前本领域技术人员需要解决的问题。
发明内容
有鉴于此，本发明的目的在于提供一种边缘节点的数据备份方法、系统及相关组件，以提高边缘节点的业务连续性。其具体方案如下：
一种边缘节点的数据备份方法，应用于集群中任一边缘节点，该方法包括：
获取所述集群中所述边缘节点与其他节点的网络连接状态；
根据所述网络连接状态，在所述其他节点中确定为所述边缘节点提供空余备份空间的备份节点，并将所有所述备份节点的所述空余备份空间组成节点组备份池；
获取所述边缘节点内待备份应用对应的备份策略；
根据所述备份策略确定备份位置；所述备份位置包括所述边缘节点的本地备份空间、和/或所述节点组备份池、和/或所述集群的云端备份池；
确定所述待备份应用对应的待备份数据；
根据所述备份策略，将所述待备份数据分级备份到对应的所述备份位置。
优选的，所述确定所述待备份应用对应的待备份数据的过程，包括：
暂停所述待备份应用的写入操作；
将所述待备份应用对应的缓存数据刷新到所述边缘节点的硬盘中；
将所述硬盘中对应所述待备份应用的所有数据确定为所述待备份数据。
优选的，所述获取所述边缘节点内待备份应用对应的备份策略之前，还包括：
获取所述待备份应用的预估空间量；
确定与所述预估空间量相同大小的所述本地备份空间；
在所述边缘节点的总存储空间量中减去所述预估空间量、所述本地备份空间的空间量，得到所述空余备份空间的空间量。
优选的，所述根据所述备份策略，将所述待备份数据分级备份到对应的所述备份位置的过程，包括：
当所述备份位置包括所述节点组备份池，将所述待备份数据均匀备份到所有所述备份节点的所述空余备份空间中。
优选的，所述根据所述备份策略，将所述待备份数据分级备份到对应的所述备份位置的过程，包括：
当所述备份位置包括所述节点组备份池，根据每个所述备份节点的权重，对所述待备份数据进行分片，然后分别备份到对应的各所述备份节点的所述空余备份空间中。
优选的，所述权重根据每个所述备份节点的健康状态确定，所述健康状态包括：
所述备份节点的重启次数，和/或所述备份节点的所述网络连接状态，和/或所述备份节点的空余备份空间的空间量。
优选的，所述根据所述备份策略，将所述待备份数据分级备份到对应的所述备份位置的过程，包括：
按照所述本地备份空间最高、所述节点组备份池次之、所述云端备份池最低的优先级，根据所述备份策略，将所述待备份数据分级备份到对应的所述备份位置。
相应的，本申请还公开了一种边缘节点的数据备份系统，应用于集群中任一边缘节点，该系统包括：
状态获取模块，用于获取所述集群中所述边缘节点与其他节点的网络连接状态；
备份池确定模块，用于根据所述网络连接状态，在所述集群中确定为所述边缘节点提供备份服务的备份节点，还用于将所有所述备份节点的空余备份空间组成节点组备份池；
策略获取模块，用于获取所述边缘节点内待备份应用对应的备份策略，还用于根据所述备份策略确定备份位置；所述备份位置包括所述边缘节点的本地备份空间、和/或所述节点组备份池、和/或所述集群的云端备份池；
数据确定模块，用于确定所述待备份应用对应的待备份数据；
动作模块，用于根据所述备份策略，将所述待备份数据分级备份到对应的所述备份位置。
相应的，本申请还公开了一种电子设备，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序时实现如上文任一项所述边缘节点的数据备份系统方法的步骤。
相应的，本申请还公开了一种可读存储介质，所述可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上文任一项所述边缘节点的数据备份系统方法的步骤。
本申请公开了一种边缘节点的数据备份方法，根据边缘节点的网络拓扑和容器中应用对应的备份策略，确定不同的备份位置，包括本地备份空间、节点组备份池、云端备份池，应用的待备份数据到不同备份位置的距离、备份时间、备份数据量均存在级别上的差异，在边缘节点分散、网络不稳定、边缘场景复杂、不标准等的背景下，保证了边缘节点中数据备份高可用，从而后续可使用备份位置的数据实现边缘节点的应用恢复。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为本发明实施例中一种边缘节点的数据备份方法的步骤流程图；
图2为本发明实施例中一种备份位置的结构分布图；
图3为本发明实施例中一种边缘节点的数据备份系统的结构分布图；
图4为本发明实施例中一种电子设备的结构分布图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
传统云计算模式下，应用部署在数据中心内，通过存储系统的远程复制或第三方软件将本地数据复制到异地备份中心。由于边缘计算具有分散、网络不稳定、边缘场景复杂、不标准等特性，原本数据中心的备份方法难以应用在边缘计算中。
本申请公开了一种边缘节点的数据备份方法，根据边缘节点的网络拓扑和容器中应用对应的备份策略，确定不同的备份位置，包括本地备份空间、节点组备份池、云端备份池，应用的待备份数据到不同备份位置的距离、备份时间、备份数据量均存在级别上的差异，在边缘节点分散、网络不稳定、边缘场景复杂、不标准等的背景下，保证了边缘节点中数据备份高可用，从而后续可使用备份位置的数据实现边缘节点的应用恢复。
本发明实施例公开了一种边缘节点的数据备份方法，应用于集群中任一边缘节点，参见图1所示，该方法包括：
S1：获取集群中边缘节点与其他节点的网络连接状态；
S2：根据网络连接状态，在其他节点中确定为边缘节点提供空余备份空间的备份节点，并将所有备份节点的空余备份空间组成节点组备份池；
可以理解的是，集群中包括边缘节点和其他节点，根据边缘节点和其他节点的网络连接状态，选择可为边缘节点提供空余备份空间的节点作为备份节点，备份节点的确定条件可以包括与边缘节点直接连接和/或与边缘节点的连接距离不超过预设网络链路长度，这种确定条件下，不同的边缘节点对应的备份节点不同，边缘节点和备份节点内部需要记录具体的对应关系；备份节点的确定条件也可以是与边缘节点属于集群的同一个子集群，此时，对于一个子集群中的所有节点来说，每个节点的备份节点可直接从其所属子集群的所有节点中确定，或直接将子集群中除了该节点外的其他节点作为该节点的备份节点，备份节点的确定更为简单直接。
S3：获取边缘节点内待备份应用对应的备份策略；
S4：根据备份策略确定备份位置；备份位置包括边缘节点的本地备份空间、和/或节点组备份池、和/或集群的云端备份池；
具体的，边缘节点内待备份应用中备份策略由配置参数确定，存在多种情况，常见的备份策略有高、中、低三种可靠性不同的情况，高可靠性的备份策略中备份位置包括本地备份空间、节点组备份池和云端备份池，中可靠性的备份策略中备份位置包括本地备份空间和节点组备份池，低可靠性的备份策略中备份位置仅包括本地备份空间，备份时对每个备份位置分配一个备份副本。除了上述情况外，备份策略还可根据实际需求进行预先配置，此处不再赘述。
S5：确定待备份应用对应的待备份数据；
具体的，该步骤包括：
暂停待备份应用的写入操作；
将待备份应用对应的缓存数据刷新到边缘节点的硬盘中；
将硬盘中对应待备份应用的所有数据确定为待备份数据。
可以理解的是，确定待备份数据时需要暂停写入操作并将缓存数据落盘，否则可能出现备份数据不一致的情况。
S6：根据备份策略，将待备份数据分级备份到对应的备份位置。
具体的，备份之前还包括压缩待备份数据，备份可选用并发模式进行文件复制，从而提高复制效率。需要注意的是，备份位置包括节点组备份池时，待备份数据被分到节点组备份池的动作，通常以将待备份数据分片后分别分到节点组备份池对应的各空余备份空间。
进一步的，步骤S6具体可包括：
按照本地备份空间最高、节点组备份池次之、云端备份池最低的优先级，根据备份策略，将待备份数据分级备份到对应的备份位置。
可以理解的是，备份位置的优先级也可以设置为其他顺序，此处不作限制。当优先级中出现的备份位置不在备份策略中时，直接略过该备份位置即可。
可以理解的是，分级备份时，通常将待备份数据备份到优先级最高的备份位置，然后将优先级最高的备份位置中的备份数据被分到下一优先级的备份位置中，再将优先级次之的备份位置中的备份数据被分到下一优先级的备份位置中。但是如果某一备份位置与上一优先级的备份位置的网络连接断开，备份动作可以不遵循优先级规律，或通过其他链路通畅的节点转发备份数据到相应的备份位置，只要能够保证待备份数据准确完整地到达备份位置。
进一步的，本实施例中边缘节点内待备份应用通常为部署于边缘节点的容器中的待备份应用，容器中的待备份应用的数据包括元数据和业务数据，其中元数据将直接备份到云端备份池，业务数据作为待备份数据实施本实施例中的数据备份方法。边缘场景下，业务数据通常被存放到容器中待备份应用挂载的数据卷内，数据卷对应为边缘节点的一个文件系统目录。
进一步的，云端备份池中元数据的备份和恢复，均通过调用kubernetes的API(Application Programming Interface，应用程序接口)实现，进而可将待备份应用对应的元数据被分到云端备份池中，恢复时读取云端备份池中元数据备份数据然后重新在kubernetes中应用该资源，即可还原容器应用。
进一步的，边缘节点上部署有kubernetes的daemonset，用于执行本实施例中步骤S5和S6的动作，同时还可完成后续对于备份位置的备份数据的获取解压和恢复，恢复时一般从优先级最高的备份位置获取备份数据，如果备份数据不完整、错误或不存在，则可向下一优先级的备份位置获取相应的备份数据，直至获取到完整的备份数据位置。
本申请公开了一种边缘节点的数据备份方法，根据边缘节点的网络拓扑和容器中应用对应的备份策略，确定不同的备份位置，包括本地备份空间、节点组备份池、云端备份池，应用的待备份数据到不同备份位置的距离、备份时间、备份数据量均存在级别上的差异，在边缘节点分散、网络不稳定、边缘场景复杂、不标准等的背景下，保证了边缘节点中数据备份高可用，从而后续可使用备份位置的数据实现边缘节点的应用恢复。
本发明实施例公开了一种具体的边缘节点的数据备份方法，相对于上一实施例，本实施例对技术方案作了进一步的说明和优化。
具体的，获取边缘节点内待备份应用对应的备份策略之前，还包括：
获取待备份应用的预估空间量；
确定与预估空间量相同大小的本地备份空间；
在边缘节点的总存储空间量中减去预估空间量、本地备份空间的空间量，得到空余备份空间的空间量。
可以理解的是，边缘节点的总存储空间可分为提供给应用的应用存储空间、本地备份空间、空余备份空间这几部分，应用存储空间至少包括待备份应用的预估存储空间，其大小即为预估空间量，本地备份空间和应用存储空间的大小相同，总存储空间的剩余空间可用于空余备份空间，以便和其他节点的空余备份空间组成其他某一边缘节点的节点组备份池。
以图2为例，备份节点的确定条件为与边缘节点属于集群的同一个子集群，此时每个节点中的备份池逻辑架构如图2中所示。
在一些具体的实施例中，根据不同的空间配置，选择将待备份数据均分到节点组备份池的各空余备份空间，或将待备份数据根据权重分到不同的空余空间中。
在均分时，根据备份策略，将待备份数据分级备份到对应的备份位置的过程，包括：
当备份位置包括节点组备份池，将待备份数据均匀备份到所有备份节点的空余备份空间中。
在根据权重分配时，根据备份策略，将待备份数据分级备份到对应的备份位置的过程，包括：
当备份位置包括节点组备份池，根据每个备份节点的权重，对待备份数据进行分片，然后分别备份到对应的各备份节点的空余备份空间中。
进一步的，权重根据每个备份节点的健康状态确定，健康状态包括：
备份节点的重启次数，和/或备份节点的网络连接状态，和/或备份节点的空余备份空间的空间量。
可以理解的是，对于备份节点而言，重启次数越多，健康状态越差，网络连接状态越好，健康状态越好，空间量越大，可用于备份的能力越大，健康状态越好，除了这几个方面外，还可根据网络带宽占比、配置型号等不同的方向来确定健康状态，然后对健康状态更优的备份节点确定更高的权重，以使更多的待备份数据能够落到健康状态更优的备份节点，从而提高待备份数据的数据可靠性以及业务连续性。
相应的，本申请实施例还公开了一种边缘节点的数据备份系统，应用于集群中任一边缘节点，参见图3所示，该系统包括：
状态获取模块1，用于获取所述集群中所述边缘节点与其他节点的网络连接状态；
备份池确定模块2，用于根据所述网络连接状态，在所述集群中确定为所述边缘节点提供备份服务的备份节点，还用于将所有所述备份节点的空余备份空间组成节点组备份池；
策略获取模块3，用于获取所述边缘节点内待备份应用对应的备份策略，还用于根据所述备份策略确定备份位置；所述备份位置包括所述边缘节点的本地备份空间、和/或所述节点组备份池、和/或所述集群的云端备份池；
数据确定模块4，用于确定所述待备份应用对应的待备份数据；
动作模块5，用于根据所述备份策略，将所述待备份数据分级备份到对应的所述备份位置。
本申请实施例根据边缘节点的网络拓扑和容器中应用对应的备份策略，确定不同的备份位置，包括本地备份空间、节点组备份池、云端备份池，应用的待备份数据到不同备份位置的距离、备份时间、备份数据量均存在级别上的差异，在边缘节点分散、网络不稳定、边缘场景复杂、不标准等的背景下，保证了边缘节点中数据备份高可用，从而后续可使用备份位置的数据实现边缘节点的应用恢复。
可以理解的是，集群中包括边缘节点和其他节点，根据边缘节点和其他节点的网络连接状态，选择可为边缘节点提供空余备份空间的节点作为备份节点，备份节点的确定条件可以包括与边缘节点直接连接和/或与边缘节点的连接距离不超过预设网络链路长度，这种确定条件下，不同的边缘节点对应的备份节点不同，边缘节点和备份节点内部需要记录具体的对应关系；备份节点的确定条件也可以是与边缘节点属于集群的同一个子集群，此时，对于一个子集群中的所有节点来说，每个节点的备份节点可直接从其所属子集群的所有节点中确定，或直接将子集群中除了该节点外的其他节点作为该节点的备份节点，备份节点的确定更为简单直接。
具体的，边缘节点内待备份应用中备份策略由配置参数确定，存在多种情况，常见的备份策略有高、中、低三种可靠性不同的情况，高可靠性的备份策略中备份位置包括本地备份空间、节点组备份池和云端备份池，中可靠性的备份策略中备份位置包括本地备份空间和节点组备份池，低可靠性的备份策略中备份位置仅包括本地备份空间，备份时对每个备份位置分配一个备份副本。除了上述情况外，备份策略还可根据实际需求进行预先配置，此处不再赘述。
具体的，备份之前还包括压缩待备份数据，备份可选用并发模式进行文件复制，从而提高复制效率。需要注意的是，备份位置包括节点组备份池时，待备份数据被分到节点组备份池的动作，通常以将待备份数据分片后分别分到节点组备份池对应的各空余备份空间。
在一些具体的实施例中，所述确定所述待备份应用对应的待备份数据的过程，包括：
暂停所述待备份应用的写入操作；
将所述待备份应用对应的缓存数据刷新到所述边缘节点的硬盘中；
将所述硬盘中对应所述待备份应用的所有数据确定为所述待备份数据。
在一些具体的实施例中，所述策略获取模块3获取所述边缘节点内待备份应用对应的备份策略之前，还包括：
获取所述待备份应用的预估空间量；
确定与所述预估空间量相同大小的所述本地备份空间；
在所述边缘节点的总存储空间量中减去所述预估空间量、所述本地备份空间的空间量，得到所述空余备份空间的空间量。
在一些具体的实施例中，所述根据所述备份策略，将所述待备份数据分级备份到对应的所述备份位置的过程，包括：
当所述备份位置包括所述节点组备份池，将所述待备份数据均匀备份到所有所述备份节点的所述空余备份空间中。
在一些具体的实施例中，所述根据所述备份策略，将所述待备份数据分级备份到对应的所述备份位置的过程，包括：
当所述备份位置包括所述节点组备份池，根据每个所述备份节点的权重，对所述待备份数据进行分片，然后分别备份到对应的各所述备份节点的所述空余备份空间中。
在一些具体的实施例中，所述权重根据每个所述备份节点的健康状态确定，所述健康状态包括：
所述备份节点的重启次数，和/或所述备份节点的所述网络连接状态，和/或所述备份节点的空余备份空间的空间量。
在一些具体的实施例中，所述根据所述备份策略，将所述待备份数据分级备份到对应的所述备份位置的过程，包括：
按照所述本地备份空间最高、所述节点组备份池次之、所述云端备份池最低的优先级，根据所述备份策略，将所述待备份数据分级备份到对应的所述备份位置。
可以理解的是，备份位置的优先级也可以设置为其他顺序，此处不作限制。当优先级中出现的备份位置不在备份策略中时，直接略过该备份位置即可。
可以理解的是，分级备份时，通常将待备份数据备份到优先级最高的备份位置，然后将优先级最高的备份位置中的备份数据被分到下一优先级的备份位置中，再将优先级次之的备份位置中的备份数据被分到下一优先级的备份位置中。但是如果某一备份位置与上一优先级的备份位置的网络连接断开，备份动作可以不遵循优先级规律，或通过其他链路通畅的节点转发备份数据到相应的备份位置，只要能够保证待备份数据准确完整地到达备份位置。
本申请实施例还公开了一种电子设备，参见图4所示，包括处理器11和存储器12；其中，所述处理器11执行所述存储器12中保存的计算机程序时实现以下步骤：
获取所述集群中所述边缘节点与其他节点的网络连接状态；
根据所述网络连接状态，在所述其他节点中确定为所述边缘节点提供空余备份空间的备份节点，并将所有所述备份节点的所述空余备份空间组成节点组备份池；
获取所述边缘节点内待备份应用对应的备份策略；
根据所述备份策略确定备份位置；所述备份位置包括所述边缘节点的本地备份空间、和/或所述节点组备份池、和/或所述集群的云端备份池；
确定所述待备份应用对应的待备份数据；
根据所述备份策略，将所述待备份数据分级备份到对应的所述备份位置。
本申请实施例根据边缘节点的网络拓扑和容器中应用对应的备份策略，确定不同的备份位置，包括本地备份空间、节点组备份池、云端备份池，应用的待备份数据到不同备份位置的距离、备份时间、备份数据量均存在级别上的差异，在边缘节点分散、网络不稳定、边缘场景复杂、不标准等的背景下，保证了边缘节点中数据备份高可用，从而后续可使用备份位置的数据实现边缘节点的应用恢复。
在一些具体的实施例中，所述处理器11执行所述存储器12中保存的计算机子程序时，具体可以实现以下步骤：
暂停所述待备份应用的写入操作；
将所述待备份应用对应的缓存数据刷新到所述边缘节点的硬盘中；
将所述硬盘中对应所述待备份应用的所有数据确定为所述待备份数据。
在一些具体的实施例中，所述处理器11执行所述存储器12中保存的计算机子程序时，具体可以实现以下步骤：
获取所述待备份应用的预估空间量；
确定与所述预估空间量相同大小的所述本地备份空间；
在所述边缘节点的总存储空间量中减去所述预估空间量、所述本地备份空间的空间量，得到所述空余备份空间的空间量。
在一些具体的实施例中，所述处理器11执行所述存储器12中保存的计算机子程序时，具体可以实现以下步骤：
当所述备份位置包括所述节点组备份池，将所述待备份数据均匀备份到所有所述备份节点的所述空余备份空间中。
在一些具体的实施例中，所述处理器11执行所述存储器12中保存的计算机子程序时，具体可以实现以下步骤：
当所述备份位置包括所述节点组备份池，根据每个所述备份节点的权重，对所述待备份数据进行分片，然后分别备份到对应的各所述备份节点的所述空余备份空间中。
在一些具体的实施例中，所述权重根据每个所述备份节点的健康状态确定，所述健康状态包括：
所述备份节点的重启次数，和/或所述备份节点的所述网络连接状态，和/或所述备份节点的空余备份空间的空间量。
在一些具体的实施例中，所述处理器11执行所述存储器12中保存的计算机子程序时，具体可以实现以下步骤：
按照所述本地备份空间最高、所述节点组备份池次之、所述云端备份池最低的优先级，根据所述备份策略，将所述待备份数据分级备份到对应的所述备份位置。
进一步的，本实施例中的电子设备，还可以包括：
输入接口13，用于获取外界导入的计算机程序，并将获取到的计算机程序保存至所述存储器12中，还可以用于获取外界终端设备传输的各种指令和参数，并传输至处理器11中，以便处理器11利用上述各种指令和参数展开相应的处理。本实施例中，所述输入接口13具体可以包括但不限于USB接口、串行接口、语音输入接口、指纹输入接口、硬盘读取接口等。
输出接口14，用于将处理器11产生的各种数据输出至与其相连的终端设备，以便于与输出接口14相连的其他终端设备能够获取到处理器11产生的各种数据。本实施例中，所述输出接口14具体可以包括但不限于USB接口、串行接口等。
通讯单元15，用于在电子设备和外部服务器之间建立远程通讯连接，以便于电子设备能够将镜像文件挂载到外部服务器中。本实施例中，通讯单元15具体可以包括但不限于基于无线通讯技术或有线通讯技术的远程通讯单元。
键盘16，用于获取用户通过实时敲击键帽而输入的各种参数数据或指令。
显示器17，用于对数据备份过程的相关信息进行实时显示，以便于用户及时地了解当前数据备份情况。
鼠标18，可以用于协助用户输入数据并简化用户的操作。
进一步的，本申请实施例还公开了一种可读存储介质，这里所说的可读存储介质包括随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动硬盘、CD-ROM或技术领域内所公知的任意其他形式的存储介质。可读存储介质中存储有计算机程序，所述计算机程序被处理器执行时实现以下步骤：
获取所述集群中所述边缘节点与其他节点的网络连接状态；
根据所述网络连接状态，在所述其他节点中确定为所述边缘节点提供空余备份空间的备份节点，并将所有所述备份节点的所述空余备份空间组成节点组备份池；
获取所述边缘节点内待备份应用对应的备份策略；
根据所述备份策略确定备份位置；所述备份位置包括所述边缘节点的本地备份空间、和/或所述节点组备份池、和/或所述集群的云端备份池；
确定所述待备份应用对应的待备份数据；
根据所述备份策略，将所述待备份数据分级备份到对应的所述备份位置。
本申请实施例根据边缘节点的网络拓扑和容器中应用对应的备份策略，确定不同的备份位置，包括本地备份空间、节点组备份池、云端备份池，应用的待备份数据到不同备份位置的距离、备份时间、备份数据量均存在级别上的差异，在边缘节点分散、网络不稳定、边缘场景复杂、不标准等的背景下，保证了边缘节点中数据备份高可用，从而后续可使用备份位置的数据实现边缘节点的应用恢复。
在一些具体的实施例中，所述可读存储介质中存储的计算机子程序被处理器执行时，具体可以实现以下步骤：
暂停所述待备份应用的写入操作；
将所述待备份应用对应的缓存数据刷新到所述边缘节点的硬盘中；
将所述硬盘中对应所述待备份应用的所有数据确定为所述待备份数据。
在一些具体的实施例中，所述可读存储介质中存储的计算机子程序被处理器执行时，具体可以实现以下步骤：
获取所述待备份应用的预估空间量；
确定与所述预估空间量相同大小的所述本地备份空间；
在所述边缘节点的总存储空间量中减去所述预估空间量、所述本地备份空间的空间量，得到所述空余备份空间的空间量。
在一些具体的实施例中，所述可读存储介质中存储的计算机子程序被处理器执行时，具体可以实现以下步骤：
当所述备份位置包括所述节点组备份池，将所述待备份数据均匀备份到所有所述备份节点的所述空余备份空间中。
在一些具体的实施例中，所述可读存储介质中存储的计算机子程序被处理器执行时，具体可以实现以下步骤：
当所述备份位置包括所述节点组备份池，根据每个所述备份节点的权重，对所述待备份数据进行分片，然后分别备份到对应的各所述备份节点的所述空余备份空间中。
在一些具体的实施例中，所述权重根据每个所述备份节点的健康状态确定，所述健康状态包括：
所述备份节点的重启次数，和/或所述备份节点的所述网络连接状态，和/或所述备份节点的空余备份空间的空间量。
在一些具体的实施例中，所述可读存储介质中存储的计算机子程序被处理器执行时，具体可以实现以下步骤：
按照所述本地备份空间最高、所述节点组备份池次之、所述云端备份池最低的优先级，根据所述备份策略，将所述待备份数据分级备份到对应的所述备份位置。
最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上对本发明所提供的一种边缘节点的数据备份方法、系统及相关组件进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种边缘节点的数据备份方法，其特征在于，应用于集群中任一边缘节点，该方法包括：
获取所述集群中所述边缘节点与其他节点的网络连接状态；
根据所述网络连接状态，在所述其他节点中确定为所述边缘节点提供空余备份空间的备份节点，并将所有所述备份节点的所述空余备份空间组成节点组备份池；
获取所述边缘节点内待备份应用对应的备份策略；
根据所述备份策略确定备份位置；所述备份位置包括所述边缘节点的本地备份空间、和/或所述节点组备份池、和/或所述集群的云端备份池；
确定所述待备份应用对应的待备份数据；
根据所述备份策略，将所述待备份数据分级备份到对应的所述备份位置。
2.根据权利要求1所述数据备份方法，其特征在于，所述确定所述待备份应用对应的待备份数据的过程，包括：
暂停所述待备份应用的写入操作；
将所述待备份应用对应的缓存数据刷新到所述边缘节点的硬盘中；
将所述硬盘中对应所述待备份应用的所有数据确定为所述待备份数据。
3.根据权利要求1所述数据备份方法，其特征在于，所述获取所述边缘节点内待备份应用对应的备份策略之前，还包括：
获取所述待备份应用的预估空间量；
确定与所述预估空间量相同大小的所述本地备份空间；
在所述边缘节点的总存储空间量中减去所述预估空间量、所述本地备份空间的空间量，得到所述空余备份空间的空间量。
4.根据权利要求3所述数据备份方法，其特征在于，所述根据所述备份策略，将所述待备份数据分级备份到对应的所述备份位置的过程，包括：
当所述备份位置包括所述节点组备份池，将所述待备份数据均匀备份到所有所述备份节点的所述空余备份空间中。
5.根据权利要求3所述数据备份方法，其特征在于，所述根据所述备份策略，将所述待备份数据分级备份到对应的所述备份位置的过程，包括：
当所述备份位置包括所述节点组备份池，根据每个所述备份节点的权重，对所述待备份数据进行分片，然后分别备份到对应的各所述备份节点的所述空余备份空间中。
6.根据权利要求5所述数据备份方法，其特征在于，所述权重根据每个所述备份节点的健康状态确定，所述健康状态包括：
所述备份节点的重启次数，和/或所述备份节点的所述网络连接状态，和/或所述备份节点的空余备份空间的空间量。
7.根据权利要求1至6任一项所述数据备份方法，其特征在于，所述根据所述备份策略，将所述待备份数据分级备份到对应的所述备份位置的过程，包括：
按照所述本地备份空间最高、所述节点组备份池次之、所述云端备份池最低的优先级，根据所述备份策略，将所述待备份数据分级备份到对应的所述备份位置。
8.一种边缘节点的数据备份系统，其特征在于，应用于集群中任一边缘节点，该系统包括：
状态获取模块，用于获取所述集群中所述边缘节点与其他节点的网络连接状态；
备份池确定模块，用于根据所述网络连接状态，在所述集群中确定为所述边缘节点提供备份服务的备份节点，还用于将所有所述备份节点的空余备份空间组成节点组备份池；
策略获取模块，用于获取所述边缘节点内待备份应用对应的备份策略，还用于根据所述备份策略确定备份位置；所述备份位置包括所述边缘节点的本地备份空间、和/或所述节点组备份池、和/或所述集群的云端备份池；
数据确定模块，用于确定所述待备份应用对应的待备份数据；
动作模块，用于根据所述备份策略，将所述待备份数据分级备份到对应的所述备份位置。
9.一种电子设备，其特征在于，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序时实现如权利要求1至7任一项所述边缘节点的数据备份系统方法的步骤。
10.一种可读存储介质，其特征在于，所述可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述边缘节点的数据备份系统方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202211378806.5A CN115599605A (zh) | 2022-11-04 | 2022-11-04 | 一种边缘节点的数据备份方法、系统及相关组件 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202211378806.5A CN115599605A (zh) | 2022-11-04 | 2022-11-04 | 一种边缘节点的数据备份方法、系统及相关组件 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN115599605A true CN115599605A (zh) | 2023-01-13 |
Family
ID=84852294
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202211378806.5A Pending CN115599605A (zh) | 2022-11-04 | 2022-11-04 | 一种边缘节点的数据备份方法、系统及相关组件 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115599605A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN117056133A (zh) * | 2023-10-12 | 2023-11-14 | 杭州浩联智能科技有限公司 | 一种基于分布式物联网架构的数据备份方法、装置及介质 |
-
2022
- 2022-11-04 CN CN202211378806.5A patent/CN115599605A/zh active Pending
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN117056133A (zh) * | 2023-10-12 | 2023-11-14 | 杭州浩联智能科技有限公司 | 一种基于分布式物联网架构的数据备份方法、装置及介质 |
| CN117056133B (zh) * | 2023-10-12 | 2024-02-06 | 杭州浩联智能科技有限公司 | 一种基于分布式物联网架构的数据备份方法、装置及介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10896102B2 (en) | Implementing secure communication in a distributed computing system | |
| US10642694B2 (en) | Monitoring containers in a distributed computing system | |
| CN109150642B (zh) | 应用内存错误检测方法、检测装置及存储介质 | |
| JP7161560B2 (ja) | 人工知能開発プラットフォームの管理方法及び装置、媒体 | |
| CN114780252B (zh) | 数据仓库系统的资源管理方法及装置 | |
| US20210117176A1 (en) | Updating a metadata structure for a firmware update | |
| CN113806300A (zh) | 数据存储方法、系统、装置、设备及存储介质 | |
| CN115599605A (zh) | 一种边缘节点的数据备份方法、系统及相关组件 | |
| CN113032099A (zh) | 云计算节点、文件管理方法及装置 | |
| CN112000971B (zh) | 一种文件权限记录方法、系统及相关装置 | |
| CN112052157B (zh) | 测试报文的构造方法、装置及系统 | |
| CN108205559B (zh) | 一种数据管理方法及其设备 | |
| CN110457279B (zh) | 数据离线扫描方法、装置、服务器及可读存储介质 | |
| CN109669642B (zh) | 存储系统的节点加入方法、系统、装置及可读存储介质 | |
| CN112416245B (zh) | 一种基于多架构容器云平台的存储卷管理方法及相关组件 | |
| CN114237989B (zh) | 数据库服务部署、容灾方法及装置 | |
| CN115061630A (zh) | 一种数据迁移方法、装置、设备及介质 | |
| CN112269758B (zh) | 一种基于文件分级的文件迁移方法及相关装置 | |
| CN114817160A (zh) | 文件解压方法、装置、电子设备及计算机可读存储介质 | |
| CN115114239A (zh) | 分布式系统数据处理方法、装置、设备及介质 | |
| CN108804258A (zh) | 数据恢复方法、装置、移动终端和存储介质 | |
| CN111625500B (zh) | 文件快照方法及装置、电子设备和存储介质 | |
| CN113110846A (zh) | 一种环境变量的获取方法及装置 | |
| CN114722261A (zh) | 一种资源的处理方法、装置、电子设备及存储介质 | |
| CN113760446A (zh) | 资源调度方法、装置、设备及介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |