CN115794319A - 一种边缘计算存储服务提供方法、装置、电子设备和介质 - Google Patents
一种边缘计算存储服务提供方法、装置、电子设备和介质 Download PDFInfo
- Publication number
- CN115794319A CN115794319A CN202310075623.4A CN202310075623A CN115794319A CN 115794319 A CN115794319 A CN 115794319A CN 202310075623 A CN202310075623 A CN 202310075623A CN 115794319 A CN115794319 A CN 115794319A
- Authority
- CN
- China
- Prior art keywords
- mirror image
- object storage
- target
- edge cluster
- minio
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 64
- 238000004590 computer program Methods 0.000 claims description 19
- 238000012544 monitoring process Methods 0.000 claims description 11
- 238000011084 recovery Methods 0.000 claims description 11
- 238000010586 diagram Methods 0.000 description 18
- 230000008569 process Effects 0.000 description 10
- 238000004891 communication Methods 0.000 description 8
- 230000000977 initiatory effect Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000000903 blocking effect Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000002955 isolation Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明实施例提供了一种边缘计算存储服务提供方法、装置、电子设备和存储介质，方法包括：获取针对租户虚拟机的镜像获取请求，并确定镜像获取请求所请求获取的目标镜像；从边缘集群对象存储系统中查找目标镜像；若从边缘集群对象存储系统中查找到目标镜像，则将目标镜像发送到镜像获取请求所对应的请求对象；若从边缘集群对象存储系统中未查找到目标镜像，则从云端服务器获取目标镜像。本方法在边缘集群提供对象存储服务存储镜文件，用户在边缘集群创建虚拟机的时候可以就近访问边缘节点的对象存储服务下载预先缓存的镜像文件，在不影响虚拟机租户业务情况下在边缘集群提供对象存储能力，可以提高主机资源利用率。
Description
技术领域
本发明涉及计算机技术领域，特别是涉及一种边缘计算存储服务提供方法、一种边缘计算存储服务提供装置、一种电子设备和一种计算机可读存储介质。
背景技术
在边缘计算场景，创建虚拟机时需要频繁使用镜像文件。由于云端和边缘端带宽有限，如果将所有的镜像文件都直接从云端下发到边缘集群，带宽会非常拥堵，通常采用压缩技术之后镜像文件大小在200M~10G不等，用户创建虚拟机时会花很多时间用来下载镜像文件，用户体验较差。
发明内容
鉴于上述问题，提出了本发明实施例以便提供一种克服上述问题或者至少部分地解决上述问题的一种边缘计算存储服务提供方法和相应的一种边缘计算存储服务提供装置、一种电子设备，以及一种计算机可读存储介质。
本发明实施例公开了一种边缘计算存储服务提供方法，应用于边缘集群，所述边缘集群包括用于提供对象存储服务的边缘集群对象存储系统，所述边缘集群与云端服务器通信连接，所述方法包括：
获取针对租户虚拟机的镜像获取请求，并确定所述镜像获取请求所请求获取的目标镜像；
从所述边缘集群对象存储系统中查找所述目标镜像；
若从所述边缘集群对象存储系统中查找到所述目标镜像，则将所述目标镜像发送到所述镜像获取请求所对应的请求对象；
若从所述边缘集群对象存储系统中未查找到所述目标镜像，则从所述云端服务器获取所述目标镜像。
可选地，所述方法还包括：
调用所述租户虚拟机控制器的预缓存接口从所述云端服务器下载镜像，并将所述镜像存储至所述边缘集群对象存储系统中。
可选地，所述对象存储服务为Minio对象存储服务，所述Minio对象存储服务离散部署在多个Master控制节点中，所述若从所述边缘集群对象存储系统中查找到所述目标镜像，则将所述目标镜像发送到所述镜像获取请求所对应的请求对象，包括：
若从所述边缘集群对象存储系统中查找到所述目标镜像，则确定所述目标镜像所对应存储的目标Master控制节点，通过预设容器管理工具提供的统一域名入口从所有的所述目标Master控制节点中获取所述目标镜像；其中，所述目标镜像分块分布在所有的所述目标Master控制节点中；
将所述目标镜像发送到所述镜像获取请求所对应的请求对象。
可选地，所述边缘集群对象存储系统包括Minio控制器，所述方法还包括：
通过所述Minio控制器监控并纠正所述Minio对象存储服务的服务状态，以及在纠正所述Minio对象存储服务的服务状态的同时，修改所述Minio对象存储服务的配置，包括但不限于存储空间扩容或集群节点扩容。
可选地，当Minio对象存储服务所在的Master控制节点发生故障时，挂载在该Master控制节点的磁盘离线。
可选地，所述方法还包括：
当Minio对象存储服务所在的Master控制节点发生故障时，所丢失的不完整数据通过纠删码恢复。
可选地，所述方法还包括：
确定在纠删码模式中Master控制节点所配置的数据块和校验块；
采用所述数据块和所述校验块对故障节点进行组内数据恢复。
本发明实施例还公开了一种边缘计算存储服务提供装置，应用于边缘集群，所述边缘集群包括用于提供对象存储服务的边缘集群对象存储系统，所述边缘集群与云端服务器通信连接，所述装置包括：
获取及确定模块，用于获取针对租户虚拟机的镜像获取请求，并确定所述镜像获取请求所请求获取的目标镜像；
查找模块，用于从所述边缘集群对象存储系统中查找所述目标镜像；
发送模块，用于若从所述边缘集群对象存储系统中查找到所述目标镜像，则将所述目标镜像发送到所述镜像获取请求所对应的请求对象；
获取模块，用于若从所述边缘集群对象存储系统中未查找到所述目标镜像，则从所述云端服务器获取所述目标镜像。
可选地，所述装置还包括：
下载及存储模块，用于调用所述租户虚拟机控制器的预缓存接口从所述云端服务器下载镜像，并将所述镜像存储至所述边缘集群对象存储系统中。
可选地，所述对象存储服务为Minio对象存储服务，所述Minio对象存储服务离散部署在多个Master控制节点中，所述发送模块，包括：
确定及获取子模块，用于若从所述边缘集群对象存储系统中查找到所述目标镜像，则确定所述目标镜像所对应存储的目标Master控制节点，通过预设容器管理工具提供的统一域名入口从所有的所述目标Master控制节点中获取所述目标镜像；其中，所述目标镜像分块分布在所有的所述目标Master控制节点中；
发送子模块，用于将所述目标镜像发送到所述镜像获取请求所对应的请求对象。
可选地，所述边缘集群对象存储系统包括Minio控制器，所述装置还包括：
监控及纠正模块，用于通过所述Minio控制器监控并纠正所述Minio对象存储服务的服务状态，以及在纠正所述Minio对象存储服务的服务状态的同时，修改所述Minio对象存储服务的配置，包括但不限于存储空间扩容或集群节点扩容。
可选地，当Minio对象存储服务所在的Master控制节点发生故障时，挂载在该Master控制节点的磁盘离线。
可选地，所述装置还包括：
恢复模块，用于当Minio对象存储服务所在的Master控制节点发生故障时，所丢失的不完整数据通过纠删码恢复。
可选地，所述装置还包括：
确定模块，用于确定在纠删码模式中Master控制节点所配置的数据块和校验块；
数据恢复模块，用于采用所述数据块和所述校验块对故障节点进行组内数据恢复。
本发明实施例还公开了一种电子设备，包括：处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如上所述一种边缘计算存储服务提供方法。
本发明实施例还公开了一种计算机可读存储介质，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如上所述一种边缘计算存储服务提供方法。
本发明实施例包括以下优点：
在本发明实施例中，可以获取针对租户虚拟机的镜像获取请求，并确定镜像获取请求所请求获取的目标镜像，从边缘集群的边缘集群对象存储系统中查找是否存在该目标镜像，如果存在，则可以将该目标镜像从边缘集群对象存储系统发送到发起该镜像获取请求的请求对象，如果不存在，则需要从云端服务器中获取该目标镜像。通过采用上述方法，考虑到镜像文件非结构化、文件大、数量会逐渐增多等特点，在边缘集群提供对象存储服务存储镜文件，用户在边缘集群创建虚拟机的时候可以就近访问边缘节点的对象存储服务下载预先缓存的镜像文件，在不影响虚拟机租户业务情况下在边缘集群提供对象存储能力，可以提高主机资源利用率。
附图说明
图1是本发明实施例提供的一种边缘计算存储服务提供方法的步骤流程图；
图2是本发明实施例提供的另一种边缘计算存储服务提供方法的步骤流程图；
图3是本发明实施例的对象存储服务的数据流图；
图4是本发明实施例的下载时缓存镜像文件的过程示意图；
图5是本发明实施例的导出时缓存镜像文件的过程示意图；
图6是本发明实施例的边缘集群的部署方式示意图；
图7是本发明实施例Master控制节点配置数据块和校验块的示意图；
图8是本发明实施例提供的一种边缘计算存储服务提供装置的结构框图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式对本发明作进一步详细的说明，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员所获得的所有其它实施例，都属于本发明保护的范围。
在边缘计算场景，创建虚拟机时需要频繁使用镜像文件。由于云端和边缘端带宽有限，如果将所有的镜像文件都直接从云端下发到边缘集群，带宽会非常拥堵，通常采用压缩技术之后镜像文件大小在200M~10G不等，用户创建虚拟机时会花很多时间用来下载镜像文件，用户体验较差。
因此，本发明拟提供一种克服上述问题或者至少部分地解决上述问题的一种边缘计算存储服务提供方法和相应的一种边缘计算存储服务提供装置、一种电子设备，以及一种计算机可读存储介质。
本发明实施例的核心构思之一在于，可以获取针对租户虚拟机的镜像获取请求，并确定镜像获取请求所请求获取的目标镜像，从边缘集群的边缘集群对象存储系统中查找是否存在该目标镜像，如果存在，则可以将该目标镜像从边缘集群对象存储系统发送到发起该镜像获取请求的请求对象，如果不存在，则需要从云端服务器中获取该目标镜像。通过采用上述方法，考虑到镜像文件非结构化、文件大、数量会逐渐增多等特点，在边缘集群提供对象存储服务存储镜文件，用户在边缘集群创建虚拟机的时候可以就近访问边缘节点的对象存储服务下载预先缓存的镜像文件，在不影响虚拟机租户业务情况下在边缘集群提供对象存储能力，可以提高主机资源利用率。
参照图1，示出了本发明实施例提供的一种边缘计算存储服务提供方法的步骤流程图，应用于边缘集群，边缘集群包括用于提供对象存储服务的边缘集群对象存储系统，边缘集群与云端服务器通信连接，具体可以包括如下步骤：
步骤101，获取针对租户虚拟机的镜像获取请求，并确定镜像获取请求所请求获取的目标镜像。
在本发明实施例中，在边缘计算的场景下，边缘集群与云端服务器通信连接，边缘集群中设置有边缘集群对象存储系统，该边缘集群对象存储系统用于提供对象存储服务。
可以获取针对租户虚拟机的镜像获取请求，并可以确定该镜像获取请求所请求获取的目标镜像。
步骤102，从边缘集群对象存储系统中查找目标镜像。
在确定所需获取的目标镜像之后，可以先从边缘集群对象存储系统中查找是否存在该目标镜像。
步骤103，若从边缘集群对象存储系统中查找到目标镜像，则将目标镜像发送到镜像获取请求所对应的请求对象。
如果边缘集群对象存储系统存在该目标镜像，则可以将边缘集群对象存储系统中的目标镜像发送到镜像获取请求所对应的请求对象。
步骤104，若从边缘集群对象存储系统中未查找到目标镜像，则从云端服务器获取目标镜像。
如果边缘集群对象存储系统不存在该目标镜像，才从云端服务器下发获取。
综上，在本发明实施例中，可以获取针对租户虚拟机的镜像获取请求，并确定镜像获取请求所请求获取的目标镜像，从边缘集群的边缘集群对象存储系统中查找是否存在该目标镜像，如果存在，则可以将该目标镜像从边缘集群对象存储系统发送到发起该镜像获取请求的请求对象，如果不存在，则需要从云端服务器中获取该目标镜像。通过采用上述方法，考虑到镜像文件非结构化、文件大、数量会逐渐增多等特点，在边缘集群提供对象存储服务存储镜文件，用户在边缘集群创建虚拟机的时候可以就近访问边缘节点的对象存储服务下载预先缓存的镜像文件，在不影响虚拟机租户业务情况下在边缘集群提供对象存储能力，可以提高主机资源利用率。
参照图2，示出了本发明实施例提供的另一种边缘计算存储服务提供方法的步骤流程图，应用于边缘集群，边缘集群包括用于提供对象存储服务的边缘集群对象存储系统，边缘集群与云端服务器通信连接，具体可以包括如下步骤：
步骤201，调用租户虚拟机控制器的预缓存接口从云端服务器下载镜像，并将镜像存储至边缘集群对象存储系统中。
在本发明实施例中，在边缘计算的场景下，边缘集群与云端服务器通信连接，边缘集群中设置有边缘集群对象存储系统，该边缘集群对象存储系统用于提供对象存储服务。
边缘集群提供有云端调用接口，可以主动调用租户虚拟机控制器的预缓存接口，该预缓存接口可以主动从云端服务器下载镜像，并将镜像存储至边缘集群对象存储系统中。其中，可以是将镜像的缓存数据缓存到对应边缘节点的边缘集群对象存储系统中。
步骤202，获取针对租户虚拟机的镜像获取请求，并确定镜像获取请求所请求获取的目标镜像。
步骤203，从边缘集群对象存储系统中查找目标镜像。
步骤204，若从边缘集群对象存储系统中查找到目标镜像，则将目标镜像发送到镜像获取请求所对应的请求对象。
步骤205，若从边缘集群对象存储系统中未查找到目标镜像，则从云端服务器获取目标镜像。
获取针对租户虚拟机的镜像获取请求，并可以确定该镜像获取请求所请求获取的目标镜像。在确定所需获取的目标镜像之后，可以先从边缘集群对象存储系统中查找是否存在该目标镜像。如果边缘集群对象存储系统存在该目标镜像，则可以将边缘集群对象存储系统中的目标镜像发送到镜像获取请求所对应的请求对象。如果边缘集群对象存储系统不存在该目标镜像，才从云端服务器获取。
其中，边缘集群对象存储系统可以与快照管理服务模块，镜像管理服务模块和虚机管理服务模块进行交互，参照图3所示，为本发明实施例的对象存储服务的数据流图。主要涉及到边缘集群对象存储系统、快照管理服务模块、镜像管理服务模块、云端服务模块（云端服务器）、租户虚拟机、控制器以及虚机管理服务模块。
具体的，用户可以将云端服务器中的镜像预缓存到对应边缘节点的边缘集群对象存储系统中。
当获取到创建虚机请求时，通过虚拟管理服务模块生成对应的镜像获取请求，镜像管理服务模块根据该镜像获取请求从边缘集群对象存储系统的缓存数据中查找是否存在对应的目标镜像。
当获取到导出快照请求时，通过快照管理服务模块将该导出快照请求发送到租户虚拟机，租户虚拟机调用镜像管理服务模块从边缘集群对象存储系统的缓存数据中查找是否存在与该导出快照请求对应的目标镜像。
参照图4所示，为本发明实施例的下载时缓存镜像文件的过程示意图。云端服务器中的云端对象存储系统存储镜像的同时，可以将镜像缓存到边缘集群的边缘集群对象存储系统中。参照图5所示，为本发明实施例的导出时缓存镜像文件的过程示意图。云端服务器请求导出镜像或快照，边缘集群导出对应的镜像或快照后，在将对应的镜像或快照缓存至边缘集群对象存储系统的同时，将对应的镜像或快照存储到云端服务器的云端对象存储系统中。
在本发明一种可选的实施例中，对象存储服务为Minio对象存储服务，Minio对象存储服务离散部署在多个Master控制节点中，步骤204中若从边缘集群对象存储系统中查找到目标镜像，则将目标镜像发送到镜像获取请求所对应的请求对象，具体可以包括如下子步骤：
若从边缘集群对象存储系统中查找到目标镜像，则确定目标镜像所对应存储的目标Master控制节点，通过预设容器管理工具提供的统一域名入口从所有的目标Master控制节点中获取目标镜像；其中，目标镜像分块分布在所有的目标Master控制节点中；
将目标镜像发送到镜像获取请求所对应的请求对象。
如果从边缘集群对象存储系统中查找到所要获取的目标镜像，则可以确定存储该目标镜像的目标Master控制节点，目标镜像分块分布在所有的目标Master控制节点中，可以通过预设容器管理工具提供的统一域名入口从所有的目标Master控制节点中获取该目标镜像。在一种示例中，预设容器管理工具可以为K8S(Kubernetes) ，是一个轻便的和可扩展的开源平台,用于管理容器化应用和服务。镜像分块存储于多个控制节点，可以避免单点故障。
获取到目标镜像之后，可以将目标镜像发送到发起镜像获取请求的请求对象。
在本发明一种可选的实施例中，边缘集群对象存储系统包括Minio控制器，具体还可以包括如下步骤：
通过Minio控制器监控并纠正Minio对象存储服务的服务状态，以及在纠正Minio对象存储服务的服务状态的同时，修改Minio对象存储服务的配置，包括但不限于存储空间扩容或集群节点扩容。
边缘集群对象存储系统包括Minio对象存储服务、Minio控制器两个模块。Minio对象存储服务提供存储服务，Minio控制器负责管理、监控Minio对象存储服务的状态。
在本发明实施例中，可以通过Minio控制器监控并纠正Minio对象存储服务的服务状态，以及在纠正Minio对象存储服务的服务状态的同时，修改Minio对象存储服务的配置，其中修改配置具体可以是指进行存储空间扩容或集群节点扩容等。
参照图6所示，为本发明实施例的边缘集群的部署方式示意图。为了提供较好的性能并且和租户虚拟机的业务隔离，可以将Minio对象存储服务部署在控制面上，Minio控制器负责管理、监控对象存储服务状态并自动纠正错误状态服务，Minio对象存储服务离散部署在多个Master控制节点。其中，生产环境控制面一般有3个节点，可以就近提供工作节点上传、下载文件。
配置参数可以如下所示：
Minio对象存储服务数量：3（配置反亲和性，部署在不同节点）；
每个Minio对象存储服务挂载磁盘：2；
节点选择：Master控制节点；
存储类：本地盘；
Minio控制器数量：2（配置反亲和性，部署在不同节点）；
纠删码：EC:2。
在使用Minio作为对象存储的部署方案中，基于K8S集群部署，Minio Operator作为Minio控制器，提供StatefulSet有状态应用通过PVC的方式挂载磁盘提供存储能力，Minio对象存储服务和快照管理服务、镜像管理服务等处于同一网络平面，实现服务之间的通信。
在本发明一种可选的实施例中，当Minio对象存储服务所在的Master控制节点发生故障时，挂载在该Master控制节点的磁盘离线。
在本发明一种可选的实施例中，具体还可以包括如下步骤：
当Minio对象存储服务所在的Master控制节点发生故障时，所丢失的不完整数据通过纠删码恢复。
在本发明实施例中，Master控制节点发生故障时，丢失的不完整数据通过纠删码恢复。
在具体实施中，镜像是分散成多块存储在不同的Master控制节点中的，可以通过负载均衡选中其中一个Master控制节点上正常的Minio对象存储服务提供服务，这个选中的Minio对象存储服务可以将镜像数据重新组装，组装的时候发现部分数据丢失，可以通过纠删码恢复丢失的部分（不落盘）。
在本发明一种可选的实施例中，具体还可以包括如下步骤：
确定在纠删码模式中Master控制节点所配置的数据块和校验块；
采用数据块和校验块对故障节点进行组内数据恢复。
在具体实施中，服务在线数量为3，需要满足server挂掉（大于等于1）之后服务可用，并且server挂掉之后挂载的磁盘也会离线。纠删码可以最大丢失k数量校验块或者数据块，服务挂载磁盘数量为2，考虑在线数量，Minio服务想要保持集群的可用，如有n server，每个server挂载m磁盘，如果校验码为k，则保持集群可读需要n*m-k磁盘在线（n*m<16相同set），如需要保持集群可写需要n*m-k磁盘在线，并且大于n*m/2防止脑裂。因此可以设计在3个节点挂载共6块盘，纠删码配置为EC:2。如图7所示，为Master控制节点配置数据块和校验块的示意图。
Minio提供对象存储是去中心，安装顺序请求集群内其他服务拼接对象文件返回给用户，使用本地盘挂载到server可以减少复杂的额外网络开销。通过提供多个Master控制节点服务，挂掉1个服务存储集群还能可读写。
综上，在本发明实施例中，可以获取针对租户虚拟机的镜像获取请求，并确定镜像获取请求所请求获取的目标镜像，从边缘集群的边缘集群对象存储系统中查找是否存在该目标镜像，如果存在，则可以将该目标镜像从边缘集群对象存储系统发送到发起该镜像获取请求的请求对象，如果不存在，则需要从云端服务器中获取该目标镜像。通过采用上述方法，考虑到镜像文件非结构化、文件大、数量会逐渐增多等特点，在边缘集群提供对象存储服务存储镜文件，用户在边缘集群创建虚拟机的时候可以就近访问边缘节点的对象存储服务下载预先缓存的镜像文件，在不影响虚拟机租户业务情况下在边缘集群提供对象存储能力，可以提高主机资源利用率。
本发明实施例可以提前将镜像文件预缓存到边缘集群，提供对象存储服务。本发明的边缘集群提供数据丢失（数据块和校验块）的故障恢复能力，分布式Minio可以将多块硬盘（甚至在不同的机器上）组成一个对象存储服务。由于硬盘分布在不同的节点上，分布式Minio避免了单点故障。本发明可以应用于缓存边缘集群其他大文件的场景，例如AI模型、云渲染资产等。
需要说明的是，对于方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明实施例并不受所描述的动作顺序的限制，因为依据本发明实施例，某些步骤可以采用其它顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作并不一定是本发明实施例所必须的。
参照图8，示出了本发明实施例提供的一种边缘计算存储服务提供装置的结构框图，应用于边缘集群，所述边缘集群包括用于提供对象存储服务的边缘集群对象存储系统，所述边缘集群与云端服务器通信连接，具体可以包括如下模块：
获取及确定模块801，用于获取针对租户虚拟机的镜像获取请求，并确定所述镜像获取请求所请求获取的目标镜像；
查找模块802，用于从所述边缘集群对象存储系统中查找所述目标镜像；
发送模块803，用于若从所述边缘集群对象存储系统中查找到所述目标镜像，则将所述目标镜像发送到所述镜像获取请求所对应的请求对象；
获取模块804，用于若从所述边缘集群对象存储系统中未查找到所述目标镜像，则从所述云端服务器获取所述目标镜像。
在本发明实施例中，所述装置还包括：
下载及存储模块，用于调用所述租户虚拟机控制器的预缓存接口从所述云端服务器下载镜像，并将所述镜像存储至所述边缘集群对象存储系统中。
在本发明实施例中，所述对象存储服务为Minio对象存储服务，所述Minio对象存储服务离散部署在多个Master控制节点中，所述发送模块，包括：
确定及获取子模块，用于若从所述边缘集群对象存储系统中查找到所述目标镜像，则确定所述目标镜像所对应存储的目标Master控制节点，通过预设容器管理工具提供的统一域名入口从所有的所述目标Master控制节点中获取所述目标镜像；其中，所述目标镜像分块分布在所有的所述目标Master控制节点中；
发送子模块，用于将所述目标镜像发送到所述镜像获取请求所对应的请求对象。
在本发明实施例中，所述边缘集群对象存储系统包括Minio控制器，所述装置还包括：
监控及纠正模块，用于通过所述Minio控制器监控并纠正所述Minio对象存储服务的服务状态，以及在纠正所述Minio对象存储服务的服务状态的同时，修改所述Minio对象存储服务的配置，包括但不限于存储空间扩容或集群节点扩容。
在本发明实施例中，当Minio对象存储服务所在的Master控制节点发生故障时，挂载在该Master控制节点的磁盘离线。
在本发明实施例中，所述装置还包括：
恢复模块，用于当Minio对象存储服务所在的Master控制节点发生故障时，所丢失的不完整数据通过纠删码恢复。
在本发明实施例中，所述装置还包括：
确定模块，用于确定在纠删码模式中Master控制节点所配置的数据块和校验块；
数据恢复模块，用于采用所述数据块和所述校验块对故障节点进行组内数据恢复。
综上，在本发明实施例中，可以获取针对租户虚拟机的镜像获取请求，并确定镜像获取请求所请求获取的目标镜像，从边缘集群的边缘集群对象存储系统中查找是否存在该目标镜像，如果存在，则可以将该目标镜像从边缘集群对象存储系统发送到发起该镜像获取请求的请求对象，如果不存在，则需要从云端服务器中获取该目标镜像。通过采用上述方法，考虑到镜像文件非结构化、文件大、数量会逐渐增多等特点，在边缘集群提供对象存储服务存储镜文件，用户在边缘集群创建虚拟机的时候可以就近访问边缘节点的对象存储服务下载预先缓存的镜像文件，在不影响虚拟机租户业务情况下在边缘集群提供对象存储能力，可以提高主机资源利用率。
对于装置实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
本发明实施例还提供了一种电子设备，包括：处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现上述一种边缘计算存储服务提供方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
本发明实施例还提供了一种计算机可读存储介质，计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现上述一种边缘计算存储服务提供方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。
本领域内的技术人员应明白，本发明实施例的实施例可提供为方法、装置、或计算机程序产品。因此，本发明实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质（包括但不限于磁盘存储器、CD-ROM、光学存储器等）上实施的计算机程序产品的形式。
本发明实施例是参照根据本发明实施例的方法、终端设备（系统）、和计算机程序产品的流程图和／或方框图来描述的。应理解可由计算机程序指令实现流程图和／或方框图中的每一流程和／或方框、以及流程图和／或方框图中的流程和／或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其它可编程数据处理终端设备的处理器以产生一个机器，使得通过计算机或其它可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其它可编程数据处理终端设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其它可编程数据处理终端设备上，使得在计算机或其它可编程终端设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其它可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明实施例的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例做出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明实施例范围的所有变更和修改。
最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其它变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素，而且还包括没有明确列出的其它要素，或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。
以上对本发明所提供的一种边缘计算存储服务提供方法和一种边缘计算存储服务提供装置、一种电子设备和一种计算机可读存储介质，进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。
Claims (15)
1.一种边缘计算存储服务提供方法，其特征在于，应用于边缘集群，所述边缘集群包括用于提供对象存储服务的边缘集群对象存储系统，所述边缘集群与云端服务器通信连接，所述方法包括：
获取针对租户虚拟机的镜像获取请求，并确定所述镜像获取请求所请求获取的目标镜像；
从所述边缘集群对象存储系统中查找所述目标镜像；
若从所述边缘集群对象存储系统中查找到所述目标镜像，则将所述目标镜像发送到所述镜像获取请求所对应的请求对象；
若从所述边缘集群对象存储系统中未查找到所述目标镜像，则从所述云端服务器获取所述目标镜像。
2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
调用所述租户虚拟机控制器的预缓存接口从所述云端服务器下载镜像，并将所述镜像存储至所述边缘集群对象存储系统中。
3.根据权利要求1所述的方法，其特征在于，所述对象存储服务为Minio对象存储服务，所述Minio对象存储服务离散部署在多个Master控制节点中，所述若从所述边缘集群对象存储系统中查找到所述目标镜像，则将所述目标镜像发送到所述镜像获取请求所对应的请求对象，包括：
若从所述边缘集群对象存储系统中查找到所述目标镜像，则确定所述目标镜像所对应存储的目标Master控制节点，通过预设容器管理工具提供的统一域名入口从所有的所述目标Master控制节点中获取所述目标镜像；其中，所述目标镜像分块分布在所有的所述目标Master控制节点中；
将所述目标镜像发送到所述镜像获取请求所对应的请求对象。
4.根据权利要求3所述的方法，其特征在于，所述边缘集群对象存储系统包括Minio控制器，所述方法还包括：
通过所述Minio控制器监控并纠正所述Minio对象存储服务的服务状态，以及在纠正所述Minio对象存储服务的服务状态的同时，修改所述Minio对象存储服务的配置，包括但不限于存储空间扩容或集群节点扩容。
5.根据权利要求4所述的方法，其特征在于，当Minio对象存储服务所在的Master控制节点发生故障时，挂载在该Master控制节点的磁盘离线。
6.根据权利要求5所述的方法，其特征在于，所述方法还包括：
当Minio对象存储服务所在的Master控制节点发生故障时，所丢失的不完整数据通过纠删码恢复。
7.根据权利要求5所述的方法，其特征在于，所述方法还包括：
确定在纠删码模式中Master控制节点所配置的数据块和校验块；
采用所述数据块和所述校验块对故障节点进行组内数据恢复。
8.一种边缘计算存储服务提供装置，其特征在于，应用于边缘集群，所述边缘集群包括用于提供对象存储服务的边缘集群对象存储系统，所述边缘集群与云端服务器通信连接，所述装置包括：
获取及确定模块，用于获取针对租户虚拟机的镜像获取请求，并确定所述镜像获取请求所请求获取的目标镜像；
查找模块，用于从所述边缘集群对象存储系统中查找所述目标镜像；
发送模块，用于若从所述边缘集群对象存储系统中查找到所述目标镜像，则将所述目标镜像发送到所述镜像获取请求所对应的请求对象；
获取模块，用于若从所述边缘集群对象存储系统中未查找到所述目标镜像，则从所述云端服务器获取所述目标镜像。
9.根据权利要求8所述的装置，其特征在于，所述装置还包括：
下载及存储模块，用于调用所述租户虚拟机控制器的预缓存接口从所述云端服务器下载镜像，并将所述镜像存储至所述边缘集群对象存储系统中。
10.根据权利要求8所述的装置，其特征在于，所述对象存储服务为Minio对象存储服务，所述Minio对象存储服务离散部署在多个Master控制节点中，所述发送模块，包括：
确定及获取子模块，用于若从所述边缘集群对象存储系统中查找到所述目标镜像，则确定所述目标镜像所对应存储的目标Master控制节点，通过预设容器管理工具提供的统一域名入口从所有的所述目标Master控制节点中获取所述目标镜像；其中，所述目标镜像分块分布在所有的所述目标Master控制节点中；
发送子模块，用于将所述目标镜像发送到所述镜像获取请求所对应的请求对象。
11.根据权利要求10所述的装置，其特征在于，所述边缘集群对象存储系统包括Minio控制器，所述装置还包括：
监控及纠正模块，用于通过所述Minio控制器监控并纠正所述Minio对象存储服务的服务状态，以及在纠正所述Minio对象存储服务的服务状态的同时，修改所述Minio对象存储服务的配置，包括但不限于存储空间扩容或集群节点扩容。
12.根据权利要求11所述的装置，其特征在于，当Minio对象存储服务所在的Master控制节点发生故障时，挂载在该Master控制节点的磁盘离线。
13.根据权利要求12所述的装置，其特征在于，所述装置还包括：
恢复模块，用于当Minio对象存储服务所在的Master控制节点发生故障时，所丢失的不完整数据通过纠删码恢复。
14.一种电子设备，其特征在于，包括：处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如权利要求1-7中任一项所述一种边缘计算存储服务提供方法。
15.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如权利要求1-7中任一项所述一种边缘计算存储服务提供方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310075623.4A CN115794319A (zh) | 2023-02-07 | 2023-02-07 | 一种边缘计算存储服务提供方法、装置、电子设备和介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310075623.4A CN115794319A (zh) | 2023-02-07 | 2023-02-07 | 一种边缘计算存储服务提供方法、装置、电子设备和介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN115794319A true CN115794319A (zh) | 2023-03-14 |
Family
ID=85430288
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202310075623.4A Pending CN115794319A (zh) | 2023-02-07 | 2023-02-07 | 一种边缘计算存储服务提供方法、装置、电子设备和介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115794319A (zh) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102307206A (zh) * | 2010-09-25 | 2012-01-04 | 广东电子工业研究院有限公司 | 基于云存储的快速访问虚拟机镜像的缓存系统及其方法 |
| CN114064209A (zh) * | 2021-11-14 | 2022-02-18 | 郑州云海信息技术有限公司 | 一种通过镜像创建云主机的方法、装置、设备及可读介质 |
| EP3968605A1 (en) * | 2019-06-15 | 2022-03-16 | Huawei Technologies Co., Ltd. | Method for providing edge service, apparatus and device |
| CN114844879A (zh) * | 2022-03-25 | 2022-08-02 | 网宿科技股份有限公司 | 镜像管理方法、电子设备和存储介质 |
| CN114968283A (zh) * | 2022-05-31 | 2022-08-30 | 济南浪潮数据技术有限公司 | 一种容器镜像的拉取方法、装置、设备及可读存储介质 |
-
2023
- 2023-02-07 CN CN202310075623.4A patent/CN115794319A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102307206A (zh) * | 2010-09-25 | 2012-01-04 | 广东电子工业研究院有限公司 | 基于云存储的快速访问虚拟机镜像的缓存系统及其方法 |
| EP3968605A1 (en) * | 2019-06-15 | 2022-03-16 | Huawei Technologies Co., Ltd. | Method for providing edge service, apparatus and device |
| CN114064209A (zh) * | 2021-11-14 | 2022-02-18 | 郑州云海信息技术有限公司 | 一种通过镜像创建云主机的方法、装置、设备及可读介质 |
| CN114844879A (zh) * | 2022-03-25 | 2022-08-02 | 网宿科技股份有限公司 | 镜像管理方法、电子设备和存储介质 |
| CN114968283A (zh) * | 2022-05-31 | 2022-08-30 | 济南浪潮数据技术有限公司 | 一种容器镜像的拉取方法、装置、设备及可读存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108737467B (zh) | 一种服务器日志查看方法、装置和系统 | |
| CN110262941B (zh) | 应用程序容器集群报警实现方法、系统、设备及存储介质 | |
| CN106487708B (zh) | 网络访问请求控制方法和装置 | |
| US8522086B1 (en) | Method and apparatus for providing relocation notification | |
| CN107844399B (zh) | 自动监控数据库服务的方法、存储介质、电子设备及系统 | |
| US8191068B2 (en) | Resource management system, resource information providing method and program | |
| US8849756B2 (en) | Selecting data nodes in distributed storage system | |
| CN111970315A (zh) | 推送消息的方法、装置及系统 | |
| US8620926B2 (en) | Using a hashing mechanism to select data entries in a directory for use with requested operations | |
| CN105407117B (zh) | 分布式备份数据的方法、装置和系统 | |
| CN108933798B (zh) | 数据存储方法、存储服务器及系统 | |
| CN108881066B (zh) | 一种路由请求的方法、接入服务器以及存储设备 | |
| CN105099988A (zh) | 用于支持灰度发布的方法、访问方法以及装置和系统 | |
| CN111723024B (zh) | 数据处理方法、装置、系统、客户端服务器及存储服务器 | |
| US10050832B2 (en) | Server clustering in mobile computing environment | |
| CN104717314A (zh) | 一种ip管理方法及系统、客户端、服务器 | |
| CN113347037B (zh) | 一种数据中心访问方法及装置 | |
| CN111984289A (zh) | 一种服务更新方法、装置、设备及存储介质 | |
| CN109873855A (zh) | 一种基于区块链网络的资源获取方法和系统 | |
| CN112202853A (zh) | 数据同步方法、系统、计算机设备和存储介质 | |
| CN114844879B (zh) | 镜像管理方法、电子设备和存储介质 | |
| CN110602232A (zh) | 基于对等网络思想的终端系统版本下载方法、装置及系统 | |
| US9426023B2 (en) | Automatic reconfiguration of network parameters during file system failover | |
| CN110290196B (zh) | 一种内容分发方法及装置 | |
| CN116886286A (zh) | 大数据认证服务自适应方法、装置和设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20230314 |