CN110740188A - 镜像文件上传方法、装置、设备及计算机可读存储介质 - Google Patents
镜像文件上传方法、装置、设备及计算机可读存储介质 Download PDFInfo
- Publication number
- CN110740188A CN110740188A CN201911025141.8A CN201911025141A CN110740188A CN 110740188 A CN110740188 A CN 110740188A CN 201911025141 A CN201911025141 A CN 201911025141A CN 110740188 A CN110740188 A CN 110740188A
- Authority
- CN
- China
- Prior art keywords
- image file
- uploading
- subfile
- subfiles
- uploaded
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
- H04L9/32—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials
- H04L9/3236—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials using cryptographic hash functions
- H04L9/3239—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials using cryptographic hash functions involving non-keyed hash functions, e.g. modification detection codes [MDCs], MD5, SHA or RIPEMD
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本发明公开了一种镜像文件上传方法、装置、设备及计算机可读存储介质。其中,方法包括将待上传镜像文件进行分段处理,得到多个子文件,并为每个子文件设置标识信息,该标识信息用于标记各子文件在待上传镜像文件中的位置和作为文件上传完成的标识;在云数据中心操作系统前端页面上分批上传各子文件,以使后端将接收到的子文件按照相应的标识信息进行重构拼接并存储至本地;当各子文件均上传成功,将重构拼接得到的镜像文件发送至OpenStack。本申请解决相关技术中在从云数据中心操作系统中上传镜像文件至OpenStack过程中出现的内存溢出的问题,可有效保证上传镜像文件的完整性和可用性。
Description
技术领域
本发明涉及文件传输技术领域,特别是涉及一种镜像文件上传方法、装置、设备及计算机可读存储介质。
背景技术
OpenStack为一个开源的云计算管理平台项目,支持几乎所有类型的云环境。其项目目标是提供实施简单、可大规模扩展、丰富、标准统一的云计算管理平台。OpenStack通过各种互补的服务提供了基础设施即服务(IaaS)的解决方案,每个服务提供API以进行集成。
Kubernetes,也可称为K8s,为一个完备的分布式系统支撑平台,具有完备的集群管理能力,多扩多层次的安全防护和准入机制、多租户应用支撑能力、透明的服务注册和发现机制、内建智能负载均衡器、强大的故障发现和自我修复能力、服务滚动升级和在线扩容能力、可扩展的资源自动调度机制以及多粒度的资源配额管理能力;同时Kubernetes提供完善的管理工具,涵盖了包括开发、部署测试、运维监控在内的各个环节,作为分布式集群系统广泛部署于云数据中心操作系统上,例如浪潮云海系统。
镜像文件经常需要从云数据中心操作系统中上传至OpenStack glance,极容易出现大量内存贮存在浏览器,导致浏览器的内存溢出或者是后端内存溢出,影响镜像文件的正常上传。
发明内容
本公开实施例提供了一种镜像文件上传方法、装置、设备及计算机可读存储介质,解决相关技术中在从云数据中心操作系统中上传镜像文件至OpenStack过程中出现的内存溢出的问题。
为解决上述技术问题,本发明实施例提供以下技术方案:
本发明实施例一方面提供了一种镜像文件上传方法,包括:
将待上传镜像文件分割为多个子文件,并为每个子文件设置标识信息,所述标识信息用于标记各子文件在所述待上传镜像文件中的位置和作为文件上传完成的标识;
在云数据中心操作系统前端页面上分批上传各子文件,以使后端将接收到的子文件按照相应的标识信息进行重构拼接并存储至本地;
当各子文件均上传成功,将重构拼接得到的镜像文件发送至OpenStack。
可选的,所述在云数据中心操作系统前端页面上分批上传各子文件,以使后端将接收到的子文件按照相应的标识信息进行重构拼接并存储至本地包括:
按照各子文件分段顺序,逐个依次通过所述云数据中心操作系统的前端页面进行上传,以使所述后端每接收到一个子文件便根据相应标识信息将当前子文件追加至相邻的上一个子文件后。
可选的,所述在云数据中心操作系统前端页面上分批上传各子文件包括:
根据所述云数据中心操作系统的内存容量和所述待上传镜像文件占用空间容量值将各子文件分类至并行传输组和单线程传输组;
在所述前端页面上先将所述并行传输组中的各子文件利用多个线程同时上传;
所述并行传输组中各子文件上传成功后,在所述前端页面上将所述单线程传输组中的各子文件逐个上传。
可选的,所述云数据中心操作系统上部署的分布式系统为K8s,所述在云数据中心操作系统的前端页面中上传各子文件之前还包括:
根据所述待上传镜像文件对应的后端容器节点信息和所述待上传镜像文件上传所需最长时间,自动配置会话保持事项,以使各子文件上传至同一个容器节点中。
可选的,所述在云数据中心操作系统前端页面上分批上传各子文件包括:
按照预先存储的加密算法对各子文件进行加密处理,并对加密后的子文件进行压缩处理;
在云数据中心操作系统前端页面上分批上传压缩处理后的各子文件,并在所述前端页面上显示各子文件的传输进度。
可选的,在所述前端页面上分批上传各子文件时,同时传输所述待上传镜像文件的初始md5码,所述将重构拼接得到的镜像文件发送至OpenStack包括:
计算重构拼接得到的镜像文件的md5码;
判断重构拼接得到的镜像文件的md5码是否与所述初始md5码一致;
若是,则重构拼接得到的镜像文件为完整镜像文件,将重构拼接得到的镜像文件发送至OpenStack;若否,则进行报错。
本发明实施例另一方面提供了一种镜像文件上传装置,包括:
文件分段处理模块,用于将待上传镜像文件分割为多个子文件,并为每个子文件设置标识信息,所述标识信息用于标记各子文件在所述待上传镜像文件中的位置和作为文件上传完成的标识;
分批上传模块,用于在云数据中心操作系统前端页面上分批上传各子文件,以使后端将接收到的子文件按照相应的标识信息进行重构拼接并存储至本地;
镜像文件发送模块,用于当各子文件均上传成功,将重构拼接得到的镜像文件发送至OpenStack。
可选的,所述分批上传模块用于按照各子文件分段顺序,逐个依次通过所述云数据中心操作系统的前端页面进行上传,以使所述后端每接收到一个子文件便根据相应标识信息将当前子文件追加至相邻的上一个子文件后。
本发明实施例还提供了一种镜像文件上传设备,包括处理器,所述处理器用于执行存储器中存储的计算机程序时实现如前任一项所述镜像文件上传方法的步骤。
本发明实施例最后还提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有镜像文件上传程序,所述镜像文件上传程序被处理器执行时实现如前任一项所述镜像文件上传方法的步骤。
本申请提供的技术方案的优点在于,将待上传镜像文件进行分段处理,并将分段处理后各子段文件分批次通过云数据中心操作系统前端页面进行上传操作,从而解决了相关技术中直接将镜像文件上传导致浏览器页面内存溢出的现象;后端每接收一个子文件将其保存至本地,直至得到所有子文件后上传至OpenStack,实现了对镜像文件所有数据段的接收,避免后端内存溢出现象的发生,有效保证上传镜像文件的完整性和可用性。
此外,本发明实施例还针对镜像文件上传方法提供了相应的实现装置、设备及计算机可读存储介质,进一步使得所述方法更具有实用性,所述装置、设备及计算机可读存储介质具有相应的优点。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性的,并不能限制本公开。
附图说明
为了更清楚的说明本发明实施例或相关技术的技术方案,下面将对实施例或相关技术描述中所需要使用的附图作简单的介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种镜像文件上传方法的流程示意图;
图2为本发明实施例提供的另一种镜像文件上传方法的流程示意图;
图3为本发明实施例提供的再一种镜像文件上传方法的流程示意图;
图4为本发明实施例提供的镜像文件上传装置的一种具体实施方式结构图;
图5为本发明实施例提供的镜像文件上传装置的另一种具体实施方式结构图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面结合附图和具体实施方式对本发明作进一步的详细说明。显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”“第四”等是用于区别不同的对象,而不是用于描述特定的顺序。此外术语“包括”和“具有”以及他们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可包括没有列出的步骤或单元。
在介绍了本发明实施例的技术方案后,下面详细的说明本申请的各种非限制性实施方式。
首先参见图1,图1为本发明实施例提供的一种镜像文件上传方法的流程示意图,本发明实施例可包括以下内容:
S101:将待上传镜像文件分割为多个子文件,并为每个子文件设置标识信息。
在本申请中,可采用任何一种文件切割方法按照预设容量值将待上传镜像文件切割为多段,各段之间没有重叠,在确定每段文件占用空间容量值时可根据待上传镜像文件的空间容量值、云管理中心操作系统的前端当前剩余可用空间值、后端当前剩余可用空间值及云管理中心操作系统当前运行任务所需空间容量值来决定,也可由本领域技术人员凭自身经验进行确定,这均不影响本申请的实现。在将待上传镜像文件切割为多个子文件后,可为每个子文件设置标识信息,标识信息用于标记各子文件在待上传镜像文件中的位置和作为文件上传完成的标识,识信息用于标记各子文件在待上传镜像文件中的位置是为了后续拼接重构文件的依据,标识信息作为文件上传完成的标识可在子文件上传之前设置标记值为0,上传完成后标记值自动变成1,这样根据标识信息的标记值来甄别相应子文件是否上传完成。
S102:在云数据中心操作系统前端页面上分批上传各子文件,以使后端将接收到的子文件按照相应的标识信息进行重构拼接并存储至本地。
可以理解的是,在将待上传镜像文件切割为多个子文件后,可将切割后的子文件按照切割顺序升序或降序逐个进行上传,也就是一个子文件上传成功后,在将其相邻子文件进行上传。也可分多个批次进行上传,同一批次的多个子文件可以逐个单线程上传也可多个线程同时上传,这均不影响本申请的实现。
可选的,为了提高上传文件的安全性,防止被非法者窃取,还可向按照预先存储的加密算法对各子文件进行加密处理,将加密后的子文件进行上传,为了提高文件上传的效率,降低网络带宽占用值,还可对加密后的子文件进行压缩处理。
云数据中心操作系统前端页面上在上传各子文件的过程中,可实时显示文件上传进度,或者是在云数据中心操作系统前端页面上分批上传压缩处理后的各子文件,并在前端页面上显示各子文件的传输进度。后端每接收到前端上传的一个子文件,则将子文件存储在后端本地,并按照子文件携带的标识信息,当刚接收到的子文件追加至与之相邻的子文件的前部或后部。
S103:当各子文件均上传成功,将重构拼接得到的镜像文件发送至OpenStack。
可采用任何一种文件拼接重构算法将各个子文件拼接为完整的镜像文件,然后在拼接完成后,将拼接重构的镜像文件上传至OpenStack,以实现从云数据中心操作系统上传镜像文件至OpenStack平台,还可有效避免云数据中心操作系统后端内存溢出的现象发生。
在本发明实施例提供的技术方案中,将待上传镜像文件进行分段处理,并将分段处理后各子段文件分批次通过云数据中心操作系统前端页面进行上传操作,从而解决了相关技术中直接将镜像文件上传导致浏览器页面内存溢出的现象;后端每接收一个子文件将其保存至本地,直至得到所有子文件后上传至OpenStack,实现了对镜像文件所有数据段的接收,避免后端内存溢出现象的发生,有效保证上传镜像文件的完整性和可用性。
基于上述实施例,本申请还提供了另外一个实施例,请参见图2,图2为本发明实施例提供的另一种镜像文件上传方法的流程示意图,本发明实施例例如可应用于部署分布式系统为K8s的云数据中心操作系统,具体的可包括以下内容:
S201:将待上传镜像文件分割为多个子文件,并为每个子文件设置标识信息。
S202:根据待上传镜像文件对应的后端容器节点信息和待上传镜像文件上传所需最长时间,自动配置会话保持事项,以使各子文件上传至同一个容器节点中。
可以理解的是,云数据中心操作系统如浪潮云海采用k8s部署,云数据中心操作系统存在多个容器节点pod,因此在多pod下,需保证同一镜像文件的完整性。避免因负载均衡,文件的所属段传输到不同pod,可在上传文件之前配置会话session保持,配置方法可如下:
在service的yaml的sepc里加入以下代码:
经过上述配置,便可开启了session保持,timeoutSeconds指的是session保持的时间,这个时间默认可为10800秒,也就是三个小时。当不设置session保持时,service向后台pod转发规则是轮询。当设置了session保持之后,k8s会根据访问的ip来把请求转发给他以前访问过的pod,这样session就保持住了。
S203:按照各子文件分段顺序,逐个依次通过云数据中心操作系统的前端页面进行上传,同时传输待上传镜像文件的初始md5码;以使后端每接收到一个子文件便根据相应标识信息将当前子文件追加至相邻的上一个子文件后。
文件分段上传就是把文件分成一个个小块然后逐个上传,例如浪潮云海系统前端采用vue,因此采用vue中file.slice方式将镜像文件进行分段,并增加标识,表明文件是否上传完成,同时传递文件的md5码,前端页面显示文件上传进度。当然,也可采用其他一致性验证码,本申请对此不做任何限定。
S204:当各子文件均上传成功,计算重构拼接得到的镜像文件的md5码。
S205:判断重构拼接得到的镜像文件的md5码是否与初始md5码一致,若是,则执行S206,若否,则执行S207。
S206:重构拼接得到的镜像文件为完整镜像文件,将重构拼接得到的镜像文件发送至OpenStack。
S207:进行报错。
本发明实施例与上述实施例相同的步骤或方法,可参阅上述实施例的描述,此处,便不再赘述。
由上可知,本申请将分割后的子文件逐个上传,避免出现前端内存溢出,利用md5码对镜像文件的完整性进行校验,进一步有效保证上传镜像文件的完整性和可用性。
基于上述实施例,本申请还提供了另外一个实施例,请参见图3,图3为本发明实施例提供的再一种镜像文件上传方法的流程示意图,本发明实施例例如可应用于部署分布式系统为K8s的云数据中心操作系统,具体的可包括以下内容:
S301:将待上传镜像文件分割为多个子文件,并为每个子文件设置标识信息。
S302:根据待上传镜像文件对应的后端容器节点信息和待上传镜像文件上传所需最长时间,自动配置会话保持事项,以使各子文件上传至同一个容器节点中。
S303:根据云数据中心操作系统的内存容量和待上传镜像文件占用空间容量值将各子文件分类至并行传输组和单线程传输组。
S304:在前端页面上先将并行传输组中的各子文件利用多个线程同时上传;并行传输组中各子文件上传成功后,在前端页面上将单线程传输组中的各子文件逐个上传。
在本发明实施例中,为了进一步提升文件上传速率,可将镜像文件的切割完的前半部分数据放置并行传输组中,单线程传输组在上传子文件时可按照分割顺序从前向后依次上传。这样在单线程传输组传输过程中,可先将并行传输组中的各子段数据进行拼接,后续每接收到一个数据,便可直接追加至拼接文件的后端即可。
S305:当各子文件均上传成功,计算重构拼接得到的镜像文件的md5码。
S306:判断重构拼接得到的镜像文件的md5码是否与初始md5码一致,若是,则执行S307,若否,则执行S308。
S307:重构拼接得到的镜像文件为完整镜像文件,将重构拼接得到的镜像文件发送至OpenStack。
S308:进行报错。
本发明实施例与上述实施例相同的步骤或方法,可参阅上述实施例的描述,此处,便不再赘述。
由上可知,本申请将子文件按实际系统内存分批次进行上传,不仅避免出现前端内存溢出,还可提升文件上传效率,利用md5码对镜像文件的完整性进行校验,进一步有效保证上传镜像文件的完整性和可用性。
本发明实施例还针对镜像文件上传方法提供了相应的实现装置,进一步使得所述方法更具有实用性。下面对本发明实施例提供的镜像文件上传装置进行介绍,下文描述的镜像文件上传装置与上文描述的镜像文件上传方法可相互对应参照。
参见图4,图4为本发明实施例提供的镜像文件上传装置在一种具体实施方式下的结构图,该装置可包括:
文件分段处理模块401,用于将待上传镜像文件分割为多个子文件,并为每个子文件设置标识信息,标识信息用于标记各子文件在待上传镜像文件中的位置和作为文件上传完成的标识。
分批上传模块402,用于在云数据中心操作系统前端页面上分批上传各子文件,以使后端将接收到的子文件按照相应的标识信息进行重构拼接并存储至本地。
镜像文件发送模块403,用于当各子文件均上传成功,将重构拼接得到的镜像文件发送至OpenStack。
可选的,在本实施例的一些实施方式中,请参阅图5,所述装置例如还可以包括会话保持设置模块404,所述会话保持设置模块404用于根据待上传镜像文件对应的后端容器节点信息和待上传镜像文件上传所需最长时间,自动配置会话保持事项,以使各子文件上传至同一个容器节点中。
可选的,在本实施例的另一些实施方式中,所述分批上传模块402具体可用于按照各子文件分段顺序,逐个依次通过云数据中心操作系统的前端页面进行上传,以使后端每接收到一个子文件便根据相应标识信息将当前子文件追加至相邻的上一个子文件后。
在本实施例的其他一些实施方式中,所述分批上传模块402例如可用于根据云数据中心操作系统的内存容量和待上传镜像文件占用空间容量值将各子文件分类至并行传输组和单线程传输组;在前端页面上先将并行传输组中的各子文件利用多个线程同时上传;并行传输组中各子文件上传成功后,在前端页面上将单线程传输组中的各子文件逐个上传。
作为一种可选的实施方式,所述镜像文件发送模块403中还可包括校验子模块,所述校验子模块用于计算重构拼接得到的镜像文件的md5码;若重构拼接得到的镜像文件的md5码与所述初始md5码一致,则重构拼接得到的镜像文件为完整镜像文件,将重构拼接得到的镜像文件发送至OpenStack。
基于上述实施例,所述装置例如还可包括报错模块405,用于重构拼接得到的镜像文件的md5码与所述初始md5码不一致,则进行报错。
本发明实施例所述镜像文件上传装置的各功能模块的功能可根据上述方法实施例中的方法具体实现,其具体实现过程可以参照上述方法实施例的相关描述,此处不再赘述。
由上可知,本发明实施例解决了相关技术中在从云数据中心操作系统中上传镜像文件至OpenStack过程中出现的内存溢出的问题。
本发明实施例还提供了一种镜像文件上传设备,具体可包括:
存储器,用于存储计算机程序;
处理器,用于执行计算机程序以实现如上任意一实施例所述镜像文件上传方法的步骤。
本发明实施例所述镜像文件上传设备的各功能模块的功能可根据上述方法实施例中的方法具体实现,其具体实现过程可以参照上述方法实施例的相关描述,此处不再赘述。
由上可知,本发明实施例解决了相关技术中在从云数据中心操作系统中上传镜像文件至OpenStack过程中出现的内存溢出的问题。
本发明实施例还提供了一种计算机可读存储介质,存储有镜像文件上传程序,所述镜像文件上传程序被处理器执行时如上任意一实施例所述镜像文件上传方法的步骤。该存储介质可以为U盘、移动硬盘、只读存储器、随机存取存储器、磁碟或者光盘等各种可以存储程序代码的介质。
本发明实施例所述计算机可读存储介质的各功能模块的功能可根据上述方法实施例中的方法具体实现,其具体实现过程可以参照上述方法实施例的相关描述,此处不再赘述。
由上可知,本发明实施例解决了相关技术中在从云数据中心操作系统中上传镜像文件至OpenStack过程中出现的内存溢出的问题。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其它实施例的不同之处,各个实施例之间相同或相似部分互相参见即可。对于实施例公开的装置而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
专业人员还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
以上对本发明所提供的一种镜像文件上传方法、装置、设备及计算机可读存储介质进行了详细介绍。本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想。应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以对本公开进行若干改进和修饰,这些改进和修饰也落入本公开权利要求的保护范围内。
Claims (10)
1.一种镜像文件上传方法,其特征在于,包括:
将待上传镜像文件分割为多个子文件,并为每个子文件设置标识信息,所述标识信息用于标记各子文件在所述待上传镜像文件中的位置和作为文件上传完成的标识;
在云数据中心操作系统前端页面上分批上传各子文件,以使后端将接收到的子文件按照相应的标识信息进行重构拼接并存储至本地;
当各子文件均上传成功,将重构拼接得到的镜像文件发送至OpenStack。
2.根据权利要求1所述的镜像文件上传方法,其特征在于,所述在云数据中心操作系统前端页面上分批上传各子文件,以使后端将接收到的子文件按照相应的标识信息进行重构拼接并存储至本地包括:
按照各子文件分段顺序,逐个依次通过所述云数据中心操作系统的前端页面进行上传,以使所述后端每接收到一个子文件便根据相应标识信息将当前子文件追加至相邻的上一个子文件后。
3.根据权利要求1所述的镜像文件上传方法,其特征在于,所述在云数据中心操作系统前端页面上分批上传各子文件包括:
根据所述云数据中心操作系统的内存容量和所述待上传镜像文件占用空间容量值将各子文件分类至并行传输组和单线程传输组;
在所述前端页面上先将所述并行传输组中的各子文件利用多个线程同时上传;
所述并行传输组中各子文件上传成功后,在所述前端页面上将所述单线程传输组中的各子文件逐个上传。
4.根据权利要求1至3任意一项所述的镜像文件上传方法,其特征在于,所述云数据中心操作系统上部署的分布式系统为K8s,所述在云数据中心操作系统的前端页面中上传各子文件之前还包括:
根据所述待上传镜像文件对应的后端容器节点信息和所述待上传镜像文件上传所需最长时间,自动配置会话保持事项,以使各子文件上传至同一个容器节点中。
5.根据权利要求4所述的镜像文件上传方法,其特征在于,所述在云数据中心操作系统前端页面上分批上传各子文件包括:
按照预先存储的加密算法对各子文件进行加密处理,并对加密后的子文件进行压缩处理;
在云数据中心操作系统前端页面上分批上传压缩处理后的各子文件,并在所述前端页面上显示各子文件的传输进度。
6.根据权利要求1至3任意一项所述的镜像文件上传方法,其特征在于,在所述前端页面上分批上传各子文件时,同时传输所述待上传镜像文件的初始md5码,所述将重构拼接得到的镜像文件发送至OpenStack包括:
计算重构拼接得到的镜像文件的md5码;
判断重构拼接得到的镜像文件的md5码是否与所述初始md5码一致;
若是,则重构拼接得到的镜像文件为完整镜像文件,将重构拼接得到的镜像文件发送至OpenStack;若否,则进行报错。
7.一种镜像文件上传装置,其特征在于,包括:
文件分段处理模块,用于将待上传镜像文件分割为多个子文件,并为每个子文件设置标识信息,所述标识信息用于标记各子文件在所述待上传镜像文件中的位置和作为文件上传完成的标识;
分批上传模块,用于在云数据中心操作系统前端页面上分批上传各子文件,以使后端将接收到的子文件按照相应的标识信息进行重构拼接并存储至本地;
镜像文件发送模块,用于当各子文件均上传成功,将重构拼接得到的镜像文件发送至OpenStack。
8.根据权利要求7所述的镜像文件上传装置,其特征在于,所述分批上传模块用于按照各子文件分段顺序,逐个依次通过所述云数据中心操作系统的前端页面进行上传,以使所述后端每接收到一个子文件便根据相应标识信息将当前子文件追加至相邻的上一个子文件后。
9.一种镜像文件上传设备,其特征在于,包括处理器,所述处理器用于执行存储器中存储的计算机程序时实现如权利要求1至6任一项所述镜像文件上传方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有镜像文件上传程序,所述镜像文件上传程序被处理器执行时实现如权利要求1至6任一项所述镜像文件上传方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911025141.8A CN110740188B (zh) | 2019-10-25 | 2019-10-25 | 镜像文件上传方法、装置、设备及计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911025141.8A CN110740188B (zh) | 2019-10-25 | 2019-10-25 | 镜像文件上传方法、装置、设备及计算机可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110740188A true CN110740188A (zh) | 2020-01-31 |
CN110740188B CN110740188B (zh) | 2023-01-10 |
Family
ID=69271577
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911025141.8A Active CN110740188B (zh) | 2019-10-25 | 2019-10-25 | 镜像文件上传方法、装置、设备及计算机可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110740188B (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111459940A (zh) * | 2020-04-02 | 2020-07-28 | 中电工业互联网有限公司 | 一种高效可靠的数据集成方法 |
CN111629058A (zh) * | 2020-05-27 | 2020-09-04 | 广东浪潮大数据研究有限公司 | 一种镜像上传方法、装置、系统和后端设备 |
CN112559919A (zh) * | 2020-12-22 | 2021-03-26 | 平安银行股份有限公司 | 线上文档上传的检查方法、装置、电子设备及存储介质 |
CN112668027A (zh) * | 2021-01-04 | 2021-04-16 | 中车青岛四方车辆研究所有限公司 | 用于分布式系统的数据下装方法、tias系统数据下装方法 |
CN114020266A (zh) * | 2021-10-28 | 2022-02-08 | 四川启睿克科技有限公司 | 一种基于vue的分段式进度条组件的实现方法 |
CN114301779A (zh) * | 2021-12-15 | 2022-04-08 | 迈普通信技术股份有限公司 | 一种镜像文件配置方法、装置,ap设备及网络系统 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107078525A (zh) * | 2014-10-19 | 2017-08-18 | 薄膜电子有限公司 | 用于检测开口容器的多状态nfc/rf机构及其制造和使用方法 |
CN107329798A (zh) * | 2017-05-18 | 2017-11-07 | 华为技术有限公司 | 数据复制的方法、装置和虚拟化系统 |
CN107483573A (zh) * | 2017-08-08 | 2017-12-15 | 郑州云海信息技术有限公司 | 云平台中镜像文件的传输方法和装置 |
US20180218007A1 (en) * | 2017-01-31 | 2018-08-02 | Cisco Technology, Inc. | Fast network performance in containerized environments for network function virtualization |
CN109361762A (zh) * | 2018-11-26 | 2019-02-19 | 量子云未来(北京)信息科技有限公司 | 一种文件传输方法、装置及系统 |
CN109783193A (zh) * | 2018-12-27 | 2019-05-21 | 南京优速网络科技有限公司 | 一种可在多域云平台中复用的镜像文件管理方法 |
-
2019
- 2019-10-25 CN CN201911025141.8A patent/CN110740188B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107078525A (zh) * | 2014-10-19 | 2017-08-18 | 薄膜电子有限公司 | 用于检测开口容器的多状态nfc/rf机构及其制造和使用方法 |
US20180218007A1 (en) * | 2017-01-31 | 2018-08-02 | Cisco Technology, Inc. | Fast network performance in containerized environments for network function virtualization |
CN107329798A (zh) * | 2017-05-18 | 2017-11-07 | 华为技术有限公司 | 数据复制的方法、装置和虚拟化系统 |
CN107483573A (zh) * | 2017-08-08 | 2017-12-15 | 郑州云海信息技术有限公司 | 云平台中镜像文件的传输方法和装置 |
CN109361762A (zh) * | 2018-11-26 | 2019-02-19 | 量子云未来(北京)信息科技有限公司 | 一种文件传输方法、装置及系统 |
CN109783193A (zh) * | 2018-12-27 | 2019-05-21 | 南京优速网络科技有限公司 | 一种可在多域云平台中复用的镜像文件管理方法 |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111459940A (zh) * | 2020-04-02 | 2020-07-28 | 中电工业互联网有限公司 | 一种高效可靠的数据集成方法 |
CN111459940B (zh) * | 2020-04-02 | 2023-09-19 | 中电工业互联网有限公司 | 一种高效可靠的数据集成方法 |
CN111629058A (zh) * | 2020-05-27 | 2020-09-04 | 广东浪潮大数据研究有限公司 | 一种镜像上传方法、装置、系统和后端设备 |
CN112559919A (zh) * | 2020-12-22 | 2021-03-26 | 平安银行股份有限公司 | 线上文档上传的检查方法、装置、电子设备及存储介质 |
CN112559919B (zh) * | 2020-12-22 | 2023-11-10 | 平安银行股份有限公司 | 线上文档上传的检查方法、装置、电子设备及存储介质 |
CN112668027A (zh) * | 2021-01-04 | 2021-04-16 | 中车青岛四方车辆研究所有限公司 | 用于分布式系统的数据下装方法、tias系统数据下装方法 |
CN114020266A (zh) * | 2021-10-28 | 2022-02-08 | 四川启睿克科技有限公司 | 一种基于vue的分段式进度条组件的实现方法 |
CN114020266B (zh) * | 2021-10-28 | 2024-04-12 | 四川启睿克科技有限公司 | 一种基于vue的分段式进度条组件的实现方法 |
CN114301779A (zh) * | 2021-12-15 | 2022-04-08 | 迈普通信技术股份有限公司 | 一种镜像文件配置方法、装置,ap设备及网络系统 |
CN114301779B (zh) * | 2021-12-15 | 2024-03-19 | 迈普通信技术股份有限公司 | 一种镜像文件配置方法、装置,ap设备及网络系统 |
Also Published As
Publication number | Publication date |
---|---|
CN110740188B (zh) | 2023-01-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110740188B (zh) | 镜像文件上传方法、装置、设备及计算机可读存储介质 | |
EP3605323B1 (en) | Method for generating network slice template and for applying network slice template, and apparatus | |
CN108153849B (zh) | 一种数据库表切分方法、装置、系统和介质 | |
US9438478B1 (en) | Using an SDN controller to automatically test cloud performance | |
CN105871587A (zh) | 日志上传方法及装置 | |
US20200218579A1 (en) | Selecting a cloud service provider | |
US9942087B2 (en) | Application resiliency using APIs | |
CN112131099B (zh) | 一种版本升级测试方法及装置 | |
CN104978253B (zh) | 一种目标文件校验的方法和装置 | |
CN105450759A (zh) | 一种系统镜像的管理方法和装置 | |
CN109908585B (zh) | 一种文件处理方法及系统、计算设备及存储介质 | |
US10977049B2 (en) | Installing of operating system | |
US10552306B2 (en) | Automated test generation for multi-interface and multi-platform enterprise virtualization management environment | |
US9792146B2 (en) | Iterative anti-collocation of network resources using prioritized graph coloring | |
CN112313629A (zh) | 备份和恢复验证 | |
CN113032245A (zh) | 错误定位识别的测试方法、装置、计算机设备及存储介质 | |
CN114185484A (zh) | 一种文档存储集群化的方法、装置、设备和介质 | |
CN102880478B (zh) | 软件更新方法 | |
CN105550071A (zh) | 系统文件升级及检测方法、通信设备 | |
WO2021230930A1 (en) | Semi-decoupled partitioning for video coding | |
CN112702373B (zh) | 微服务升级文件发送方法、接收方法、设备及存储介质 | |
CN104536852A (zh) | 数据恢复方法及装置 | |
CN110502238A (zh) | 一种前后端联调的方法及装置 | |
CN105871982A (zh) | 内容推送的方法、装置以及系统 | |
CN110866380A (zh) | 一种填写信息字段内容的方法、终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |