CN112187918A - 云计算平台系统及其基于对象存储的数据下载和上传方法 - Google Patents
云计算平台系统及其基于对象存储的数据下载和上传方法 Download PDFInfo
- Publication number
- CN112187918A CN112187918A CN202011035602.2A CN202011035602A CN112187918A CN 112187918 A CN112187918 A CN 112187918A CN 202011035602 A CN202011035602 A CN 202011035602A CN 112187918 A CN112187918 A CN 112187918A
- Authority
- CN
- China
- Prior art keywords
- data
- data transmission
- object storage
- host end
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/14—Session management
- H04L67/141—Setup of application sessions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/16—Implementation or adaptation of Internet protocol [IP], of transmission control protocol [TCP] or of user datagram protocol [UDP]
- H04L69/161—Implementation details of TCP/IP or UDP/IP stack architecture; Specification of modified or new header fields
- H04L69/162—Implementation details of TCP/IP or UDP/IP stack architecture; Specification of modified or new header fields involving adaptations of sockets based mechanisms
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Abstract
本申请公开了一种云计算平台系统及其基于对象存储的数据下载和上传方法,该系统包括云平台管理端及用于运行对象存储服务的主机端;云平台管理端部署有用户交互应用,用户交互应用设置有数据传输接口,主机端设置有数据传输模块;云平台管理端用于与主机端进行通信以查询对象存储服务状态,将对象存储服务当前所在的主机端确定为目标主机端;并通过数据传输接口与目标主机端中的数据传输模块建立socket连接,通过socket连接通道直接进行数据传输。本申请基于云平台管理端中预设的数据传输接口与主机端建立socket连接通道,由此从云平台管理端即可实现对象数据的直接访问,不仅便于直接管理对象存储,而且也有效提高了对象数据的访问效率。
Description
技术领域
本申请涉及云计算技术领域,特别涉及一种云计算平台系统及其基于对象存储的数据下载和上传方法。
背景技术
近年来,随着云计算技术的发展和大规模普及,以及互联网时代的发展和数据的爆发式增长,相应的存储能力需求和数据处理需求也日益增长,存储的方式和种类也越发多样化。对象存储作为一种适用于非结构化数据的存储方式,应用场景也越来越广泛,包括了影像系统存储、互联网金融业务、归档备份、容器平台、大数据平台和机器学习存储等领域,对象存储在一定程度上具有读写速度快,利于分享等特点。
但在现有对象存储与云平台结合的过程中,也存在着交互不方便、数据传输存在限制等弊端。现有技术中,通常是由云平台系统中的主机端为用户提供数据访问服务,主机端上的虚拟机可与对象存储之间通过管理网络连接,因此虚拟机中的用户业务程序可以访问到对象存储,并进行上传和下载等数据传输操作。但是,对象存储服务的组件实现一般只提供命令行的方式进行访问,操作较为不便,并且,此种数据访问方式还限制了数据传输性能,例如限制了上传对象的最大容量等。
鉴于此,提供一种解决上述技术问题的方案,已经是本领域技术人员所亟需关注的。
发明内容
本申请的目的在于提供一种云计算平台系统及其基于对象存储的数据下载和上传方法,以便有效提高云计算平台中对象数据的访问效率和便利性。
为解决上述技术问题,第一方面,本申请公开了一种云计算平台系统,包括云平台管理端以及用于运行对象存储服务的主机端;所述云平台管理端部署有用户交互应用,所述用户交互应用设置有数据传输接口,所述主机端设置有数据传输模块;
所述云平台管理端用于与主机端进行通信以查询对象存储服务状态,将对象存储服务当前所在的主机端确定为目标主机端;并通过所述数据传输接口与所述目标主机端中的所述数据传输模块建立socket连接,通过socket连接通道直接进行数据传输。
可选地,所述云平台管理端具体用于:
向对象存储服务划定的主机范围内的任一主机端发送对象存储服务状态查询请求,根据接收到的查询结果,将对象存储服务当前所在的主机端确定为目标主机端。
可选地,在数据上传场景中,所述云平台管理端具体用于:
在确定所述目标主机端之后,向所述目标主机端发送数据上传消息;在所述目标主机端基于所述数据传输模块启动数据接收服务后,基于所述数据传输接口启动数据发送服务,以便建立所述数据传输模块与所述数据传输接口间的socket连接;通过socket连接通道,将目标对象数据发送至所述目标主机端以便写入对象存储磁盘挂载目录。
可选地,所述云平台管理端还用于:
在目标数据发送完毕后关闭所述数据发送服务;在所述目标主机端接收完毕并关闭所述数据接收服务后,接收所述目标主机端返回的数据传输完成消息。
可选地,在数据下载场景中,所述云平台管理端具体用于:
在确定所述目标主机端之后,基于所述数据传输接口启动数据接收服务,向所述目标主机端发送数据下载请求;在所述目标主机端基于所述数据传输模块启动数据发送服务后,建立所述数据传输模块与所述数据传输接口间的socket连接;通过socket连接通道接收所述目标主机端从对象存储磁盘挂载目录中读取的目标对象数据。
可选地,所述云平台管理端还用于:
在所述目标主机端发送完毕并关闭所述数据发送服务后,关闭所述数据接收服务。
可选地,所述云平台管理端还用于:
在关闭所述数据接收服务之前,将接收到的所述目标对象数据转输为HTTP输出流并返回至所述用户交互应用的用户界面。
可选地,所述数据传输接口和所述数据传输模块均设置有扩展配置单元,用以根据应用需要而进行配置修改。
第二方面,本申请还公开了一种云计算平台系统中基于对象存储的数据上传方法,所述云计算平台系统包括云平台管理端以及用于运行对象存储服务的主机端;所述云平台管理端部署有用户交互应用,所述用户交互应用设置有数据传输接口,所述主机端设置有数据传输模块;所述方法应用于所述云平台管理端,包括:
向对象存储服务划定的主机范围内任一主机端发送对象存储服务状态查询请求;
根据接收到的查询结果,将对象存储服务当前所在的主机端确定为目标主机端;
向所述目标主机端发送数据上传消息;
在所述目标主机端基于所述数据传输模块启动数据接收服务后,基于所述数据传输接口启动数据发送服务,以便建立所述数据传输模块与所述数据传输接口间的socket连接;
通过socket连接通道将目标对象数据发送至所述目标主机端以便写入对象存储磁盘挂载目录。
可选地,在所述通过socket连接通道将目标对象数据发送至所述目标主机端以便写入对象存储磁盘挂载目录之后,还包括:
在目标数据发送完毕后关闭所述数据发送服务;
在所述目标主机端接收完毕并关闭所述数据接收服务后,接收所述目标主机端返回的数据传输完成消息。
第三方面,本申请还公开了一种云计算平台系统中基于对象存储的数据下载方法,所述云计算平台系统包括云平台管理端以及用于运行对象存储服务的主机端;所述云平台管理端部署有用户交互应用,所述用户交互应用设置有数据传输接口,所述主机端设置有数据传输模块;所述方法应用于所述云平台管理端,包括:
向对象存储服务划定的主机范围内任一主机端发送对象存储服务状态查询请求;
根据接收到的查询结果,将对象存储服务当前所在的主机端确定为目标主机端;
基于所述数据传输接口启动数据接收服务;
向所述目标主机端发送数据下载请求;
在所述目标主机端基于所述数据传输模块启动数据发送服务后,建立所述数据传输模块与所述数据传输接口间的socket连接;
通过socket连接通道接收所述目标主机端从对象存储磁盘挂载目录中读取的目标对象数据。
可选地,在所述通过socket连接通道接收所述目标主机端从对象存储磁盘挂载目录中读取的目标对象数据之后,还包括:
在所述目标主机端发送完毕并关闭所述数据发送服务后,关闭所述数据接收服务。
可选地,在所述关闭所述数据接收服务之前,还包括:
将接收到的所述目标对象数据转输为HTTP输出流并返回至所述用户交互应用的用户界面。
本申请所提供的云计算平台系统及其基于对象存储的数据下载和上传方法所具有的有益效果是:本申请在云平台管理端部署用户交互应用,基于预设的数据传输接口与主机端建立socket连接通道,由此从云平台管理端即可实现对象数据的直接访问,不仅便于直接管理对象存储,而且也突破了对象存储组件实现的性能限制,有效提高了对象数据的访问效率。
附图说明
为了更清楚地说明现有技术和本申请实施例中的技术方案,下面将对现有技术和本申请实施例描述中需要使用的附图作简要的介绍。当然,下面有关本申请实施例的附图描述的仅仅是本申请中的一部分实施例,对于本领域普通技术人员来说,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图,所获得的其他附图也属于本申请的保护范围。
图1为本申请实施例公开的一种云计算平台系统的架构图;
图2为本申请实施例公开的一种云计算平台系统中上传对象数据的交互示意图;
图3为本申请实施例公开的一种云计算平台系统中下载对象数据的交互示意图;
图4为本申请实施例公开的一种云计算平台系统中基于对象存储的数据上传方法的流程图;
图5为本申请实施例公开的一种云计算平台系统中基于对象存储的数据下载方法的流程图。
具体实施方式
本申请的核心在于提供一种云计算平台系统及其基于对象存储的数据下载和上传方法,以便有效提高云计算平台中对象数据的访问效率和便利性。
为了对本申请实施例中的技术方案进行更加清楚、完整地描述,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行介绍。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
近年来,随着云计算技术的发展和大规模普及,以及互联网时代的发展和数据的爆发式增长,相应的存储能力需求和数据处理需求也日益增长,存储的方式和种类也越发多样化。对象存储作为一种适用于非结构化数据的存储方式,应用场景也越来越广泛,包括了影像系统存储、互联网金融业务、归档备份、容器平台、大数据平台和机器学习存储等领域,对象存储在一定程度上具有读写速度快,利于分享等特点。
但在现有对象存储与云平台结合的过程中,也存在着交互不方便、数据传输存在限制等弊端。现有技术中,通常是由云平台系统中的主机端为用户提供数据访问服务,主机端上的虚拟机可与对象存储之间通过管理网络连接,因此虚拟机中的用户业务程序可以访问到对象存储,并进行上传和下载等数据传输操作。但是,对象存储服务的组件实现一般只提供命令行的方式进行访问,操作较为不便,并且,此种数据访问方式还限制了数据传输性能,例如限制了上传对象的最大容量等。鉴于此,本申请提供了一种云计算平台系统,可有效解决上述问题。
参见图1所示,本申请实施例公开了一种云计算平台系统,包括云平台管理端100以及用于运行对象存储服务的主机端200;云平台管理端100部署有用户交互应用,用户交互应用设置有数据传输接口,主机端200设置有数据传输模块;
云平台管理端100用于与主机端200进行通信以查询对象存储服务状态,将对象存储服务当前所在的主机端200确定为目标主机端200;并通过数据传输接口与目标主机端200中的数据传输模块建立socket连接,通过socket连接通道直接进行数据传输。
具体地,云平台管理端100为整个云计算平台系统的核心,提供用户界面对下属计算、存储和网络等模块资源进行管理。云平台管理端100一般会关联多个主机端200,在每个主机端200上又可以运行这多台虚拟机。对象存储服务运行在某一个主机端200上,并且具有HA(High Availability,高可用性)机制。一般地,对象存储服务在创建时会划定一个对应的主机范围,在主机掉电、网络断开等会导致主机离线的场景下,通过HA机制,对象存储服务可以漂移至主机范围内的其他主机端200上,以保证对象存储服务的连贯性。
从用户角度来看,云平台管理端100亦可以访问虚拟机业务程序保存在对象存储中的对象数据,并进而进行一定的管理等操作。由此,需要指出的是,本申请所提供的云计算平台系统,具体是基于云平台管理端100来向用户提供对象数据的访问服务。
为实现云平台管理端100与对象存储服务之间的数据传输,本申请为云平台管理端100部署有用户交互应用,该用户交互应用具有增强访问交互体验的用户界面,在其用户界面中设置有数据传输接口。同时,各主机端200上设置有数据传输模块。数据传输接口可以与任意一台主机端200中的数据传输模块建立socket连接,通过该socket连接通道,可令用户的对象数据与对象存储服务所在磁盘都直接进行数据连通,突破了对象存储服务的组件的性能限制,令对象数据可以基于固有属性而根据实际情况按需处理。
其中,对象存储服务当前实际所在的主机端200即为目标主机端200。云平台管理端100在进行对象数据的传输之前,首先需要明确目标主机端200,具体可通过查询获取对象存储服务状态以明确目标主机端200。
可见,本申请所提供的云计算平台系统,在云平台管理端100部署用户交互应用,基于预设的数据传输接口与主机端200建立socket连接通道,由此从云平台管理端100即可实现对象数据的直接访问,不仅便于直接管理对象存储,而且也突破了对象存储组件实现的性能限制,有效提高了对象数据的访问效率。
作为一种具体实施例,本申请实施例所提供的云计算平台系统在上述内容的基础上,云平台管理端100具体用于:
向对象存储服务划定的主机范围内的任一主机端200发送对象存储服务状态查询请求,根据接收到的查询结果,将对象存储服务当前所在的主机端200确定为目标主机端200。
在对象存储中,一个对象可以看成是一个文件,只能全写全读。因此云平台管理端100在对数据处理前需要先确定目标主机端200,具体可以向对象存储服务划定的主机范围内任一主机发送请求,查询对象存储服务状态,以便获取当前对象存储实际所在的主机。
作为一种具体实施例,本申请实施例所提供的云计算平台系统在上述内容的基础上,在数据上传场景中,云平台管理端100具体用于:
在确定目标主机端200之后,向目标主机端200发送数据上传消息;在目标主机端200基于数据传输模块启动数据接收服务即Receiving Service后,基于数据传输接口启动数据发送服务即Sending Service,以便建立数据传输模块与数据传输接口间的socket连接;通过socket连接通道,将目标对象数据发送至目标主机端200以便写入对象存储磁盘挂载目录。
其中,Receiving Service和Sending Service均进行模块化处理,以方便复用,可以根据需要在云平台管理端100或主机端200进行启动,共同配合建立起传输数据所需的Socket连接通道。
作为一种具体实施例,本申请实施例所提供的云计算平台系统在上述内容的基础上,云平台管理端100还用于:
在目标数据发送完毕后关闭数据发送服务;在目标主机端200接收完毕并关闭数据接收服务后,接收目标主机端200返回的数据传输完成消息。
具体地,在主机端200关闭Receiving Service并返回数据传输完成消息后,云平台管理端100便认为对象数据的传输操作成功,进而可通过用户界面告知用户。
上述具体过程可参见图2,图2为本申请实施例提供的一种上传对象数据的交互示意图。
作为一种具体实施例,本申请实施例所提供的云计算平台系统在上述内容的基础上,在数据下载场景中,云平台管理端100具体用于:
在确定目标主机端200之后,基于数据传输接口启动数据接收服务,向目标主机端200发送数据下载请求;在目标主机端200基于数据传输模块启动数据发送服务后,建立数据传输模块与数据传输接口间的socket连接;通过socket连接通道接收目标主机端200从对象存储磁盘挂载目录中读取的目标对象数据。
具体地,下载对象数据的过程可以看作上传对象数据的反过程,不同之处在于,在数据下载场景中,云平台管理端100自身需要先开启Receiving Service,然后再向主机端200发送请求,在主机端200上开启Sending Service。
作为一种具体实施例,本申请实施例所提供的云计算平台系统在上述内容的基础上,云平台管理端100还用于:
在目标主机端200发送完毕并关闭数据发送服务后,关闭数据接收服务。
作为一种具体实施例,本申请实施例所提供的云计算平台系统在上述内容的基础上,云平台管理端100还用于:
在关闭数据接收服务之前,将接收到的目标对象数据转输为HTTP输出流并返回至用户交互应用的用户界面。
上述过程可具体参考图3,图3为本申请实施例公开的一种下载对象数据的交互示意图。
作为一种具体实施例,本申请实施例所提供的云计算平台系统在上述内容的基础上,数据传输接口和数据传输模块均设置有扩展配置单元,用以根据应用需要而进行配置修改。
具体地,本实施例中,作为数据传输核心的数据传输模块和数据传输接口均采用了策略设计模式,基于扩展配置单元可以根据实际需要对发送和接收行为的前置或后续操作等进行自定义,也可对发送和接收成功或异常后的回调进行自由处理,以便增强其复用性和拓展性,方便运维人员根据需要进行配置或二次开发,对对象数据传输过程进行更自由的控制。
参见图4,本申请实施例公开了一种云计算平台系统中基于对象存储的数据上传方法。
该云计算平台系统包括云平台管理端以及用于运行对象存储服务的主机端;云平台管理端部署有用户交互应用,用户交互应用设置有数据传输接口,主机端设置有数据传输模块。该方法应用于云平台管理端,包括:
S101:向对象存储服务划定的主机范围内任一主机端发送对象存储服务状态查询请求。
S102:根据接收到的查询结果,将对象存储服务当前所在的主机端确定为目标主机端。
S103:向目标主机端发送数据上传消息。
S104:在目标主机端基于数据传输模块启动数据接收服务后,基于数据传输接口启动数据发送服务,以便建立数据传输模块与数据传输接口间的socket连接。
S105:通过socket连接通道将目标对象数据发送至目标主机端以便写入对象存储磁盘挂载目录。
作为一种具体实施例,本申请实施例所提供的云计算平台系统中基于对象存储的数据上传方法在上述内容的基础上,在通过socket连接通道将目标对象数据发送至目标主机端以便写入对象存储磁盘挂载目录之后,还包括:
在目标数据发送完毕后关闭数据发送服务;
在目标主机端接收完毕并关闭数据接收服务后,接收目标主机端返回的数据传输完成消息。
本申请实施例所提供的云计算平台系统中基于对象存储的数据上传方法,在云平台管理端部署用户交互应用,基于预设的数据传输接口与主机端建立socket连接通道,由此从云平台管理端即可实现对象数据的直接上传,不仅便于直接管理对象存储,而且也突破了对象存储组件实现的性能限制,有效提高了对象数据的上传效率。
参见图5,本申请实施例公开了一种云计算平台系统中基于对象存储的数据下载方法。
该云计算平台系统包括云平台管理端以及用于运行对象存储服务的主机端;云平台管理端部署有用户交互应用,用户交互应用设置有数据传输接口,主机端设置有数据传输模块。该方法应用于云平台管理端,包括:
S201:向对象存储服务划定的主机范围内任一主机端发送对象存储服务状态查询请求。
S202:根据接收到的查询结果,将对象存储服务当前所在的主机端确定为目标主机端。
S203:基于数据传输接口启动数据接收服务。
S204:向目标主机端发送数据下载请求。
S205:在目标主机端基于数据传输模块启动数据发送服务后,建立数据传输模块与数据传输接口间的socket连接。
S206:通过socket连接通道接收目标主机端从对象存储磁盘挂载目录中读取的目标对象数据。
作为一种具体实施例,本申请实施例所提供的云计算平台系统中基于对象存储的数据下载方法在上述内容的基础上,在通过socket连接通道接收目标主机端从对象存储磁盘挂载目录中读取的目标对象数据之后,还包括:
在目标主机端发送完毕并关闭数据发送服务后,关闭数据接收服务。
作为一种具体实施例,本申请实施例所提供的云计算平台系统中基于对象存储的数据下载方法在上述内容的基础上,在关闭数据接收服务之前,还包括:
将接收到的目标对象数据转输为HTTP输出流并返回至用户交互应用的用户界面。
可见,本申请实施例所公开的云计算平台系统中基于对象存储的数据下载方法,在云平台管理端部署用户交互应用,基于预设的数据传输接口与主机端建立socket连接通道,由此从云平台管理端即可实现对象数据的直接下载,不仅便于直接管理对象存储,而且也突破了对象存储组件实现的性能限制,有效提高了对象数据的下载效率。
关于上述云计算平台系统中基于对象存储的数据上传和下载方法的具体内容,可参考前述关于云计算平台系统的详细介绍,这里就不再赘述。
本申请中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例公开的设备而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
还需说明的是,在本申请文件中,诸如“第一”和“第二”之类的关系术语,仅仅用来将一个实体或者操作与另一个实体或者操作区分开来,而不一定要求或者暗示这些实体或者操作之间存在任何这种实际的关系或者顺序。此外,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上对本申请所提供的技术方案进行了详细介绍。本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想。应当指出,对于本技术领域的普通技术人员来说,在不脱离本申请原理的前提下,还可以对本申请进行若干改进和修饰,这些改进和修饰也落入本申请的保护范围内。
Claims (10)
1.一种云计算平台系统,其特征在于,包括云平台管理端以及用于运行对象存储服务的主机端;所述云平台管理端部署有用户交互应用,所述用户交互应用设置有数据传输接口,所述主机端设置有数据传输模块;
所述云平台管理端用于与主机端进行通信以查询对象存储服务状态,将对象存储服务当前所在的主机端确定为目标主机端;并通过所述数据传输接口与所述目标主机端中的所述数据传输模块建立socket连接,通过socket连接通道直接进行数据传输。
2.根据权利要求1所述的云计算平台系统,其特征在于,所述云平台管理端具体用于:
向对象存储服务划定的主机范围内的任一主机端发送对象存储服务状态查询请求,根据接收到的查询结果,将对象存储服务当前所在的主机端确定为目标主机端。
3.根据权利要求1所述的云计算平台系统,其特征在于,在数据上传场景中,所述云平台管理端具体用于:
在确定所述目标主机端之后,向所述目标主机端发送数据上传消息;在所述目标主机端基于所述数据传输模块启动数据接收服务后,基于所述数据传输接口启动数据发送服务,以便建立所述数据传输模块与所述数据传输接口间的socket连接;通过socket连接通道,将目标对象数据发送至所述目标主机端以便写入对象存储磁盘挂载目录。
4.根据权利要求3所述的云计算平台系统,其特征在于,所述云平台管理端还用于:
在目标数据发送完毕后关闭所述数据发送服务;在所述目标主机端接收完毕并关闭所述数据接收服务后,接收所述目标主机端返回的数据传输完成消息。
5.根据权利要求1所述的云计算平台系统,其特征在于,在数据下载场景中,所述云平台管理端具体用于:
在确定所述目标主机端之后,基于所述数据传输接口启动数据接收服务,向所述目标主机端发送数据下载请求;在所述目标主机端基于所述数据传输模块启动数据发送服务后,建立所述数据传输模块与所述数据传输接口间的socket连接;通过socket连接通道接收所述目标主机端从对象存储磁盘挂载目录中读取的目标对象数据。
6.根据权利要求5所述的云计算平台系统,其特征在于,所述云平台管理端还用于:
在所述目标主机端发送完毕并关闭所述数据发送服务后,关闭所述数据接收服务。
7.根据权利要求6所述的云计算平台系统,其特征在于,所述云平台管理端还用于:
在关闭所述数据接收服务之前,将接收到的所述目标对象数据转输为HTTP输出流并返回至所述用户交互应用的用户界面。
8.根据权利要求1至7任一项所述的云计算平台系统,其特征在于,所述数据传输接口和所述数据传输模块均设置有扩展配置单元,用以根据应用需要而进行配置修改。
9.一种云计算平台系统中基于对象存储的数据上传方法,其特征在于,所述云计算平台系统包括云平台管理端以及用于运行对象存储服务的主机端;所述云平台管理端部署有用户交互应用,所述用户交互应用设置有数据传输接口,所述主机端设置有数据传输模块;所述方法应用于所述云平台管理端,包括:
向对象存储服务划定的主机范围内任一主机端发送对象存储服务状态查询请求;
根据接收到的查询结果,将对象存储服务当前所在的主机端确定为目标主机端;
向所述目标主机端发送数据上传消息;
在所述目标主机端基于所述数据传输模块启动数据接收服务后,基于所述数据传输接口启动数据发送服务,以便建立所述数据传输模块与所述数据传输接口间的socket连接;
通过socket连接通道将目标对象数据发送至所述目标主机端以便写入对象存储磁盘挂载目录。
10.一种云计算平台系统中基于对象存储的数据下载方法,其特征在于,所述云计算平台系统包括云平台管理端以及用于运行对象存储服务的主机端;所述云平台管理端部署有用户交互应用,所述用户交互应用设置有数据传输接口,所述主机端设置有数据传输模块;所述方法应用于所述云平台管理端,包括:
向对象存储服务划定的主机范围内任一主机端发送对象存储服务状态查询请求;
根据接收到的查询结果,将对象存储服务当前所在的主机端确定为目标主机端;
基于所述数据传输接口启动数据接收服务;
向所述目标主机端发送数据下载请求;
在所述目标主机端基于所述数据传输模块启动数据发送服务后,建立所述数据传输模块与所述数据传输接口间的socket连接;
通过socket连接通道接收所述目标主机端从对象存储磁盘挂载目录中读取的目标对象数据。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011035602.2A CN112187918B (zh) | 2020-09-27 | 2020-09-27 | 云计算平台系统及其基于对象存储的数据下载和上传方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011035602.2A CN112187918B (zh) | 2020-09-27 | 2020-09-27 | 云计算平台系统及其基于对象存储的数据下载和上传方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112187918A true CN112187918A (zh) | 2021-01-05 |
CN112187918B CN112187918B (zh) | 2023-06-02 |
Family
ID=73944696
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011035602.2A Active CN112187918B (zh) | 2020-09-27 | 2020-09-27 | 云计算平台系统及其基于对象存储的数据下载和上传方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112187918B (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105338118A (zh) * | 2015-11-30 | 2016-02-17 | 上海斐讯数据通信技术有限公司 | 分布式存储系统 |
CN110351532A (zh) * | 2019-08-08 | 2019-10-18 | 杭州阿启视科技有限公司 | 视频大数据云平台云存储服务方法 |
CN110688674A (zh) * | 2019-09-23 | 2020-01-14 | 中国银联股份有限公司 | 一种访问对接器、系统及应用该访问对接器的方法及装置 |
CN111212111A (zh) * | 2019-12-17 | 2020-05-29 | 腾讯科技(深圳)有限公司 | 对象存储服务管理方法及电子设备 |
CN111491037A (zh) * | 2020-06-28 | 2020-08-04 | 四川新网银行股份有限公司 | 通过sftp数据流与对象存储服务器的通信方法 |
-
2020
- 2020-09-27 CN CN202011035602.2A patent/CN112187918B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105338118A (zh) * | 2015-11-30 | 2016-02-17 | 上海斐讯数据通信技术有限公司 | 分布式存储系统 |
CN110351532A (zh) * | 2019-08-08 | 2019-10-18 | 杭州阿启视科技有限公司 | 视频大数据云平台云存储服务方法 |
CN110688674A (zh) * | 2019-09-23 | 2020-01-14 | 中国银联股份有限公司 | 一种访问对接器、系统及应用该访问对接器的方法及装置 |
CN111212111A (zh) * | 2019-12-17 | 2020-05-29 | 腾讯科技(深圳)有限公司 | 对象存储服务管理方法及电子设备 |
CN111491037A (zh) * | 2020-06-28 | 2020-08-04 | 四川新网银行股份有限公司 | 通过sftp数据流与对象存储服务器的通信方法 |
Also Published As
Publication number | Publication date |
---|---|
CN112187918B (zh) | 2023-06-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109525624B (zh) | 一种容器登录方法、装置及存储介质 | |
CN1988535B (zh) | 文件存储同步方法、系统及客户端 | |
CN100407627C (zh) | 一种实现端到端文件共享的系统及方法 | |
US20080133758A1 (en) | Peer-to-peer proxy server and communication method thereof | |
CN102271165B (zh) | 互联网搜索资源的分享管理装置及方法 | |
CN101478446B (zh) | 网络设备版本加载方法、装置和系统 | |
CN110933036B (zh) | 一种云游戏服务系统和服务器 | |
CN110389936A (zh) | 一种启动小程序的方法、设备和计算机存储介质 | |
CN103475682A (zh) | 文件迁移方法及设备 | |
US20140229436A1 (en) | Method of File Synchronization and Electronic Device Thereof | |
CN110389935A (zh) | 一种启动小程序的方法、设备和计算机存储介质 | |
CN108882262B (zh) | 设备状态同步方法、系统、智能终端及可读存储介质 | |
CN112764823B (zh) | Nvr系统的启动方法、主机操作系统和数据通信方法 | |
CN102858025A (zh) | 点对点互动操作的方法及设备 | |
CN112764830B (zh) | 一种应用于国产化替代的数据迁移方法及系统 | |
CN103973772B (zh) | 文件读写方法和装置 | |
US20130067107A1 (en) | Network selection for streaming media among multiple devices | |
CN104079610A (zh) | 云端服务器、应用软件的云同步方法和系统 | |
CN105516372A (zh) | 文件名的处理方法、装置及服务器 | |
CN110418092B (zh) | 视频录制管理系统、方法、控制管理节点以及录制节点 | |
CN110677443A (zh) | 数据发送和接收方法、发送端、接收端、系统及存储介质 | |
CN112187918A (zh) | 云计算平台系统及其基于对象存储的数据下载和上传方法 | |
US8413137B2 (en) | Automated network backup peripheral device and method | |
CN106790521B (zh) | 采用基于ftp的节点设备进行分布式组网的系统及方法 | |
US9083717B2 (en) | Data flow in peer-to-peer networks |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |