CN111881476A - 对象存储控制方法、装置、计算机设备及存储介质 - Google Patents

对象存储控制方法、装置、计算机设备及存储介质 Download PDF

Info

Publication number
CN111881476A
CN111881476A CN202010738663.9A CN202010738663A CN111881476A CN 111881476 A CN111881476 A CN 111881476A CN 202010738663 A CN202010738663 A CN 202010738663A CN 111881476 A CN111881476 A CN 111881476A
Authority
CN
China
Prior art keywords
ecs
object storage
host
preset
storage system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010738663.9A
Other languages
English (en)
Other versions
CN111881476B (zh
Inventor
李强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An Technology Shenzhen Co Ltd
Original Assignee
Ping An Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An Technology Shenzhen Co Ltd filed Critical Ping An Technology Shenzhen Co Ltd
Priority to CN202010738663.9A priority Critical patent/CN111881476B/zh
Priority to PCT/CN2020/118724 priority patent/WO2021139264A1/zh
Publication of CN111881476A publication Critical patent/CN111881476A/zh
Application granted granted Critical
Publication of CN111881476B publication Critical patent/CN111881476B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/62Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/18File system types
    • G06F16/188Virtual file systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Bioethics (AREA)
  • Software Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请实施例提供了一种基于ECS的对象存储控制方法、装置、计算机设备及计算机可读存储介质。本申请实施例属于数据处理技术领域,通过接收用户端创建对象存储的创建请求,根据创建请求,发送预设ECS主机资源需求至ECS服务端,在ECS服务端创建ECS主机成功后,返回ECS主机所对应的创建信息,根据创建信息,将ECS主机挂载成预设虚拟文件系统,基于虚拟文件系统,在ECS主机上构建预设对象存储系统,预设对象存储系统包含预设对象存储系统所对应的访问IP,将访问IP返回至用户端,用户端通过访问IP接收其它用户端的访问,能够实现基于内存的对象存储性能的动态扩容,提高对象存储资源的使用效率。

Description

对象存储控制方法、装置、计算机设备及存储介质
技术领域
本申请涉及数据处理技术领域,尤其涉及一种基于ECS的对象存储控制方法、装置、计算机设备及计算机可读存储介质。
背景技术
对象存储,也叫做基于对象的存储,是用来描述解决和处理离散单元的方法,这些离散单元被称作为对象。
现在的对象存储系统一般是基于固定配置的物理机搭建的,若干个物理机搭建完成后组成物理机集群。如果物理机集群需要性能扩容,涉及到物理机采购、物理机上架、网络等硬件配置,动辄都是以周来计算时间,扩容周期比较长。同时,对一些突发要求的流量访问,比如举办的各业务活动,活动期间,这些业务数据存量可能不会太多,只是访问可能会非常的频繁,动辄都是QPS万级以上,短期内可能存在大量的访问性能要求,需要提升对象存储系统的性能,但是活动过了以后,就不需要这么大的性能了,若通过增加物理机以提升对象存储系统性能,活动过后,就会造成大量的性能浪费。因此,传统技术中存在对对象存储资源浪费的问题。
发明内容
本申请实施例提供了一种基于ECS的对象存储控制方法、装置、计算机设备及计算机可读存储介质,能够解决传统技术中对对象存储资源浪费的问题。
第一方面,本申请实施例提供了一种基于ECS服务的对象存储控制方法,所述方法包括:接收用户端创建对象存储的创建请求;根据所述创建请求,发送预设ECS主机资源需求至ECS服务端,以使所述ECS服务端根据所述ECS主机资源需求创建ECS主机,并在所述ECS主机创建成功后,返回所述ECS主机所对应的创建信息;接收所述创建信息;根据所述创建信息,将所述ECS主机挂载成预设虚拟文件系统;基于所述虚拟文件系统,在所述ECS主机上构建预设对象存储系统,所述预设对象存储系统包含所述预设对象存储系统所对应的访问IP;将所述访问IP返回至所述用户端,以使所述用户端通过所述访问IP接收其它用户端的访问。
第二方面,本申请实施例还提供了一种基于ECS的对象存储控制装置,包括:第一接收单元,用于接收用户端创建对象存储的创建请求;第一发送单元,用于根据所述创建请求,发送预设ECS主机资源需求至ECS服务端,以使所述ECS服务端根据所述ECS主机资源需求创建ECS主机,并在所述ECS主机创建成功后,返回所述ECS主机所对应的创建信息;第二接收单元,用于接收所述创建信息;挂载单元,用于根据所述创建信息,将所述ECS主机挂载成预设虚拟文件系统;构建单元,用于基于所述虚拟文件系统,在所述ECS主机上构建预设对象存储系统,所述预设对象存储系统包含所述预设对象存储系统所对应的访问IP;返回单元,用于将所述访问IP返回至所述用户端,以使所述用户端通过所述访问IP接收其它用户端的访问。
第三方面,本申请实施例还提供了一种计算机设备,其包括存储器及处理器,所述存储器上存储有计算机程序,所述处理器执行所述计算机程序时实现所述基于ECS的对象存储控制方法的步骤。
第四方面,本申请实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时使所述处理器执行所述基于ECS的对象存储控制方法的步骤。
本申请实施例提供了一种基于ECS的对象存储控制方法、装置、计算机设备及计算机可读存储介质。本申请实施例通过接收用户端创建对象存储的创建请求,根据所述创建请求,发送预设ECS主机资源需求至ECS服务端,以使所述ECS服务端根据所述ECS主机资源需求创建ECS主机,并在所述ECS主机创建成功后,返回所述ECS主机所对应的创建信息,接收所述创建信息,根据所述创建信息,将所述ECS主机挂载成预设虚拟文件系统,基于所述虚拟文件系统,在所述ECS主机上构建预设对象存储系统,所述预设对象存储系统包含所述预设对象存储系统所对应的访问IP,将所述访问IP返回至所述用户端,以使所述用户端通过所述访问IP接收其它用户端的访问,从而实现通过申请ECS主机资源,将所述ECS主机内存挂载成预设虚拟文件系统,从而在ECS主机上构建预设对象存储系统,进而实现基于内存的对象存储资源的扩展,并且能够在不需要时可以及时释放对象存储资源,从而能够实现基于内存的对象存储资源的动态伸缩,这样既可以节省用户的成本,又可以节省服务提供方的资源成本,提高了对象存储资源的使用效率,避免了对象存储资源的浪费。
附图说明
为了更清楚地说明本申请实施例技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的基于ECS的对象存储控制方法的一个应用环境图;
图2为本申请实施例提供的基于ECS的对象存储控制方法中一个实施例的流程示意图;
图3为本申请实施例提供的基于ECS的对象存储控制方法的另一个流程示意图;
图4为本申请实施例提供的基于ECS的对象存储控制装置的一个示意性框图;以及
图5为本申请实施例提供的计算机设备的示意性框图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
应当理解,当在本说明书和所附权利要求书中使用时,术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在,但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
图1为本申请实施例提供的基于ECS的对象存储控制方法的一个应用环境图。如图1所示,在该应用环境中,包括以下主体:
(1)用户端。用于根据业务需求提出创建对象存储的创建请求。
(2)对象存储系统管理端。为服务器端,用于根据用户端的请求创建对象存储系统。
(3)ECS服务器端。为云服务器端,用于提供云服务器资源。
以上各个主体交互的过程包括:
1)用户端根据业务需求提出创建对象存储的创建请求,将所述创建请求发送至对象存储系统管理端。接收用户端创建对象存储的创建请求。
2)对象存储系统管理端根据所述创建请求,发送预设ECS主机资源需求至ECS服务端。
3)所述ECS服务端根据所述ECS主机资源需求创建ECS主机,并在所述ECS主机创建成功后,向对象存储系统管理端返回所述ECS主机所对应的创建信息。
4)对象存储系统管理端接收所述创建信息,根据所述创建信息,将所述ECS主机挂载成预设虚拟文件系统,基于所述虚拟文件系统,在所述ECS主机上构建预设对象存储系统,同时生成所述预设对象存储系统所对应的访问IP,所述预设对象存储系统包含所述预设对象存储系统所对应的访问IP。
5)对象存储系统管理端将所述访问IP返回至所述用户端。
6)所述用户端通过所述访问IP接收其它用户端的访问。
请参阅图2,图2为本申请实施例提供的基于ECS的对象存储控制方法的一个流程示意图。如图2所示,该方法包括以下步骤S201-S206:
S201、接收用户端创建对象存储的创建请求。
具体地,用户需要增加对象存储时,比如用户要举办活动以应对暂时的大访问流量导致需要增加对象存储时,用户根据对举办活动的预期,预估活动的访问量,再根据访问量,用户预估自己的对象存储容量需求及性能需求等创建对象存储的需求的参数,然后填写对象存储申请表单,并提交创建对象存储系统申请表单提交至对象存储系统管理端(即服务器端),对象存储系统管理端接收创建对象存储系统申请表单,从而接收用户端创建对象存储的创建请求。
S202、根据所述创建请求,发送预设ECS主机资源需求至ECS服务端,以使所述ECS服务端根据所述ECS主机资源需求创建ECS主机,并在所述ECS主机创建成功后,返回所述ECS主机所对应的创建信息。
其中,ECS,英文为Elastic Compute Service,简称ECS,指云服务器,ECS主机,指云主机。
具体地,对象存储系统管理端根据所述创建请求,提交ECS主机需求至ECS服务端,然后等待ECS服务端将ECS主机创建成功。所述ECS服务端根据所述ECS主机资源需求创建ECS主机,并在所述ECS主机创建成功后,返回所述ECS主机所对应的创建信息。对于ECS主机而言,不通的用户之间云主机都是隔离的,即这批云主机仅提供给该用户使用,但是用户看到的只是一个访问域名,后面具体有多少台云主机实际对用户是不可见的。对于对象存储而言,传统技术中还未有像ECS主机那样的弹性服务,通过本申请实施例对对象存储进行控制,可以在需要使用增加的对象存储性能时根据需求进行弹性申请,能够实现基于内存的对象存储性能的扩容方便,不需要使用增加的对象存储性能时可以及时释放对象存储资源,这样既可以节省用户的成本,又可以节省服务提供端方的资源成本,可以提高对象存储资源的使用效率,避免了对象存储资源的浪费。
进一步地,请参阅图3,图3为本申请实施例提供的基于ECS的对象存储控制方法的另一个流程示意图。在该实施例中,所述发送预设ECS主机资源需求至ECS服务端的步骤之前,还包括:
S2020、根据所述创建请求,统计所述创建请求所需的预设ECS主机资源需求,所述预设ECS主机资源需求包括所需的ECS主机规格及主机数量。
具体地,对象存储系统管理端接收到所述创建请求后,在发送预设ECS主机资源需求至ECS服务端之前,根据所述创建请求,统计所述创建请求所需的预设ECS主机资源需求,例如统计创建请求中所包括的所需的ECS主机规格及主机数量,然后再根据所述创建请求提交ECS主机资源需求申请给ECS端。其中,对象存储系统管理端根据所述创建请求,统计所述创建请求所需的预设ECS主机资源需求的过程包括以下步骤:对象存储系统根据用户提交的创建请求表单,计算所需的ECS主机资源,包括所需内存大小及所需ECS主机的数量,在一个具体示例中,计算方法如下:
若标准ECS主机采用4核32GB配置,其中24GB作为可用内存使用,一台该配置云主机可提供24GB存储容量,对象存储系统采用3副本机制来保证数据可靠性,假设用户需要的容量为X GB,则需要申请的标准云主机数量=X*3/24GB,例如,假设用户需要200GB的容量,则需要200*3/24=25台云主机。
可见,本申请实施例从而能使对象存储系统管理端根据需求准确的创建对象存储系统,实现对象存储系统的弹性动态伸缩。
S203、接收所述创建信息。
S204、根据所述创建信息,将所述ECS主机挂载成预设虚拟文件系统。
其中,挂载,英文为Mounting,是指由操作系统使一个存储设备(诸如硬盘、CD-ROM或共享资源)上的计算机文件和目录可供用户通过计算机的文件系统访问的一个过程。mount命令的标准形式如下:mount-ttype device dir。
虚拟内存,英文为virtual memory,简称VM,它使得应用程序认为它拥有连续的可用的内存(一个连续完整的地址空间),而实际上它通常是被分隔成多个物理内存碎片,还有部分暂时存储在外部磁盘存储器上,在需要时进行数据交换。虚拟内存文件系统,又称为虚拟内核文件系统,英文为VirtualKernel FileSystems,是指那些是由内核产生但不存在于硬盘上(存在于内存中)的文件系统,虚拟内存文件系统包括tmpfs。
具体地,对象存储系统管理端接收所述创建信息,获知ECS主机创建成功后,将所述ECS主机挂载成预设虚拟文件系统,从而使各ECS主机挂载内存为本地文件系统。其中,ECS主机创建成功后,将内存挂载成虚拟文件系统的过程,例如,采取如下语句会将一块10G的内存挂载成一个本地的目录:mounttmpfs/mnt/tmpfs-ttmpfs-o size=10g。
S205、基于所述虚拟文件系统,在所述ECS主机上构建预设对象存储系统,所述预设对象存储系统包含所述预设对象存储系统所对应的访问IP。
其中,对象存储系统,英文为Object-Based Storage System,是综合了NAS和SAN的优点,同时具有SAN的高速直接访问和NAS的数据共享等优势,提供了高可靠性、跨平台性以及安全的数据共享的存储体系结构,对象存储系统包括MINIO及Swift等。
具体地,在申请到创建对象存储的ECS主机资源后,将所述ECS主机挂载成预设虚拟文件系统,由于所述ECS主机为内存存储,预设虚拟文件系统也即为虚拟内存文件系统,基于挂载好的虚拟文件系统构建对象存储系统,与通过增加物理机从而搭建基于物理机的对象存储系统一样,通过实现基于内存的对象存储,实现了对象存储性能的扩展。
进一步地,在一个实施例中,所述预设对象存储系统基于MinIO对象存储服务而构建。
具体地,在挂载好了内存虚拟文件系统的云主机构建MinIO对象存储系统,可以通过如下方式实现构建:./minio serverhost1:/mnt/tmpfs hist2:/mnt/tmpfs,从而形成基于内存的MINIO集群用以进行对象存储,实现对象存储的扩容。
由于Minio最适合存储非结构化数据,如照片,视频,日志文件,备份和容器/VM映像。对象的大小可以从几KB到最大5TB,Minio服务器足够轻,可以与应用程序堆栈捆绑在一起,类似于NodeJS,Redis和MySQL,从而能够方便的实现多种对象存储。
本申请实施例提供的对象存储方法依托ECS服务而构建,并通过对象存储系统,例如Minio实现,实现了基于内存的可动态申请的对象存储系统,,提高了对象存储资源的使用效率,避免了对象存储资源的浪费。
S206、将所述访问IP返回至所述用户端,以使所述用户端通过所述访问IP接收其它用户端的访问。
具体地,将基于内存的对象存储系统创建成功返回用户,由于创建的预设对象存储系统包含所述预设对象存储系统所对应的访问IP,将所述访问IP返回至所述用户端,例如,返回用户构建好了的Minio对象存储系统访问IP,用户端所对应的用户举办活动需要大量外部其它用户端的访问时,外部其它用户端通过所述访问IP进行访问。
本申请实施例通过接收用户端创建对象存储的创建请求,根据所述创建请求,发送预设ECS主机资源需求至ECS服务端,以使所述ECS服务端根据所述ECS主机资源需求创建ECS主机,并在所述ECS主机创建成功后,返回所述ECS主机所对应的创建信息,接收所述创建信息,根据所述创建信息,将所述ECS主机挂载成预设虚拟文件系统,基于所述虚拟文件系统,在所述ECS主机上构建预设对象存储系统,所述预设对象存储系统包含所述预设对象存储系统所对应的访问IP,将所述访问IP返回至所述用户端,以使所述用户端通过所述访问IP接收其它用户端的访问,从而实现通过申请ECS主机资源,将所述ECS主机挂载成预设虚拟文件系统,从而在ECS主机上构建预设对象存储系统,实现对象存储资源的扩展,并且能够在不需要时可以及时释放对象存储资源,从而能够实现对象存储资源的动态伸缩,这样既可以节省用户的成本,又可以节省服务提供方的资源成本,提高了对象存储资源的使用效率,避免了对象存储资源的浪费。
在一个实施例中,所述发送ECS主机资源需求至ECS服务端的步骤,还包括:
发送与所述ECS主机资源需求中包含的ECS主机大小一致的预设云磁盘需求至所述ECS服务端,以使所述ECS服务端根据所述预设云磁盘需求创建预设云磁盘,并使所述预设对象存储系统运行时将内存文件系统中的文件同步复制至所述预设云磁盘。
具体地,为了提高基于内存的对象存储的性能,由于对象存储系统底层是基于内存虚拟文件系统构建的,当ECS主机重启后,内存里面的东西是会丢失的,因此,可以在每个ECS主机上挂载一块和内存虚拟文件系统同等大小的云磁盘,弹性对象存储系统会实时的将内存文件系统中的文件复制到云磁盘中,保证即使ECS主机损坏或者是宕机了,对象存储数据依然不会丢失,因此,发送ECS主机资源需求至ECS服务端时,发送与所述ECS主机资源需求中包含的ECS主机大小一致的预设云磁盘需求至所述ECS服务端,以使所述ECS服务端根据所述预设云磁盘需求创建预设云磁盘,并使所述预设对象存储系统运行时将内存文件系统中的文件同步复制至所述预设云磁盘,通过创建的所述预设对象存储系统运行时将内存文件系统中的文件同步复制至所述预设云磁盘,能够保证对象存储系统的数据安全性。
请继续参阅图3,如图3所示,所述将所述访问IP返回至所述用户端,以使所述用户端通过所述访问IP接收其它用户端的访问的步骤之后,还包括:
S207、接收所述用户端发送的所述预设对象存储系统的下线请求;
S208、根据所述下线请求,发送ECS资源释放请求至所述ECS服务端,以使所述ECS服务端释放所述预设对象存储系统所对应的ECS资源,所述ECS资源包括ECS主机。
具体地,用户使用完对象存储后,需要提交对象存储系统下线申请,不然会持续计费。在用户提交完对象存储系统下线申请后,若初始同时申请了ECS主机和云磁盘,对象存储系统管理端也会同步提交ECS主机和云磁盘的下线申请至ECS端,以使ECS端同步释放资源ECS主机和云磁盘,即对象存储系统管理端接收所述用户端发送的所述预设对象存储系统的下线请求,根据所述下线请求,发送ECS资源释放请求至所述ECS服务端,以使所述ECS服务端释放所述预设对象存储系统所对应的ECS资源,所述ECS资源包括ECS主机。由于针对临时的业务活动,传统对象存储系统无法及时扩容,若采用物理机搭建的方式进行对象存储系统的扩容,会有活动完成后扩容的物理机资源浪费的问题。在使用了本申请实施例提供的基于内存的弹性对象存储系统后,既可以解决传统技术中存储对象资源短期使用造成对物理机的浪费问题,又可以提供很好的对象存储性能,因为ECS主机(即云主机)内存是比的SSD(即固态硬盘)还要高速的硬件设备,从而本申请实施例提供的对象存储控制方法所对应的基于内存的弹性对象存储系统达到了对象存储性能和成本的一致,无论是对用户还是存储提供方都是有益的,既能提高对象存储资源的使用效率,又能避免对象存储资源的浪费。
需要说明的是,上述各个实施例所述的基于ECS的对象存储控制方法,可以根据需要将不同实施例中包含的技术特征重新进行组合,以获取组合后的实施方案,但都在本申请要求的保护范围之内。
请参阅图4,图4为本申请实施例提供的基于ECS的对象存储控制装置的一个示意性框图。对应于上述所述基于ECS的对象存储控制方法,本申请实施例还提供一种基于ECS的对象存储控制装置。如图4所示,该基于ECS的对象存储控制装置包括用于执行上述所述基于ECS的对象存储控制方法的单元,该基于ECS的对象存储控制装置可以被配置于计算机设备中。具体地,请参阅图4,该基于ECS的对象存储控制装置400包括第一接收单元401、第一发送单元402、第二接收单元403、挂载单元404、构建单元405及返回单元406。
其中,第一接收单元401,用于接收用户端创建对象存储的创建请求;
第一发送单元402,用于根据所述创建请求,发送预设ECS主机资源需求至ECS服务端,以使所述ECS服务端根据所述ECS主机资源需求创建ECS主机,并在所述ECS主机创建成功后,返回所述ECS主机所对应的创建信息;
第二接收单元403,用于接收所述创建信息;
挂载单元404,用于根据所述创建信息,将所述ECS主机挂载成预设虚拟文件系统;
构建单元405,用于基于所述虚拟文件系统,在所述ECS主机上构建预设对象存储系统,所述预设对象存储系统包含所述预设对象存储系统所对应的访问IP;
返回单元406,用于将所述访问IP返回至所述用户端,以使所述用户端通过所述访问IP接收其它用户端的访问。
在一实施例中,所述第一发送单元402,还用于发送与所述ECS主机资源需求中包含的ECS主机大小一致的预设云磁盘需求至所述ECS服务端,以使所述ECS服务端根据所述预设云磁盘需求创建预设云磁盘,并使所述预设对象存储系统运行时将内存文件系统中的文件同步复制至所述预设云磁盘。
在一实施例中,所述基于ECS的对象存储控制装置400还包括:
第三接收单元,用于接收所述用户端发送的所述预设对象存储系统的下线请求;
第二发送单元,用于根据所述下线请求,发送ECS资源释放请求至所述ECS服务端,以使所述ECS服务端释放所述预设对象存储系统所对应的ECS资源,所述ECS资源包括ECS主机。
在一实施例中,所述基于ECS的对象存储控制装置400还包括:
统计单元,用于根据所述创建请求,统计所述创建请求所需的预设ECS主机资源需求,所述预设ECS主机资源需求包括所需的ECS主机规格及主机数量。
在一实施例中,所述预设对象存储系统基于MinIO对象存储服务而构建。
需要说明的是,所属领域的技术人员可以清楚地了解到,上述基于ECS的对象存储控制装置和各单元的具体实现过程,可以参考前述方法实施例中的相应描述,为了描述的方便和简洁,在此不再赘述。
同时,上述基于ECS的对象存储控制装置中各个单元的划分和连接方式仅用于举例说明,在其他实施例中,可将基于ECS的对象存储控制装置按照需要划分为不同的单元,也可将基于ECS的对象存储控制装置中各单元采取不同的连接顺序和方式,以完成上述基于ECS的对象存储控制装置的全部或部分功能。
上述基于ECS的对象存储控制装置可以实现为一种计算机程序的形式,该计算机程序可以在如图5所示的计算机设备上运行。
请参阅图5,图5是本申请实施例提供的一种计算机设备的示意性框图。该计算机设备500可以是台式机电脑或者服务器等计算机设备,也可以是其他设备中的组件或者部件。
参阅图5,该计算机设备500包括通过系统总线501连接的处理器502、存储器和网络接口505,其中,存储器可以包括非易失性存储介质503和内存储器504。
该非易失性存储介质503可存储操作系统5031和计算机程序5032。该计算机程序5032被执行时,可使得处理器502执行一种上述基于ECS的对象存储控制方法。
该处理器502用于提供计算和控制能力,以支撑整个计算机设备500的运行。
该内存储器504为非易失性存储介质503中的计算机程序5032的运行提供环境,该计算机程序5032被处理器502执行时,可使得处理器502执行一种上述基于ECS的对象存储控制方法。
该网络接口505用于与其它设备进行网络通信。本领域技术人员可以理解,图5中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备500的限定,具体的计算机设备500可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。例如,在一些实施例中,计算机设备可以仅包括存储器及处理器,在这样的实施例中,存储器及处理器的结构及功能与图5所示实施例一致,在此不再赘述。
其中,所述处理器502用于运行存储在存储器中的计算机程序5032,以实现如下步骤:接收用户端创建对象存储的创建请求;根据所述创建请求,发送预设ECS主机资源需求至ECS服务端,以使所述ECS服务端根据所述ECS主机资源需求创建ECS主机,并在所述ECS主机创建成功后,返回所述ECS主机所对应的创建信息;接收所述创建信息;根据所述创建信息,将所述ECS主机挂载成预设虚拟文件系统;基于所述虚拟文件系统,在所述ECS主机上构建预设对象存储系统,所述预设对象存储系统包含所述预设对象存储系统所对应的访问IP;将所述访问IP返回至所述用户端,以使所述用户端通过所述访问IP接收其它用户端的访问。
在一实施例中,所述处理器502在实现所述发送ECS主机资源需求至ECS服务端的步骤时,具体还实现以下步骤:
发送与所述ECS主机资源需求中包含的ECS主机大小一致的预设云磁盘需求至所述ECS服务端,以使所述ECS服务端根据所述预设云磁盘需求创建预设云磁盘,并使所述预设对象存储系统运行时将内存文件系统中的文件同步复制至所述预设云磁盘。
在一实施例中,所述处理器502在实现所述将所述访问IP返回至所述用户端,以使所述用户端通过所述访问IP接收其它用户端的访问的步骤之后,还实现以下步骤:
接收所述用户端发送的所述预设对象存储系统的下线请求;
根据所述下线请求,发送ECS资源释放请求至所述ECS服务端,以使所述ECS服务端释放所述预设对象存储系统所对应的ECS资源,所述ECS资源包括ECS主机。
在一实施例中,所述处理器502在实现所述发送预设ECS主机资源需求至ECS服务端的步骤之前,还实现以下步骤:
根据所述创建请求,统计所述创建请求所需的预设ECS主机资源需求,所述预设ECS主机资源需求包括所需的ECS主机规格及主机数量。
在一实施例中,所述处理器502在实现所述在所述ECS主机上构建预设对象存储系统的步骤时,所述预设对象存储系统基于MinIO对象存储服务而构建。
应当理解,在本申请实施例中,处理器502可以是中央处理单元(CentralProcessingUnit,CPU),该处理器502还可以是其他通用处理器、数字信号处理器(DigitalSignal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable GateArray,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。其中,通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
本领域普通技术人员可以理解的是实现上述实施例的方法中的全部或部分流程,是可以通过计算机程序来完成,该计算机程序可存储于一计算机可读存储介质。该计算机程序被该计算机系统中的至少一个处理器执行,以实现上述方法的实施例的流程步骤。
因此,本申请还提供一种计算机可读存储介质。该计算机可读存储介质可以为非易失性的计算机可读存储介质,该计算机可读存储介质存储有计算机程序,该计算机程序被处理器执行时使处理器执行如下步骤:
一种计算机程序产品,当其在计算机上运行时,使得计算机执行以上各实施例中所描述的所述基于ECS的对象存储控制方法的步骤。
所述计算机可读存储介质可以是前述设备的内部存储单元,例如设备的硬盘或内存。所述计算机可读存储介质也可以是所述设备的外部存储设备,例如所述设备上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。进一步地,所述计算机可读存储介质还可以既包括所述设备的内部存储单元也包括外部存储设备。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,上述描述的设备、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
所述存储介质为实体的、非瞬时性的存储介质,例如可以是U盘、移动硬盘、只读存储器(Read-OnlyMemory,ROM)、磁碟或者光盘等各种可以存储计算机程序的实体存储介质。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的。例如,各个单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。
本申请实施例方法中的步骤可以根据实际需要进行顺序调整、合并和删减。本申请实施例装置中的单元可以根据实际需要进行合并、划分和删减。另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以是两个或两个以上单元集成在一个单元中。
该集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分,或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台电子设备(可以是个人计算机,终端,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。
以上所述,仅为本申请的具体实施方式,但本申请明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以权利要求的保护范围为准。

Claims (10)

1.一种基于ECS的对象存储控制方法,其特征在于,所述方法包括:
接收用户端创建对象存储的创建请求;
根据所述创建请求,发送预设ECS主机资源需求至ECS服务端,以使所述ECS服务端根据所述ECS主机资源需求创建ECS主机,并在所述ECS主机创建成功后,返回所述ECS主机所对应的创建信息;
接收所述创建信息;
根据所述创建信息,将所述ECS主机挂载成预设虚拟文件系统;
基于所述虚拟文件系统,在所述ECS主机上构建预设对象存储系统,所述预设对象存储系统包含所述预设对象存储系统所对应的访问IP;
将所述访问IP返回至所述用户端,以使所述用户端通过所述访问IP接收其它用户端的访问。
2.根据权利要求1所述基于ECS的对象存储控制方法,其特征在于,所述发送ECS主机资源需求至ECS服务端的步骤,还包括:
发送与所述ECS主机资源需求中包含的ECS主机大小一致的预设云磁盘需求至所述ECS服务端,以使所述ECS服务端根据所述预设云磁盘需求创建预设云磁盘,并使所述预设对象存储系统运行时将内存文件系统中的文件同步复制至所述预设云磁盘。
3.根据权利要求1或者2所述基于ECS的对象存储控制方法,其特征在于,所述将所述访问IP返回至所述用户端,以使所述用户端通过所述访问IP接收其它用户端的访问的步骤之后,还包括:
接收所述用户端发送的所述预设对象存储系统的下线请求;
根据所述下线请求,发送ECS资源释放请求至所述ECS服务端,以使所述ECS服务端释放所述预设对象存储系统所对应的ECS资源,所述ECS资源包括ECS主机。
4.根据权利要求1所述基于ECS的对象存储控制方法,其特征在于,所述发送预设ECS主机资源需求至ECS服务端的步骤之前,还包括:
根据所述创建请求,统计所述创建请求所需的预设ECS主机资源需求,所述预设ECS主机资源需求包括所需的ECS主机规格及主机数量。
5.根据权利要求1所述基于ECS的对象存储控制方法,其特征在于,所述预设对象存储系统基于MinIO对象存储服务而构建。
6.一种基于ECS的对象存储控制装置,其特征在于,包括:
第一接收单元,用于接收用户端创建对象存储的创建请求;
第一发送单元,用于根据所述创建请求,发送预设ECS主机资源需求至ECS服务端,以使所述ECS服务端根据所述ECS主机资源需求创建ECS主机,并在所述ECS主机创建成功后,返回所述ECS主机所对应的创建信息;
第二接收单元,用于接收所述创建信息;
挂载单元,用于根据所述创建信息,将所述ECS主机挂载成预设虚拟文件系统;
构建单元,用于基于所述虚拟文件系统,在所述ECS主机上构建预设对象存储系统,所述预设对象存储系统包含所述预设对象存储系统所对应的访问IP;
返回单元,用于将所述访问IP返回至所述用户端,以使所述用户端通过所述访问IP接收其它用户端的访问。
7.根据权利要求6所述基于ECS的对象存储控制装置,其特征在于,所述第一发送单元,还用于发送与所述ECS主机资源需求中包含的ECS主机大小一致的预设云磁盘需求至所述ECS服务端,以使所述ECS服务端根据所述预设云磁盘需求创建预设云磁盘,并使所述预设对象存储系统运行时将内存文件系统中的文件同步复制至所述预设云磁盘。
8.根据权利要求6或者7所述基于ECS的对象存储控制装置,其特征在于,所述装置还包括:
第三接收单元,用于接收所述用户端发送的所述预设对象存储系统的下线请求;
第二发送单元,用于根据所述下线请求,发送ECS资源释放请求至所述ECS服务端,以使所述ECS服务端释放所述预设对象存储系统所对应的ECS资源,所述ECS资源包括ECS主机。
9.一种计算机设备,其特征在于,所述计算机设备包括存储器以及与所述存储器相连的处理器;所述存储器用于存储计算机程序;所述处理器用于运行所述计算机程序,以执行如权利要求1-5任一项所述方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述存储介质存储有计算机程序,所述计算机程序被处理器执行时可实现如权利要求1-5中任一项所述方法的步骤。
CN202010738663.9A 2020-07-28 2020-07-28 对象存储控制方法、装置、计算机设备及存储介质 Active CN111881476B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202010738663.9A CN111881476B (zh) 2020-07-28 2020-07-28 对象存储控制方法、装置、计算机设备及存储介质
PCT/CN2020/118724 WO2021139264A1 (zh) 2020-07-28 2020-09-29 对象存储控制方法、装置、计算机设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010738663.9A CN111881476B (zh) 2020-07-28 2020-07-28 对象存储控制方法、装置、计算机设备及存储介质

Publications (2)

Publication Number Publication Date
CN111881476A true CN111881476A (zh) 2020-11-03
CN111881476B CN111881476B (zh) 2023-07-28

Family

ID=73200329

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010738663.9A Active CN111881476B (zh) 2020-07-28 2020-07-28 对象存储控制方法、装置、计算机设备及存储介质

Country Status (2)

Country Link
CN (1) CN111881476B (zh)
WO (1) WO2021139264A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115496749A (zh) * 2022-11-14 2022-12-20 江苏智云天工科技有限公司 基于目标检测训练预处理的产品缺陷检测方法及系统
WO2024022400A1 (zh) * 2022-07-26 2024-02-01 中国电信股份有限公司 云资源配置方法及相关设备

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114302085B (zh) * 2021-12-23 2024-02-20 云从科技集团股份有限公司 数据存储方法、装置、电子设备及存储介质
CN115208907A (zh) * 2022-07-15 2022-10-18 上海七牛信息技术有限公司 一种基于对象存储的存储方法及系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103729229A (zh) * 2011-12-31 2014-04-16 华茂云天科技(北京)有限公司 弹性计算服务系统
US20140258719A1 (en) * 2012-12-26 2014-09-11 Sookasa Inc. Distributed encryption and access control scheme in a cloud environment
CN105227686A (zh) * 2014-06-20 2016-01-06 中国电信股份有限公司 云主机域名的动态配置方法和系统
CN108399106A (zh) * 2018-02-28 2018-08-14 华为技术有限公司 管理物理主机的方法和装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107231221B (zh) * 2016-03-25 2020-10-23 阿里巴巴集团控股有限公司 数据中心间的业务流量控制方法、装置及系统
CN109144658B (zh) * 2017-06-27 2022-07-15 阿里巴巴集团控股有限公司 有限资源的负载均衡方法、装置及电子设备
CN108737494A (zh) * 2018-04-08 2018-11-02 广西大学 基于云计算的教学平台
CN111124595B (zh) * 2018-11-01 2023-03-21 阿里巴巴集团控股有限公司 一种提供云计算服务的方法及系统
CN109766174B (zh) * 2018-12-24 2021-04-16 杭州数梦工场科技有限公司 资源调度方法、资源调度装置和计算机可读存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103729229A (zh) * 2011-12-31 2014-04-16 华茂云天科技(北京)有限公司 弹性计算服务系统
US20140258719A1 (en) * 2012-12-26 2014-09-11 Sookasa Inc. Distributed encryption and access control scheme in a cloud environment
CN105227686A (zh) * 2014-06-20 2016-01-06 中国电信股份有限公司 云主机域名的动态配置方法和系统
CN108399106A (zh) * 2018-02-28 2018-08-14 华为技术有限公司 管理物理主机的方法和装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024022400A1 (zh) * 2022-07-26 2024-02-01 中国电信股份有限公司 云资源配置方法及相关设备
CN115496749A (zh) * 2022-11-14 2022-12-20 江苏智云天工科技有限公司 基于目标检测训练预处理的产品缺陷检测方法及系统
CN115496749B (zh) * 2022-11-14 2023-01-31 江苏智云天工科技有限公司 基于目标检测训练预处理的产品缺陷检测方法及系统

Also Published As

Publication number Publication date
WO2021139264A1 (zh) 2021-07-15
CN111881476B (zh) 2023-07-28

Similar Documents

Publication Publication Date Title
US10942895B2 (en) Storage system with decrement protection of reference counts
US10698772B2 (en) Storage system with multiple write journals supporting synchronous replication failure recovery
US9823877B2 (en) Virtual machine backup from storage snapshot
US10866760B2 (en) Storage system with efficient detection and clean-up of stale data for sparsely-allocated storage in replication
CN111881476B (zh) 对象存储控制方法、装置、计算机设备及存储介质
US11249834B2 (en) Storage system with coordinated recovery across multiple input-output journals of different types
US9678680B1 (en) Forming a protection domain in a storage architecture
US8495178B1 (en) Dynamic bandwidth discovery and allocation to improve performance for backing up data
CN106777394B (zh) 一种集群文件系统
US11010251B1 (en) Metadata update journal destaging with preload phase for efficient metadata recovery in a distributed storage system
US9805038B2 (en) Efficient conflict resolution among stateless processes
US11899544B2 (en) Efficient synchronization of cloud enabled file system database during snapshot restore operation
US20200142627A1 (en) Storage system with storage volume undelete functionality
US11144232B2 (en) Storage system with efficient snapshot pair creation during synchronous replication of logical storage volumes
US11386124B2 (en) Snapshot rollback for synchronous replication
US11099767B2 (en) Storage system with throughput-based timing of synchronous replication recovery
US20200081790A1 (en) Method of tracking and analyzing data integrity issues by leveraging cloud services
US10120594B1 (en) Remote access latency in a reliable distributed computing system
US11269855B2 (en) On-demand remote snapshot creation for a synchronous replication session in automatic recovery
US11971855B2 (en) Supporting multiple operations in transaction logging for a cloud-enabled file system
US11360712B2 (en) Storage system with continuous data verification for synchronous replication of logical storage volumes
US10642788B1 (en) Sand timer algorithm for tracking in-flight data storage requests for data replication
US20220091747A1 (en) Fast recovery in recoverpoint using direct storage access
US20220244979A1 (en) System and method of vm recovery on s3 compatible object storage

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant