CN108616583B - 一种基于计算机云的存储空间分配方法 - Google Patents

一种基于计算机云的存储空间分配方法 Download PDF

Info

Publication number
CN108616583B
CN108616583B CN201810339111.3A CN201810339111A CN108616583B CN 108616583 B CN108616583 B CN 108616583B CN 201810339111 A CN201810339111 A CN 201810339111A CN 108616583 B CN108616583 B CN 108616583B
Authority
CN
China
Prior art keywords
storage
storage unit
storage space
file
space
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810339111.3A
Other languages
English (en)
Other versions
CN108616583A (zh
Inventor
牛路
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhangjiakou Information Technology Co., Ltd
Original Assignee
Zhangjiakou Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhangjiakou Information Technology Co Ltd filed Critical Zhangjiakou Information Technology Co Ltd
Priority to CN201810339111.3A priority Critical patent/CN108616583B/zh
Publication of CN108616583A publication Critical patent/CN108616583A/zh
Application granted granted Critical
Publication of CN108616583B publication Critical patent/CN108616583B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • H04L67/1004—Server selection for load balancing
    • H04L67/1008—Server selection for load balancing based on parameters of servers, e.g. available memory or workload
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • H04L67/1029—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers using data related to the state of servers by a load balancer

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开一种基于计算机云的存储空间分配方法，包括以下步骤：划分备用存储单元和若干存储单元；检测各存储单元内剩余的存储空间与总存储空间的比值是否在范围内，若在，获取占用请求；筛选存储文件的存储单元并统计剩余的存储空间容量；获取文件的存储容量与存储单元所剩余的存储容量的比值，以判断是否存储，并获取下一占用请求；若不在范围内，划分第一分配存储单元和第二分配存储单元，降低第一分配存储单元并增加第二分配存储单元的存储空间或减少备用存储单元增加第二分配存储单元的存储空间，直至比值在范围内。本发明有对存储单元进行空间的分配，提高了存储单元存储文件的利用率，并提高了存储空间的有效调配效果，满足存储需求。

Description

一种基于计算机云的存储空间分配方法
技术领域
本发明属于存储空间分配的技术领域，涉及到一种基于计算机云的存储空间分配方法。
背景技术
随着计算机网络，特别是因特网(Internet)的迅猛发展，越来越多的资料被数据化，全球信息存储量每年急剧增长。传统的信息系统概念发生了巨大的变化，这些变化突出地表现在信息的存储、传递、发布以及获取方式所发生的革命性变革。与此同时，大量数据密集型应用，如视频监控，广电行业，数字图书馆，医疗视频图像处理，海量视频在线编辑等，对存储系统的容量，性能，安全性，可扩展性和可用性提出了更高要求。传统的直接数据存储方式过于简单化，过于集中管理而造成了大量数据的堆积。这样需要大量的存储数据的介质，而导致服务器的回应下降乃至崩溃，这样一来就会有大量数据会随着服务器的崩溃而丢失，因此，传统的直接数据存储模式渐渐不能满足需求，信息存储的需求和应用的复杂性提出了新的存储模式。
云存储是在云计算概念上延伸和发展出来的一个新的概念，是指通过集群应用、网格技术或分布式文件系统等功能，将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作，共同对外提供数据存储和业务访问功能的一个系统。
与传统的存储设备相比，云存储不仅仅是一个硬件，而是一个网络设备、存储设备、服务器、应用软件、公用访问接口、接入网和客户端程序等多个部分组成的复杂系统，各部分以存储设备为核心。
现有的云存储无法根据文件格式不同划分存储单元，在存储的过程中，无法根据各存储单元实际剩余的存储容量进行合理的分配存储空间，进而导致部分存储单元存储空间饱和，而其他存储单元剩余的存储空间过多在，存在存储空间调配不均以及存储空间的利用率低的问题。
发明内容
本发明的目的在于提供一种基于计算机云的存储空间分配方法，解决了现有计算机云的存储空间无法合理的调配以及存储单元的存储利用率低的问题，无法满足不同存储文件的存储需求。
本发明的目的可以通过以下技术方案实现：
一种基于计算机云的存储空间分配方法，包括以下步骤：
S1、将计算机云的存储空间划分为一个备用存储单元和若干个存储空间相等的存储单元,不同的存储单元存储不同文件格式下的文件；
S2、实时检测各存储单元内已使用的存储空间与剩余的存储空间的存储容量，判断剩余的存储空间与总存储空间的比值是否在0.3-0.6范围内，若在，则执行步骤S3，否则，执行步骤S8;
S3、获取文件存储发送的一空间占用请求，并判断需存储文件的文件格式；
S4、筛选存储该文件格式所对应的存储单元，并统计存储该文件格式的存储单元剩余的存储空间容量；
S5、获取需存储文件在进行存储过程中所需的存储容量，判断需存储文件所需的存储容量与存储该文件格式的存储单元所剩余的存储容量间的比值是否在0-0.8之间，若在0-0.8之间，则执行步骤S6，否则，执行步骤S7;
S6、将需存储文件存储至存储该文件格式的存储单元内，并获取文件存储发送的下一空间占用请求，执行步骤S2；
S7、判断需存储文件所需的存储容量与存储该文件格式的存储单元所剩余的存储容量间的比值是否在0.8-1之间，若在，将需存储文件存储至存储该文件格式的存储单元内，并不继续获取文件存储发送的下一空间占用请求，否则，不进行存储，并执行步骤S2;
S8、判断各存储单元剩余的存储空间与总存储空间的比值是否在0.6-1之间，若在，提取该存储单元并标记为第一分配存储单元，否则，提取该存储单元并标记为第二分配存储单元，执行步骤S10；
S9、以固定存储容量降低第一分配存储单元的存储空间并等额增加第二分配存储单元的存储空间，直至第一分配存储单元的剩余的存储空间与分配后的总存储空间的比值小于0.5或第二分配存储单元剩余的存储空间占分配后的总存储空间的比值在0.3-0.6之间，进入步骤S10;
S10、获取第二分配存储单元剩余的存储空间占分配后的总存储空间的比值是否在0.3-0.6之间，若不在0.3-0.6之间，按照固定存储容量减少备用存储单元的存储空间，并将减少的备用存储单元的存储空间划分至第二分配存储单元内，直至第二分配存储单元的剩余存储空间与总存储空间的比值在0.3-0.6之间，执行步骤S3。
进一步地，所述文件格式包括word文件.dot格式 、excel文件.xls格式、音乐文件.mp3格式、图片文件.jpg格式、视频播放格式文件.rm格式。
进一步地，所述步骤S9中第一分配存储单元的剩余的存储空间与分配后的总存储空间的比值小于0.5的优先等级与第二分配存储单元剩余的存储空间占分配后的总存储空间的比值在0.3-0.6之间的优先等级相同。
进一步地，所述存储单元划分若干个存储空间不同的子存储单元，存储空间不同的子存储单元用于存储该文件格式下不同存储容量的文件。
本发明的有益效果：
本发明提供的基于计算机云的存储空间分配方法，通过各存储单元剩余的存储空间与总存储空间的比值，判断比值是否在设定的范围内，若不在，则对存储单元内剩余的存储空间进行重新分配以满足设定的范围，当满足设定的范围时，接收文件并判断存储该文件所需的存储空间与所剩余的存储容量间的关系，进而有效地对存储单元进行空间的分配，提高了存储单元存储文件的利用率，并提高了存储空间的实时调配效果，满足不同需存储文件的存储需求。
具体实施方式
下面将结合本发明实施例，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。
本发明为一种基于计算机云的存储空间分配方法，包括以下步骤：
S1、将计算机云的存储空间划分为一个备用存储单元和若干个存储空间相等的存储单元,不同的存储单元存储不同文件格式下的文件，文件格式包括word文件.dot格式 、excel文件.xls格式、音乐文件.mp3格式、图片文件.jpg格式、视频播放格式文件.rm格式等；
S2、实时检测各存储单元内已使用的存储空间与剩余的存储空间的存储容量，判断剩余的存储空间与总存储空间的比值是否在0.3-0.6范围内，若在，则执行步骤S3，否则，执行步骤S8;
S3、获取文件存储发送的一空间占用请求，并判断需存储文件的文件格式；
S4、筛选存储该文件格式所对应的存储单元，并统计存储该文件格式的存储单元剩余的存储空间容量；
S5、获取需存储文件在进行存储过程中所需的存储容量，判断需存储文件所需的存储容量与存储该文件格式的存储单元所剩余的存储容量间的比值是否在0-0.8之间，若在0-0.8之间，则执行步骤S6，否则，执行步骤S7;
S6、将需存储文件存储至存储该文件格式的存储单元内，并获取文件存储发送的下一空间占用请求，执行步骤S2；
S7、判断需存储文件所需的存储容量与存储该文件格式的存储单元所剩余的存储容量间的比值是否在0.8-1之间，若在，将需存储文件存储至存储该文件格式的存储单元内，并不继续获取文件存储发送的下一空间占用请求，否则，不进行存储，并执行步骤S2;
S8、判断各存储单元剩余的存储空间与总存储空间的比值是否在0.6-1之间，若在，提取该存储单元并标记为第一分配存储单元，否则，提取该存储单元并标记为第二分配存储单元，执行步骤S10；
S9、以固定存储容量C降低第一分配存储单元的存储空间并等额增加第二分配存储单元的存储空间，直至第一分配存储单元的剩余的存储空间与分配后的总存储空间的比值小于0.5或第二分配存储单元剩余的存储空间占分配后的总存储空间的比值在0.3-0.6之间，进入步骤S10;
所述第一分配存储单元的剩余的存储空间与分配后的总存储空间的比值小于0.5的优先等级与第二分配存储单元剩余的存储空间占分配后的总存储空间的比值在0.3-0.6之间的优先等级相同，即：无论第一分配存储单元的剩余的存储空间与分配后的总存储空间的比值小于0.5和第二分配存储单元剩余的存储空间占分配后的总存储空间的比值在0.3-0.6之间中任何一个满足条件，则将执行步骤S11;
S10、获取第二分配存储单元剩余的存储空间占分配后的总存储空间的比值是否在0.3-0.6之间，若不在0.3-0.6之间，按照固定存储容量D减少备用存储单元的存储空间，并将减少的备用存储单元的存储空间划分至第二分配存储单元内，直至第二分配存储单元的剩余存储空间与总存储空间的比值在0.3-0.6之间，执行步骤S3。
其中，各存储单元根据文件格式不同存储至对应的存储单元内，每个存储单元均划分为若干个存储空间不同的子存储单元，存储空间不同的子存储单元用于存储该文件格式下不同存储容量的文件。例如，存储视频播放格式文件所对应的存储单元，划分为固定存储空间和变换式存储空间，固定式存储空间划分为若干100M子空间、若干300M子空间、若干500M子空间、若干1G子空间和若干1.5G子空间，根据固定式存储空间的划分将小于100M的短视频存储至100M子空间内，将100-300M的短视频存储至300M子空间内，将300-500M的短视频存储至500M子空间内等等；
变换式存储空间用于存储对应文件格式下的文件，同时，可用于增加或减少该变换式存储空间中的存储空间以减少或增加其他存储单元的存储空间。
本发明提供的基于计算机云的存储空间分配方法，通过各存储单元剩余的存储空间与总存储空间的比值，判断比值是否在设定的范围内，若不在，则对存储单元内剩余的存储空间进行重新分配以满足设定的范围，当满足设定的范围时，接收文件并判断存储该文件所需的存储空间与所剩余的存储容量间的关系，进而有效地对存储单元进行空间的分配，提高了存储单元存储文件的利用率，并提高了存储空间的实时调配效果，满足不同需存储文件的存储需求。
以上内容仅仅是对本发明的构思所作的举例和说明，所属本技术领域的技术人员对所描述的具体实施例做各种各样的修改或补充或采用类似的方式替代，只要不偏离发明的构思或者超越本权利要求书所定义的范围，均应属于本发明的保护范围。

Claims (4)

1.一种基于计算机云的存储空间分配方法，其特征在于，包括以下步骤：
S1、将计算机云的存储空间划分为一个备用存储单元和若干个存储空间相等的存储单元，不同的存储单元存储不同文件格式下的文件；
S2、实时检测各存储单元内已使用的存储空间与所述存储单元内剩余的存储空间的存储容量，判断各存储单元内剩余的存储空间与所述存储单元内总存储空间的比值是否在0.3-0.6范围内，若在，则执行步骤S3，否则，执行步骤S8；
S3、获取文件存储发送的一空间占用请求，并判断需存储文件的文件格式；
S4、筛选存储该文件格式所对应的存储单元，并统计存储该文件格式的存储单元剩余的存储空间容量；
S5、获取需存储文件在进行存储过程中所需的存储容量，判断需存储文件所需的存储容量与存储该文件格式的存储单元所剩余的存储容量间的比值是否在0-0.8之间，若在0-0.8之间，则执行步骤S6，否则，执行步骤S7；
S6、将需存储文件存储至存储该文件格式的存储单元内，并获取文件存储发送的下一空间占用请求，执行步骤S2；
S7、判断需存储文件所需的存储容量与存储该文件格式的存储单元所剩余的存储容量间的比值是否在0.8-1之间，若在，将需存储文件存储至存储该文件格式的存储单元内，并不继续获取文件存储发送的下一空间占用请求，否则，不进行存储，并执行步骤S2；
S8、判断各存储单元剩余的存储空间与总存储空间的比值是否在0.6-1之间，若在，提取该存储单元并标记为第一分配存储单元，否则，提取该存储单元并标记为第二分配存储单元，执行步骤S10；
S9、以固定存储容量降低第一分配存储单元的存储空间并等额增加第二分配存储单元的存储空间，直至第一分配存储单元的剩余的存储空间与分配后的总存储空间的比值小于0.5或第二分配存储单元剩余的存储空间占分配后的总存储空间的比值在0.3-0.6之间，进入步骤S10；
S10、获取第二分配存储单元剩余的存储空间占分配后的总存储空间的比值是否在0.3-0.6之间，若不在0.3-0.6之间，按照固定存储容量减少备用存储单元的存储空间，并将减少的备用存储单元的存储空间划分至第二分配存储单元内，直至第二分配存储单元的剩余存储空间与总存储空间的比值在0.3-0.6之间，执行步骤S3。
2.根据权利要求1所述的一种基于计算机云的存储空间分配方法，其特征在于：所述文件格式包括word文件.dot格式、excel文件.xls格式、音乐文件.mp3格式、图片文件.GIF格式、视频播放格式文件.rm格式。
3.根据权利要求1所述的一种基于计算机云的存储空间分配方法，其特征在于：所述步骤S9中第一分配存储单元的剩余的存储空间与分配后的总存储空间的比值小于0.5的优先等级与第二分配存储单元剩余的存储空间占分配后的总存储空间的比值在0.3-0.6之间的优先等级相同；即无论第一分配存储单元的剩余的存储空间与分配后的总存储空间的比值小于0.5和第二分配存储单元剩余的存储空间占分配后的总存储空间的比值在0.3-0.6之间中任何一个满足条件，则将执行步骤S10。
4.根据权利要求1所述的一种基于计算机云的存储空间分配方法，其特征在于：所述存储单元划分若干个存储空间不同的子存储单元，存储空间不同的子存储单元用于存储该文件格式下不同存储容量的文件。
CN201810339111.3A 2018-04-16 2018-04-16 一种基于计算机云的存储空间分配方法 Active CN108616583B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810339111.3A CN108616583B (zh) 2018-04-16 2018-04-16 一种基于计算机云的存储空间分配方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810339111.3A CN108616583B (zh) 2018-04-16 2018-04-16 一种基于计算机云的存储空间分配方法

Publications (2)

Publication Number Publication Date
CN108616583A CN108616583A (zh) 2018-10-02
CN108616583B true CN108616583B (zh) 2020-12-15

Family

ID=63660477

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810339111.3A Active CN108616583B (zh) 2018-04-16 2018-04-16 一种基于计算机云的存储空间分配方法

Country Status (1)

Country Link
CN (1) CN108616583B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112035058B (zh) * 2020-07-30 2021-04-30 深圳市中盛瑞达科技有限公司 云平台存储系统
US11275514B2 (en) 2020-08-10 2022-03-15 International Business Machines Corporation Expanding storage capacity for implementing logical corruption protection

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103778071A (zh) * 2014-01-20 2014-05-07 华为技术有限公司 缓存的空间分配方法及装置
CN104077234A (zh) * 2014-07-10 2014-10-01 三星电子（中国）研发中心 一种嵌入式系统分区的动态调整方法和装置
CN105117177A (zh) * 2015-09-14 2015-12-02 许昌许继软件技术有限公司 一种基于单硬盘多分区的大数据管理方法
CN106406756A (zh) * 2016-09-05 2017-02-15 华为技术有限公司 一种文件系统的空间分配方法及装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10592357B2 (en) * 2015-12-30 2020-03-17 Commvault Systems, Inc. Distributed file system in a distributed deduplication data storage system

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103778071A (zh) * 2014-01-20 2014-05-07 华为技术有限公司 缓存的空间分配方法及装置
CN104077234A (zh) * 2014-07-10 2014-10-01 三星电子（中国）研发中心 一种嵌入式系统分区的动态调整方法和装置
CN105117177A (zh) * 2015-09-14 2015-12-02 许昌许继软件技术有限公司 一种基于单硬盘多分区的大数据管理方法
CN106406756A (zh) * 2016-09-05 2017-02-15 华为技术有限公司 一种文件系统的空间分配方法及装置

Also Published As

Publication number Publication date
CN108616583A (zh) 2018-10-02

Similar Documents

Publication Publication Date Title
CN107943421B (zh) 一种基于分布式存储系统的分区划分方法及装置
US10114749B2 (en) Cache memory system and method for accessing cache line
CN106407207B (zh) 一种实时新增数据更新方法和装置
US10356150B1 (en) Automated repartitioning of streaming data
CN108900626B (zh) 一种云环境下数据存储方法、装置及系统
CN111309644B (zh) 一种内存分配方法、装置和计算机可读存储介质
CN108519917A (zh) 一种资源池分配方法和装置
CN106933868A (zh) 一种调整数据分片分布的方法及数据服务器
US10649967B2 (en) Memory object pool use in a distributed index and query system
CN108616583B (zh) 一种基于计算机云的存储空间分配方法
CN111966289A (zh) 基于Kafka集群的分区优化方法和系统
CN109582649B (zh) 一种元数据存储方法、装置、设备及可读存储介质
CN111737168A (zh) 一种缓存系统、缓存处理方法、装置、设备及介质
CN111061752A (zh) 数据处理方法、装置及电子设备
CN114253456A (zh) 一种缓存负载均衡方法和装置
CN108595122B (zh) 一种基于局域网的计算机安全管理系统
CN115934311A (zh) 一种数据重分布方法及电子设备
CN108595367B (zh) 一种基于局域网内计算机集群的服务器系统
CN111177106B (zh) 一种分布式数据计算系统及方法
CN108139969B (zh) 一种内存配置方法、装置及系统
CN110874268B (zh) 数据处理方法、装置和设备
CN110990394B (zh) 分布式面向列数据库表的行数统计方法、装置和存储介质
CN113760876A (zh) 一种数据过滤方法和装置
CN113741787B (zh) 一种数据存储方法、装置、设备、介质
CN116383290B (zh) 一种数据泛化解析方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20201126

Address after: No.3b15, 3rd floor, East District, Chahar Century Plaza, Qiaodong District, Zhangjiakou City, Hebei Province

Applicant after: Zhangjiakou Information Technology Co., Ltd

Address before: 450000 No. 68, 68 Cui Hua Road, Jinshui District, Zhengzhou, Henan 148

Applicant before: Niu Lu

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant