CN111221477B - 一种osd盘分配方法及系统 - Google Patents
一种osd盘分配方法及系统 Download PDFInfo
- Publication number
- CN111221477B CN111221477B CN202010026813.3A CN202010026813A CN111221477B CN 111221477 B CN111221477 B CN 111221477B CN 202010026813 A CN202010026813 A CN 202010026813A CN 111221477 B CN111221477 B CN 111221477B
- Authority
- CN
- China
- Prior art keywords
- osd
- file
- disc
- sst
- wal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 43
- 238000009826 distribution Methods 0.000 title description 6
- 238000013403 standard screening design Methods 0.000 claims abstract description 78
- 238000013507 mapping Methods 0.000 claims description 11
- 238000005192 partition Methods 0.000 claims description 9
- 238000000638 solvent extraction Methods 0.000 abstract description 14
- 238000013139 quantization Methods 0.000 abstract description 3
- 238000004891 communication Methods 0.000 abstract description 2
- 238000004590 computer program Methods 0.000 description 17
- 238000003860 storage Methods 0.000 description 13
- 230000008569 process Effects 0.000 description 10
- 238000012545 processing Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 7
- 101100045541 Homo sapiens TBCD gene Proteins 0.000 description 3
- 101150093640 SSD1 gene Proteins 0.000 description 3
- 101100111629 Saccharomyces cerevisiae (strain ATCC 204508 / S288c) KAR2 gene Proteins 0.000 description 3
- 102100030290 Tubulin-specific chaperone D Human genes 0.000 description 3
- 101100121776 Arabidopsis thaliana GIG1 gene Proteins 0.000 description 2
- 101100267551 Saccharomyces cerevisiae (strain ATCC 204508 / S288c) YME1 gene Proteins 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 238000009827 uniform distribution Methods 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 239000013256 coordination polymer Substances 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0604—Improving or facilitating administration, e.g. storage management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0629—Configuration or reconfiguration of storage systems
- G06F3/0631—Configuration or reconfiguration of storage systems by allocating resources to storage systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0638—Organizing or formatting or addressing of data
- G06F3/0644—Management of space entities, e.g. partitions, extents, pools
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
- G06F3/0673—Single storage device
- G06F3/0679—Non-volatile semiconductor memory device, e.g. flash memory, one time programmable memory [OTP]
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种OSD盘分配方法及系统，涉及通信技术领域，该方法包括以下步骤：获取待分配的OSD盘、SSD的数量以及容量；根据OSD盘、SSD的数量以及容量，设定各OSD盘的SST文件以及WAL文件大小；将OSD盘的数据缓存区域、SST文件以及WAL文件按大小均匀分配至各SSD内。本发明对OSD盘进行精确量化的分区工作，避免人工凭借经验进行分区，降低后期故障风险。
Description
技术领域
本发明涉及通信技术领域，具体涉及一种OSD盘分配方法及系统。
背景技术
目前技术手段中，在部署基于bluestore的ceph OSD时，为了提高OSD的性能，通常都将rocksdb的SST文件和WAL文件放置在ssd内，并且将一部分ssd用作机械盘的数据缓存，但如何对ssd进行分区确没有一个统一标准。
现有ceph OSD的部署方式都是手动划分ssd分区，分区大小全凭技术人员的经验估算，然后提供给OSD使用，但由于没有统一的分配标准，往往会因分配不合理造成后期系统运行故障。
因此，急需一种新的OSD盘分配技术方案来解决上述技术问题。
发明内容
针对现有技术中存在的缺陷，本发明的目的在于提供一种OSD盘分配方法及系统，对OSD盘进行精确量化的分区工作，避免人工凭借经验进行分区，降低后期故障风险。
为达到以上目的，本发明采取的技术方案是：
第一方面，本发明公开一种OSD盘分配方法，所述方法包括以下步骤：
获取待分配的OSD盘、SSD的数量以及容量；
根据所述OSD盘、所述SSD的数量以及容量，设定各所述OSD盘的SST文件以及WAL文件大小；
将所述OSD盘的数据缓存区域、SST文件以及WAL文件按大小均匀分配至各所述SSD内；
根据所述OSD盘、所述SSD的数量以及容量，设定各所述OSD盘的SST文件以及WAL文件大小中，包括以下步骤：
当OSD盘容量有限时，按照同一比例缩小各OSD盘的SST文件以及WAL文件大小；其中，
各所述OSD盘的SST文件以及所述WAL文件大小与所述OSD盘的容量存在呈比例的对应关系。
在上述技术方案的基础上，当任一所述OSD盘的所述数据缓存区域、所述SST文件以及所述WAL文件位于不同的所述SSD内时，所述方法还包括以下步骤：
在所述OSD盘的所述数据缓存区域、所述SST文件以及所述WAL文件之间建立映射关系。
在上述技术方案的基础上，任一所述OSD盘的所述数据缓存区域、所述SST文件以及所述WAL文件分别分配至一个所述SSD内。
在上述技术方案的基础上，当任一所述SSD的容量不足以分配所述OSD盘的所述数据缓存区域、所述SST文件以及所述WAL文件时，所述方法还包括以下步骤：
根据预设比例缩小所述OSD盘的所述SST文件以及所述WAL文件的大小。
在上述技术方案的基础上，各所述OSD盘的所述数据缓存区域大小相同；
各所述OSD盘的所述SST文件大小相同；
各所述OSD盘的所述WAL文件大小相同。
第二方面，本发明还公开一种OSD盘分配系统，所述系统包括：
容量获取单元，其用于获取待分配的OSD盘、SSD的数量以及容量；
参数预设单元，其用于根据所述OSD盘、所述SSD的数量以及容量，设定各所述OSD盘的SST文件以及WAL文件大小；
分区配置单元，其用于将所述OSD盘的数据缓存区域、SST文件以及WAL文件按大小均匀分配至各所述SSD内；
所述参数预设单元还用于当OSD盘容量有限时，按照同一比例缩小各OSD盘的SST文件以及WAL文件大小；其中，
各所述OSD盘的SST文件以及所述WAL文件大小与所述OSD盘的容量存在呈比例的对应关系。
在上述技术方案的基础上，当任一所述OSD盘的所述数据缓存区域、所述SST文件以及所述WAL文件位于不同的所述SSD内时，所述系统还包括：
映射建立单元，其用于在所述OSD盘的所述数据缓存区域、所述SST文件以及所述WAL文件之间建立映射关系。
在上述技术方案的基础上，任一所述OSD盘的所述数据缓存区域、所述SST文件以及所述WAL文件分别分配至一个所述SSD内。
在上述技术方案的基础上，当任一所述SSD的容量不足以分配所述OSD盘的所述数据缓存区域、所述SST文件以及所述WAL文件时：
所述参数预设单元，其用于根据预设比例缩小所述OSD盘的所述SST文件以及所述WAL文件的大小。
在上述技术方案的基础上，各所述OSD盘的所述数据缓存区域大小相同；
各所述OSD盘的所述SST文件大小相同；
各所述OSD盘的所述WAL文件大小相同。
与现有技术相比，本发明的优点在于：
1、本发明对OSD盘进行精确量化的分区工作，避免人工凭借经验进行分区，降低后期故障风险。
2、本发明在分区过程中，当ssd盘容量不足时，能够对配置进行均衡化处理，保障分区工作的顺利进行。
附图说明
图1为本发明实施例一中OSD盘分配方法的步骤流程图；
图2为本发明实施例二中OSD盘分配方法的分配示意图；
图3为本发明实施例三中OSD盘分配系统的步骤流程图；
图中：1、容量获取单元；2、参数预设单元；3、分区配置单元；4、映射建立单元。
具体实施方式
术语解释：
ceph：一个开源的分布式存储系统，可同时提供块、文件、对象接口；
HDD：Hard Disk Drive，机硬盘驱动器，即械磁盘
SSD：Solid State Disk，固态磁盘
OSD：Ceph中承载数据的对象存储设备，一般可由一块机械盘构成，也可由一个RAID组构成；
rocksdb：一种高性能的Key-Value数据库；
SST：Sorted Sequence Table，RocksDB用SST文件来存储用户写入的数据；
WAL：write ahead log，RocksDB的预写日志，WAL可以用来恢复内存表中的数据；
bluestore：一种存储数据和元数据的方式，在这种方式中，数据存储在裸盘上，元数据存储在kv数据库rocksdb中。
以下结合附图对本发明的实施例作进一步详细说明。
本发明实施例提供一种OSD盘分配方法及系统，对OSD盘进行精确量化的分区工作，避免人工凭借经验进行分区，降低后期故障风险。
为达到上述技术效果，本申请的总体思路如下：
一种OSD盘分配方法，该方法包括以下步骤：
S1、获取待分配的OSD盘、SSD的数量以及容量；
S2、根据所述OSD盘、所述SSD的数量以及容量，设定各所述OSD盘的SST文件以及WAL文件大小；
S3、将所述OSD盘的数据缓存区域、SST文件以及WAL文件按大小均匀分配至各所述SSD内。
以下结合附图对本发明的实施例作进一步详细说明。
实施例一
参见图1所示，本发明实施例一提供一种OSD盘分配方法，该方法包括以下步骤：
S1、获取待分配的OSD盘、SSD的数量以及容量；
S2、根据OSD盘、SSD的数量以及容量，设定各OSD盘的SST文件以及WAL文件大小；
S3、将OSD盘的数据缓存区域、SST文件以及WAL文件按大小均匀分配至各SSD内。
本发明实施例中，首先会获取需要进行分配的OSD盘的数量以及容量，获取需要进行分配的SSD的数量以及容量，由于获取了OSD盘的容量，故而各OSD盘的数据缓存区域的大小由于是与OSD盘的容量相对应的，故而各OSD盘的数据缓存区域的大小也能够获得；
进而，根据各OSD盘的数量以及容量，各SSD的数量以及容量，同样，还需要根据各OSD盘的数据缓存区域的大小，设定各OSD盘的SST文件以及WAL文件大小，
在设定各OSD盘的SST文件以及WAL文件大小时，通常情况下，各OSD盘的SST文件以及WAL文件大小与OSD盘的容量存在呈比例的对应关系，而当OSD盘容量有限时，则需要对各OSD盘的SST文件以及WAL文件大小进行适当缩减，即按照同一比例缩小容量；
最后，将OSD盘的数据缓存区域、SST文件以及WAL文件按大小均匀分配至各SSD内，
需要说明的是，均匀分配至各SSD内，是指大致均匀分配至各SSD内，即各SSD内分配的各OSD盘的数据缓存区域、SST文件以及WAL文件的大小总和大致相等。
本发明实施例，本发明对OSD盘进行精确量化的分区工作，避免人工凭借经验进行分区，降低后期故障风险；
另外，在分区过程中，当ssd盘容量不足时，设定各OSD盘的SST文件以及WAL文件大小，能够对配置进行均衡化处理，保障分区工作的顺利进行。
需要说明的是，在进行分配过程中，由于SSD容量大小的关系，一个OSD盘的数据缓存区域、SST文件以及WAL文件可以存在与不同的SSD中。
本发明实施例中的另一种实施方式中，当任一OSD盘的数据缓存区域、SST文件以及WAL文件位于不同的SSD内时，方法还包括以下步骤：
在OSD盘的数据缓存区域、SST文件以及WAL文件之间建立映射关系；
以便使得各OSD盘的数据缓存区域、SST文件以及WAL文件虽然位于不同的SSD内，但仍然能够通过映射关系联系起来。
需要说明的是，任一OSD盘的数据缓存区域、SST文件以及WAL文件分别分配至一个SSD内，
即各数据缓存区域、各SST文件以及各WAL文件自身不再进行拆分，各数据缓存区域、各SST文件以及各WAL文件各自作为一个整体分配至一个SSD内。
本发明实施例中的另一种实施方式中，当任一SSD的容量不足以分配OSD盘的数据缓存区域、SST文件以及WAL文件时，方法还包括以下步骤：
根据预设比例缩小OSD盘的SST文件以及WAL文件的大小；
需要说明的是，通常情况下，OSD盘的SST文件以及WAL文件的大小多为分配后所属SSD的容量大小的2％，当在设定过程中，发现SSD的容量不足以分配OSD盘的数据缓存区域、SST文件以及WAL文件时，则在设定过程中，会根据预设比例缩小OSD盘的SST文件以及WAL文件的大小，以使得一个SSD至少能够用于分配一个OSD盘的数据缓存区域、SST文件以及WAL文件。
本发明实施例中的另一种实施方式中，各OSD盘的数据缓存区域大小相同；
各OSD盘的SST文件大小相同；
各OSD盘的WAL文件大小相同；
另外，各OSD盘的容量大小一致，各SSD的容量大小也一致；
必要时，各OSD盘的SST文件以及WAL文件大小均相同。
基于同一发明构思，本申请提供了实施例一对应的OSD盘分配方法的具体实施例，详见实施例二
实施例二
参见图2所示，本发明实施例二提供一种OSD盘分配方法，该方法包括以下步骤：
第一步、获取待分配的OSD盘、SSD的数量以及容量，共5个OSD盘，2个SSD盘，各SSD的容量大小为100G，各OSD盘的容量大小为100G，其中，各OSD盘的数据缓存区域的大小按照常规设定标准，均为20G；
第二步、由于SSD剩余容量仅为100G，故而各OSD盘的SST文件以及WAL文件大小需要按照比例进行缩减，即各OSD盘的SST文件以及WAL文件大小为10G；
第三步、将OSD盘的数据缓存区域、SST文件以及WAL文件按大小均匀分配至各SSD内。
首先，将各SSD标记为SSD1以及SSD2，各OSD盘标记为OSD1、OSD2、OSD3、OSD4以及OSD5，其中一种分配结果具体如下：
OSD1、OSD2的数据缓存区域、SST文件以及WAL文件分配至SSD1，OSD3的数据缓存区域分配至SSD1；
OSD3、OSD4的数据缓存区域、SST文件以及WAL文件分配至SSD2，OSD3的SST文件以及WAL文件分配至SSD2。
本发明对OSD盘进行精确量化的分区工作，避免人工凭借经验进行分区，降低后期故障风险。
基于同一发明构思，本申请提供了实施例一对应的OSD盘分配系统的实施例，详见实施例三
实施例三
参见图3所示，本发明实施例三提供一种OSD盘分配系统，该系统包括：
容量获取单元1，其用于获取待分配的OSD盘、SSD的数量以及容量；
参数预设单元2，其用于根据OSD盘、SSD的数量以及容量，设定各OSD盘的SST文件以及WAL文件大小；
分区配置单元3，其用于将OSD盘的数据缓存区域、SST文件以及WAL文件按大小均匀分配至各SSD内。
本发明实施例中，首先会获取需要进行分配的OSD盘的数量以及容量，获取需要进行分配的SSD的数量以及容量，由于获取了OSD盘的容量，故而各OSD盘的数据缓存区域的大小由于是与OSD盘的容量相对应的，故而各OSD盘的数据缓存区域的大小也能够获得；
进而，根据各OSD盘的数量以及容量，各SSD的数量以及容量，同样，还需要根据各OSD盘的数据缓存区域的大小，设定各OSD盘的SST文件以及WAL文件大小，
在设定各OSD盘的SST文件以及WAL文件大小时，通常情况下，各OSD盘的SST文件以及WAL文件大小与OSD盘的容量存在呈比例的对应关系，而当OSD盘容量有限时，则需要对各OSD盘的SST文件以及WAL文件大小进行适当缩减，即按照同一比例缩小容量；
最后，将OSD盘的数据缓存区域、SST文件以及WAL文件按大小均匀分配至各SSD内，
需要说明的是，均匀分配至各SSD内，是指大致均匀分配至各SSD内，即各SSD内分配的各OSD盘的数据缓存区域、SST文件以及WAL文件的大小总和大致相等。
本发明实施例，本发明对OSD盘进行精确量化的分区工作，避免人工凭借经验进行分区，降低后期故障风险；
另外，在分区过程中，当ssd盘容量不足时，设定各OSD盘的SST文件以及WAL文件大小，能够对配置进行均衡化处理，保障分区工作的顺利进行。
需要说明的是，在进行分配过程中，由于SSD容量大小的关系，一个OSD盘的数据缓存区域、SST文件以及WAL文件可以存在与不同的SSD中。
需要说明的是，任一OSD盘的数据缓存区域、SST文件以及WAL文件分别分配至一个SSD内，
即各数据缓存区域、各SST文件以及各WAL文件自身不再进行拆分，各数据缓存区域、各SST文件以及各WAL文件各自作为一个整体分配至一个SSD内。
本发明实施例中的另一种实施方式中，当任一OSD盘的数据缓存区域、SST文件以及WAL文件位于不同的SSD内时，系统还包括：
映射建立单元4，其用于在OSD盘的数据缓存区域、SST文件以及WAL文件之间建立映射关系；
以便使得各OSD盘的数据缓存区域、SST文件以及WAL文件虽然位于不同的SSD内，但仍然能够通过映射关系联系起来。
本发明实施例中的另一种实施方式中，当任一SSD的容量不足以分配OSD盘的数据缓存区域、SST文件以及WAL文件时：
参数预设单元2，其用于根据预设比例缩小OSD盘的SST文件以及WAL文件的大小；
需要说明的是，通常情况下，OSD盘的SST文件以及WAL文件的大小多为分配后所属SSD的容量大小的2％，当在设定过程中，发现SSD的容量不足以分配OSD盘的数据缓存区域、SST文件以及WAL文件时，则在设定过程中，会根据预设比例缩小OSD盘的SST文件以及WAL文件的大小，以使得一个SSD至少能够用于分配一个OSD盘的数据缓存区域、SST文件以及WAL文件。
本发明实施例中的另一种实施方式中，各OSD盘的数据缓存区域大小相同；
各OSD盘的SST文件大小相同；
各OSD盘的WAL文件大小相同；
另外，各OSD盘的容量大小一致，各SSD的容量大小也一致；
必要时，各OSD盘的SST文件以及WAL文件大小均相同。
基于同一发明构思，本申请提供了实施例一对应的存储介质的实施例，详见实施例四
实施例四
本发明第四实施例提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现第一实施例中的所有方法步骤或部分方法步骤。
本发明实现上述第一实施例中的全部或部分流程，也可以通过计算机程序来指令相关的硬件来完成，计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，计算机程序包括计算机程序代码，计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。计算机可读介质可以包括：能够携带计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是，计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减，例如在某些司法管辖区，根据立法和专利实践，计算机可读介质不包括电载波信号和电信信号。
基于同一发明构思，本申请提供了实施例一对应的设备的实施例，详见实施例五
实施例五
本发明第五实施例还提供一种设备，包括存储器和处理器，存储器上储存有在处理器上运行的计算机程序，处理器执行计算机程序时实现第一实施例中的所有方法步骤或部分方法步骤。
所称处理器可以是中央处理单元(Central Processing Unit，CP U)，还可以是其他通用处理器、数字信号处理器(Digital Signal Proc essor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等，处理器是计算机装置的控制中心，利用各种接口和线路连接整个计算机装置的各个部分。
存储器可用于存储计算机程序和/或模块，处理器通过运行或执行存储在存储器内的计算机程序和/或模块，以及调用存储在存储器内的数据，实现计算机装置的各种功能。存储器可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如音频数据、视频数据等)等。此外，存储器可以包括高速随机存取存储器，还可以包括非易失性存储器，例如硬盘、内存、插接式硬盘，智能存储卡(Smart Media Card，SMC)，安全数字(Secure Digital，SD)卡，闪存卡(Flash Card)、至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、服务器或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、服务器和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。
Claims (10)
1.一种OSD盘分配方法，其特征在于，所述方法包括以下步骤：
获取待分配的OSD盘、SSD的数量以及容量；
根据所述OSD盘、所述SSD的数量以及容量，设定各所述OSD盘的SST文件以及WAL文件大小；
将所述OSD盘的数据缓存区域、SST文件以及WAL文件按大小均匀分配至各所述SSD内；
根据所述OSD盘、所述SSD的数量以及容量，设定各所述OSD盘的SST文件以及WAL文件大小中，包括以下步骤：
当OSD盘容量有限时，按照同一比例缩小各OSD盘的SST文件以及WAL文件大小；其中，
各所述OSD盘的SST文件以及所述WAL文件大小与所述OSD盘的容量存在呈比例的对应关系。
2.如权利要求1所述的方法，其特征在于，当任一所述OSD盘的所述数据缓存区域、所述SST文件以及所述WAL文件位于不同的所述SSD内时，所述方法还包括以下步骤：
在所述OSD盘的所述数据缓存区域、所述SST文件以及所述WAL文件之间建立映射关系。
3.如权利要求1所述的方法，其特征在于：
任一所述OSD盘的所述数据缓存区域、所述SST文件以及所述WAL文件分别分配至一个所述SSD内。
4.如权利要求1所述的方法，其特征在于，当任一所述SSD的容量不足以分配所述OSD盘的所述数据缓存区域、所述SST文件以及所述WAL文件时，所述方法还包括以下步骤：
根据预设比例缩小所述OSD盘的所述SST文件以及所述WAL文件的大小。
5.如权利要求1所述的方法，其特征在于：
各所述OSD盘的所述数据缓存区域大小相同；
各所述OSD盘的所述SST文件大小相同；
各所述OSD盘的所述WAL文件大小相同。
6.一种OSD盘分配系统，所述系统包括：
容量获取单元，其用于获取待分配的OSD盘、SSD的数量以及容量；
参数预设单元，其用于根据所述OSD盘、所述SSD的数量以及容量，设定各所述OSD盘的SST文件以及WAL文件大小；
分区配置单元，其用于将所述OSD盘的数据缓存区域、SST文件以及WAL文件按大小均匀分配至各所述SSD内；
所述参数预设单元还用于当OSD盘容量有限时，按照同一比例缩小各OSD盘的SST文件以及WAL文件大小；其中，
各所述OSD盘的SST文件以及所述WAL文件大小与所述OSD盘的容量存在呈比例的对应关系。
7.如权利要求6所述的系统，其特征在于，当任一所述OSD盘的所述数据缓存区域、所述SST文件以及所述WAL文件位于不同的所述SSD内时，所述系统还包括：
映射建立单元，其用于在所述OSD盘的所述数据缓存区域、所述SST文件以及所述WAL文件之间建立映射关系。
8.如权利要求6所述的系统，其特征在于：
任一所述OSD盘的所述数据缓存区域、所述SST文件以及所述WAL文件分别分配至一个所述SSD内。
9.如权利要求6所述的系统，其特征在于，当任一所述SSD的容量不足以分配所述OSD盘的所述数据缓存区域、所述SST文件以及所述WAL文件时：
所述参数预设单元，其用于根据预设比例缩小所述OSD盘的所述SST文件以及所述WAL文件的大小。
10.如权利要求6所述的系统，其特征在于：
各所述OSD盘的所述数据缓存区域大小相同；
各所述OSD盘的所述SST文件大小相同；
各所述OSD盘的所述WAL文件大小相同。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010026813.3A CN111221477B (zh) | 2020-01-10 | 2020-01-10 | 一种osd盘分配方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010026813.3A CN111221477B (zh) | 2020-01-10 | 2020-01-10 | 一种osd盘分配方法及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111221477A CN111221477A (zh) | 2020-06-02 |
| CN111221477B true CN111221477B (zh) | 2023-08-22 |
Family
ID=70826684
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010026813.3A Active CN111221477B (zh) | 2020-01-10 | 2020-01-10 | 一种osd盘分配方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111221477B (zh) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114138209B (zh) * | 2022-02-07 | 2022-04-22 | 苏州浪潮智能科技有限公司 | 一种部署osd的方法、装置及计算机可读存储介质 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108132759A (zh) * | 2018-01-15 | 2018-06-08 | 网宿科技股份有限公司 | 一种文件系统中管理数据的方法和装置 |
| CN108664218A (zh) * | 2018-04-23 | 2018-10-16 | 浙江大华技术股份有限公司 | 一种基于数据特征的ssd存储方法、装置及系统 |
| CN109962969A (zh) * | 2017-12-22 | 2019-07-02 | 三星电子株式会社 | 用于云计算存储系统的自适应缓存负载均衡的方法和装置 |
| CN110019187A (zh) * | 2017-09-12 | 2019-07-16 | 阿里巴巴集团控股有限公司 | 一种数据分配方法、装置及设备 |
-
2020
- 2020-01-10 CN CN202010026813.3A patent/CN111221477B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110019187A (zh) * | 2017-09-12 | 2019-07-16 | 阿里巴巴集团控股有限公司 | 一种数据分配方法、装置及设备 |
| CN109962969A (zh) * | 2017-12-22 | 2019-07-02 | 三星电子株式会社 | 用于云计算存储系统的自适应缓存负载均衡的方法和装置 |
| CN108132759A (zh) * | 2018-01-15 | 2018-06-08 | 网宿科技股份有限公司 | 一种文件系统中管理数据的方法和装置 |
| CN108664218A (zh) * | 2018-04-23 | 2018-10-16 | 浙江大华技术股份有限公司 | 一种基于数据特征的ssd存储方法、装置及系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111221477A (zh) | 2020-06-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| DE112015000384B4 (de) | Erhöhen der Zuverlässigkeit in einem verteilten Speichersystem | |
| DE112018002951T5 (de) | Verwenden eines spurformatcodes in einem cache-steuerblock für eine spur in einem cache, um lese- und schreibanforderungen in bezug auf die spur im cache zu verarbeiten | |
| CN109614040B (zh) | 具有多存储池的存储方法、存储介质、电子设备及系统 | |
| US20140258221A1 (en) | Increasing distributed database capacity | |
| US9940331B1 (en) | Proactive scavenging of file system snaps | |
| DE112010004573T5 (de) | System und verfahren zur optimierten wiedernutzbarmachungsverarbeitung in einem virtuellen bandbibliotheksystem | |
| CN113672627B (zh) | Elasticsearch搜索引擎索引构建方法及装置 | |
| CN109739440B (zh) | 分布式共享存储方法、存储介质、电子设备及系统 | |
| CN108984295B (zh) | 内存回收方法、计算机装置及计算机可读存储介质 | |
| CN111221477B (zh) | 一种osd盘分配方法及系统 | |
| EP3322155A1 (en) | Virtual disk processing method and apparatus | |
| DE112018005135T5 (de) | Thin provisioning unter verwendung von speicherbänken auf cloud-grundlage | |
| DE112018005121T5 (de) | Speichersystem unter verwendung von cloud-speicher als eine speicherbank | |
| US20220284377A1 (en) | Method and apparatus for task group positioning | |
| US10423580B2 (en) | Storage and compression of an aggregation file | |
| CN116501259A (zh) | 磁盘组双活同步方法、装置、计算机设备及存储介质 | |
| CN113626399B (zh) | 数据同步方法、装置、服务器及存储介质 | |
| CN109871276B (zh) | 一种基于Lua获取手机应用内存的方法及装置 | |
| CN106020717B (zh) | 数据处理方法及电子设备 | |
| DE112021003441T5 (de) | Abrufen von Cacheressourcen für erwartete Schreiboperationen auf Spuren in einem Schreibsatz, nachdem die Cacheressourcen für die Spuren in dem Schreibsatz freigegeben wurden | |
| CN104700255B (zh) | 多进程处理方法、装置和系统 | |
| CN108920936B (zh) | 一种基于Purley平台实现vmware认证的方法和装置 | |
| CN110989936A (zh) | 一种存储空间分配方法、装置及存储介质 | |
| DE102007041691A1 (de) | Datenträgermigrationsprogramm, -verfahren, und -system | |
| US10884629B1 (en) | Shard rebalancing based on over-provisioning |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CP03 | Change of name, title or address | ||
| CP03 | Change of name, title or address |
Address after: No. 3 Hengtai Road, Nanjing Economic and Technological Development Zone, Jiangsu Province, 210038 Patentee after: FIBERHOME CLOUD TECHNOLOGIES CO.,LTD. Address before: 210019 8th floor, building a, Fenghuo building, 88 yunlongshan Road, Nanjing City, Jiangsu Province Patentee before: FIBERHOME CLOUD TECHNOLOGIES CO.,LTD. |