CN114844911A - 数据存储方法、装置、电子设备及计算机可读存储介质 - Google Patents
数据存储方法、装置、电子设备及计算机可读存储介质 Download PDFInfo
- Publication number
- CN114844911A CN114844911A CN202210418733.1A CN202210418733A CN114844911A CN 114844911 A CN114844911 A CN 114844911A CN 202210418733 A CN202210418733 A CN 202210418733A CN 114844911 A CN114844911 A CN 114844911A
- Authority
- CN
- China
- Prior art keywords
- storage
- data
- target
- stored
- logic group
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000013500 data storage Methods 0.000 title claims abstract description 69
- 238000000034 method Methods 0.000 title claims description 50
- 238000012545 processing Methods 0.000 claims abstract description 33
- 238000004422 calculation algorithm Methods 0.000 claims description 48
- 238000004590 computer program Methods 0.000 claims description 12
- 238000007726 management method Methods 0.000 abstract description 11
- 238000013508 migration Methods 0.000 abstract description 10
- 230000005012 migration Effects 0.000 abstract description 10
- 238000003672 processing method Methods 0.000 abstract description 2
- 238000010586 diagram Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 8
- 238000004891 communication Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 208000032825 Ring chromosome 2 syndrome Diseases 0.000 description 4
- 101150007742 RING1 gene Proteins 0.000 description 3
- 208000035217 Ring chromosome 1 syndrome Diseases 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000000737 periodic effect Effects 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 101150093240 Brd2 gene Proteins 0.000 description 1
- 208000032826 Ring chromosome 3 syndrome Diseases 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 238000012905 input function Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000012827 research and development Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/104—Peer-to-peer [P2P] networks
- H04L67/1061—Peer-to-peer [P2P] networks using node-based peer discovery mechanisms
- H04L67/1065—Discovery involving distributed pre-established resource-based relationships among peers, e.g. based on distributed hash tables [DHT]
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请实施例公开了一种数据存储处理方法、装置、电子设备及计算机可读存储介质，本申请实施例可以通过新增多个逻辑分组与存储节点连接，使得逻辑分组可以对属于同一逻辑分组的存储节点进行存储管理；同时，在进行存储时，根据待存储数据的时间戳信息，将待存储数据存储至与该时间戳信息对应的逻辑分组的存储节点中，以实现按时间戳信息的方式对对象存储进行扩容，从而能够在对对象存储底层存储空间进行存储空间扩容时，避免已经存储的数据发生数据迁移，减少存储空间扩容工作量，有效节省计算资源。
Description
技术领域
本申请涉及计算机技术领域，尤其涉及存储技术领域，具体涉及一种数据存储方法、装置、电子设备及计算机可读存储介质。
背景技术
随着计算机通信技术的不断发展，智能手机、电脑、平板电脑及笔记本电脑等终端的大量普及应用，终端向着多样化、个性化的方向发展，日益成为人们在生活与工作中不可或缺的设备。随着信息技术的蓬勃发展，互联网上业务不断地扩张，数据呈现出无法想象的增长趋势。为了能够存储海量数据，分布式存储技术应运而生。分布式存储系统可以将数据分散存储在多台独立的设备上，利用多台存储服务器分担存储负荷，利用位置服务器定位存储信息，这样的做法不但提高了系统的可靠性、可用性和存取效率，还易于扩展。分布式存储系统的存储类型包括文件存储、块存储以及对象存储，对象存储是目前主流的互联网数据存储方式，通过对象存储可以将一些非结构化数据，比如图片、音频、视频等以对象的形式存储在对象存储中。
目前，为了对对象存储的底层数据存储空间进行无限扩容，研发人员可以通过采用一致性哈希算法，将多个存储节点的数据进行哈希随机分布，从而实现对象存储底层存储空间的无限扩容。然而，通过采用一致性哈希算法进行存储空间扩容时，会对部分存储节点产生数据迁移，导致增加额外维护资源对发生数据迁移的存储节点进行维护，存储空间扩容工作量大，浪费计算资源。
发明内容
本申请实施例提供一种数据存储方法、装置、电子设备及计算机可读存储介质，通过新增多个逻辑分组与存储节点连接，使得逻辑分组可以对属于同一逻辑分组的存储节点进行存储管理，能够在对对象存储底层存储空间进行存储空间扩容时，避免已经存储的数据发生数据迁移，减少存储空间扩容工作量，节省计算资源。
本申请实施例提供了一种数据存储方法，应用于分布式存储系统，所述分布式存储系统通过多个逻辑分组与存储节点连接，存储在相同逻辑分组下的存储节点中的数据基于一致性哈希算法存储，该数据存储方法包括：
获取待存储数据、以及所述待存储数据对应的时间戳信息；
基于所述时间戳信息以及逻辑分组对应的存储时间区间信息，确定所述待存储数据所需存储的目标逻辑分组；
基于一致性哈希算法将所述待存储数据写入所述目标逻辑分组对应的存储节点中；
若所述目标逻辑分组中存储节点的存储空间不足以写完所述待存储数据，则基于所述分布式存储系统中的空闲存储空间新增包括至少一个存储节点的目标逻辑分组；
基于新增的目标逻辑分组对所述待存储数据进行存储，以将所述待存储数据写入所述新增的目标逻辑分组对应的存储节点中。
相应的，本申请实施例还提供了一种数据存储装置，该数据存储装置包括：
获取单元，用于获取待存储数据、以及所述待存储数据对应的时间戳信息；
确定单元，用于基于所述时间戳信息以及逻辑分组对应的存储时间区间信息，确定所述待存储数据所需存储的目标逻辑分组；
第一存储单元，用于基于一致性哈希算法将所述待存储数据写入所述目标逻辑分组对应的存储节点中；
处理单元，用于若所述目标逻辑分组中存储节点的存储空间不足以写完所述待存储数据，则基于所述分布式存储系统中的空闲存储空间新增包括至少一个存储节点的目标逻辑分组；
第二存储单元，用于基于新增的目标逻辑分组对所述待存储数据进行存储，以将所述待存储数据写入所述新增的目标逻辑分组对应的存储节点中。
在一些实施例中，该数据存储装置包括：
第一确定子单元，用于确定所述目标逻辑分组对应的目标存储资源集群；
第一处理子单元，用于根据所述目标存储资源集群的剩余存储空间的容量情况，新增包括至少一个存储节点的目标逻辑分组，其中，所述目标存储资源集群的剩余存储空间对应的存储节点未配置有逻辑分组。
在一些实施例中，该数据存储装置包括：
第二确定子单元，用于确定所述目标存储资源集群的剩余存储空间的容量是否小于第一预设存储容量；
第二处理子单元，用于若是，则基于所述分布式存储系统中的空闲存储空间和所述目标存储资源集群的剩余存储空间，新增包括至少一个存储节点的目标逻辑分组；
第二处理子单元，还用于若否，则基于所述目标存储资源集群的剩余存储空间，新增包括至少一个存储节点的目标逻辑分组。
在一些实施例中，该数据存储装置包括：
第一生成单元，用于从所述分布式存储系统中的空闲存储空间获取新的存储资源集群，并根据所述新的存储资源集群中的至少一个存储节点、以及所述目标存储资源集群中剩余存储空间对应的存储节点生成新的逻辑分组，将所述新的逻辑分组作为新增的目标逻辑分组。
在一些实施例中，该数据存储装置包括：
第二生成单元，用于根据所述目标存储资源集群的剩余存储空间对应的存储节点生成新的逻辑分组，将所述新的逻辑分组作为新增的目标逻辑分组。
在一些实施例中，该数据存储装置包括：
第三确定子单元，用于当检测到目标存储业务的触发指令时，确定所述目标存储业务的目标存储模式类型；
获取子单元，用于获取所述目标存储模式类型对应的多个存储时间区间，为所述存储时间区间设置对应的逻辑分组，其中，一个逻辑分组管理至少一个存储节点。
在一些实施例中，该数据存储装置包括：
第三处理子单元，用于基于一致性哈希算法对所述目标逻辑分组中所有存储节点的地址标志进行处理，得到所述目标逻辑分组中所有存储节点在预设哈希值区间中的位置信息。
在一些实施例中，该数据存储装置包括：
第四处理子单元，用于基于一致性哈希算法对所述待存储数据进行处理，得到所述待存储数据的目标哈希值；
第四确定子单元，用于基于所述目标哈希值在所述预设哈希值区间的位置，以及所述目标逻辑分组中所有存储节点在预设哈希值区间中的位置信息，确定储存所述待存储数据的目标存储节点；
第一存储子单元，用于将所述待存储数据写入所述目标存储节点中，以存储所述待存储数据。
在一些实施例中，该数据存储装置包括：
第二存储子单元，用于基于一致性哈希算法将所述待存储数据写入所述新增的目标逻辑分组对应的存储节点中，其中，每个存储节点连接有至少一个存储设备。
相应的，本申请实施例还提供一种电子设备，包括处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现数据存储方法任一项的步骤。
相应的，本申请实施例还提供一种计算机可读存储介质，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现数据存储方法任一项的步骤。
本申请实施例提供一种数据存储方法、装置、电子设备及计算机可读存储介质，通过新增多个逻辑分组与存储节点连接，使得逻辑分组可以对属于同一逻辑分组的存储节点进行存储管理；同时，在进行存储时，根据待存储数据的时间戳信息，将待存储数据存储至与该时间戳信息对应的逻辑分组的存储节点中，以实现按时间戳信息的方式对对象存储进行扩容，从而能够在对对象存储底层存储空间进行存储空间扩容时，避免已经存储的数据发生数据迁移，减少存储空间扩容工作量，有效节省计算资源。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的数据存储系统的场景示意图。
图2为本申请实施例提供的一致性哈希方法的一种结构示意图。
图3为本申请实施例提供的数据存储方法的一种流程示意图。
图4为本申请实施例提供的逻辑分组的一种类型示意图。
图5为本申请实施例提供的数据存储装置的一种结构示意图。
图6为本申请实施例提供的电子设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述。显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
基于此，本申请实施例提供一种数据存储方法、装置、计算机设备及计算机可读存储介质，该任务处理方法可以应用于分布式存储系统，分布式存储系统通过多个逻辑分组与存储节点连接，存储在相同逻辑分组下的存储节点中的数据基于一致性哈希算法存储，进一步的，分布式存储系统通过多个逻辑分组分别与多个存储资源集群连接，一个所述存储资源集群包括多个存储节点，一个逻辑分组管理至少一个存储资源集群中的至少一个存储节点，分布式管理系统可以为中央处理器，该中央处理器用于对所述多个存储资源集群进行管理，能够在对对象存储底层存储空间进行存储空间扩容时，避免已经存储的数据发生数据迁移，减少存储空间扩容工作量，节省计算资源。
本申请实施例提供的数据存储方法可以应用于分布式存储系统中的对象存储的存储类型中，通常所有对象存储的读、写以及其他操作都是以HTTP或者HTTPS协议方式进行数据交互，对象存储系统对外提供一套独立的RESTful-API接口，开发人员可以通过调用对象存储所提供的RESTful-API接口，将一些非结构化数据，比如图片、音频、视频等以对象的形式存储在对象存储中。
可选的，该中央处理器可以是单独设置的处理器，也可以是多个服务器中的某一个服务器作为中央处理器对多个存储资源集群进行管理。
本申请实施例提供一种数据存储方法、装置、计算机设备及计算机可读存储介质。具体地，本申请实施例提供适用于计算机设备的数据存储装置。其中，该计算机设备可以为终端或服务器等设备，服务器可以是独立的物理服务器，也可以是多个物理服务器构成的服务器集群或者分布式系统，还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN、以及大数据和人工智能平台等基础云计算服务的云服务器。终端包括但不限于智能手机、平板电脑、笔记本电脑、台式计算机、智能语音交互设备等，但并不局限于此。终端以及服务器可以通过有线或无线通信方式进行直接或间接地连接；本发明实施例可应用于各种场景，本申请实施例在此不做限制。
请参阅图1，图1为本申请实施例所提供的数据存储系统的场景示意图，该系统可以包括至少一个终端，至少一个服务器，多个存储资源集群，以及网络。用户持有的终端可以通过网络连接到不同的服务器，服务器可以连接有多个存储资源集群。终端是具有计算硬件的任何设备，该计算硬件能够支持和执行与游戏对应的软件产品。
其中，服务器可以获取待存储数据、以及所述待存储数据对应的时间戳信息；基于所述时间戳信息以及逻辑分组对应的存储时间区间信息，确定所述待存储数据所需存储的目标逻辑分组；基于一致性哈希算法将所述待存储数据写入所述目标逻辑分组对应的存储节点中；若所述目标逻辑分组中存储节点的存储空间不足以写完所述待存储数据，则基于所述分布式存储系统中的空闲存储空间新增包括至少一个存储节点的目标逻辑分组；基于新增的目标逻辑分组对所述待存储数据进行存储，以将所述待存储数据写入所述新增的目标逻辑分组对应的存储节点中。
本申请实施例中存储在相同逻辑分组下的存储节点中的数据基于一致性哈希算法存储，一致性哈希算法是一种特殊的哈希算法，在使用一致哈希算法后，哈希表槽位数(大小)的改变平均只需要对K/N个关键字重新映射，其中K是关键字的数量，N是槽位数量。例如，请参阅图2，设置一个哈希数值空间，该哈希数值空间是一个首(0)尾(232-1)相接的圆环；接着，假设有4台服务器，对所有服务器分别使用哈希算法进行处理，具体可以选择服务器的ip地址或唯一主机名作为关键字进行哈希计算，从而确定每个服务器在哈希数值空间上的位置，即第一服务器的位置为A，第二服务器的位置为B，第三服务器的位置为C，第四服务器的位置为D；最后，对待存储数据通过Hash函数计算出对应的key值，确定该key值在哈希数值空间上的位置，基于该位置顺时针进行寻找，第一台遇到的服务器就是该待存储数据进行存储的位置，即待存储数据存储的位置为第三服务器。
需要说明的是，图1所示的数据存储系统的场景示意图仅仅是一个示例，本申请实施例描述的数据存储系统以及场景是为了更加清楚的说明本申请实施例的技术方案，并不构成对于本申请实施例提供的技术方案的限定，本领域普通技术人员可知，随着任务处理系统的演变和新业务场景的出现，本申请实施例提供的技术方案对于类似的技术问题，同样适用。
基于上述问题，本申请实施例提供一种数据存储方法、装置、电子设备及计算机可读存储介质，以下分别进行详细说明。需说明的是，以下实施例的描述顺序不作为对实施例优选顺序的限定。
请参阅图3，图3为本申请实施例提供的一种数据存储方法的流程示意图，具体流程可以如下步骤101至步骤105：
101，获取待存储数据、以及所述待存储数据对应的时间戳信息。
为了能够按照待存储数据的存储时间戳进行数据存储，在步骤“获取待存储数据、以及所述待存储数据对应的时间戳信息”之前，方法可以包括：
当检测到目标存储业务的触发指令时，确定所述目标存储业务的目标存储模式类型；
获取所述目标存储模式类型对应的多个存储时间区间，为所述存储时间区间设置对应的逻辑分组，其中，一个逻辑分组管理至少一个存储节点。
102，基于所述时间戳信息以及逻辑分组对应的存储时间区间信息，确定所述待存储数据所需存储的目标逻辑分组。
在一具体实施例中，可以设置有第一逻辑分组、第二逻辑分组以及第三逻辑分组这三个逻辑分组，第一逻辑分组对应的存储时间区间为星期一，第一逻辑分组对应的存储时间区间为星期二，第一逻辑分组对应的存储时间区间为星期三。当检测到待存储数据的时间戳信息为星期一时，则将该待存储信息存储至第一逻辑分组对应的存储节点中。
103，基于一致性哈希算法将所述待存储数据写入所述目标逻辑分组对应的存储节点中。
在一实施例中，在步骤“基于一致性哈希算法将所述待存储数据写入所述目标逻辑分组对应的存储节点中”之前，方法可以包括：
基于一致性哈希算法对所述目标逻辑分组中所有存储节点的地址标志进行处理，得到所述目标逻辑分组中所有存储节点在预设哈希值区间中的位置信息。
具体的，步骤“基于一致性哈希算法将所述待存储数据写入所述目标逻辑分组对应的存储节点中”，方法可以包括：
基于一致性哈希算法对所述待存储数据进行处理，得到所述待存储数据的目标哈希值；
基于所述目标哈希值在所述预设哈希值区间的位置，以及所述目标逻辑分组中所有存储节点在预设哈希值区间中的位置信息，确定储存所述待存储数据的目标存储节点；
将所述待存储数据写入所述目标存储节点中，以存储所述待存储数据。
104，若所述目标逻辑分组中存储节点的存储空间不足以写完所述待存储数据，则基于所述分布式存储系统中的空闲存储空间新增包括至少一个存储节点的目标逻辑分组。
其中，所述分布式存储系统通过多个逻辑分组分别与多个存储资源集群连接，一个所述存储资源集群包括多个存储节点，一个逻辑分组管理至少一个存储资源集群中的至少一个存储节点。
在一实施例中，步骤“所述若所述目标逻辑分组中存储节点的存储空间不足以写完所述待存储数据，则基于所述分布式存储系统中的空闲存储空间新增包括至少一个存储节点的目标逻辑分组”，方法可以包括：
确定所述目标逻辑分组对应的目标存储资源集群；
根据所述目标存储资源集群的剩余存储空间的容量情况，新增包括至少一个存储节点的目标逻辑分组，其中，所述目标存储资源集群的剩余存储空间对应的存储节点未配置有逻辑分组。
可选的，步骤“所述根据所述目标存储资源集群的剩余存储空间的容量情况，新增包括至少一个存储节点的目标逻辑分组”，方法可以包括：
确定所述目标存储资源集群的剩余存储空间的容量是否小于第一预设存储容量；
若是，则基于所述分布式存储系统中的空闲存储空间和所述目标存储资源集群的剩余存储空间，新增包括至少一个存储节点的目标逻辑分组；
若否，则基于所述目标存储资源集群的剩余存储空间，新增包括至少一个存储节点的目标逻辑分组。
在一实施例中，步骤“所述基于所述分布式存储系统中的空闲存储空间和所述目标存储资源集群的剩余存储空间，新增包括至少一个存储节点的目标逻辑分组”，方法可以包括：
从所述分布式存储系统中的空闲存储空间获取新的存储资源集群，并根据所述新的存储资源集群中的至少一个存储节点、以及所述目标存储资源集群中剩余存储空间对应的存储节点生成新的逻辑分组，将所述新的逻辑分组作为新增的目标逻辑分组。
在另一实施例中，步骤“所述基于所述目标存储资源集群的剩余存储空间，新增包括至少一个存储节点的目标逻辑分组”，方法可以包括：
根据所述目标存储资源集群的剩余存储空间对应的存储节点生成新的逻辑分组，将所述新的逻辑分组作为新增的目标逻辑分组。
本申请实施例提供了三种类型的逻辑分组，请参阅图4，图4为逻辑分组类型的结构示意图，每种类型的逻辑分组对应的存储结构具体如图所示。具体的，第一种逻辑分组结构(Ring1)可以包含多个资源池(例如第一资源池Pool1和第二资源池Pool2)，且这些资源池(Pool1和Pool2)都属于同一个存储资源集群(第一存储资源集群Cluster1)中，这些资源池(Pool1和Pool2)属于第一种逻辑分组(Ring1)独占。进一步的，第一种逻辑分组可以应用在为在已有存储资源集群里面新增物理集群进行扩容的场景下，通常应用在机房物理机柜充足，可以在现有物理资源基础上进行扩容的情况。第二种逻辑分组结构(Ring2)可以包含多个资源池(例如第三资源池Pool3、第四资源池Pool4、第五资源池Pool5和第六资源池Pool6)，且这些资源池(Pool3、Pool4、Pool5和Pool6)可以分布在多个存储资源集群(Cluster1和第二存储资源集群Cluster2)中，同时这些底层资源池(Pool3、Pool4、Pool5和Pool6)支持存储空间独占和共享(Pool6)两种类型。进一步的，第二种逻辑分组可以应用在为已有物理集群资源不足，通过新增一组物理资源，将两组物理资源进行逻辑组合的场景下，常见在机房物理机柜不足，需要新增机柜或者机房的情况。第三种逻辑分组结构(Ring3)可以包含多个资源池(例如Pool6、第七资源池Pool7和第八资源池Pool8)，且这些资源池(Pool6、Pool7和Pool8)都属于同一个存储资源集群(Cluster2)中，同时这些资源池(Pool6、Pool7和Pool8)可以和其他Ring2进行存储空间共享(Pool6)。进一步的，第三种逻辑分组可以应用在部分资源池剩余空间还比较富裕的情况，从而考虑到利旧现有设备，将新增的分组加上这部分可以利旧的资源，形成新的逻辑分组。
105，基于新增的目标逻辑分组对所述待存储数据进行存储，以将所述待存储数据写入所述新增的目标逻辑分组对应的存储节点中。
具体的，步骤“所述基于新增的目标逻辑分组对所述待存储数据进行存储，以将所述待存储数据写入所述新增的目标逻辑分组对应的存储节点中”，方法可以包括：
基于一致性哈希算法将所述待存储数据写入所述新增的目标逻辑分组对应的存储节点中，其中，每个存储节点连接有至少一个存储设备。
为了对本申请实施例提供的数据存储方法进行进一步说明，下面将以数据存储方法在具体实施场景中的应用为例进行说明，具体应用场景如下所述。
(1)在本申请实施例中，当目标存储业务的目标存储模式类型为周期性时，即目标存储业务需要周期性进行数据批量写入与删除操作，因此存储容量空间相对变化比较大。在这种业务场景下，目标存储业务每个数据的写入和读取请求都需要在其Objectname对象名称字段中增加时间戳Timestamp字段作为前缀，对象存储系统通过在后台设定时间戳Timestamp字段与逻辑分组的映射策略(例如星期一对应Ring1、星期二对应Ring2，以此类推)，实现将业务写入的数据按照周期性规则写入多个不同的逻辑分组中，而在具体的逻辑分组写入或读取操作仍然沿用之前的一致性哈希算法，实现数据请求最终落到具体的存储节点中。
(2)在本申请实施例中，当目标存储业务的目标存储模式类型为长期性时，即目标存储业务需要长期持续写入数据到对象存储，并保持相对稳定的数据存储空间的增长需求。在这种业务场景下，业务每个写入和读取请求都需要在其Objectname对象名称字段中增加时间戳Timestamp字段作为前缀，对象存储系统通过在后台设定时间戳Timestamp字段与逻辑分组的映射策略(例如202101对应Ring1、202102对应Ring2，以此类推)，实现将业务写入的数据按照时间线推进的方式进行存储，而在具体的逻辑分组数据写入或读取操作仍然沿用之前的一致性哈希算法，实现数据请求最终落到具体的存储节点中。
综上所述，本申请实施例提供一种数据存储方法，通过新增多个逻辑分组与存储节点连接，使得逻辑分组可以对属于同一逻辑分组的存储节点进行存储管理；同时，在进行存储时，根据待存储数据的时间戳信息，将待存储数据存储至与该时间戳信息对应的逻辑分组的存储节点中，以实现按时间戳信息的方式对对象存储进行扩容，从而能够在对对象存储底层存储空间进行存储空间扩容时，避免已经存储的数据发生数据迁移，减少存储空间扩容工作量，有效节省计算资源。
为便于更好的实施本申请实施例提供的数据存储方法，本申请实施例还提供一种基于上述游戏场景的显示装置。其中名词的含义与上述数据存储方法中相同，具体实现细节可以参考方法实施例中的说明。
请参阅图5，图5为本申请实施例提供的数据存储装置的一种结构示意图，该装置包括：
获取单元201，用于获取待存储数据、以及所述待存储数据对应的时间戳信息；
确定单元202，用于基于所述时间戳信息以及逻辑分组对应的存储时间区间信息，确定所述待存储数据所需存储的目标逻辑分组；
第一存储单元203，用于基于一致性哈希算法将所述待存储数据写入所述目标逻辑分组对应的存储节点中；
处理单元204，用于若所述目标逻辑分组中存储节点的存储空间不足以写完所述待存储数据，则基于所述分布式存储系统中的空闲存储空间新增包括至少一个存储节点的目标逻辑分组；
第二存储单元205，用于基于新增的目标逻辑分组对所述待存储数据进行存储，以将所述待存储数据写入所述新增的目标逻辑分组对应的存储节点中。
在一些实施例中，该数据存储装置包括：
第一确定子单元，用于确定所述目标逻辑分组对应的目标存储资源集群；
第一处理子单元，用于根据所述目标存储资源集群的剩余存储空间的容量情况，新增包括至少一个存储节点的目标逻辑分组，其中，所述目标存储资源集群的剩余存储空间对应的存储节点未配置有逻辑分组。
在一些实施例中，该数据存储装置包括：
第二确定子单元，用于确定所述目标存储资源集群的剩余存储空间的容量是否小于第一预设存储容量；
第二处理子单元，用于若是，则基于所述分布式存储系统中的空闲存储空间和所述目标存储资源集群的剩余存储空间，新增包括至少一个存储节点的目标逻辑分组；
第二处理子单元，还用于若否，则基于所述目标存储资源集群的剩余存储空间，新增包括至少一个存储节点的目标逻辑分组。
在一些实施例中，该数据存储装置包括：
第一生成单元，用于从所述分布式存储系统中的空闲存储空间获取新的存储资源集群，并根据所述新的存储资源集群中的至少一个存储节点、以及所述目标存储资源集群中剩余存储空间对应的存储节点生成新的逻辑分组，将所述新的逻辑分组作为新增的目标逻辑分组。
在一些实施例中，该数据存储装置包括：
第二生成单元，用于根据所述目标存储资源集群的剩余存储空间对应的存储节点生成新的逻辑分组，将所述新的逻辑分组作为新增的目标逻辑分组。
在一些实施例中，该数据存储装置包括：
第三确定子单元，用于当检测到目标存储业务的触发指令时，确定所述目标存储业务的目标存储模式类型；
获取子单元，用于获取所述目标存储模式类型对应的多个存储时间区间，为所述存储时间区间设置对应的逻辑分组，其中，一个逻辑分组管理至少一个存储节点。
在一些实施例中，该数据存储装置包括：
第三处理子单元，用于基于一致性哈希算法对所述目标逻辑分组中所有存储节点的地址标志进行处理，得到所述目标逻辑分组中所有存储节点在预设哈希值区间中的位置信息。
在一些实施例中，该数据存储装置包括：
第四处理子单元，用于基于一致性哈希算法对对所述待存储数据进行处理，得到所述待存储数据的目标哈希值；
第四确定子单元，用于基于所述目标哈希值在所述预设哈希值区间的位置，以及所述目标逻辑分组中所有存储节点在预设哈希值区间中的位置信息，确定储存所述待存储数据的目标存储节点；
第一存储子单元，用于将所述待存储数据写入所述目标存储节点中，以存储所述待存储数据。
在一些实施例中，该数据存储装置包括：
第二存储子单元，用于基于一致性哈希算法将所述待存储数据写入所述新增的目标逻辑分组对应的存储节点中，其中，每个存储节点连接有至少一个存储设备。
本申请实施例提供一种数据存储装置，通过获取单元201获取待存储数据、以及所述待存储数据对应的时间戳信息；确定单元202基于所述时间戳信息以及逻辑分组对应的存储时间区间信息，确定所述待存储数据所需存储的目标逻辑分组；第一存储单元203基于一致性哈希算法将所述待存储数据写入所述目标逻辑分组对应的存储节点中；处理单元204若所述目标逻辑分组中存储节点的存储空间不足以写完所述待存储数据，则基于所述分布式存储系统中的空闲存储空间新增包括至少一个存储节点的目标逻辑分组；第二存储单元205基于新增的目标逻辑分组对所述待存储数据进行存储，以将所述待存储数据写入所述新增的目标逻辑分组对应的存储节点中。本申请实施例可以通过新增多个逻辑分组与存储节点连接，使得逻辑分组可以对属于同一逻辑分组的存储节点进行存储管理；同时，在进行存储时，根据待存储数据的时间戳信息，将待存储数据存储至与该时间戳信息对应的逻辑分组的存储节点中，以实现按时间戳信息的方式对对象存储进行扩容，从而能够在对对象存储底层存储空间进行存储空间扩容时，避免已经存储的数据发生数据迁移，减少存储空间扩容工作量，有效节省计算资源。
相应的，本申请实施例还提供一种电子设备，该电子设备可以为终端或者服务器，该终端可以为智能手机、平板电脑、笔记本电脑、触控屏幕、游戏机、个人计算机(PC，Personal Computer)、个人数字助理(Personal Digital Assistant，PDA)等终端设备。如图6所示，图6为本申请实施例提供的电子设备的结构示意图。该电子设备300包括有一个或者一个以上处理核心的处理器301、有一个或一个以上计算机可读存储介质的存储器302及存储在存储器302上并可在处理器上运行的计算机程序。其中，处理器301与存储器302电性连接。本领域技术人员可以理解，图中示出的电子设备结构并不构成对电子设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
处理器301是电子设备300的控制中心，利用各种接口和线路连接整个电子设备300的各个部分，通过运行或加载存储在存储器302内的软件程序和/或模块，以及调用存储在存储器302内的数据，执行电子设备300的各种功能和处理数据，从而对电子设备300进行整体监控。
在本申请实施例中，电子设备300中的处理器301会按照如下的步骤，将一个或一个以上的应用程序的进程对应的指令加载到存储器302中，并由处理器301来运行存储在存储器302中的应用程序，从而实现各种功能：
获取待存储数据、以及所述待存储数据对应的时间戳信息；
基于所述时间戳信息以及逻辑分组对应的存储时间区间信息，确定所述待存储数据所需存储的目标逻辑分组；
基于一致性哈希算法将所述待存储数据写入所述目标逻辑分组对应的存储节点中；
若所述目标逻辑分组中存储节点的存储空间不足以写完所述待存储数据，则基于所述分布式存储系统中的空闲存储空间新增包括至少一个存储节点的目标逻辑分组；
基于新增的目标逻辑分组对所述待存储数据进行存储，以将所述待存储数据写入所述新增的目标逻辑分组对应的存储节点中。
在一实施例中，所述分布式存储系统通过多个逻辑分组分别与多个存储资源集群连接，一个所述存储资源集群包括多个存储节点，一个逻辑分组管理至少一个存储资源集群中的至少一个存储节点；
所述若所述目标逻辑分组中存储节点的存储空间不足以写完所述待存储数据，则基于所述分布式存储系统中的空闲存储空间新增包括至少一个存储节点的目标逻辑分组，包括：
确定所述目标逻辑分组对应的目标存储资源集群；
根据所述目标存储资源集群的剩余存储空间的容量情况，新增包括至少一个存储节点的目标逻辑分组，其中，所述目标存储资源集群的剩余存储空间对应的存储节点未配置有逻辑分组。
在一实施例中，所述根据所述目标存储资源集群的剩余存储空间的容量情况，新增包括至少一个存储节点的目标逻辑分组，包括：
确定所述目标存储资源集群的剩余存储空间的容量是否小于第一预设存储容量；
若是，则基于所述分布式存储系统中的空闲存储空间和所述目标存储资源集群的剩余存储空间，新增包括至少一个存储节点的目标逻辑分组；
若否，则基于所述目标存储资源集群的剩余存储空间，新增包括至少一个存储节点的目标逻辑分组。
在一实施例中，所述基于所述分布式存储系统中的空闲存储空间和所述目标存储资源集群的剩余存储空间，新增包括至少一个存储节点的目标逻辑分组，包括：
从所述分布式存储系统中的空闲存储空间获取新的存储资源集群，并根据所述新的存储资源集群中的至少一个存储节点、以及所述目标存储资源集群中剩余存储空间对应的存储节点生成新的逻辑分组，将所述新的逻辑分组作为新增的目标逻辑分组。
在一实施例中，所述基于所述目标存储资源集群的剩余存储空间，新增包括至少一个存储节点的目标逻辑分组，包括：
根据所述目标存储资源集群的剩余存储空间对应的存储节点生成新的逻辑分组，将所述新的逻辑分组作为新增的目标逻辑分组。
在一实施例中，在获取待存储数据、以及所述待存储数据对应的时间戳信息之前，还包括：
当检测到目标存储业务的触发指令时，确定所述目标存储业务的目标存储模式类型；
获取所述目标存储模式类型对应的多个存储时间区间，为所述存储时间区间设置对应的逻辑分组，其中，一个逻辑分组管理至少一个存储节点。
在一实施例中，在基于一致性哈希算法将所述待存储数据写入所述目标逻辑分组对应的存储节点中之前，还包括：
基于一致性哈希算法对所述目标逻辑分组中所有存储节点的地址标志进行处理，得到所述目标逻辑分组中所有存储节点在预设哈希值区间中的位置信息。
在一实施例中，所述基于一致性哈希算法将所述待存储数据写入所述目标逻辑分组对应的存储节点中，包括：
基于一致性哈希算法对所述待存储数据进行处理，得到所述待存储数据的目标哈希值；
基于所述目标哈希值在所述预设哈希值区间的位置，以及所述目标逻辑分组中所有存储节点在预设哈希值区间中的位置信息，确定储存所述待存储数据的目标存储节点；
将所述待存储数据写入所述目标存储节点中，以存储所述待存储数据。
在一实施例中，所述基于新增的目标逻辑分组对所述待存储数据进行存储，以将所述待存储数据写入所述新增的目标逻辑分组对应的存储节点中，包括：
基于一致性哈希算法将所述待存储数据写入所述新增的目标逻辑分组对应的存储节点中，其中，每个存储节点连接有至少一个存储设备。
以上各个操作的具体实施可参见前面的实施例，在此不再赘述。
可选的，如图6所示，电子设备300还包括：触控显示屏303、射频电路304、音频电路305、输入单元306以及电源307。其中，处理器301分别与触控显示屏303、射频电路304、音频电路305、输入单元306以及电源307电性连接。本领域技术人员可以理解，图6中示出的电子设备结构并不构成对电子设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
触控显示屏303可用于显示图形玩家界面以及接收玩家作用于图形玩家界面产生的操作指令。触控显示屏303可以包括显示面板和触控面板。其中，显示面板可用于显示由玩家输入的信息或提供给玩家的信息以及电子设备的各种图形玩家接口，这些图形玩家接口可以由图形、文本、图标、视频和其任意组合来构成。可选的，可以采用液晶显示器(LCD，Liquid Crystal Display)、有机发光二极管(OLED，Organic Light-Emitting Diode)等形式来配置显示面板。触控面板可用于收集玩家在其上或附近的触摸操作(比如玩家使用手指、触笔等任何适合的物体或附件在触控面板上或在触控面板附近的操作)，并生成相应的操作指令，且操作指令执行对应程序。可选的，触控面板可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测玩家的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器301，并能接收处理器301发来的命令并加以执行。触控面板可覆盖显示面板，当触控面板检测到在其上或附近的触摸操作后，传送给处理器301以确定触摸事件的类型，随后处理器301根据触摸事件的类型在显示面板上提供相应的视觉输出。在本申请实施例中，可以将触控面板与显示面板集成到触控显示屏303而实现输入和输出功能。但是在某些实施例中，触控面板与触控面板可以作为两个独立的部件来实现输入和输出功能。即触控显示屏303也可以作为输入单元306的一部分实现输入功能。
在本申请实施例中，通过处理器301执行游戏应用程序在触控显示屏303上生成图形玩家界面。该触控显示屏303用于呈现图形玩家界面以及接收玩家作用于图形玩家界面产生的操作指令。
射频电路304可用于收发射频信号，以通过无线通信与网络设备或其他电子设备建立无线通讯，与网络设备或其他电子设备之间收发信号。
音频电路305可以用于通过扬声器、传声器提供玩家与电子设备之间的音频接口。音频电路305可将接收到的音频数据转换后的电信号，传输到扬声器，由扬声器转换为声音信号输出；另一方面，传声器将收集的声音信号转换为电信号，由音频电路305接收后转换为音频数据，再将音频数据输出处理器301处理后，经射频电路304以发送给比如另一电子设备，或者将音频数据输出至存储器302以便进一步处理。音频电路305还可能包括耳塞插孔，以提供外设耳机与电子设备的通信。
输入单元306可用于接收输入的数字、字符信息或玩家特征信息(例如指纹、虹膜、面部信息等)，以及产生与玩家设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。
电源307用于给电子设备300的各个部件供电。可选的，电源307可以通过电源管理系统与处理器301逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源307还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
尽管图6中未示出，电子设备300还可以包括摄像头、传感器、无线保真模块、蓝牙模块等，在此不再赘述。
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。
由上可知，本实施例提供的电子设备，可以通过新增多个逻辑分组与存储节点连接，使得逻辑分组可以对属于同一逻辑分组的存储节点进行存储管理；同时，在进行存储时，根据待存储数据的时间戳信息，将待存储数据存储至与该时间戳信息对应的逻辑分组的存储节点中，以实现按时间戳信息的方式对对象存储进行扩容，从而能够在对对象存储底层存储空间进行存储空间扩容时，避免已经存储的数据发生数据迁移，减少存储空间扩容工作量，有效节省计算资源。
本领域普通技术人员可以理解，上述实施例的各种方法中的全部或部分步骤可以通过指令来完成，或通过指令控制相关的硬件来完成，该指令可以存储于一计算机可读存储介质中，并由处理器进行加载和执行。
为此，本申请实施例提供一种计算机可读存储介质，其中存储有多条计算机程序，该计算机程序能够被处理器进行加载，以执行本申请实施例所提供的任一种数据存储方法中的步骤。例如，该计算机程序可以执行如下步骤：
获取待存储数据、以及所述待存储数据对应的时间戳信息；
基于所述时间戳信息以及逻辑分组对应的存储时间区间信息，确定所述待存储数据所需存储的目标逻辑分组；
基于一致性哈希算法将所述待存储数据写入所述目标逻辑分组对应的存储节点中；
若所述目标逻辑分组中存储节点的存储空间不足以写完所述待存储数据，则基于所述分布式存储系统中的空闲存储空间新增包括至少一个存储节点的目标逻辑分组；
基于新增的目标逻辑分组对所述待存储数据进行存储，以将所述待存储数据写入所述新增的目标逻辑分组对应的存储节点中。
在一实施例中，所述分布式存储系统通过多个逻辑分组分别与多个存储资源集群连接，一个所述存储资源集群包括多个存储节点，一个逻辑分组管理至少一个存储资源集群中的至少一个存储节点；
所述若所述目标逻辑分组中存储节点的存储空间不足以写完所述待存储数据，则基于所述分布式存储系统中的空闲存储空间新增包括至少一个存储节点的目标逻辑分组，包括：
确定所述目标逻辑分组对应的目标存储资源集群；
根据所述目标存储资源集群的剩余存储空间的容量情况，新增包括至少一个存储节点的目标逻辑分组，其中，所述目标存储资源集群的剩余存储空间对应的存储节点未配置有逻辑分组。
在一实施例中，所述根据所述目标存储资源集群的剩余存储空间的容量情况，新增包括至少一个存储节点的目标逻辑分组，包括：
确定所述目标存储资源集群的剩余存储空间的容量是否小于第一预设存储容量；
若是，则基于所述分布式存储系统中的空闲存储空间和所述目标存储资源集群的剩余存储空间，新增包括至少一个存储节点的目标逻辑分组；
若否，则基于所述目标存储资源集群的剩余存储空间，新增包括至少一个存储节点的目标逻辑分组。
在一实施例中，所述基于所述分布式存储系统中的空闲存储空间和所述目标存储资源集群的剩余存储空间，新增包括至少一个存储节点的目标逻辑分组，包括：
从所述分布式存储系统中的空闲存储空间获取新的存储资源集群，并根据所述新的存储资源集群中的至少一个存储节点、以及所述目标存储资源集群中剩余存储空间对应的存储节点生成新的逻辑分组，将所述新的逻辑分组作为新增的目标逻辑分组。
在一实施例中，所述基于所述目标存储资源集群的剩余存储空间，新增包括至少一个存储节点的目标逻辑分组，包括：
根据所述目标存储资源集群的剩余存储空间对应的存储节点生成新的逻辑分组，将所述新的逻辑分组作为新增的目标逻辑分组。
在一实施例中，在获取待存储数据、以及所述待存储数据对应的时间戳信息之前，还包括：
当检测到目标存储业务的触发指令时，确定所述目标存储业务的目标存储模式类型；
获取所述目标存储模式类型对应的多个存储时间区间，为所述存储时间区间设置对应的逻辑分组，其中，一个逻辑分组管理至少一个存储节点。
在一实施例中，在基于一致性哈希算法将所述待存储数据写入所述目标逻辑分组对应的存储节点中之前，还包括：
基于一致性哈希算法对所述目标逻辑分组中所有存储节点的地址标志进行处理，得到所述目标逻辑分组中所有存储节点在预设哈希值区间中的位置信息。
在一实施例中，所述基于一致性哈希算法将所述待存储数据写入所述目标逻辑分组对应的存储节点中，包括：
基于一致性哈希算法对所述待存储数据进行处理，得到所述待存储数据的目标哈希值；
基于所述目标哈希值在所述预设哈希值区间的位置，以及所述目标逻辑分组中所有存储节点在预设哈希值区间中的位置信息，确定储存所述待存储数据的目标存储节点；
将所述待存储数据写入所述目标存储节点中，以存储所述待存储数据。
在一实施例中，所述基于新增的目标逻辑分组对所述待存储数据进行存储，以将所述待存储数据写入所述新增的目标逻辑分组对应的存储节点中，包括：
基于一致性哈希算法将所述待存储数据写入所述新增的目标逻辑分组对应的存储节点中，其中，每个存储节点连接有至少一个存储设备。
以上各个操作的具体实施可参见前面的实施例，在此不再赘述。
其中，该存储介质可以包括：只读存储器(ROM，Read Only Memory)、随机存取记忆体(RAM，Random Access Memory)、磁盘或光盘等。
由于该存储介质中所存储的计算机程序，可以执行本申请实施例所提供的任一种数据存储方法中的步骤，本实施例提供的存储介质中所存储的计算机程序，可以通过新增多个逻辑分组与存储节点连接，使得逻辑分组可以对属于同一逻辑分组的存储节点进行存储管理；同时，在进行存储时，根据待存储数据的时间戳信息，将待存储数据存储至与该时间戳信息对应的逻辑分组的存储节点中，以实现按时间戳信息的方式对对象存储进行扩容，从而能够在对对象存储底层存储空间进行存储空间扩容时，避免已经存储的数据发生数据迁移，减少存储空间扩容工作量，有效节省计算资源。
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。
以上对本申请实施例所提供的一种数据存储方法、装置、电子设备及计算机可读存储介质进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的技术方案及其核心思想；本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例的技术方案的范围。
Claims (12)
1.一种数据存储方法，其特征在于，应用于分布式存储系统，所述分布式存储系统通过多个逻辑分组与存储节点连接，存储在相同逻辑分组下的存储节点中的数据基于一致性哈希算法存储，所述方法包括：
获取待存储数据、以及所述待存储数据对应的时间戳信息；
基于所述时间戳信息以及逻辑分组对应的存储时间区间信息，确定所述待存储数据所需存储的目标逻辑分组；
基于一致性哈希算法将所述待存储数据写入所述目标逻辑分组对应的存储节点中；
若所述目标逻辑分组中存储节点的存储空间不足以写完所述待存储数据，则基于所述分布式存储系统中的空闲存储空间新增包括至少一个存储节点的目标逻辑分组；
基于新增的目标逻辑分组对所述待存储数据进行存储，以将所述待存储数据写入所述新增的目标逻辑分组对应的存储节点中。
2.根据权利要求1所述的数据存储方法，其特征在于，所述分布式存储系统通过多个逻辑分组分别与多个存储资源集群连接，一个所述存储资源集群包括多个存储节点，一个逻辑分组管理至少一个存储资源集群中的至少一个存储节点；
所述若所述目标逻辑分组中存储节点的存储空间不足以写完所述待存储数据，则基于所述分布式存储系统中的空闲存储空间新增包括至少一个存储节点的目标逻辑分组，包括：
确定所述目标逻辑分组对应的目标存储资源集群；
根据所述目标存储资源集群的剩余存储空间的容量情况，新增包括至少一个存储节点的目标逻辑分组，其中，所述目标存储资源集群的剩余存储空间对应的存储节点未配置有逻辑分组。
3.根据权利要求2所述的数据存储方法，其特征在于，所述根据所述目标存储资源集群的剩余存储空间的容量情况，新增包括至少一个存储节点的目标逻辑分组，包括：
确定所述目标存储资源集群的剩余存储空间的容量是否小于第一预设存储容量；
若是，则基于所述分布式存储系统中的空闲存储空间和所述目标存储资源集群的剩余存储空间，新增包括至少一个存储节点的目标逻辑分组；
若否，则基于所述目标存储资源集群的剩余存储空间，新增包括至少一个存储节点的目标逻辑分组。
4.根据权利要求3所述的数据存储方法，其特征在于，所述基于所述分布式存储系统中的空闲存储空间和所述目标存储资源集群的剩余存储空间，新增包括至少一个存储节点的目标逻辑分组，包括：
从所述分布式存储系统中的空闲存储空间获取新的存储资源集群，并根据所述新的存储资源集群中的至少一个存储节点、以及所述目标存储资源集群中剩余存储空间对应的存储节点生成新的逻辑分组，将所述新的逻辑分组作为新增的目标逻辑分组。
5.根据权利要求3所述的数据存储方法，其特征在于，所述基于所述目标存储资源集群的剩余存储空间，新增包括至少一个存储节点的目标逻辑分组，包括：
根据所述目标存储资源集群的剩余存储空间对应的存储节点生成新的逻辑分组，将所述新的逻辑分组作为新增的目标逻辑分组。
6.根据权利要求1所述的数据存储方法，其特征在于，在获取待存储数据、以及所述待存储数据对应的时间戳信息之前，还包括：
当检测到目标存储业务的触发指令时，确定所述目标存储业务的目标存储模式类型；
获取所述目标存储模式类型对应的多个存储时间区间，为所述存储时间区间设置对应的逻辑分组，其中，一个逻辑分组管理至少一个存储节点。
7.根据权利要求1所述的数据存储方法，其特征在于，在基于一致性哈希算法将所述待存储数据写入所述目标逻辑分组对应的存储节点中之前，还包括：
基于一致性哈希算法对所述目标逻辑分组中所有存储节点的地址标志进行处理，得到所述目标逻辑分组中所有存储节点在预设哈希值区间中的位置信息。
8.根据权利要求7所述的数据存储方法，其特征在于，所述基于一致性哈希算法将所述待存储数据写入所述目标逻辑分组对应的存储节点中，包括：
基于一致性哈希算法对所述待存储数据进行处理，得到所述待存储数据的目标哈希值；
基于所述目标哈希值在所述预设哈希值区间的位置，以及所述目标逻辑分组中所有存储节点在预设哈希值区间中的位置信息，确定储存所述待存储数据的目标存储节点；
将所述待存储数据写入所述目标存储节点中，以存储所述待存储数据。
9.根据权利要求1所述的数据存储方法，其特征在于，所述基于新增的目标逻辑分组对所述待存储数据进行存储，以将所述待存储数据写入所述新增的目标逻辑分组对应的存储节点中，包括：
基于一致性哈希算法将所述待存储数据写入所述新增的目标逻辑分组对应的存储节点中，其中，每个存储节点连接有至少一个存储设备。
10.一种数据存储装置，其特征在于，包括：
获取单元，用于获取待存储数据、以及所述待存储数据对应的时间戳信息；
确定单元，用于基于所述时间戳信息以及逻辑分组对应的存储时间区间信息，确定所述待存储数据所需存储的目标逻辑分组；
第一存储单元，用于基于一致性哈希算法将所述待存储数据写入所述目标逻辑分组对应的存储节点中；
处理单元，用于若所述目标逻辑分组中存储节点的存储空间不足以写完所述待存储数据，则基于所述分布式存储系统中的空闲存储空间新增包括至少一个存储节点的目标逻辑分组；
第二存储单元，用于基于新增的目标逻辑分组对所述待存储数据进行存储，以将所述待存储数据写入所述新增的目标逻辑分组对应的存储节点中。
11.一种电子设备，其特征在于，所述电子设备包括存储器和处理器，所述存储器中存储有计算机程序，所述处理器通过调用所述存储器中存储的所述计算机程序，执行如权利要求1至9任一项所述的数据存储方法中的步骤。
12.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机程序，所述计算机程序适于处理器进行加载，以执行如权利要求1至9任一项所述的数据存储方法中的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210418733.1A CN114844911B (zh) | 2022-04-20 | 2022-04-20 | 数据存储方法、装置、电子设备及计算机可读存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210418733.1A CN114844911B (zh) | 2022-04-20 | 2022-04-20 | 数据存储方法、装置、电子设备及计算机可读存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN114844911A true CN114844911A (zh) | 2022-08-02 |
| CN114844911B CN114844911B (zh) | 2024-07-09 |
Family
ID=82566167
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210418733.1A Active CN114844911B (zh) | 2022-04-20 | 2022-04-20 | 数据存储方法、装置、电子设备及计算机可读存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114844911B (zh) |
Citations (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20100268966A1 (en) * | 2009-04-20 | 2010-10-21 | Wesley Leggette | Efficient and secure data storage utilizing a dispersed data storage system |
| CN101957797A (zh) * | 2009-07-17 | 2011-01-26 | 群联电子股份有限公司 | 闪速存储器逻辑区块管理方法及其控制电路与储存系统 |
| CN106293537A (zh) * | 2016-08-12 | 2017-01-04 | 上海海事大学 | 一种轻量级的数据密集型文件系统的自治块管理方法 |
| US20190205054A1 (en) * | 2017-02-23 | 2019-07-04 | Hitachi, Ltd. | Storage system |
| US20190332608A1 (en) * | 2017-02-17 | 2019-10-31 | Alibaba Group Holding Limited | Data processing method and device |
| CN110555075A (zh) * | 2018-03-29 | 2019-12-10 | 阿里巴巴集团控股有限公司 | 数据处理方法、装置、电子设备以及计算机可读存储介质 |
| CN110968265A (zh) * | 2019-11-05 | 2020-04-07 | 北京字节跳动网络技术有限公司 | 分片扩容方法、装置及电子设备 |
| CN111125089A (zh) * | 2019-11-05 | 2020-05-08 | 远景智能国际私人投资有限公司 | 时序数据存储方法、装置、服务器及存储介质 |
| CN111147226A (zh) * | 2018-11-02 | 2020-05-12 | 杭州海康威视系统技术有限公司 | 数据存储方法、装置及存储介质 |
| CN112925770A (zh) * | 2021-03-09 | 2021-06-08 | 京东数字科技控股股份有限公司 | 一种数据库扩容方法、装置、设备和介质 |
| CN113126895A (zh) * | 2019-12-30 | 2021-07-16 | 爱思开海力士有限公司 | 存储装置及其操作方法 |
| CN113806097A (zh) * | 2021-09-29 | 2021-12-17 | 杭州网易云音乐科技有限公司 | 一种数据处理方法、装置、电子设备以及存储介质 |
-
2022
- 2022-04-20 CN CN202210418733.1A patent/CN114844911B/zh active Active
Patent Citations (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20100268966A1 (en) * | 2009-04-20 | 2010-10-21 | Wesley Leggette | Efficient and secure data storage utilizing a dispersed data storage system |
| CN101957797A (zh) * | 2009-07-17 | 2011-01-26 | 群联电子股份有限公司 | 闪速存储器逻辑区块管理方法及其控制电路与储存系统 |
| CN106293537A (zh) * | 2016-08-12 | 2017-01-04 | 上海海事大学 | 一种轻量级的数据密集型文件系统的自治块管理方法 |
| US20190332608A1 (en) * | 2017-02-17 | 2019-10-31 | Alibaba Group Holding Limited | Data processing method and device |
| US20190205054A1 (en) * | 2017-02-23 | 2019-07-04 | Hitachi, Ltd. | Storage system |
| CN110555075A (zh) * | 2018-03-29 | 2019-12-10 | 阿里巴巴集团控股有限公司 | 数据处理方法、装置、电子设备以及计算机可读存储介质 |
| CN111147226A (zh) * | 2018-11-02 | 2020-05-12 | 杭州海康威视系统技术有限公司 | 数据存储方法、装置及存储介质 |
| CN110968265A (zh) * | 2019-11-05 | 2020-04-07 | 北京字节跳动网络技术有限公司 | 分片扩容方法、装置及电子设备 |
| CN111125089A (zh) * | 2019-11-05 | 2020-05-08 | 远景智能国际私人投资有限公司 | 时序数据存储方法、装置、服务器及存储介质 |
| CN113126895A (zh) * | 2019-12-30 | 2021-07-16 | 爱思开海力士有限公司 | 存储装置及其操作方法 |
| CN112925770A (zh) * | 2021-03-09 | 2021-06-08 | 京东数字科技控股股份有限公司 | 一种数据库扩容方法、装置、设备和介质 |
| CN113806097A (zh) * | 2021-09-29 | 2021-12-17 | 杭州网易云音乐科技有限公司 | 一种数据处理方法、装置、电子设备以及存储介质 |
Non-Patent Citations (2)
| Title |
|---|
| 康文杰;王勇;俸皓;: "云平台中MySQL数据库高可用性的设计与实现", 计算机工程与设计, no. 01 * |
| 张玉婷;赵海涛;唐紫浩;朱洪波;: "一种基于多参数模糊逻辑的车载通信资源协同优化方法", 应用科学学报, no. 05 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN114844911B (zh) | 2024-07-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101962502B1 (ko) | 전력 효율적인 애플리케이션 통지 시스템 | |
| CN113157810B (zh) | 一种区块同步方法、计算机设备和存储介质 | |
| CN113110938A (zh) | 一种资源分配方法、装置、计算机设备及存储介质 | |
| WO2023124323A1 (zh) | 数据存储方法、装置、计算机设备和存储介质 | |
| CN108595483A (zh) | 数据处理方法及相关装置 | |
| US20170235812A1 (en) | Automated aggregation of social contact groups | |
| WO2024164724A1 (zh) | 分布式系统中主节点的选举方法、装置和电子设备 | |
| WO2024040875A1 (zh) | 多视频播放的处理方法、装置、计算机设备及存储介质 | |
| CN115987852A (zh) | 接口服务状态的检测方法、装置、计算机设备及存储介质 | |
| CN115658348A (zh) | 微服务调用方法、相关装置及存储介质 | |
| CN114844911B (zh) | 数据存储方法、装置、电子设备及计算机可读存储介质 | |
| CN112138397B (zh) | 一种触发器管理方法、装置、计算机设备和存储介质 | |
| CN113419894B (zh) | 数据检验方法、装置、存储介质及计算机设备 | |
| CN112783860B (zh) | 构造镜像数据库的方法、装置、存储介质及计算机设备 | |
| WO2019024643A1 (zh) | 数据同步管控方法、装置及电子设备 | |
| CN113890753A (zh) | 数字身份管理方法、装置、系统、计算机设备和存储介质 | |
| CN110198269B (zh) | 分布式机群的路由同步系统、方法及相关装置 | |
| CN115883352B (zh) | 服务节点创建方法、相关设备及存储介质 | |
| CN115794915A (zh) | 一种数据调用方法、装置、计算机设备及存储介质 | |
| CN113419795B (zh) | 调用关系的展示方法、装置、计算机设备及存储介质 | |
| CN114968595B (zh) | Nft所有者信息的处理方法、装置、计算机设备及存储介质 | |
| CN118353963A (zh) | 一种数据访问方法、装置、电子设备和存储介质 | |
| CN114849241A (zh) | 一种信息处理方法、装置、计算机设备及存储介质 | |
| CN114138721A (zh) | 垃圾文件的处理方法、装置、计算机设备及存储介质 | |
| CN118152770A (zh) | 一种任务处理方法、装置、电子设备和存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |