WO2020024446A1 - 数据的存储方法及装置、存储介质、计算机设备 - Google Patents

数据的存储方法及装置、存储介质、计算机设备 Download PDF

Info

Publication number
WO2020024446A1
WO2020024446A1 PCT/CN2018/111121 CN2018111121W WO2020024446A1 WO 2020024446 A1 WO2020024446 A1 WO 2020024446A1 CN 2018111121 W CN2018111121 W CN 2018111121W WO 2020024446 A1 WO2020024446 A1 WO 2020024446A1
Authority
WO
WIPO (PCT)
Prior art keywords
data
stored
storage
hash value
type
Prior art date
Application number
PCT/CN2018/111121
Other languages
English (en)
French (fr)
Inventor
孙成
叶俊锋
赖云辉
罗先贤
龙觉刚
Original Assignee
平安科技（深圳）有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 平安科技（深圳）有限公司 filed Critical 平安科技（深圳）有限公司
Priority to US17/264,321 priority Critical patent/US11360684B2/en
Publication of WO2020024446A1 publication Critical patent/WO2020024446A1/zh

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638—Organizing or formatting or addressing of data
    • G06F3/0644—Management of space entities, e.g. partitions, extents, pools
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22—Indexing; Data structures therefor; Storage structures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061—Improving I/O performance
    • G06F3/0611—Improving I/O performance in relation to response time
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0673—Single storage device

Definitions

  • a data storage device including:
  • An obtaining unit configured to obtain the target data to be stored, and divide the target data to be stored according to the update speed of the target data by the front-end system;
  • FIG. 2 is a flowchart of another method for storing data according to an embodiment of the present application.
  • the target data to be stored may be letters, numbers, pictures, and special characters.
  • it is received in the background of the system.
  • data to be stored is obtained.
  • the system background can process the data according to the data.
  • Hash value performs hash evaluation on the divided target data to be stored with a fast update speed to obtain a first type of hash value, and perform hash evaluation on the divided target data to be stored with a slow update speed to obtain a second type. Hash value.
  • the determination relationship of the preset stored data segment is a storage correspondence between the first type of hash value, the second type of hash value, and the stored data segment.
  • different storage data segments may be divided in different memories, and the storage correspondence includes the positions where the first type of hash value is stored in different storage data segments in different memories, and the second type of hash. Values are stored in different locations in different memory where data segments are stored.
  • the stored data segment includes the amount of data that can store the data, and the location stored in the memory. For example, memory a includes three storage data segments, the first storage data segment can store 10,000 data, the second storage data segment can store 50,000 data, and the third storage data segment can store 150,000 data.
  • the number of data to be stored needs to be determined.
  • the preset storage threshold shown is set according to the ability of the current system to store data, and the ability to store data is the maximum amount of data that the current system can process at one time. For example, if the maximum amount of data processed by the current system is 1 million, the preset preset storage preset is 900,000. When the number of data to be stored is 150, it is greater than the preset storage threshold of 90. 10,000, then divide the 1.5 million data batches, such as 2 batches, each batch is 750,000 data acquisition, or 3 batches, each batch is 500,000 data acquisition, this application is implemented Examples are not specifically limited.
  • the storage capabilities of the storage positions need to be analyzed.
  • the storage locations in the embodiments of the present application are memories with different storage capabilities. Capabilities include the amount of stored data, the speed of system response when querying data, the hardware and software configuration of the storage location. Among them, according to the embodiments of the present application, different numbers of storage data segments can be divided into storage locations. For example, the storage capacity is large, the query data is fast in the system, and the storage location hardware is newer.
  • this storage location can store a lot of data
  • the division of the stored data segment can also be the maximum number of divisions, for example, divided into 5
  • Each storage data segment can store 500,000 pieces of data, etc., or different numbers of data, which are not specifically limited in the embodiment of the present application.
  • a query list may be established according to the hash value category of the stored data and the stored data segment corresponding to the data, so that the corresponding storage can be found according to the query content carried in the query request
  • the hash value category is the first type hash value or the second type hash value determined according to the data.
  • the generated query list includes the data q corresponding to the second type of hash value, the calculated hash value is 40, and the corresponding stored data segment is c1. According to such a correspondence relationship, when the query data is required When it is q, the corresponding stored data segment c1 is found from the query list.
  • an embodiment of the present application provides a data storage device.
  • the device includes: an obtaining unit 31, an evaluation unit 32, and a storage unit 33.
  • the apparatus further includes: a determining unit 44 configured to determine a storage capacity of a storage location where data is to be stored, and divide a storage data segment into the storage location according to the storage capacity, where the storage capacity includes stored data The size of the data, the speed of the system response when querying the data, the hardware and software configuration of the storage location.
  • a determining unit 44 configured to determine a storage capacity of a storage location where data is to be stored, and divide a storage data segment into the storage location according to the storage capacity, where the storage capacity includes stored data The size of the data, the speed of the system response when querying the data, the hardware and software configuration of the storage location.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Storage Device Security (AREA)

Abstract

一种数据的存储方法，涉及数据处理技术领域，主要目的解决现有数据存储的负载均衡方法是通过数据求模、除以节点数等方法将数据平均分配到各个存储节点中进行存储的问题。包括：获取待存储目标数据并按照前端系统对所述待存储目标数据的更新速度进行划分（101）；对划分后的更新速度快的所述待存储目标数据及更新速度慢的所述待存储目标数据进行哈希求值得到第一类哈希值及第二类哈希值（102）；根据预设存储数据段确定关系确定所述第一类哈希值、所述第二类哈希值对应的存储数据段，并将更新速度快的所述待存储目标数据及更新速度慢的所述待存储目标数据分别存储至所述第一类哈希值与所述第二类哈希值对应的存储数据段中（103）。

Description

数据的存储方法及装置、存储介质、计算机设备
本申请要求与2018年8月1日提交中国专利局、申请号为2018108656411、申请名称为“数据的存储方法及装置、存储介质、终端。”的中国专利申请的优先权，其全部内容通过引用结合在申请中。
技术领域
本申请涉及一种数据处理技术领域，特别是涉及一种数据的存储方法及装置、存储介质、计算机设备。
背景技术
随着大数据时代的到来，互联网时代处理的数据量远远超过了人们的想象。为了将数据分别存储在对应的存储器中，并在需要的时候进行获取，技术人员开发了负载均衡方法，将数据均匀的分配到各个节点中，例如数据的存储。
目前，现有的针对数据存储的负载均衡方法是通过数据求摸、除以节点数等方法将数据平均分配到各个存储节点中进行存储，但是这种方法在新增或删减存储节点时，需要将全部数据重新存储，影响数据存储速度，会造成原缓存数据无法准确加载，频繁的进行数据重新存储也会造成数据存储的过载。
发明内容
有鉴于此，本申请提供一种数据的存储方法及装置、存储介质、计算机设备，主要目的在于现有针对数据存储的负载均衡方法是通过数据求摸、除以节点数等方法将数据平均分配到各个存储节点中进行存储的问题。
依据本申请一个方面，提供了一种数据的存储方法，包括：
获取待存储目标数据，并按照前端系统对所述待存储目标数据的更新速度，对所述待存储目标数据进行划分；
对划分后的更新速度快的所述待存储目标数据进行哈希求值得到第一类哈希值，对划分后的更新速度慢的所述待存储目标数据进行哈希求值得到第二类哈希值；其中，更新速度快的所述待存储目标数据为所述前端系统在预设时间内存储数据的数据量大于预设阈值的数据，更新速度慢的所述待存储目标数据为所述前端系统在预设时间内存储数据的数据量小于或等于预设阈值的数据；
根据预设存储数据段确定关系确定所述第一类哈希值、所述第二类哈希值对应的存储数据段，并将更新速度快的所述待存储目标数据存储至所述第一类哈希值对应的存储数据段中，将更新速度慢的所述待存储目标数据存储至所述第二类哈希值对应的存储数据段中，所述预设存储数据段确定关系为所述第一类哈希值、所述第二类哈希值与所述存储数据段之间的存储对应关系。
依据本申请一个方面，提供了一种数据的存储装置，包括：
获取单元，用于获取待存储目标数据，并按照前端系统对所述待存储目标数据的更新速度，对所述待存储目标数据进行划分；
求值单元，用于对划分后的更新速度快的所述待存储目标数据进行哈希求值得到第一类哈希值，对划分后的更新速度慢的所述待存储目标数据进行哈希求值得到第二类哈希值；其中，更新速度快的所述待存储目标数据为所述前端系统在预设时间内存储数据的数据量大于预设阈值的数据，更新速度慢的所述待存储目标数据为所述前端系统在预设时间内存储数据的数据量小于或等于预设阈值的数据；
存储单元，用于根据预设存储数据段确定关系确定所述第一类哈希值、所述第二类哈希值对应的存储数据段，并将更新速度快的所述待存储目标数据存储至所述第一类哈希值对应的存储数据段中，将更新速度慢的所述待存储目标数据存储至所述第二类哈希值对应的存储数据段中，所述预设存储数据段确定关系为所述第一类哈希值、所述第二类哈希值与所述存储数据段之间的存储对应关系。
根据本申请的又一方面，提供了一种非易失性可读存储介质，所述非易失性可读存储介质中存储有至少一计算机可读指令，所述计算机可读指令使处理器执行如上述数据的存储方法对应的操作。
根据本申请的再一方面，提供了一种计算机设备，包括：处理器、存储器、通信接口和通信总线，所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信；
所述存储器用于存放至少一计算机可读指令，所述计算机可读指令使所述处理器执行上述数据的存储方法对应的操作。
借由上述技术方案，本申请实施例提供的技术方案至少具有下列优点：
本申请提供了一种数据的存储方法及装置、存储介质、计算机设备，首先获取待进行存储的数据，并按照前端系统更新数据的速度对所述数据进行划分；对划分后的更新速度快的数据以及更新速度慢的数据进行哈希求值，得到第一类哈希值、第二类哈希值；根据预设存储数据段确定关系确定所述第一类哈希值、所述第二类哈希值对应的存储数据段，并将所述第一类哈希值、所述第二类哈希值对应的数据分别存储至确定出的存储数据段中，所述预设存储数据段确定关系为所述第一类哈希值、所述第二类哈希值与所述存储数据段之间的存储对应关系。与现有针对数据存储的负载均衡方法是通过数据求摸、除以节点数等方法将数据平均分配到各个存储节点中进行存储相比，本申请实施例通过将按照前端系统的更新快慢对数据进行哈希求值，并按照预设数据段确定关系分别确定出将求得的第一类哈希值、第二类哈希值对应数据存储至存储数据段中，以便在新增或删减存储位置时，可以根据本申请实施例中的方法计算存储位置，直接计算数据可存储的数据段，无需将全部数据进行存储加载，从而提高数据存储的效率。
上述说明仅是本申请技术方案的概述，为了能够更清楚了解本申请的技术手段，而可依照说明书的内容予以实施，并且为了让本申请的上述和其它目的、特征和优点能 够更明显易懂，以下特举本申请的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本申请的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：
图1示出了本申请实施例提供的一种数据的存储方法流程图；
图2示出了本申请实施例提供的另一种数据的存储方法流程图；
图3示出了本申请实施例提供的一种数据的存储装置框图；
图4示出了本申请实施例提供的另一种数据的存储装置框图；
图5示出了本申请实施例提供的一种计算机设备的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
本申请实施例提供了一种数据的存储方法，如图1所示，所述方法包括：
101、获取待存储目标数据，并按照前端系统对所述待存储目标数据的更新速度，对所述待存储目标数据进行划分。
其中，所述待存储目标数据可以为字母、数字、图片以及特殊字符，为了满足将不同的数据均衡的分配到不同的存储器中，以便进行数据处理，本申请实施例中，在系统后台接收到数据存储或数据处理请求时，获取待进行存储的数据，这些数据在存储至存 储器之后，系统后台可以根据这些数据进行处理。
102、对划分后的更新速度快的所述待存储目标数据进行哈希求值得到第一类哈希值，对划分后的更新速度慢的所述待存储目标数据进行哈希求值得到第二类哈希值。
其中，所述哈希求值即是对待进行存储的每一个数据进行计算哈希值，并按照步骤101中的更新速度快的数据将计算得到的哈希值确定为第一类哈希值，按照更新速度慢的数据将计算得到的哈希值确定为第二类哈希值。
需要说明的是，本申请实施例中的哈希求值为利用Hash算法求解散列值，即就是把任意长度的输入通过散列算法变换成固定长度的输出，该输出的值就是散列值，即为本申请实施例中的哈希值。
另外，所述前端系统更新数据的速度为前端系统获取到数据的速度，并将这些数据的更新速度划分为快速和慢速，具体的划分方式可以按照前端系统在预设时间内获取数据的数据量的大小来确定，具体为更新速度快的所述待存储目标数据为所述前端系统在预设时间内存储数据的数据量大于预设阈值的数据，更新速度慢的所述待存储目标数据为所述前端系统在预设时间内存储数据的数据量小于或等于预设阈值的数据。其中，所述预设阈值用于限定预设时间内获取数据量的大小，可以为10万、100万等，本申请实施例不做具体限定。例如，前端系统1在1小时内获取到的数据为10万条，前端系统2在1小时内获取到的数据为100万条，预设阈值为50万条，则将前端系统1得到的数据划分为更新速度慢的数据，将前端数据2得到的数据划分为更新速度快的数据，本申请实施例不做具体限定。
103、根据预设存储数据段确定关系确定所述第一类哈希值、所述第二类哈希值对应的存储数据段，并将更新速度快的所述待存储目标数据存储至所述第一类哈希值对应的存储数据段中，将更新速度慢的所述待存储目标数据存储至所述第二类哈希值对应的存储数据段中。
其中，所述预设存储数据段确定关系为所述第一类哈希值、所述第二类哈希值与所述存储数据段之间的存储对应关系。本申请实施例中，不同的存储器中可以进行划分不同的存储数据段，所述存储对应关系包括第一类哈希值存储在不同存储器中不同的存储数据段的位置，以及第二类哈希值存储在不同存储器中不同的存储数据段的位置。存储数据段包括可以存储数据的数据量、以及存储至存储器中的位置。例如，存储器a中包括3个存储数据段，第一个存储数据段可以存储1万个数据，第二个存储数据段可以存储5万个数据，第三个存储数据段可以存储15万个数据，存储器b中包括2个存储数据段，第一个存储数据段可以存储2万数据，第二个存储数据段可以存储10万个数据，根据第一类哈希值、第二类哈希值与存储数据段之间的存储对应关系，将计算出的第一类哈希值150、110、200对应的数据存储至存储器a中的第二个数据段中，将计算出的第一类哈希值250、300、310对应的数据存储至存储器b中的第二个存储数据段中，以此类推，本申请实施例不做具体限定。
需要说明的是，本申请实施例中，第一类哈希值、所述第二类哈希值与所述存储数据段之间的存储对应关系可以具体按照哈希值的具体数值为对应的数据分配到对应的存储数据段中，如100-200之间的哈希值对应的数据存储在存储数据段中存储数据个数较少的存储数据段中，本申请实施例不做具体限定。
本申请提供了一种数据的存储方法，与现有针对数据存储的负载均衡方法是通过数据求摸、除以节点数等方法将数据平均分配到各个存储节点中进行存储相比，本申请实施例通过将按照前端系统的更新快慢对数据进行哈希求值，并按照预设数据段确定关系分别确定出将求得的第一类哈希值、第二类哈希值对应数据存储至存储数据段中，以便在新增或删减存储位置时，可以根据本申请实施例中的方法计算存储位置，直接计算数据可存储的数据段，无需将全部数据进行存储加载，从而提高数据存储的效率。
本申请实施例提供了另一种数据的存储方法，如图2所示，所述方法包括：
201、获取待存储目标数据，并按照前端系统对所述待存储目标数据的更新速度，对所述待存储目标数据进行划分。
本步骤与图1所示的步骤101方法相同，在此不再赘述。
对于本申请实施例，步骤201之前，所述方法还包括：判断待存储数据个数是否大于预置存储阈值；若是，则对所述待存储数据划分批次，并按照所述批次依次确定每一批次的待存储数据为所述待存储目标数据。
对于本申请实施例，为了避免数据过大使得数据存储时造成过载现象，在进行本申请实施例中步骤201之前，需要对待进行存储的数据的数据个数进行判断。其中，所示预置存储阈值为根据当前系统可以进行存储数据的能力进行设置，存储数据的能力即为当前系统一次性最大处理数据的数据量。例如，当前系统一次性最大处理数据的数据量为100万个数据，则设定的预置存储预置为90万个，当待进行存储的数据个数为150个，大于预置存储阈值90万个，则对这150万个数据划分批次，如划分2批，每一批为75万个数据进行获取，也可以划分3批，每一批为50万个数据进行获取，本申请实施例不做具体限定。
202、对划分后的更新速度快的所述待存储目标数据进行哈希求值得到第一类哈希值，对划分后的更新速度慢的所述待存储目标数据进行哈希求值得到第二类哈希值。
本步骤与图1所示的步骤102方法相同，在此不再赘述。
203、确定待进行存储数据的存储位置的存储能力，并根据所述存储能力对所述存储位置划分存储数据段。
对于本申请实施例，为了对不同存储能力的存储位置划分不同的存储数据段，需要对存储位置的存储能力进行解析，本申请实施例中的存储位置即为不同存储能力的存储器，所述存储能力包括存储数据量的大小、查询数据时系统响应的快慢、存储位置的硬件、软件配置情况。其中，针对本申请实施例中不同存储能力可以在存储位置中划分出 不同个数的存储数据段，例如，存储能力为存储数据量大的、查询数据是系统响应快的、存储位置硬件较新的或为当前存储空间大的硬件、软件配置新的，可以说明这个存储位置可以存储很多的数据，对存储数据段的划分也可以为最大限度下的最大个数的划分，如，划分为5个存储数据段，每个存储数据段中可以存储50万个数据等，也可以为不同个数的数据，本申请实施例不做具体限定。
204、所述根据预设存储数据段确定关系确定所述第一类哈希值、所述第二类哈希值对应的存储数据段，并将更新速度快的所述待存储目标数据存储至所述第一类哈希值对应的存储数据段中，将更新速度慢的所述待存储目标数据存储至所述第二类哈希值对应的存储数据段中。
本步骤与图1所示的步骤102方法相同，在此不再赘述。
对于本申请实施例，步骤204可以具体细化为：将所述第一类哈希值、所述第二类哈希值分别代入存储数据段确定公式中，确定所述第一类哈希值与所述第二类哈希值分别对应的不同存储能力的存储位置中的存储数据段；利用分段计算法分别确定更新速度快的所述待存储数据和更新速度慢的所述待存储数据是否能够存储至对应的所述存储数据段；当确定能够存储至对应的所述存储数据段时，将更新速度快的所述待存储目标数据存储至所述第一类哈希值对应的存储数据段中，将更新速度慢的所述待存储目标数据存储至所述第二类哈希值对应的存储数据段中。
其中，所述存储数据段确定公式用于确定所述第一类哈希值、所述第二类哈希值是否存储至所述存储数据段中。为了准确确定出存储数据段中每个具体段数存储的数据，需要将第一类哈希值、第二类哈希值代入存储数据段确定公式确定出数据是否存储于存储数据段中。所述预设存储数据段确定公式为y＝x-a，y为结果阈值，x为存储段数参数，a为第一类哈希值与第二类哈希值的代入值，所述分段计算法为当y大于0时，所述第一类哈希值、所述第二类哈希值对应的数据存储至所述存储段数参数对应的存储 数据段中，针对当y小于或等与0时，所述第一类哈希值、所述第二类哈希值对应的数据不存储至所述存储段数参数对应的存储数据段中。所述存储段数参数为不同存储数据段中可以存储数据的个数，例如，存储位置a中包括2个存储数据段，存储数据段a1可以存储30万个数据，存储数据段a2可以存储100万个数据，存储位置b中包括3个存储数据段，存储数据段b1可以存储200万个数据，存储数据段b2可以存储300万个数据，存储数据段b3可以存储400万个数据，每个存储数据段对应的存储数据段参数则为对应30、100、200、300、400，当第一类哈希值分别为20、90、110，第二类哈希值分别为180、220、350，将上述数值分别代入y＝x-a中，可以确定出，a为30时，30-20大于0，30-90小于0，30-110小于0，30-180小于0，30-220小于0，30-350小于0，因此，第一类哈希值20对应的数据不存储在存储数据段a2、b1、b2、b3中，而是存储至存储数据段a1中，同理类推，第一类哈希值90对应的数据存储至存储数据段a2中，110与180对应的数据存储至存储数据段b1中，220对应的数据存储至存储数据段b2中，350对应的数据存储至存储数据段b3中。
205、对应记录所述待存储目标数据、所述待进行存储的数据确定出的哈希值类别以及所述数据对应的存储数据段，以生成查询列表。
对于本申请实施例，为了简化数据查询的查询步骤，可以根据存储数据的哈希值类别以及所述数据对应的存储数据段建立查询列表，以便可以根据查询请求中携带的查询内容查找对应的存储数据段中的数据。其中，哈希值类别即为根据数据确定出的第一类哈希值或第二类哈希值。例如，生成的查询列表中包括了数据q对应的是第二类哈希值，计算出的哈希值为40，对应的存储数据段为c1，根据这样的对应关系，当需要进行查询的数据为q时，则从查询列表中找到对应的存储数据段c1。
206、当接收到查询请求时，从所述查询列表中查询与所述查询请求中携带的待查询数据对应的存储数据段。
对于本申请实施例，为了提高查询效率，当接收到查询请求时，可以查找到查询列表中与所述查询请求中携带的待查询数据对应的存储数据段，然后从这个存储数据段中查询数据。
207、当从所述具体段数的存储数据段中未查询到数据，则从所述具体段数对应的存储位置中重新进行查询，若所述存储位置中未查询到数据，则发送报警信息。
对于本申请实施例，为了避免在具体段数中的存储数据段中找不到待查询的数据时，扩大查询数据的范围，当未从查询列表中记录的具体段数的存储数据段中查询到数据，则扩大查询范围，从这个存储数据段的存储位置中重新进行查询，如存储数据段c1中未查询到数据，则扩大到存储位置c的所有存储数据段中进行查询。若这个存储位置中没有查询到数据，则发送报警信息，以便用户根据报警信息重新确定查询位置，或者人工进行查询，本申请实施例不做具体限定。
本申请提供了另一种数据的存储方法，本申请实施例通过将按照前端系统的更新快慢对数据进行哈希求值，并按照预设数据段确定关系分别确定出将求得的第一类哈希值、第二类哈希值对应数据存储至存储数据段中，以便在新增或删减存储位置时，可以根据本申请实施例中的方法计算存储位置，直接计算数据可存储的数据段，无需将全部数据进行存储加载，从而提高数据存储的效率。
进一步的，作为对上述图1所示方法的实现，本申请实施例提供了一种数据的存储装置，如图3所示，该装置包括：获取单元31、求值单元32、存储单元33。
获取单元31，用于获取待存储目标数据，并按照前端系统对所述待存储目标数据的更新速度，对所述待存储目标数据进行划分；所述获取单元31为数据的存储装置执行获取待存储目标数据，并按照前端系统对所述待存储目标数据的更新速度，对所述待存储目标数据进行划分的模块。
求值单元32，用于对划分后的更新速度快的所述待存储目标数据进行哈希求值得到 第一类哈希值，对划分后的更新速度慢的所述待存储目标数据进行哈希求值得到第二类哈希值；其中，更新速度快的所述待存储目标数据为所述前端系统在预设时间内存储数据的数据量大于预设阈值的数据，更新速度慢的所述待存储目标数据为所述前端系统在预设时间内存储数据的数据量小于或等于预设阈值的数据；所述求值单元32为数据的存储装置执行对划分后的更新速度快的所述待存储目标数据进行哈希求值得到第一类哈希值，对划分后的更新速度慢的所述待存储目标数据进行哈希求值得到第二类哈希值的模块。
存储单元33，用于根据预设存储数据段确定关系确定所述第一类哈希值、所述第二类哈希值对应的存储数据段，并将更新速度快的所述待存储目标数据存储至所述第一类哈希值对应的存储数据段中，将更新速度慢的所述待存储目标数据存储至所述第二类哈希值对应的存储数据段中，所述预设存储数据段确定关系为所述第一类哈希值、所述第二类哈希值与所述存储数据段之间的存储对应关系。所述存储单元33为数据的存储装置执行根据预设存储数据段确定关系确定所述第一类哈希值、所述第二类哈希值对应的存储数据段，并将更新速度快的所述待存储目标数据存储至所述第一类哈希值对应的存储数据段中，将更新速度慢的所述待存储目标数据存储至所述第二类哈希值对应的存储数据段中的模块。
本申请提供了一种数据的存储装置，本申请实施例通过将按照前端系统的更新快慢对数据进行哈希求值，并按照预设数据段确定关系分别确定出将求得的第一类哈希值、第二类哈希值对应数据存储至存储数据段中，以便在新增或删减存储位置时，可以根据本申请实施例中的方法计算存储位置，直接计算数据可存储的数据段，无需将全部数据进行存储加载，从而提高数据存储的效率。
进一步的，作为对上述图2所示方法的实现，本申请实施例提供了另一种数据的存储装置，如图4所示，该装置包括：获取单元41、求值单元42、存储单元43、确定单 元44、生成单元45、查询单元46、发送单元47。
获取单元41，用于获取待存储目标数据，并按照前端系统对所述待存储目标数据的更新速度，对所述待存储目标数据进行划分；求值单元42，用于对划分后的更新速度快的所述待存储目标数据进行哈希求值得到第一类哈希值，对划分后的更新速度慢的所述待存储目标数据进行哈希求值得到第二类哈希值；其中，更新速度快的所述待存储目标数据为所述前端系统在预设时间内存储数据的数据量大于预设阈值的数据，更新速度慢的所述待存储目标数据为所述前端系统在预设时间内存储数据的数据量小于或等于预设阈值的数据；存储单元43，用于根据预设存储数据段确定关系确定所述第一类哈希值、所述第二类哈希值对应的存储数据段，并将更新速度快的所述待存储目标数据存储至所述第一类哈希值对应的存储数据段中，将更新速度慢的所述待存储目标数据存储至所述第二类哈希值对应的存储数据段中，所述预设存储数据段确定关系为所述第一类哈希值、所述第二类哈希值与所述存储数据段之间的存储对应关系。
进一步地，所述装置还包括：确定单元44，用于确定待进行存储数据的存储位置的存储能力，并根据所述存储能力对所述存储位置划分存储数据段，所述存储能力包括存储数据量的大小、查询数据时系统响应的快慢、存储位置的硬件、软件配置情况。
进一步地，所述存储单元43包括：第一确定模块4301，用于将所述第一类哈希值、所述第二类哈希值分别代入存储数据段确定公式中，确定所述第一类哈希值与所述第二类哈希值分别对应的不同存储能力的存储位置中的存储数据段，所述存储数据段确定公式用于确定所述第一类哈希值、所述第二类哈希值是否存储至所述存储数据段中；
第二确定模块4302，用于利用分段计算法分别确定更新速度快的所述待存储数据和更新速度慢的所述待存储数据是否能够存储至对应的所述存储数据段，所述存储数据段确定公式为y＝x-a，y为结果阈值，x为存储段数参数，a为第一类哈希值与第二类哈希值的代入值；其中，当y大于0时，所述第一类哈希值、所述第二类哈希值对应的 数据存储至所述存储段数参数对应的存储数据段中；
存储模块4303，用于当确定能够存储至对应的所述存储数据段时，将更新速度快的所述待存储目标数据存储至所述第一类哈希值对应的存储数据段中，将更新速度慢的所述待存储目标数据存储至所述第二类哈希值对应的存储数据段中。
进一步地，所述装置还包括：生成单元45，用于对应记录所述待存储目标数据、所述待进行存储的数据确定出的哈希值类别以及所述数据对应的存储数据段，以生成查询列表。进一步地，所述装置还包括：查询单元46，用于当接收到查询请求时，从所述查询列表中查询与所述查询请求中携带的待查询数据对应的存储数据段，以使得从所述存储数据段中查询数据。进一步地，所述装置还包括：发送单元47，用于当从所述具体段数的存储数据段中未查询到数据，则从所述具体段数对应的存储位置中重新进行查询，若所述存储位置中未查询到数据，则发送报警信息。进一步地，所述获取单元41，还用于判断待存储数据个数是否大于预置存储阈值；若是，则对所述待存储数据划分批次，并按照所述批次依次确定每一批次的待存储数据为所述待存储目标数据。
本申请提供了另一种数据的存储装置，本申请实施例通过将按照前端系统的更新快慢对数据进行哈希求值，并按照预设数据段确定关系分别确定出将求得的第一类哈希值、第二类哈希值对应数据存储至存储数据段中，以便在新增或删减存储位置时，可以根据本申请实施例中的方法计算存储位置，直接计算数据可存储的数据段，无需将全部数据进行存储加载，从而提高数据存储的效率。
根据本申请一个实施例提供了一种非易失性可读存储介质，所述非易失性可读存储介质存储有至少一计算机可读指令，该计算机计算机可读指令可执行上述任意方法实施例中的数据的存储方法。
图5示出了根据本申请一个实施例提供的一种计算机设备的结构示意图，具体可 以为一种终端，本申请具体实施例并不对终端的具体实现做限定。如图5所示，该终端可以包括：处理器(processor)502、通信接口(Communications Interface)504、存储器(memory)506、以及通信总线508。其中：处理器502、通信接口504、以及存储器506通过通信总线508完成相互间的通信。通信接口504，用于与其它设备比如客户端或其它服务器等的网元通信。处理器502，用于执行计算机可读指令510，具体可以执行上述数据的存储方法实施例中的相关步骤。具体地，计算机可读指令510可以包括计算机可读指令代码，该计算机可读指令代码包括计算机可读指令。处理器502可能是中央处理器CPU，或者是特定集成电路ASIC(Application Specific Integrated Circuit)，或者是被配置成实施本申请实施例的一个或多个集成电路。终端包括的一个或多个处理器，可以是同一类型的处理器，如一个或多个CPU；也可以是不同类型的处理器，如一个或多个CPU以及一个或多个ASIC。存储器506，用于存放计算机可读指令510。存储器506可能包含高速RAM存储器，也可能还包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。
计算机可读指令510具体可以用于使得处理器502执行以下操作：获取待存储目标数据，并按照前端系统对所述待存储目标数据的更新速度，对所述待存储目标数据进行划分；对划分后的更新速度快的所述待存储目标数据进行哈希求值得到第一类哈希值，对划分后的更新速度慢的所述待存储目标数据进行哈希求值得到第二类哈希值；其中，更新速度快的所述待存储目标数据为所述前端系统在预设时间内存储数据的数据量大于预设阈值的数据，更新速度慢的所述待存储目标数据为所述前端系统在预设时间内存储数据的数据量小于或等于预设阈值的数据；根据预设存储数据段确定关系确定所述第一类哈希值、所述第二类哈希值对应的存储数据段，并将更新速度快的所述待存储目标数据存储至所述第一类哈希值对应的存储数据段中，将更新速度慢的所述待存储目标 数据存储至所述第二类哈希值对应的存储数据段中，所述预设存储数据段确定关系为所述第一类哈希值、所述第二类哈希值与所述存储数据段之间的存储对应关系。
显然，本领域的技术人员应该明白，上述的本申请的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，可选地，它们可以用计算装置可执行的计算机可读指令代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，并且在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本申请不限制于任何特定的硬件和软件结合。
以上所述仅为本申请的优选实施例而已，并不用于限制本申请，对于本领域的技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原则之内，所作的任何修改、等同替换、改进等，均应包括在本申请的保护范围之内。

Claims (20)

  1. 一种数据的存储方法，其特征在于，包括：
    获取待存储目标数据，并按照前端系统对所述待存储目标数据的更新速度，对所述待存储目标数据进行划分；
    对划分后的更新速度快的所述待存储目标数据进行哈希求值得到第一类哈希值，对划分后的更新速度慢的所述待存储目标数据进行哈希求值得到第二类哈希值；其中，更新速度快的所述待存储目标数据为所述前端系统在预设时间内存储数据的数据量大于预设阈值的数据，更新速度慢的所述待存储目标数据为所述前端系统在预设时间内存储数据的数据量小于或等于预设阈值的数据；
    根据预设存储数据段确定关系确定所述第一类哈希值、所述第二类哈希值对应的存储数据段，并将更新速度快的所述待存储目标数据存储至所述第一类哈希值对应的存储数据段中，将更新速度慢的所述待存储目标数据存储至所述第二类哈希值对应的存储数据段中，所述预设存储数据段确定关系为所述第一类哈希值、所述第二类哈希值与所述存储数据段之间的存储对应关系。
  2. 根据权利要求1所述的方法，其特征在于，所述根据预设存储数据段确定关系确定所述第一类哈希值、所述第二类哈希值对应的存储数据段之前，还包括：
    确定待进行存储数据的存储位置的存储能力，并根据所述存储能力对所述存储位置划分存储数据段，所述存储能力包括存储数据量的大小、查询数据时系统响应的快慢、存储位置的硬件、软件配置情况。
  3. 根据权利要求2所述的方法，其特征在于，所述根据预设存储数据段确定关系确定所述第一类哈希值、所述第二类哈希值对应的存储数据段，并将更新速度快的所述待存储目标数据存储至所述第一类哈希值对应的存储数据段中，将更新速度慢的所述待 存储目标数据存储至所述第二类哈希值对应的存储数据段中包括：
    将所述第一类哈希值、所述第二类哈希值分别代入存储数据段确定公式中，确定所述第一类哈希值与所述第二类哈希值分别对应的不同存储能力的存储位置中的存储数据段，所述存储数据段确定公式用于确定所述第一类哈希值、所述第二类哈希值是否存储至所述存储数据段中；
    利用分段计算法分别确定更新速度快的所述待存储数据和更新速度慢的所述待存储数据是否能够存储至对应的所述存储数据段，所述存储数据段确定公式为y＝x-a，y为结果阈值，x为存储段数参数，a为第一类哈希值与第二类哈希值的代入值；其中，当y大于0时，所述第一类哈希值、所述第二类哈希值对应的数据存储至所述存储段数参数对应的存储数据段中；
    当确定能够存储至对应的所述存储数据段时，将更新速度快的所述待存储目标数据存储至所述第一类哈希值对应的存储数据段中，将更新速度慢的所述待存储目标数据存储至所述第二类哈希值对应的存储数据段中。
  4. 根据权利要求1所述的方法，其特征在于，所述方法还包括：
    对应记录所述待存储目标数据、所述待进行存储的数据确定出的哈希值类别以及所述数据对应的存储数据段，以生成查询列表。
  5. 根据权利要求4所述的方法，其特征在于，所述方法还包括：
    当接收到查询请求时，从所述查询列表中查询与所述查询请求中携带的待查询数据对应的存储数据段，以使得从所述存储数据段中查询数据。
  6. 根据权利要求5所述的方法，其特征在于，所述方法还包括：
    当从所述具体段数的存储数据段中未查询到数据，则从所述具体段数对应的存储位置中重新进行查询，若所述存储位置中未查询到数据，则发送报警信息。
  7. 根据权利要求1所述的方法，其特征在于，所述获取待存储目标数据之前，所述方法还包括：
    判断待存储数据个数是否大于预置存储阈值；
    若是，则对所述待存储数据划分批次，并按照所述批次依次确定每一批次的待存储数据为所述待存储目标数据。
  8. 一种数据的存储装置，其特征在于，包括：
    获取单元，用于获取待存储目标数据，并按照前端系统对所述待存储目标数据的更新速度，对所述待存储目标数据进行划分；
    求值单元，用于对划分后的更新速度快的所述待存储目标数据进行哈希求值得到第一类哈希值，对划分后的更新速度慢的所述待存储目标数据进行哈希求值得到第二类哈希值；其中，更新速度快的所述待存储目标数据为所述前端系统在预设时间内存储数据的数据量大于预设阈值的数据，更新速度慢的所述待存储目标数据为所述前端系统在预设时间内存储数据的数据量小于或等于预设阈值的数据；
    存储单元，用于根据预设存储数据段确定关系确定所述第一类哈希值、所述第二类哈希值对应的存储数据段，并将更新速度快的所述待存储目标数据存储至所述第一类哈希值对应的存储数据段中，将更新速度慢的所述待存储目标数据存储至所述第二类哈希值对应的存储数据段中，所述预设存储数据段确定关系为所述第一类哈希值、所述第二类哈希值与所述存储数据段之间的存储对应关系。
  9. 根据权利要求8所述的装置，其特征在于，所述装置还包括：
    确定单元，用于确定待进行存储数据的存储位置的存储能力，并根据所述存储能力对所述存储位置划分存储数据段，所述存储能力包括存储数据量的大小、查询数据时系统响应的快慢、存储位置的硬件、软件配置情况。
  10. 根据权利要求9所述的装置，其特征在于，所述存储单元包括：
    第一确定模块，用于将所述第一类哈希值、所述第二类哈希值分别代入存储数据段确定公式中，确定所述第一类哈希值与所述第二类哈希值分别对应的不同存储能力的存储位置中的存储数据段，所述存储数据段确定公式用于确定所述第一类哈希值、所述第二类哈希值是否存储至所述存储数据段中；
    第二确定模块，用于利用分段计算法分别确定更新速度快的所述待存储数据和更新速度慢的所述待存储数据是否能够存储至对应的所述存储数据段，所述存储数据段确定公式为y＝x-a，y为结果阈值，x为存储段数参数，a为第一类哈希值与第二类哈希值的代入值；其中，当y大于0时，所述第一类哈希值、所述第二类哈希值对应的数据存储至所述存储段数参数对应的存储数据段中；
    存储模块，用于当确定能够存储至对应的所述存储数据段时，将更新速度快的所述待存储目标数据存储至所述第一类哈希值对应的存储数据段中，将更新速度慢的所述待存储目标数据存储至所述第二类哈希值对应的存储数据段中。
  11. 根据权利要求8所述的装置，其特征在于，所述装置还包括：
    生成单元，用于对应记录所述待存储目标数据、所述待进行存储的数据确定出的哈希值类别以及所述数据对应的存储数据段，以生成查询列表。
  12. 根据权利要求11所述的装置，其特征在于，所述装置还包括：
    查询单元，用于当接收到查询请求时，从所述查询列表中查询与所述查询请求中携带的待查询数据对应的存储数据段，以使得从所述存储数据段中查询数据。
  13. 根据权利要求12所述的装置，其特征在于，所述装置还包括：
    发送单元，用于当从所述具体段数的存储数据段中未查询到数据，则从所述具体段数对应的存储位置中重新进行查询，若所述存储位置中未查询到数据，则发送报警信 息。
  14. 根据权利要求8所述的装置，其特征在于，所述获取单元，还用于判断待存储数据个数是否大于预置存储阈值；若是，则对所述待存储数据划分批次，并按照所述批次依次确定每一批次的待存储数据为所述待存储目标数据。
  15. 一种非易失性可读存储介质，所述非易失性可读存储介质中存储有至少一计算机可读指令，所述计算机可读指令使处理器执行数据的存储方法，包括：
    获取待存储目标数据，并按照前端系统对所述待存储目标数据的更新速度，对所述待存储目标数据进行划分；
    对划分后的更新速度快的所述待存储目标数据进行哈希求值得到第一类哈希值，对划分后的更新速度慢的所述待存储目标数据进行哈希求值得到第二类哈希值；其中，更新速度快的所述待存储目标数据为所述前端系统在预设时间内存储数据的数据量大于预设阈值的数据，更新速度慢的所述待存储目标数据为所述前端系统在预设时间内存储数据的数据量小于或等于预设阈值的数据；
    根据预设存储数据段确定关系确定所述第一类哈希值、所述第二类哈希值对应的存储数据段，并将更新速度快的所述待存储目标数据存储至所述第一类哈希值对应的存储数据段中，将更新速度慢的所述待存储目标数据存储至所述第二类哈希值对应的存储数据段中，所述预设存储数据段确定关系为所述第一类哈希值、所述第二类哈希值与所述存储数据段之间的存储对应关系。
  16. 根据权利要求15所述的非易失性可读存储介质，其特征在于，所述计算机可读指令使处理器执行所述根据预设存储数据段确定关系确定所述第一类哈希值、所述第二类哈希值对应的存储数据段之前，还包括：
    确定待进行存储数据的存储位置的存储能力，并根据所述存储能力对所述存储位置 划分存储数据段，所述存储能力包括存储数据量的大小、查询数据时系统响应的快慢、存储位置的硬件、软件配置情况。
  17. 根据权利要求16所述的非易失性可读存储介质，其特征在于，所述计算机可读指令使处理器执行所述根据预设存储数据段确定关系确定所述第一类哈希值、所述第二类哈希值对应的存储数据段，并将更新速度快的所述待存储目标数据存储至所述第一类哈希值对应的存储数据段中，将更新速度慢的所述待存储目标数据存储至所述第二类哈希值对应的存储数据段中包括：
    将所述第一类哈希值、所述第二类哈希值分别代入存储数据段确定公式中，确定所述第一类哈希值与所述第二类哈希值分别对应的不同存储能力的存储位置中的存储数据段，所述存储数据段确定公式用于确定所述第一类哈希值、所述第二类哈希值是否存储至所述存储数据段中；
    利用分段计算法分别确定更新速度快的所述待存储数据和更新速度慢的所述待存储数据是否能够存储至对应的所述存储数据段，所述存储数据段确定公式为y＝x-a，y为结果阈值，x为存储段数参数，a为第一类哈希值与第二类哈希值的代入值；其中，当y大于0时，所述第一类哈希值、所述第二类哈希值对应的数据存储至所述存储段数参数对应的存储数据段中；
    当确定能够存储至对应的所述存储数据段时，将更新速度快的所述待存储目标数据存储至所述第一类哈希值对应的存储数据段中，将更新速度慢的所述待存储目标数据存储至所述第二类哈希值对应的存储数据段中。
  18. 一种计算机设备，包括：处理器、存储器、通信接口和通信总线，所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信；
    所述存储器用于存放至少一计算机可读指令，所述计算机可读指令使所述处理器执 行数据的存储方法，包括：
    获取待存储目标数据，并按照前端系统对所述待存储目标数据的更新速度，对所述待存储目标数据进行划分；
    对划分后的更新速度快的所述待存储目标数据进行哈希求值得到第一类哈希值，对划分后的更新速度慢的所述待存储目标数据进行哈希求值得到第二类哈希值；其中，更新速度快的所述待存储目标数据为所述前端系统在预设时间内存储数据的数据量大于预设阈值的数据，更新速度慢的所述待存储目标数据为所述前端系统在预设时间内存储数据的数据量小于或等于预设阈值的数据；
    根据预设存储数据段确定关系确定所述第一类哈希值、所述第二类哈希值对应的存储数据段，并将更新速度快的所述待存储目标数据存储至所述第一类哈希值对应的存储数据段中，将更新速度慢的所述待存储目标数据存储至所述第二类哈希值对应的存储数据段中，所述预设存储数据段确定关系为所述第一类哈希值、所述第二类哈希值与所述存储数据段之间的存储对应关系。
  19. 根据权利要求18所述的计算机设备，其特征在于，所述计算机可读指令使所述处理器执行所述根据预设存储数据段确定关系确定所述第一类哈希值、所述第二类哈希值对应的存储数据段之前，还包括：
    确定待进行存储数据的存储位置的存储能力，并根据所述存储能力对所述存储位置划分存储数据段，所述存储能力包括存储数据量的大小、查询数据时系统响应的快慢、存储位置的硬件、软件配置情况。
  20. 根据权利要求19所述的计算机设备，其特征在于，所述计算机可读指令使所述处理器执行所述根据预设存储数据段确定关系确定所述第一类哈希值、所述第二类哈希值对应的存储数据段，并将更新速度快的所述待存储目标数据存储至所述第一类哈希 值对应的存储数据段中，将更新速度慢的所述待存储目标数据存储至所述第二类哈希值对应的存储数据段中包括：
    将所述第一类哈希值、所述第二类哈希值分别代入存储数据段确定公式中，确定所述第一类哈希值与所述第二类哈希值分别对应的不同存储能力的存储位置中的存储数据段，所述存储数据段确定公式用于确定所述第一类哈希值、所述第二类哈希值是否存储至所述存储数据段中；
    利用分段计算法分别确定更新速度快的所述待存储数据和更新速度慢的所述待存储数据是否能够存储至对应的所述存储数据段，所述存储数据段确定公式为y＝x-a，y为结果阈值，x为存储段数参数，a为第一类哈希值与第二类哈希值的代入值；其中，当y大于0时，所述第一类哈希值、所述第二类哈希值对应的数据存储至所述存储段数参数对应的存储数据段中；
    当确定能够存储至对应的所述存储数据段时，将更新速度快的所述待存储目标数据存储至所述第一类哈希值对应的存储数据段中，将更新速度慢的所述待存储目标数据存储至所述第二类哈希值对应的存储数据段中。
PCT/CN2018/111121 2018-08-01 2018-10-21 数据的存储方法及装置、存储介质、计算机设备 WO2020024446A1 (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US17/264,321 US11360684B2 (en) 2018-08-01 2018-10-21 Data storage method and apparatus, storage medium and computer device

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201810865641.1A CN109213774B (zh) 2018-08-01 2018-08-01 数据的存储方法及装置、存储介质、终端
CN201810865641.1 2018-08-01

Publications (1)

Publication Number Publication Date
WO2020024446A1 true WO2020024446A1 (zh) 2020-02-06

Family

ID=64987872

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2018/111121 WO2020024446A1 (zh) 2018-08-01 2018-10-21 数据的存储方法及装置、存储介质、计算机设备

Country Status (3)

Country Link
US (1) US11360684B2 (zh)
CN (1) CN109213774B (zh)
WO (1) WO2020024446A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109213774B (zh) * 2018-08-01 2024-03-08 平安科技（深圳）有限公司 数据的存储方法及装置、存储介质、终端
US20210034433A1 (en) * 2019-07-31 2021-02-04 Teradata Us, Inc. Automatic query routing
CN113836208A (zh) * 2021-08-16 2021-12-24 深圳希施玛数据科技有限公司 一种数据处理方法、装置及终端设备
CN114579954B (zh) * 2021-08-26 2023-03-24 华为技术有限公司 安全启动校验的方法及电子设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120016845A1 (en) * 2010-07-16 2012-01-19 Twinstrata, Inc System and method for data deduplication for disk storage subsystems
CN102930004A (zh) * 2012-10-29 2013-02-13 华为技术有限公司 哈希值存储方法、装置及芯片
US20140006362A1 (en) * 2012-06-28 2014-01-02 International Business Machines Corporation Low-Overhead Enhancement of Reliability of Journaled File System Using Solid State Storage and De-Duplication

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3587062A (en) * 1969-09-11 1971-06-22 Bunker Ramo Read-write control system for a recirculating storage means
US4064556A (en) * 1975-06-23 1977-12-20 Sperry Rand Corporation Packed loop memory with data manipulation capabilities
DE2810430C3 (de) * 1978-03-10 1981-04-30 2300 Kiel Dr.-Ing. Rudolf Hell Gmbh Verfahren und Schaltung zur selektiven Korrektur derFarben eines zu reproduzierenden Bildes
US4999815A (en) * 1990-02-13 1991-03-12 International Business Machines Corporation Low power addressing systems
CN102184229B (zh) * 2011-05-11 2013-05-01 中国科学院软件研究所 一种海量rfid标签信息的内存数据存储方法
US9846711B2 (en) * 2012-12-28 2017-12-19 Facebook, Inc. LSM cache
CN104461935B (zh) * 2014-11-27 2018-03-13 华为技术有限公司 一种进行数据存储的方法、装置及系统
US11462284B2 (en) * 2015-08-31 2022-10-04 Keysight Technologies, Inc. Method and system for analyzing a refresh rate of a volatile memory device
CN106682185B (zh) * 2016-12-29 2019-05-24 北京奇虎科技有限公司 防止Mongos集群中的均衡操作失效的方法和装置
CN109213774B (zh) * 2018-08-01 2024-03-08 平安科技（深圳）有限公司 数据的存储方法及装置、存储介质、终端
JP7480113B2 (ja) * 2019-02-22 2024-05-09 株式会社半導体エネルギー研究所 半導体装置および当該半導体装置を有する電気機器
US20220051744A1 (en) * 2020-08-17 2022-02-17 Mediatek Inc. Memory controller with adaptive refresh rate controlled by error bit information

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120016845A1 (en) * 2010-07-16 2012-01-19 Twinstrata, Inc System and method for data deduplication for disk storage subsystems
US20140006362A1 (en) * 2012-06-28 2014-01-02 International Business Machines Corporation Low-Overhead Enhancement of Reliability of Journaled File System Using Solid State Storage and De-Duplication
CN102930004A (zh) * 2012-10-29 2013-02-13 华为技术有限公司 哈希值存储方法、装置及芯片

Also Published As

Publication number Publication date
US11360684B2 (en) 2022-06-14
CN109213774B (zh) 2024-03-08
US20210294512A1 (en) 2021-09-23
CN109213774A (zh) 2019-01-15

Similar Documents

Publication Publication Date Title
WO2020024446A1 (zh) 数据的存储方法及装置、存储介质、计算机设备
WO2019200714A1 (zh) 服务器连接方法、计算机可读存储介质、终端设备及装置
WO2018099107A1 (zh) 一种哈希表管理的方法和装置、计算机存储介质
WO2017114205A1 (zh) 短链接处理方法、装置及服务器
US9104676B2 (en) Hash algorithm-based data storage method and system
US10474185B2 (en) Timestamp alignment across a plurality of computing devices
WO2017128701A1 (zh) 存储数据的方法和装置
CN111159219A (zh) 一种数据管理方法、装置、服务器及存储介质
CN111046106A (zh) 缓存数据同步方法、装置、设备及介质
CN109189808B (zh) 数据查询方法及相关设备
CN111159131A (zh) 性能优化方法、装置、设备及计算机可读存储介质
TWI420333B (zh) 分散式的重複數據刪除系統及其處理方法
JP6189266B2 (ja) データ処理装置、データ処理方法及びデータ処理プログラム
CN114205424B (zh) 账单文件解压方法、装置、计算机设备和存储介质
CN112241336A (zh) 用于备份数据的方法、设备和计算机程序产品
CN116303343A (zh) 数据分片方法、装置、电子设备及存储介质
CN115292737A (zh) 一种多关键词模糊搜索加密方法、系统及电子设备
CN111159144B (zh) 一种缓存系统和方法
CN114020745A (zh) 一种索引构建方法、装置、电子设备和存储介质
CN106990938B (zh) 随机数获取方法、装置及电子设备
CN109525503B (zh) 一种压缩方法及装置、计算机可读存储介质
CN112817980A (zh) 一种数据索引处理方法、装置、设备及存储介质
CN112187743A (zh) 一种基于ip地址最长前缀的网络策略匹配方法及系统
CN111131197B (zh) 一种过滤策略管理系统及其方法
CN111506658B (zh) 数据处理方法、装置、第一设备及存储介质

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18928758

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 18928758

Country of ref document: EP

Kind code of ref document: A1