CN113535716A - 一种高效的数据存储及查询管理方法 - Google Patents
一种高效的数据存储及查询管理方法 Download PDFInfo
- Publication number
- CN113535716A CN113535716A CN202110698827.4A CN202110698827A CN113535716A CN 113535716 A CN113535716 A CN 113535716A CN 202110698827 A CN202110698827 A CN 202110698827A CN 113535716 A CN113535716 A CN 113535716A
- Authority
- CN
- China
- Prior art keywords
- data
- query
- unit
- file
- local
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000013500 data storage Methods 0.000 title claims abstract description 38
- 238000007726 management method Methods 0.000 title claims abstract description 11
- 238000000034 method Methods 0.000 claims abstract description 42
- 238000013523 data management Methods 0.000 claims abstract description 24
- 238000012544 monitoring process Methods 0.000 description 9
- 238000011084 recovery Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 238000005192 partition Methods 0.000 description 2
- 101100517648 Saccharomyces cerevisiae (strain ATCC 204508 / S288c) NUM1 gene Proteins 0.000 description 1
- 101100129590 Schizosaccharomyces pombe (strain 972 / ATCC 24843) mcp5 gene Proteins 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1448—Management of the data involved in backup or backup restore
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
- G06F16/24552—Database cache management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Computational Linguistics (AREA)
- Software Systems (AREA)
- Quality & Reliability (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种高效的数据存储及查询管理方法，包括数据存储过程和数据查询过程，其中，数据存储过程包括：内存数据存储单元将点位信息存储到内存单向链表簇中的同时索引缓存数据单元将点位信息存储到本地缓存文件中；过时数据清除单元定时清除过时的本地存档文件，并删除数据管理文件相关信息；数据查询过程包括：数据查询单元接收数据请求单元发送的数据请求生成查询请求，按照内存数据>缓存数据>存档数据的优先级的顺序进行数据查询，将查询到的查询数据返回至数据请求单元。本发明将数据以点位的形式按照时间序列同时进行内存、本地缓存文件和本地存档文件存储，提高了查询速度，保证宕机前数据不丢失，提高了宕机重启后的查询速度。
Description
技术领域
本发明涉及数据存储及查询技术领域，尤其涉及一种高效的数据存储及查询管理方法。
背景技术
传统监控系统中，往往随着点位历史数据存储量增多，点位数据查询速度变慢甚至查询失败，严重影响用户查询体验。另外，以往的监控系统中当存储点位历史数据量过大时，需要技术人员远程或者出差进行清除过时数据；在手动清除过时数据过程中，对正在运行的监控系统存在干扰，甚至直接影响到监控系统数据存储和查询过程。同时，在传统监控中，当平台或系统宕机时，宕机前一段时间数据经常丢失和重启后查询速度变慢。
在某些监控系统中常常采用关系性数据库对点位历史数据管理，当关系性数据库在表数据量比较大时，关系性数据库操作(读写)性能也会大大降低。在项目运维中，经常遇到系统运行一段时间后，数据查询速度明显下降，很多情况就是由于存储数据量大未能及时清理导致的。
发明内容
本发明主要解决现有的技术在监控系统中点位历史数据查询速度慢、需要定时清除过时数据、宕机恢复时数据丢失或查询速度慢的问题；提供一种高效的数据存储及查询管理方法，将从监控系统中采集的源数据以点位的形式按照时间序列进行内存、本地缓存文件和本地存档文件存储，以便达到快速查询点位历史数据、定时清除过时数据、保证宕机前数据不丢失和宕机恢复后对点位历史数据较快查询。
本发明的上述技术问题主要是通过下述技术方案得以解决的：本发明包括数据存储过程和数据查询过程，其中，
所述数据存储过程包括以下步骤：
A1、数据获取单元将采集到源数据分别发送到内存数据存储单元和索引缓存数据单元，同步执行步骤A2和步骤A3；
A2、内存数据存储单元将点位信息存储到内存单向链表簇中；
A3、索引缓存数据单元将点位信息存储到本地缓存文件中；
A4、过时数据清除单元定时清除过时的本地存档文件，并删除数据管理文件相关信息；
所述数据查询过程包括以下步骤：
B1、数据请求单元通过网络协议向数据查询单元发送数据请求；
B2、数据查询单元接收数据请求生成查询请求，按照内存数据>缓存数据>存档数据的优先级的顺序进行数据查询，将查询到的查询数据返回至数据请求单元。
将从监控系统中采集的源数据以点位的形式按照时间序列同时进行内存、本地缓存文件和本地存档文件存储，以便达到快速查询点位历史数据、定时清除过时数据、保证宕机前数据不丢失和宕机恢复后对点位历史数据较快查询。
作为优选，所述的步骤A2具体包括：
A21、从头遍历内存中对应点位单向链表结点；
A22、计算当前系统时间time1与结点时间time0之差并记作ΔT0，若ΔT0>T1，则删除点位结点，并返回步骤A21，若ΔT0≤T1，则将time0记作Δtime0，终止遍历操作，执行步骤A23；
A23、将新点位结点追加到单向链表尾部，并将尾部结点指针记作ΔP0；
A24、将数据头中对应点位数据结点时间改为Δtime0，最后一个结点指针记作ΔP0。
作为优选，所述的步骤A3中，索引缓存数据单元接收到点位信息后以多线程方式将点位信息分别同时记录到多份备份缓存文件中。
作为优选，所述的步骤A3具体包括：
A31、索引缓存数据单元通过检测数据管理文件查询当前本地缓存文件创建时间time2；
A32、计算当前本地缓存文件创建时间time2与当前系统时间time1之差并记作ΔT1，若ΔT1>T2，则将当前缓存文件进行存档，删除对应备份缓存文件，修改数据管理文件中相关信息，重新创建本地新缓存文件并将创建缓存文件信息记录到数据管理文件，执行步骤A33，反之，若ΔT1≤T2，则直接执行步骤A33；
A33、将点位记录到本地缓存文件。
作为优选，所述的多份备份缓存文件之间相互校验。
缓存文件具有多个备份，备份之间相互校验，减少数据丢失或错误的概率。
作为优选，所述的步骤A4具体包括：
过时数据清除单元定时检测本地存档文件是否过时，计算存档时间time3与当前系统时间time1之差并记作ΔT2，若ΔT2>T3，则清除过时本地存档文件，并删除数据管理文件相关信息。
作为优选，所述的步骤B2具体包括：
B21、数据查询单元将查询请求传递至内存数据存储单元，内存数据存储单元依据查询请求时间和点位信息检测内存中点位数据是否满足查询请求，若满足，则从内存单向链表簇中获取查询数据，并将查询数据通过数据查询单元返回至数据请求单元，结束数据查询过程，反之，则执行步骤B22；
B22、内存数据存储单元将查询请求转发至索引缓存数据单元，索引缓存数据单元依据查询请求中的时间和点位信息检索数据管理文件，若满足查询请求的点位数据全部在本地缓存文件中，则从本地缓存文件中获取查询数据，并将查询数据依次通过索引缓存数据单元和数据查询单元返回至数据请求单元，结束数据查询过程，反之，则执行步骤B23；
B23、若步骤B22中满足查询请求的点位数据部分或全部在本地存档文件中，则向索引存档数据单元请求将对应的本地存档文件进行逆存档生成本地缓存文件，并修改数据管理文件相关信息，并将本地缓存文件生成完毕的消息发送至索引缓存数据单元；
B24、从步骤B23中生成的本地缓存文件中获取查询数据，并将查询数据依次通过索引缓存数据单元和数据查询单元返回至数据请求单元，结束数据查询过程。
作为优选，所述的步骤B23中本地存档文件逆存档生成的本地缓存文件的生命周期等于普通本地缓存文件时长。
本发明的有益效果是：将从监控系统中采集的源数据以点位的形式按照时间序列同时进行内存、本地缓存文件和本地存档文件存储，以便达到快速查询点位历史数据、定时清除过时数据、保证宕机前数据不丢失和宕机恢复后对点位历史数据较快查询。
附图说明
图1是本发明数据存储过程的一种流程图。
图2是本发明单向链表簇的一种结构示意图。
图3是本发明单向链表簇中的数据块的一种结构示意图。
图4是本发明缓存文件中的点位存储格式的一种结构示意图。
图5是本法明数据查询过程的一种流程图。
具体实施方式
下面通过实施例，并结合附图，对本发明的技术方案作进一步具体的说明。
实施例：本实施例的一种高效的数据存储及查询管理方法，包括数据存储过程和数据查询过程，其中，
如图1所示，数据存储过程包括以下步骤：
A1、数据获取单元将采集到源数据(监控系统数据)分别发送到内存数据存储单元和索引缓存数据单元，同步执行步骤A2和步骤A3。
A2、内存数据存储单元将点位信息存储到内存单向链表簇中，具体包括：
A21、从头遍历内存中对应点位单向链表结点；
A22、计算当前系统时间time1与结点时间time0之差并记作ΔT0，若ΔT0>T1，则删除点位结点，并返回步骤A21，若ΔT0≤T1，则将time0记作Δtime0，终止遍历操作，执行步骤A23；
A23、将新点位结点追加到单向链表尾部，并将尾部结点指针记作ΔP0；
A24、将数据头中对应点位数据结点时间改为Δtime0，最后一个结点指针记作ΔP0。
单向链表簇如图2所示，包括数据头部信息和数据信息，头部信息主要存储单向链表簇中已有点位名、第一个数据结点时间和最后一个结点指针信息，数据信息将点位数据以单向链表的形式进行存储且单向链表内部点位数据按照时间顺序存储。单向链表均有一个头结点，头结点中存储内容：链表开始标识和下一结点地址，如果下一结点不存在，下一结点地址为NULL。除头结点外的其他结点均包含一个数据块，数据块内容详见图3，包含time(时间)和value(值)，time是value产生时时间。
A3、索引缓存数据单元将点位信息存储到本地缓存文件中，索引缓存数据单元接收到点位信息后以多线程方式将点位信息分别同时记录到多份备份缓存文件中，具体包括：
A31、索引缓存数据单元通过检测数据管理文件查询当前本地缓存文件创建时间time2；
A32、计算当前本地缓存文件创建时间time2与当前系统时间time1之差并记作ΔT1，若ΔT1>T2，则将当前缓存文件进行存档，删除对应备份缓存文件，修改数据管理文件中相关信息(存档时间：time1，备份数：0，是否已存档：1)，重新创建本地新缓存文件并将创建缓存文件信息(缓存文件名、缓存文件创建时间：time2、备份数：NUM1、是否已存档：0)记录到数据管理文件，执行步骤A33，反之，若ΔT1≤T2，则直接执行步骤A33；
A33、将点位记录到本地缓存文件。
缓存文件具有多个备份，备份值的取值范围为1～5，备份之间相互校验，减少数据丢失或错误的概率。
缓存文件中的点位存储格式如图4所示，包含数据头部信息和数据信息，头部信息主要存储单向链表簇中已有点位名和第一个数据的时间，数据信息将点位数据以数据分区信息进行存储，一个点位所有历史数据存储在同一分区中。一个数据结构包括时间和值，数据点直接按照时间顺序收尾相接的形式依次存储。
A4、过时数据清除单元定时清除过时的本地存档文件，并删除数据管理文件相关信息，具体包括：过时数据清除单元定时检测本地存档文件是否过时，计算存档时间time3与当前系统时间time1之差并记作ΔT2，若ΔT2>T3，则清除过时本地存档文件，并删除数据管理文件相关信息。
如图5所示，数据查询过程包括以下步骤：
B1、数据请求单元通过网络协议向数据查询单元发送数据请求。
B2、数据查询单元接收数据请求生成查询请求，按照内存数据>缓存数据>存档数据的优先级的顺序进行数据查询，将查询到的查询数据返回至数据请求单元，具体包括：
B21、数据查询单元将查询请求传递至内存数据存储单元，内存数据存储单元依据查询请求时间和点位信息检测内存中点位数据是否满足查询请求，若满足，则从内存单向链表簇中获取查询数据，并将查询数据通过数据查询单元返回至数据请求单元，结束数据查询过程，反之，则执行步骤B22；
B22、内存数据存储单元将查询请求转发至索引缓存数据单元，索引缓存数据单元依据查询请求中的时间和点位信息检索数据管理文件，若满足查询请求的点位数据全部在本地缓存文件中，则从本地缓存文件中获取查询数据，并将查询数据依次通过索引缓存数据单元和数据查询单元返回至数据请求单元，结束数据查询过程，反之，则执行步骤B23；
B23、若步骤B22中满足查询请求的点位数据部分或全部在本地存档文件中，则向索引存档数据单元请求将对应的本地存档文件进行逆存档生成本地缓存文件，并修改数据管理文件相关信息(存档文件恢复缓存文件时间：当前时间，备份数：1，是否已存档：1)，并将本地缓存文件生成完毕的消息发送至索引缓存数据单元；
B24、从步骤B23中生成的本地缓存文件中获取查询数据，并将查询数据依次通过索引缓存数据单元和数据查询单元返回至数据请求单元，结束数据查询过程。
步骤B23中本地存档文件逆存档生成的本地缓存文件的生命周期等于普通本地缓存文件时长。
在上述2个过程中，数据管理文件包含以下相关信息，如表1所示，
表1数据管理文件相关信息
将从监控系统中采集的源数据以点位的形式按照时间序列同时进行内存、本地缓存文件和本地存档文件存储，以便达到快速查询点位历史数据、定时清除过时数据、保证宕机前数据不丢失和宕机恢复后对点位历史数据较快查询。
Claims (8)
1.一种高效的数据存储及查询管理方法，其特征在于，包括数据存储过程和数据查询过程，其中，
所述数据存储过程包括以下步骤：
A1、数据获取单元将采集到源数据分别发送到内存数据存储单元和索引缓存数据单元，同步执行步骤A2和步骤A3；
A2、内存数据存储单元将点位信息存储到内存单向链表簇中；
A3、索引缓存数据单元将点位信息存储到本地缓存文件中；
A4、过时数据清除单元定时清除过时的本地存档文件，并删除数据管理文件相关信息；
所述数据查询过程包括以下步骤：
B1、数据请求单元通过网络协议向数据查询单元发送数据请求；
B2、数据查询单元接收数据请求生成查询请求，按照内存数据>缓存数据>存档数据的优先级的顺序进行数据查询，将查询到的查询数据返回至数据请求单元。
2.根据权利要求1所述的一种高效的数据存储及查询管理方法，其特征在于，所述步骤A2具体包括：
A21、从头遍历内存中对应点位单向链表结点；
A22、计算当前系统时间time1与结点时间time0之差并记作∆T0，若∆T0>T1，则删除点位结点，并返回步骤A21，若∆T0≤T1，则将time0记作∆time0，终止遍历操作，执行步骤A23；
A23、将新点位结点追加到单向链表尾部，并将尾部结点指针记作∆P0；
A24、将数据头中对应点位数据结点时间改为∆time0，最后一个结点指针记作∆P0。
3.根据权利要求1所述的一种高效的数据存储及查询管理方法，其特征在于，所述步骤A3中，索引缓存数据单元接收到点位信息后以多线程方式将点位信息分别同时记录到多份备份缓存文件中。
4.根据权利要求3所述的一种高效的数据存储及查询管理方法，其特征在于，所述步骤A3具体包括：
A31、索引缓存数据单元通过检测数据管理文件查询当前本地缓存文件创建时间time2；
A32、计算当前本地缓存文件创建时间time2与当前系统时间time1之差并记作∆T1，若∆T1>T2，则将当前缓存文件进行存档，删除对应备份缓存文件，修改数据管理文件中相关信息，重新创建本地新缓存文件并将创建缓存文件信息记录到数据管理文件，执行步骤A33，反之，若∆T1≤T2，则直接执行步骤A33；
A33、将点位记录到本地缓存文件。
5.根据权利要求3所述的一种高效的数据存储及查询管理方法，其特征在于，所述多份备份缓存文件之间相互校验。
6.根据权利要求1所述的一种高效的数据存储及查询管理方法，其特征在于，所述步骤A4具体包括：
过时数据清除单元定时检测本地存档文件是否过时，计算存档时间time3与当前系统时间time1之差并记作∆T2，若∆T2>T3，则清除过时本地存档文件，并删除数据管理文件相关信息。
7.根据权利要求1所述的一种高效的数据存储及查询管理方法，其特征在于，所述步骤B2具体包括：
B21、数据查询单元将查询请求传递至内存数据存储单元，内存数据存储单元依据查询请求时间和点位信息检测内存中点位数据是否满足查询请求，若满足，则从内存单向链表簇中获取查询数据，并将查询数据通过数据查询单元返回至数据请求单元，结束数据查询过程，反之，则执行步骤B22；
B22、内存数据存储单元将查询请求转发至索引缓存数据单元，索引缓存数据单元依据查询请求中的时间和点位信息检索数据管理文件，若满足查询请求的点位数据全部在本地缓存文件中，则从本地缓存文件中获取查询数据，并将查询数据依次通过索引缓存数据单元和数据查询单元返回至数据请求单元，结束数据查询过程，反之，则执行步骤B23；
B23、若步骤B22中满足查询请求的点位数据部分或全部在本地存档文件中，则向索引存档数据单元请求将对应的本地存档文件进行逆存档生成本地缓存文件，并修改数据管理文件相关信息，并将本地缓存文件生成完毕的消息发送至索引缓存数据单元；
B24、从步骤B23中生成的本地缓存文件中获取查询数据，并将查询数据依次通过索引缓存数据单元和数据查询单元返回至数据请求单元，结束数据查询过程。
8.根据权利要求5所述的一种高效的数据存储及查询管理方法，其特征在于，所述步骤B23中本地存档文件逆存档生成的本地缓存文件的生命周期等于普通本地缓存文件时长。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110698827.4A CN113535716B (zh) | 2021-06-23 | 2021-06-23 | 一种高效的数据存储及查询管理方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110698827.4A CN113535716B (zh) | 2021-06-23 | 2021-06-23 | 一种高效的数据存储及查询管理方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113535716A true CN113535716A (zh) | 2021-10-22 |
| CN113535716B CN113535716B (zh) | 2024-05-24 |
Family
ID=78125695
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110698827.4A Active CN113535716B (zh) | 2021-06-23 | 2021-06-23 | 一种高效的数据存储及查询管理方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113535716B (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115086001A (zh) * | 2022-06-10 | 2022-09-20 | 杭州安恒信息技术股份有限公司 | 采样数据缓存方法、装置及存储介质 |
Citations (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4455602A (en) * | 1981-05-22 | 1984-06-19 | Data General Corporation | Digital data processing system having an I/O means using unique address providing and access priority control techniques |
| US20020165992A1 (en) * | 2001-05-03 | 2002-11-07 | International Business Machines Corporation | Method, system, and product for improving performance of network connections |
| US20100121844A1 (en) * | 2008-11-07 | 2010-05-13 | Yahoo! Inc. | Image relevance by identifying experts |
| CN101964947A (zh) * | 2010-09-08 | 2011-02-02 | 北京航空航天大学 | 综合资讯服务广播系统数据调度平台 |
| US20140280162A1 (en) * | 2013-03-15 | 2014-09-18 | Datatempest, Llc | Databases and methods of storing, retrieving, and processing data |
| CN105574054A (zh) * | 2014-11-06 | 2016-05-11 | 阿里巴巴集团控股有限公司 | 一种分布式缓存范围查询方法、装置及系统 |
| CN106095850A (zh) * | 2016-06-02 | 2016-11-09 | 中国联合网络通信集团有限公司 | 一种数据处理方法及设备 |
| CN106569733A (zh) * | 2015-10-12 | 2017-04-19 | 北京国双科技有限公司 | 缓存数据的处理方法和装置 |
| CN107070976A (zh) * | 2017-01-13 | 2017-08-18 | 广西电网有限责任公司电力科学研究院 | 一种数据传输方法 |
| US20180246820A1 (en) * | 2017-02-24 | 2018-08-30 | Ati Technologies Ulc | Multiple linked list data structure |
| CN109542842A (zh) * | 2018-11-02 | 2019-03-29 | 安徽创世科技股份有限公司 | 一种兼容fat32文件系统的视频顺序存储和查询方法及其装置 |
| CN109684573A (zh) * | 2017-10-18 | 2019-04-26 | 北京京东尚科信息技术有限公司 | 目标图片显示方法及装置、存储介质、电子设备 |
| CN109933585A (zh) * | 2019-02-22 | 2019-06-25 | 京东数字科技控股有限公司 | 数据查询方法和数据查询系统 |
| US20190205314A1 (en) * | 2016-07-08 | 2019-07-04 | Suzhou Superblock Chain Information Science & Technology Co., Ltd. | Method for parallel maintenance of data consistency |
| CN111259014A (zh) * | 2020-02-04 | 2020-06-09 | 苏州浪潮智能科技有限公司 | 一种fpga的单向链表数据存储方法及系统 |
-
2021
- 2021-06-23 CN CN202110698827.4A patent/CN113535716B/zh active Active
Patent Citations (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4455602A (en) * | 1981-05-22 | 1984-06-19 | Data General Corporation | Digital data processing system having an I/O means using unique address providing and access priority control techniques |
| US20020165992A1 (en) * | 2001-05-03 | 2002-11-07 | International Business Machines Corporation | Method, system, and product for improving performance of network connections |
| US20100121844A1 (en) * | 2008-11-07 | 2010-05-13 | Yahoo! Inc. | Image relevance by identifying experts |
| CN101964947A (zh) * | 2010-09-08 | 2011-02-02 | 北京航空航天大学 | 综合资讯服务广播系统数据调度平台 |
| US20140280162A1 (en) * | 2013-03-15 | 2014-09-18 | Datatempest, Llc | Databases and methods of storing, retrieving, and processing data |
| CN105574054A (zh) * | 2014-11-06 | 2016-05-11 | 阿里巴巴集团控股有限公司 | 一种分布式缓存范围查询方法、装置及系统 |
| CN106569733A (zh) * | 2015-10-12 | 2017-04-19 | 北京国双科技有限公司 | 缓存数据的处理方法和装置 |
| CN106095850A (zh) * | 2016-06-02 | 2016-11-09 | 中国联合网络通信集团有限公司 | 一种数据处理方法及设备 |
| US20190205314A1 (en) * | 2016-07-08 | 2019-07-04 | Suzhou Superblock Chain Information Science & Technology Co., Ltd. | Method for parallel maintenance of data consistency |
| CN107070976A (zh) * | 2017-01-13 | 2017-08-18 | 广西电网有限责任公司电力科学研究院 | 一种数据传输方法 |
| US20180246820A1 (en) * | 2017-02-24 | 2018-08-30 | Ati Technologies Ulc | Multiple linked list data structure |
| CN109684573A (zh) * | 2017-10-18 | 2019-04-26 | 北京京东尚科信息技术有限公司 | 目标图片显示方法及装置、存储介质、电子设备 |
| CN109542842A (zh) * | 2018-11-02 | 2019-03-29 | 安徽创世科技股份有限公司 | 一种兼容fat32文件系统的视频顺序存储和查询方法及其装置 |
| CN109933585A (zh) * | 2019-02-22 | 2019-06-25 | 京东数字科技控股有限公司 | 数据查询方法和数据查询系统 |
| CN111259014A (zh) * | 2020-02-04 | 2020-06-09 | 苏州浪潮智能科技有限公司 | 一种fpga的单向链表数据存储方法及系统 |
Non-Patent Citations (2)
| Title |
|---|
| 刘勇;: "一种基于Map/Reduce的并行化敌我识别信号关联方法", 电讯技术, no. 11 * |
| 姚念民, 舒继武, 郑纬民: "SAN中的分布式锁机制", 计算机研究与发展, no. 02 * |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115086001A (zh) * | 2022-06-10 | 2022-09-20 | 杭州安恒信息技术股份有限公司 | 采样数据缓存方法、装置及存储介质 |
| CN115086001B (zh) * | 2022-06-10 | 2024-04-09 | 杭州安恒信息技术股份有限公司 | 采样数据缓存方法、装置及存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113535716B (zh) | 2024-05-24 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109918349B (zh) | 日志处理方法、装置、存储介质和电子装置 | |
| CN101739313B (zh) | 一种连续数据保护和恢复方法 | |
| US9672244B2 (en) | Efficient undo-processing during data redistribution | |
| JP2007179551A (ja) | ストレージベースのジャーナリングを用いてバックアップ及びリカバリを行う方法と装置 | |
| CN110647514B (zh) | 一种元数据更新方法、装置及元数据服务器 | |
| CN112506710B (zh) | 分布式文件系统数据修复方法、装置、设备及存储介质 | |
| CN109063192B (zh) | 一种高性能海量文件存储系统工作方法 | |
| CN107678892B (zh) | 基于跳跃恢复链的连续数据保护方法 | |
| CN108153804B (zh) | 一种对称分布式文件系统的元数据日志更新方法 | |
| CN113535716A (zh) | 一种高效的数据存储及查询管理方法 | |
| CN111722962A (zh) | 一种针对cdp数据的存储系统及其方法 | |
| CN106844290B (zh) | 一种基于曲线拟合的时序数据处理方法 | |
| CN102841840B (zh) | 基于消息重排序和消息数目检验的消息日志恢复方法 | |
| CN112433882B (zh) | 一种记录和恢复微服务部署信息的方法 | |
| CN107122442B (zh) | 一种分布式数据库及其访问方法 | |
| JP2001344139A (ja) | データベース管理装置 | |
| CN112991570B (zh) | 一种支持乱序上传的考勤工时及夜班算法 | |
| CN111143155B (zh) | 一种应用于通信行业实现告警同步和清除机制的方法 | |
| CN113297322A (zh) | 数据同步方法、系统以及装置 | |
| CN112416885A (zh) | 一种文件的实时同步方法 | |
| CN114490691B (zh) | 一种分布式系统数据一致性方法 | |
| CN104735152A (zh) | 一种基于网络的邮件读取方法 | |
| CN104821907A (zh) | 一种电子邮件处理方法 | |
| CN110209701A (zh) | 一种基于内存多级缓存的数据快速分页查询访问的方法 | |
| CN117640642B (zh) | 一种api网关负载均衡方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB02 | Change of applicant information | ||
| CB02 | Change of applicant information |
Address after: 310051 floor 23-25, building 2, No. 352, BINKANG Road, Binjiang District, Hangzhou, Zhejiang Province Applicant after: Zhejiang zhongkong Information Industry Co.,Ltd. Address before: 310051 floor 23-25, building 2, No. 352, BINKANG Road, Binjiang District, Hangzhou, Zhejiang Province Applicant before: ZHEJIANG SUPCON INFORMATION TECHNOLOGY Co.,Ltd. |
|
| CB03 | Change of inventor or designer information | ||
| CB03 | Change of inventor or designer information |
Inventor after: Yang Zhenwei Inventor after: Wang Chenmiao Inventor after: Jiang Xueming Inventor after: Lin Yangping Inventor after: Gu Yang Inventor before: Yang Zhenwei Inventor before: Wang Chenmiao Inventor before: Jiang Xueming Inventor before: Lin Yangping Inventor before: Gu Yang Inventor before: Xia Li |
|
| GR01 | Patent grant |