CN112631833A - 一种数据归档查询方法、系统、存储介质及设备 - Google Patents

一种数据归档查询方法、系统、存储介质及设备 Download PDF

Info

Publication number
CN112631833A
CN112631833A CN202011562649.4A CN202011562649A CN112631833A CN 112631833 A CN112631833 A CN 112631833A CN 202011562649 A CN202011562649 A CN 202011562649A CN 112631833 A CN112631833 A CN 112631833A
Authority
CN
China
Prior art keywords
data
archived
archiving
query
index files
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011562649.4A
Other languages
English (en)
Inventor
丁麒森
田琳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Inspur Intelligent Technology Co Ltd
Original Assignee
Suzhou Inspur Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Inspur Intelligent Technology Co Ltd filed Critical Suzhou Inspur Intelligent Technology Co Ltd
Priority to CN202011562649.4A priority Critical patent/CN112631833A/zh
Publication of CN112631833A publication Critical patent/CN112631833A/zh
Priority to PCT/CN2021/121889 priority patent/WO2022134726A1/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/14—Details of searching files based on file metadata
    • G06F16/148—File search processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1446—Point-in-time backing up or restoration of persistent data
    • G06F11/1448—Management of the data involved in backup or backup restore
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/13—File access structures, e.g. distributed indices

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Quality & Reliability (AREA)
  • Library & Information Science (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供了一种数据归档查询方法、系统、存储介质及设备，方法包括以下步骤：将待归档数据按照预设的归档规则分为不同的n份并进行m次分发，其中，每次将n份待归档数据分别分发到对应的n个存储节点，并使得每个存储节点中有m份不同的待归档数据块，且m大于1；将所有的待归档数据块分别在各自的存储节点中进行归档并生成各自的索引文件；响应于接收到查询命令，将查询命令下发到各存储节点；基于查询命令在各存储节点中分别加载各自的索引文件并对其中的主索引文件进行查询，其中，主索引文件对应于各存储节点中首次分发到的待归档数据块；基于主索引文件得出并返回查询结果。本发明提高了查询长期不使用数据的效率。

Description

一种数据归档查询方法、系统、存储介质及设备
技术领域
本发明涉及数据库技术领域，尤其涉及一种数据归档查询方法、系统、存储介质及设备。
背景技术
目前的技术中，查询长期不使用的数据为从数据库中查询出指定过期数据，以文本形式持久化到磁盘中。但是文本形式的数据，要进行查询的话，就只能全部读入内存，进行遍历查询，效率很低。现有技术中还可以使用数据库的日志文件进行转储，但是不同的数据库，其日志形式不一样，无法统一解析，不易留存，且数据库日志无法直接查询，其数据需要导入库中，再进行查询，数据的导入，可能会带来主键冲突或锁表等异常情况，破坏数据库运行。
发明内容
有鉴于此，本发明的目的在于提出一种数据归档查询方法，用以解决现有技术中查询长期不使用的数据效率低的问题。
基于上述目的，本发明提供了一种数据归档查询方法，包括如下步骤：
将待归档数据按照预设的归档规则分为不同的n份并进行m次分发，其中，每次将n份待归档数据分别分发到对应的n个存储节点，并使得每个存储节点中有m份不同的待归档数据块，且m大于1；
将所有的待归档数据块分别在各自的存储节点中进行归档并生成各自的索引文件；
响应于接收到查询命令，将查询命令下发到各存储节点；
基于查询命令在各存储节点中分别加载各自的索引文件并对其中的主索引文件进行查询，其中，主索引文件对应于各存储节点中首次分发到的待归档数据块；
基于主索引文件得出并返回查询结果。
在一些实施例中，方法还包括：响应于有存储节点的主索引文件丢失，基于查询命令对其他存储节点中与主索引文件对应的副索引文件进行查询，其中，副索引文件还对应于其他存储节点中第二次分发到的待归档数据块。
在一些实施例中，将所有的待归档数据块分别在各自的存储节点中进行归档并生成各自的索引文件包括：将所有的待归档数据块分别在各自的存储节点中通过Lucene进行归档并生成各自的索引文件。
在一些实施例中，将所有的待归档数据块分别在各自的存储节点中通过Lucene进行归档并生成各自的索引文件包括：将所有的待归档数据块的数据格式转化为文本格式后分别在各自的存储节点中通过Lucene进行归档并生成各自的索引文件。
在一些实施例中，方法还包括：在各存储节点中分别生成各索引文件的MD5校验值。
在一些实施例中，基于主索引文件得出并返回查询结果包括：响应于查询结果中有重复的索引文件，将重复的索引文件进行去重，并将去重后的结果返回。
在一些实施例中，待归档数据包括数据库中的在预设期限内未使用的数据。
本发明的另一方面，还提供了一种数据归档查询系统，包括：
待归档数据分发模块，配置用于将待归档数据按照预设的归档规则分为不同的n份并进行m次分发，其中，每次将n份待归档数据分别分发到对应的n个存储节点，并使得每个存储节点中有m份不同的待归档数据块，且m大于1；
索引文件生成模块，配置用于将所有的待归档数据块分别在各自的存储节点中进行归档并生成各自的索引文件；
查询命令下发模块，配置用于响应于接收到查询命令，将查询命令下发到各存储节点；
主索引文件查询模块，配置用于基于查询命令在各存储节点中分别加载各自的索引文件并对其中的主索引文件进行查询，其中，主索引文件对应于各存储节点中首次分发到的待归档数据块；以及
查询结果接收模块，配置用于基于所述主索引文件得出并返回查询结果。
本发明的又一方面，还提供了一种计算机可读存储介质，存储有计算机程序指令，该计算机程序指令被执行时实现上述任意一项方法。
本发明的再一方面，还提供了一种计算机设备，包括存储器和处理器，存储器中存储有计算机程序，该计算机程序被处理器执行时执行上述任意一项方法。
本发明至少具有以下有益技术效果：
本发明通过将待归档数据分为多份并设置多个存储节点用于存放数据，解决了单机数据容量有限的问题；通过使每个存储节点中存放多份数据，提供了数据的有效备份；通过查询时优先查询主索引文件，提高了查询效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的实施例。
图1为根据本发明提供的数据归档查询方法的实施例的示意图；
图2为根据本发明实施例提供的将待归档数据分到3个存储节点且每个存储节点中有2份待归档数据的示意框图；
图3为根据本发明提供的数据归档查询系统的实施例的示意图；
图4为本发明提供的执行数据归档查询方法的计算机设备的一个实施例的硬件结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚明白，以下结合具体实施例，并参照附图，对本发明实施例进一步详细说明。
需要说明的是，本发明实施例中所有使用“第一”和“第二”的表述均是为了区分两个相同名称的非相同的实体或者非相同的参量，可见“第一”“第二”仅为了表述的方便，不应理解为对本发明实施例的限定。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备固有的其他步骤或单元。
基于上述目的，本发明实施例的第一个方面，提出了一种数据归档查询方法的实施例。图1示出的是本发明提供的数据归档查询方法的实施例的示意图。如图1所示，本发明实施例包括如下步骤：
步骤S10、将待归档数据按照预设的归档规则分为不同的n份并进行m次分发，其中，每次将n份待归档数据分别分发到对应的n个存储节点，并使得每个存储节点中有m份不同的待归档数据块，且m大于1；
步骤S20、将所有的待归档数据块分别在各自的存储节点中进行归档并生成各自的索引文件；
步骤S30、响应于接收到查询命令，将查询命令下发到各存储节点；
步骤S40、基于查询命令在各存储节点中分别加载各自的索引文件并对其主索引文件进行查询，其中，主索引文件对应于各存储节点中首次分发到的待归档数据块；
步骤S50、基于主索引文件得出并返回查询结果。
本实施例中，n为大于1的整数，m为大于1的整数。若要使得每个存储节点中有m份不同的待归档数据块，可以有多种方式。例如，假设n为3，m为2，如图2所示，将待归档数据分到3个存储节点，每个存储节点中有2份待归档数据；在第1次分发时，存储节点1、存储节点2、存储节点3中依次接收到了待归档数据1、待归档数据2、待归档数据3；第2次分发时，采用移位轮换的方式，存储节点1、存储节点2、存储节点3中依次接收待归档数据2、待归档数据3、待归档数据1。也可以采用随机的方式，例如可以利用一致性哈希算法使得每个存储节点中有m份不同的待归档数据块。
本发明实施例通过将待归档数据分为多份并设置多个存储节点用于存放数据，解决了单机数据容量有限的问题；通过使每个存储节点中存放多份数据，提供了数据的有效备份；通过查询时优先查询主索引文件，提高了查询效率。
在一些实施例中，方法还包括：响应于有存储节点的主索引文件丢失，基于查询命令对其他存储节点中与主索引文件对应的副索引文件进行查询，其中，副索引文件还对应于其他存储节点中第二次分发到的待归档数据块。本实施例中，若m为3，如果有存储节点的副索引文件丢失，基于查询命令对其他存储节点中与该副索引文件对应的第二副索引文件进行查询，其中，第二副索引文件还对应于其他存储节点中第3次分发到的待归档数据块；这样依此类推，确保查询过程的顺利与稳妥。
在一些实施例中，将所有的待归档数据块分别在各自的存储节点中进行归档并生成各自的索引文件包括：将所有的待归档数据块分别在各自的存储节点中通过Lucene进行归档并生成各自的索引文件。在一些实施例中，将所有的待归档数据块分别在各自的存储节点中通过Lucene进行归档并生成各自的索引文件包括：将所有的待归档数据块的数据格式转化为文本格式后分别在各自的存储节点中通过Lucene进行归档并生成各自的索引文件。本实施例中，Lucene是一个基于Java的全文信息检索工具包，它不是一个完整的搜索应用程序，而是为应用程序提供索引和搜索功能。Lucene目前是Apache Jakarta家族中的一个开源项目。也是目前最为流行的基于Java开源全文检索工具包。目前已经有很多应用程序的搜索功能是基于Lucene的，比如Eclipse的帮助系统的搜索功能。Lucene能够为文本类型的数据建立索引，所以可以将待归档数据块的数据格式转化为文本格式。例如要对一些HTML文档或PDF文档等进行索引，可以把HTML文档或PDF文档等转化成文本格式，然后将转化后的内容交给Lucene进行索引。
在一些实施例中，方法还包括：在各存储节点中分别生成各索引文件的MD5校验值。现有技术中，待归档数据以json等常见格式写入文本文件，易被篡改；以数据库快照形式存在的待归档文件，在被导入数据库后，容易进行篡改，再次生成新的转储，将之前的覆盖掉。本实施例通过Lucene将数据归档并生成索引的同时，计算出文件的MD5校验值，提供文件的有效性校验功能，一次归档，永不修改，有效解决了数据篡改问题。
在一些实施例中，基于主索引文件得出并返回查询结果包括：响应于查询结果中有重复的索引文件，将重复的索引文件进行去重，并将去重后的结果返回。通过去重，可以避免在数据库中取到重复数据的情况下将重复的查询结果返回给查询者。
在一些实施例中，待归档数据包括数据库中的在预设期限内未使用的数据。数据归档是将不经常使用的数据移到一个单独的存储设备来进行长期保存的过程。数据归档由旧的数据组成，但它是以后参考所必需且很重要的数据，其数据必须遵从预设规则来保存。数据库归档技术是一种保持在线数据库规模大体不变却又能够为用户应用提供稳定的数据库性能的方法，是将数据库中不经常使用的数据迁移至近线设备，将长期不使用的数据迁移至文件形式归档。归档历史数据可以有效压缩数据库大小，提供稳定的数据库性能。
本发明实施例的第二个方面，还提供了一种数据归档查询系统。图3示出的是本发明提供的数据归档查询系统的实施例的示意图。一种数据归档查询系统包括：待归档数据分发模块10，配置用于将待归档数据按照预设的归档规则分为不同的n份并进行m次分发，其中，每次将n份待归档数据分别分发到对应的n个存储节点，并使得每个存储节点中有m份不同的待归档数据块，且m大于1；索引文件生成模块20，配置用于将所有的待归档数据块分别在各自的存储节点中进行归档并生成各自的索引文件；查询命令下发模块30，配置用于响应于接收到查询命令，将查询命令下发到各存储节点；主索引文件查询模块40，配置用于基于查询命令在各存储节点中分别加载各自的索引文件并对其中的主索引文件进行查询，其中，主索引文件对应于各存储节点中首次分发到的待归档数据块；以及查询结果接收模块50，配置用于基于主索引文件得出并返回查询结果。
本发明实施例的数据归档查询系统，通过将待归档数据分为多份并设置多个存储节点用于存放数据，解决了单机数据容量有限的问题；通过使每个存储节点中存放多份数据，提供了数据的有效备份；通过查询时优先查询主索引文件，提高了查询效率。
本发明实施例的第三个方面，还提供了一种计算机存储介质，存储介质存储有计算机程序指令，该计算机程序指令被执行时实现上述任意一项实施例方法。
应当理解，在相互不冲突的情况下，以上针对根据本发明的数据归档查询方法阐述的所有实施方式、特征和优势同样地适用于根据本发明的数据归档查询系统和存储介质。也就是说，上面所述的应用于数据归档查询方法的所有实施例及其变化都可以直接移转应用于根据本发明的系统和存储介质，并直接结合于此。为了本公开的简洁起见，在此不再重复阐述。
本发明实施例的第四个方面，还提供了一种计算机设备，包括存储器302和处理器301，该存储器中存储有计算机程序，该计算机程序被该处理器执行时实现上述任意一项实施例方法。
如图4所示，为本发明提供的执行数据归档查询方法的计算机设备的一个实施例的硬件结构示意图。以如图4所示的计算机设备为例，在该计算机设备中包括一个处理器301以及一个存储器302，并还可以包括：输入装置303和输出装置304。处理器301、存储器302、输入装置303和输出装置304可以通过总线或者其他方式连接，图3中以通过总线连接为例。输入装置303可接收输入的数字或字符信息，以及产生与数据归档查询系统的用户设置以及功能控制有关的键信号输入。输出装置304可包括显示屏等显示设备。处理器301通过运行存储在存储器302中的非易失性软件程序、指令以及模块，从而执行服务器的各种功能应用以及数据处理，即实现上述方法实施例的数据归档查询方法。
最后需要说明的是，本文的计算机可读存储介质(例如，存储器)可以是易失性存储器或非易失性存储器，或者可以包括易失性存储器和非易失性存储器两者。作为例子而非限制性的，非易失性存储器可以包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦写可编程ROM(EEPROM)或快闪存储器。易失性存储器可以包括随机存取存储器(RAM)，该RAM可以充当外部高速缓存存储器。作为例子而非限制性的，RAM可以以多种形式获得，比如同步RAM(DRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据速率SDRAM(DDRSDRAM)、增强SDRAM(ESDRAM)、同步链路DRAM(SLDRAM)、以及直接Rambus RAM(DRRAM)。所公开的方面的存储设备意在包括但不限于这些和其它合适类型的存储器。
本领域技术人员还将明白的是，结合这里的公开所描述的各种示例性逻辑块、模块、电路和算法步骤可以被实现为电子硬件、计算机软件或两者的组合。为了清楚地说明硬件和软件的这种可互换性，已经就各种示意性组件、方块、模块、电路和步骤的功能对其进行了一般性的描述。这种功能是被实现为软件还是被实现为硬件取决于具体应用以及施加给整个系统的设计约束。本领域技术人员可以针对每种具体应用以各种方式来实现的功能，但是这种实现决定不应被解释为导致脱离本发明实施例公开的范围。
以上是本发明公开的示例性实施例，但是应当注意，在不背离权利要求限定的本发明实施例公开的范围的前提下，可以进行多种改变和修改。根据这里描述的公开实施例的方法权利要求的功能、步骤和/或动作不需以任何特定顺序执行。此外，尽管本发明实施例公开的元素可以以个体形式描述或要求，但除非明确限制为单数，也可以理解为多个。
应当理解的是，在本文中使用的，除非上下文清楚地支持例外情况，单数形式“一个”旨在也包括复数形式。还应当理解的是，在本文中使用的“和/或”是指包括一个或者一个以上相关联地列出的项目的任意和所有可能组合。上述本发明实施例公开实施例序号仅仅为了描述，不代表实施例的优劣。
所属领域的普通技术人员应当理解：以上任何实施例的讨论仅为示例性的，并非旨在暗示本发明实施例公开的范围(包括权利要求)被限于这些例子；在本发明实施例的思路下，以上实施例或者不同实施例中的技术特征之间也可以进行组合，并存在如上的本发明实施例的不同方面的许多其它变化，为了简明它们没有在细节中提供。因此，凡在本发明实施例的精神和原则之内，所做的任何省略、修改、等同替换、改进等，均应包含在本发明实施例的保护范围之内。

Claims (10)

1.一种数据归档查询方法，其特征在于，包括以下步骤：
将待归档数据按照预设的归档规则分为不同的n份并进行m次分发，其中，每次将n份待归档数据分别分发到对应的n个存储节点，并使得每个存储节点中有m份不同的待归档数据块，且m大于1；
将所有的待归档数据块分别在各自的存储节点中进行归档并生成各自的索引文件；
响应于接收到查询命令，将所述查询命令下发到各存储节点；
基于所述查询命令在各存储节点中分别加载各自的索引文件并对其中的主索引文件进行查询，其中，所述主索引文件对应于各存储节点中首次分发到的待归档数据块；
基于所述主索引文件得出并返回查询结果。
2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
响应于有存储节点的主索引文件丢失，基于所述查询命令对其他存储节点中与所述主索引文件对应的副索引文件进行查询，其中，所述副索引文件还对应于所述其他存储节点中第二次分发到的待归档数据块。
3.根据权利要求1所述的方法，其特征在于，将所有的待归档数据块分别在各自的存储节点中进行归档并生成各自的索引文件包括：
将所有的待归档数据块分别在各自的存储节点中通过lucene进行归档并生成各自的索引文件。
4.根据权利要求3所述的方法，其特征在于，将所有的待归档数据块分别在各自的存储节点中通过Lucene进行归档并生成各自的索引文件包括：
将所有的待归档数据块的数据格式转化为文本格式后分别在各自的存储节点中通过Lucene进行归档并生成各自的索引文件。
5.根据权利要求3或4所述的方法，其特征在于，所述方法还包括：
在各存储节点中分别生成各索引文件的MD5校验值。
6.根据权利要求1所述的方法，其特征在于，基于所述主索引文件得出并返回查询结果包括：
响应于所述查询结果中有重复的索引文件，将所述重复的索引文件进行去重，并将去重后的结果返回。
7.根据权利要求1所述的方法，其特征在于，所述待归档数据包括数据库中的在预设期限内未使用的数据。
8.一种数据归档查询系统，其特征在于，包括：
待归档数据分发模块，配置用于将待归档数据按照预设的归档规则分为不同的n份并进行m次分发，其中，每次将n份待归档数据分别分发到对应的n个存储节点，并使得每个存储节点中有m份不同的待归档数据块，且m大于1；
索引文件生成模块，配置用于将所有的待归档数据块分别在各自的存储节点中进行归档并生成各自的索引文件；
查询命令下发模块，配置用于响应于接收到查询命令，将所述查询命令下发到各存储节点；
主索引文件查询模块，配置用于基于所述查询命令在各存储节点中分别加载各自的索引文件并对其中的主索引文件进行查询，其中，所述主索引文件对应于各存储节点中首次分发到的待归档数据块；以及
查询结果接收模块，配置用于基于所述主索引文件得出并返回查询结果。
9.一种计算机可读存储介质，其特征在于，存储有计算机程序指令，所述计算机程序指令被执行时实现如权利要求1-7任意一项所述的方法。
10.一种计算机设备，包括存储器和处理器，其特征在于，所述存储器中存储有计算机程序，所述计算机程序被所述处理器执行时执行如权利要求1-7任意一项所述的方法。
CN202011562649.4A 2020-12-25 2020-12-25 一种数据归档查询方法、系统、存储介质及设备 Pending CN112631833A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202011562649.4A CN112631833A (zh) 2020-12-25 2020-12-25 一种数据归档查询方法、系统、存储介质及设备
PCT/CN2021/121889 WO2022134726A1 (zh) 2020-12-25 2021-09-29 一种数据归档查询方法、系统、存储介质及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011562649.4A CN112631833A (zh) 2020-12-25 2020-12-25 一种数据归档查询方法、系统、存储介质及设备

Publications (1)

Publication Number Publication Date
CN112631833A true CN112631833A (zh) 2021-04-09

Family

ID=75324901

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011562649.4A Pending CN112631833A (zh) 2020-12-25 2020-12-25 一种数据归档查询方法、系统、存储介质及设备

Country Status (2)

Country Link
CN (1) CN112631833A (zh)
WO (1) WO2022134726A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113703863A (zh) * 2021-07-30 2021-11-26 济南浪潮数据技术有限公司 一种集群信息归档方法、系统、存储介质及设备
WO2022134726A1 (zh) * 2020-12-25 2022-06-30 苏州浪潮智能科技有限公司 一种数据归档查询方法、系统、存储介质及设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110569213A (zh) * 2018-05-18 2019-12-13 北京果仁宝软件技术有限责任公司 文件存取方法、装置和设备
CN111221851A (zh) * 2018-11-27 2020-06-02 北京京东尚科信息技术有限公司 一种基于Lucene的海量数据查询、存储的方法和装置

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107340971B (zh) * 2016-04-28 2019-05-07 优刻得科技股份有限公司 一种数据存储与恢复架构与方法
CN110442644A (zh) * 2019-07-08 2019-11-12 深圳壹账通智能科技有限公司 区块链数据归档存储方法、装置、计算机设备和存储介质
CN111651443A (zh) * 2020-05-22 2020-09-11 京东数字科技控股有限公司 一种数据管理方法、装置、电子设备及存储介质
CN112631833A (zh) * 2020-12-25 2021-04-09 苏州浪潮智能科技有限公司 一种数据归档查询方法、系统、存储介质及设备

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110569213A (zh) * 2018-05-18 2019-12-13 北京果仁宝软件技术有限责任公司 文件存取方法、装置和设备
CN111221851A (zh) * 2018-11-27 2020-06-02 北京京东尚科信息技术有限公司 一种基于Lucene的海量数据查询、存储的方法和装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022134726A1 (zh) * 2020-12-25 2022-06-30 苏州浪潮智能科技有限公司 一种数据归档查询方法、系统、存储介质及设备
CN113703863A (zh) * 2021-07-30 2021-11-26 济南浪潮数据技术有限公司 一种集群信息归档方法、系统、存储介质及设备
CN113703863B (zh) * 2021-07-30 2023-12-22 济南浪潮数据技术有限公司 一种集群信息归档方法、系统、存储介质及设备

Also Published As

Publication number Publication date
WO2022134726A1 (zh) 2022-06-30

Similar Documents

Publication Publication Date Title
CN111104392B (zh) 一种数据库迁移方法、装置、电子设备及存储介质
RU2663358C2 (ru) Устройство и способ кластерного хранения
WO2015144003A1 (en) Systems and methods to optimize multi-version support in indexes
US8880463B2 (en) Standardized framework for reporting archived legacy system data
WO2021073510A1 (zh) 一种数据库的统计方法及装置
WO2022134726A1 (zh) 一种数据归档查询方法、系统、存储介质及设备
CN106649676A (zh) 一种基于hdfs存储文件的去重方法及装置
CN111818175B (zh) 企业服务总线配置文件生成方法、装置、设备和存储介质
EP3107010B1 (en) Data integration pipeline
CN106980618B (zh) 基于MongoDB分布式集群架构的文件存储方法和系统
CN108363727B (zh) 一种基于zfs文件系统的数据存储方法及装置
CN108108478B (zh) 数据格式转换方法、系统及电子设备
US10083121B2 (en) Storage system and storage method
CN116501700A (zh) 一种app格式化文件离线存储方法、装置、设备及存储介质
CN111291083A (zh) 网页源码数据处理方法、装置及计算机设备
CN111444194B (zh) 一种块链式账本中索引的清除方法、装置及设备
US10642789B2 (en) Extended attribute storage
US20220245097A1 (en) Hashing with differing hash size and compression size
CN114490865A (zh) 数据库同步方法、装置、设备及计算机存储介质
CN113868138A (zh) 测试数据的获取方法、系统、设备及存储介质
CN113407287A (zh) 可视化页面的快速生成方法、装置、设备及存储介质
CN113760875A (zh) 一种数据处理方法、装置、电子设备和存储介质
CN111723007A (zh) 一种测试用例的合并方法、系统、设备以及介质
CN117406967B (zh) 组件识别方法、装置、电子设备及存储介质
CN112711627B (zh) 一种Greenplum数据库的数据导入方法、装置及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20210409