CN114416730A - 一种数据存储方法、系统、电子设备及计算机可读存储介质 - Google Patents

一种数据存储方法、系统、电子设备及计算机可读存储介质 Download PDF

Info

Publication number
CN114416730A
CN114416730A CN202111613474.XA CN202111613474A CN114416730A CN 114416730 A CN114416730 A CN 114416730A CN 202111613474 A CN202111613474 A CN 202111613474A CN 114416730 A CN114416730 A CN 114416730A
Authority
CN
China
Prior art keywords
data
target data
middleware
database
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111613474.XA
Other languages
English (en)
Inventor
刘璐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Pixel Software Technology Co Ltd
Original Assignee
Beijing Pixel Software Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Pixel Software Technology Co Ltd filed Critical Beijing Pixel Software Technology Co Ltd
Priority to CN202111613474.XA priority Critical patent/CN114416730A/zh
Publication of CN114416730A publication Critical patent/CN114416730A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22—Indexing; Data structures therefor; Storage structures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G06F16/2455—Query execution
    • G06F16/24552—Database cache management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25—Integrating or interfacing systems involving database management systems
    • G06F16/258—Data format conversion from or to a database

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明的实施例提供了一种数据存储方法、系统、电子设备及计算机可读存储介质，所述方法包括：将数据存储至数据库之前，中间件将数据根据数据模板派生为目标数据；基于中间件检测目标数据是否满足预设条件；若是，则将目标数据存储至数据库中。在数据存储至数据库之前，基于数据模板派生为目标数据，无需将自定义数据转换为数据库可以存储的格式，缩短开发时间，并且中间件检测目标数据是否满足预设条件。在入库数据的数量激增的情况下，在数据入库之前，检测数据是否满足预设条件，将满足预设条件的数据存入数据库中，从而避免大量数据入库，导致入库延迟的情况发生。

Description

一种数据存储方法、系统、电子设备及计算机可读存储介质
技术领域
本发明涉及数据存储领域，具体而言，涉及一种数据存储方法、系统、电子设备及计算机可读存储介质。
背景技术
现有的数据存储方式，实时入库时，当同时入库的数据量激增时，会产生明显延迟。
并且现有的分布式的高速缓存系统，在需要对数据存储的情况下，需要将自定义数据类型，统一转化为分布式的高速缓存系统支持的固定数据类型。又例如，针对现有技术中的redis缓存模块，在对每次新的数据进行缓存时，需要手动在代码中将数据转换为redis缓存模块的默认格式，才可以将数据缓存至数据库中，从而延长开发时间。
发明内容
本发明的目的在于提供一种数据存储方法、系统、电子设备及计算机可读存储介质，能够在入库数据激增时，不会出现延迟并且数据入库无需开发时间。
为了实现上述目的，本申请实施例采用的技术方案如下：
第一方面，本申请实施例提供了一种数据存储方法，应用于数据存储系统，所述数据存储系统包括中间件和数据库，所述方法包括：
在将数据存储至所述数据库之前，所述中间件将所述数据根据数据模板派生为目标数据；
基于所述中间件检测目标数据是否满足预设条件；
若是，则将所述目标数据存储至数据库中。
在可选的实施方式中，所述基于所述中间件检测目标数据是否满足预设条件的步骤，包括：
基于所述目标数据生成数据队列；
判断数据队列中的目标数据的数量是否大于预设阈值；
在所述数量大于预设阈值的情况下，确定所述目标数据满足预设条件。
在可选的实施方式中，所述基于所述中间件检测目标数据是否满足预设条件的步骤，包括：
基于所述目标数据生成数据队列；
按照预设周期对所述数据队列进行检测；
在检测到所述数据队列存在目标数据的情况下，确定所述目标数据满足预设条件。
在可选的实施方式中，所述基于所述目标数据生成数据队列的步骤，包括：
确定所述目标数据的业务类型和操作类型；
依据所述业务类型，将所述目标数据分成不同数据队列，其中，不同数据列队对应不同业务类型；
所述方法还包括：
基于所述数据队列、所述业务类型以及所述操作类型，生成所述目标数据的结点信息。
在可选的实施方式中，所述方法还包括：
将所述结点信息作为索引，在所述中间件中搜索与所述结点信息对应的数据。
在可选的实施方式中，所述基于所述中间件检测目标数据是否满足预设条件的步骤，包括：
检测所述中间件是否发生宕机；
在所述中间件发生宕机的情况下，获取所述中间件中存储的数据，并确定获取的所述目标数据满足预设条件。
第二方面，本申请实施例提供了一种数据存储系统，所述数据存储系统包括中间件和数据库；
所述中间件用于：在将数据存储至所述数据库之前，将所述数据根据数据模板派生为目标数据；
检测目标数据是否满足预设条件；
若是，则将所述目标数据存储至数据库中。
第三方面，本申请实施例提供了一种电子设备，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现所述数据存储方法的步骤。
第四方面，本申请实施例提供了一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现所述数据存储方法的步骤。
本申请具有以下有益效果：
本申请通过在将数据存储至数据库之前，中间件将数据根据数据模板派生为目标数据；基于中间件检测目标数据是否满足预设条件；若是，则将目标数据存储至数据库中。在数据存储至数据库之前，基于数据模板派生为目标数据，无需将自定义数据转换为数据库可以存储的格式，缩短开发时间，并且中间件检测目标数据是否满足预设条件。在入库数据的数量激增的情况下，在数据入库之前，检测数据是否满足预设条件，将满足预设条件的数据存入数据库中，从而避免大量数据入库，导致入库延迟的情况发生。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本发明的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
图1为本发明实施例提供的电子设备的方框示意图；
图2为本发明实施例提供的一种数据存储方法的步骤流程图之一；
图3为本发明实施例提供的一种数据存储方法的步骤流程图之二；
图4为本发明实施例提供的一种数据存储方法的步骤流程图之三；
图5为本发明实施例提供的一种数据存储方法的步骤流程图之四；
图6为本发明实施例提供的一种数据存储系统的结构框图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。
因此，以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围，而是仅仅表示本发明的选定实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。
在本发明的描述中，需要说明的是，若出现术语“上”、“下”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，或者是该发明产品使用时惯常摆放的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。
此外，若出现术语“第一”、“第二”等仅用于区分描述，而不能理解为指示或暗示相对重要性。
在本申请的描述中，还需要说明的是，除非另有明确的规定和限定，术语“设置”、“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本申请中的具体含义。
经过发明人大量研究发现，现有的数据存储方式，实时入库时，当同时入库的数据量激增时，会产生明显延迟。并且现有技术中提供的数据存储系统，需要将自定义的数据转换为统一的数据格式，才可以入库，延长开发时间。
有鉴于对上述问题的发现，本实施例提供了一种数据存储方法、系统、电子设备及计算机可读存储介质，在数据存储至数据库之前，基于数据模板派生为目标数据，无需将自定义数据转换为数据库可以存储的格式，缩短开发时间，并且中间件检测目标数据是否满足预设条件。在入库数据的数量激增的情况下，在数据入库之前，检测数据是否满足预设条件，将满足预设条件的数据存入数据库中，从而避免大量数据入库，导致入库延迟的情况发生，下面对本实施例提供的方案进行详细阐述。
本实施例提供一种可以对数据存储的电子设备。在一种可能的实现方式中，所述电子设备可以为用户终端，例如，电子设备可以是，但不限于，服务器、智能手机、个人电脑(PersonalComputer，PC)、平板电脑、个人数字助理(Personal Digital Assistant，PDA)、移动上网设备(Mobile Internet Device，MID)等。
请参照图1，图1是本申请实施例提供的电子设备100的结构示意图。所述电子设备100还可包括比图1中所示更多或者更少的组件，或者具有与图1所示不同的配置。图1中所示的各组件可以采用硬件、软件或其组合实现。
所述电子设备100包括数据存储系统110、存储器120及处理器130。
所述存储器120及处理器130各元件相互之间直接或间接地电性连接，以实现数据的传输或交互。例如，这些元件相互之间可通过一条或多条通讯总线或信号线实现电性连接。所述数据存储系统110包括至少一个可以软件或固件(firmware)的形式存储于所述存储器120中或固化在所述电子设备100的操作系统(operating system，OS)中的软件功能模块。所述处理器130用于执行所述存储器120中存储的可执行模块，例如所述数据存储系统110所包括的软件功能模块及计算机程序等。
其中，所述存储器120可以是，但不限于，随机存取存储器(RandomAccess Memory，RAM)，只读存储器(Read Only Memory，ROM)，可编程只读存储器(Programmable Read-OnlyMemory，PROM)，可擦除只读存储器(Erasable ProgrammableRead-Only Memory，EPROM)，电可擦除只读存储器(Electric Erasable ProgrammableRead-Only Memory，EEPROM)等。其中，存储器120用于存储程序，所述处理器130在接收到执行指令后，执行所述程序。
请参照图2，为应用于图1的电子设备100的一种数据存储方法的流程图，以下将方法包括各个步骤进行详细阐述。
步骤201：在将数据存储至数据库之前，中间件将数据根据数据模板派生为目标数据。
步骤202：基于中间件检测目标数据是否满足预设条件。
步骤203：若是，则将目标数据存储至数据库中。
数据存储系统包括中间件和数据库，数据库用于存储数据，中间件用于对数据进行暂存和处理。
其中，中间件包括共享内存缓存、数据队列、计数装置、计时装置、数据模板以及宕机容错装置，共享内存缓存用于对入库前的数据进行暂时缓存。数据队列，在数据存入共享内存缓存时，生成数据队列。计数装置，用于对每个数据队列中的数据的数量进行统计。计时装置，用于设置对每个数据队列进行检测的预设周期。数据模板用于将入库的数据统一派生为目标数据，该数据模板定义了数据插入、数据更新、数据删除等数据操作类型，该数据模板还包括变体数据类型，变体数据类型用于适配自定义数据。使得入库数据无需手动转换数据格式和类型，即可存入该数据库中。
为了避免在数据的数量激增的情况下，造成入库延迟的问题，在数据入库之前，需要检测数据是否满足预设条件，若满足预设条件，则将数据入库，从而避免一次性涌入大量数据，造成入库延迟。
其中，目标数据是否满足预设条件，可以判断目标数据是否在队列中的存储时间过长，若过长，则确定目标数据满足预设条件，此时，将目标数据进行入库操作。
判断目标数据的数据队列是否过长，在数据队列过长的情况下，确定目标数据满足预设条件，此时将目标数据进行入库操作。
本申请通过在将数据存储至数据库之前，中间件将数据根据数据模板派生为目标数据；基于中间件检测目标数据是否满足预设条件；若是，则将目标数据存储至数据库中。在数据存储至数据库之前，基于数据模板派生为目标数据，无需将自定义数据转换为数据库可以存储的格式，缩短开发时间，并且中间件检测目标数据是否满足预设条件。在入库数据的数量激增的情况下，在数据入库之前，检测数据是否满足预设条件，将满足预设条件的数据存入数据库中，从而避免大量数据入库，导致入库延迟的情况发生。
为了确定目标数据是否满足预设条件，针对上述步骤202，在本申请的另一实施例中，如图3所示，提供了一种数据存储方法，具体包括如下步骤：
步骤202-1：基于目标数据生成数据队列。
步骤202-2：判断数据队列中的目标数据的数量是否大于预设阈值。
步骤202-3：在数量大于预设阈值的情况下，确定目标数据满足预设条件。
基于目标数据生成数据队列具体包括：确定目标数据的业务类型和操作类型；依据业务类型，将目标数据分成不同数据队列，其中，不同数据列队对应不同业务类型。
例如：目标数据的业务类型为A客户数据、B客户数据以及C客户数据，不同数据队列对应不同的业务类型。
目标数据除了对应有业务类型以外，还对应操作类型，操作类型包括：数据插入、数据更新、数据删除等，例如：A客户数据为数据插入的操作类型，B客户数据为数据更新的操作类型，C客户数据为数据删除的操作类型。
基于数据队列、业务类型以及操作类型，可以生成目标数据的结点信息。结点信息可以实现对数据的检索，具体包括：
将结点信息作为索引，在中间件中搜索与结点信息对应的数据。
在具体实现过程中，将结点信息中的目标数据的操作类型和业务类型，作为检索的要素，在数据存储系统中的数据队列中检索到某一结点，获取该结点处对应的数据。
结点是在数据暂存时在中间件中生成的，具体的：当有数据入库需求时，根据目标数据的业务类型，在对应的数据队列中生成一个新结点，新结点对应有结点信息，将待入库的目标数据填入该结点中，并标记入库操作类型。
对暂存在中间件的目标数据进行检测，当中间件包括计数装置时，计数装置在有新数据加入数据队列时，会自动检测当前数据队列缓存的待入库的目标数据的数量，当待入库的目标数据数量达到预先设置的计数值，即预设阈值，则立即入库并清空数据队列。
需要说明的是，预设阈值可以根据实际情况设置，本发明实施例对此不做具体限制。
为了确定目标数据是否满足预设条件，针对上述步骤202，在本申请的另一实施例中，如图4所示，提供了一种数据存储方法，具体包括如下步骤：
步骤202-4：基于目标数据生成数据队列。
步骤202-5：按照预设周期对数据队列进行检测。
步骤202-6：在检测到数据队列存在目标数据的情况下，确定目标数据满足预设条件。
计时装置按照预先设置的预设周期，每个预设周期检测一次数据队列，当检测到某一数据队列中存在待入库的目标数据时，则将对应的目标数据进行入库处理。
当数据存储系统同时存在计数装置和计时装置时，若计数装置在计时装置未达到预设周期，先判断某一数据队列中的待入库的目标数据的数量大于预设阈值，则将该数据队列中的目标数据刷新入库，并清空该数据队列。若计数装置达到预设周期，检测数据队列，判断某一数据队列中存在待入库的目标数据，则将该数据队列中的目标数据刷新入库，并清空该数据队列。
若数据队列中待入库的目标数据的数量不满足预设阈值，则目标数据在数据队列中等待。
为了确定目标数据是否满足预设条件，针对上述步骤202，在本申请的另一实施例中，如图5所示，提供了一种数据存储方法，具体包括如下步骤：
步骤202-7：检测中间件是否发生宕机。
步骤202-8：在中间件发生宕机的情况下，获取中间件中存储的数据，并确定获取的目标数据满足预设条件。
在中间件宕机拉起时，自动加载数据存储系统中的共享内存缓存，遍历共享内存缓存中各个数据队列，检测数据队列中是否存在待入库的目标数据，如果有待入库的目标数据，则立即刷新入库。
数据存储的宕机容错装置，可以避免目标数据的丢失。
请参照图6，本申请实施例还提供了一种应用于图1所述电子设备100的数据存储系统110，所述数据存储系统110包括：
所述数据存储系统110包括中间件111和数据库112，所述中间件111包括数据模板1111；
所述数据模板1111用于：在将数据存储至所述数据库之前，将所述数据派生为目标数据；
所述中间件111，用于检测目标数据是否满足预设条件；
若是，则将所述目标数据存储至数据库中。
可选地，所述中间件111还包括：共享内存缓存1112和计数装置1113；
所述共享内存缓存1112，用于基于所述目标数据生成数据队列；
所述计数装置1113用于：判断数据队列中的目标数据的数量是否大于预设阈值；
在所述数量大于预设阈值的情况下，确定所述目标数据满足预设条件。
可选地，所述数据存储系统还包括：计时装置1114；
所述计时装置1114：基于所述目标数据生成数据队列；
按照预设周期对所述数据队列进行检测；
在检测到所述数据队列存在目标数据的情况下，确定所述目标数据满足预设条件。
可选地，所述数据存储系统还包括：宕机容错装置1115，所述宕机容错装置1115用于：
检测所述中间件是否发生宕机；
在所述中间件发生宕机的情况下，获取所述中间件中存储的数据，并确定获取的所述目标数据满足预设条件。
本申请通过在将数据存储至数据库之前，中间件将数据根据数据模板派生为目标数据；基于中间件检测目标数据是否满足预设条件；若是，则将目标数据存储至数据库中。在数据存储至数据库之前，基于数据模板派生为目标数据，无需将自定义数据转换为数据库可以存储的格式，缩短开发时间，并且中间件检测目标数据是否满足预设条件。在入库数据的数量激增的情况下，在数据入库之前，检测数据是否满足预设条件，将满足预设条件的数据存入数据库中，从而避免大量数据入库，导致入库延迟的情况发生。
本申请还提供一种电子设备100，电子设备100包括处理器130以及存储器120。存储器120存储有计算机可执行指令，计算机可执行指令被处理器130执行时，实现该数据存储方法。
本申请实施例还提供一种计算机可读存储介质，存储介质存储有计算机程序，计算机程序被处理器130执行时，实现该数据存储方法。
在本申请所提供的实施例中，应该理解到，所揭露的系统和方法，也可以通过其它的方式实现。以上所描述的系统实施例仅仅是示意性的，例如，附图中的流程图和框图显示了根据本申请的多个实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分，所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现方式中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
另外，在本申请各个实施例中的各功能模块可以集成在一起形成一个独立的部分，也可以是各个模块单独存在，也可以两个或两个以上模块集成形成一个独立的部分。所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述，仅为本申请的各种实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应所述以权利要求的保护范围为准。

Claims (10)

1.一种数据存储方法，应用于数据存储系统，其特征在于，所述数据存储系统包括中间件和数据库，所述方法包括：
在将数据存储至所述数据库之前，所述中间件将所述数据根据数据模板派生为目标数据；
基于所述中间件检测目标数据是否满足预设条件；
若是，则将所述目标数据存储至数据库中。
2.根据权利要求1所述的方法，其特征在于，所述基于所述中间件检测目标数据是否满足预设条件的步骤，包括：
基于所述目标数据生成数据队列；
判断数据队列中的目标数据的数量是否大于预设阈值；
在所述数量大于预设阈值的情况下，确定所述目标数据满足预设条件。
3.根据权利要求1所述的方法，其特征在于，所述基于所述中间件检测目标数据是否满足预设条件的步骤，包括：
基于所述目标数据生成数据队列；
按照预设周期对所述数据队列进行检测；
在检测到所述数据队列存在目标数据的情况下，确定所述目标数据满足预设条件。
4.根据权利要求2所述的方法，其特征在于，所述基于所述目标数据生成数据队列的步骤，包括：
确定所述目标数据的业务类型和操作类型；
依据所述业务类型，将所述目标数据分成不同数据队列，其中，不同数据列队对应不同业务类型；
所述方法还包括：
基于所述数据队列、所述业务类型以及所述操作类型，生成所述目标数据的结点信息。
5.根据权利要求4所述的方法，其特征在于，所述方法还包括：
将所述结点信息作为索引，在所述中间件中搜索与所述结点信息对应的数据。
6.根据权利要求2所述的方法，其特征在于，所述基于所述中间件检测目标数据是否满足预设条件的步骤，包括：
检测所述中间件是否发生宕机；
在所述中间件发生宕机的情况下，获取所述中间件中存储的数据，并确定获取的所述目标数据满足预设条件。
7.一种数据存储系统，其特征在于，所述数据存储系统包括中间件和数据库；
所述中间件用于：在将数据存储至所述数据库之前，将所述数据根据数据模板派生为目标数据；
检测目标数据是否满足预设条件；
若是，则将所述目标数据存储至数据库中。
8.根据权利要求7所述的系统，其特征在于，所述中间件还包括：计数装置和共享内存缓存；
所述共享内存缓存，用于基于所述目标数据生成数据队列；
所述计数装置用于：判断数据队列中的目标数据的数量是否大于预设阈值；
在所述数量大于预设阈值的情况下，确定所述目标数据满足预设条件。
9.一种电子设备，其特征在于，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现权利要求1-6任一项所述方法的步骤。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该计算机程序被处理器执行时实现权利要求1-6中任一项所述方法的步骤。
CN202111613474.XA 2021-12-27 2021-12-27 一种数据存储方法、系统、电子设备及计算机可读存储介质 Pending CN114416730A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111613474.XA CN114416730A (zh) 2021-12-27 2021-12-27 一种数据存储方法、系统、电子设备及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111613474.XA CN114416730A (zh) 2021-12-27 2021-12-27 一种数据存储方法、系统、电子设备及计算机可读存储介质

Publications (1)

Publication Number Publication Date
CN114416730A true CN114416730A (zh) 2022-04-29

Family

ID=81268688

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111613474.XA Pending CN114416730A (zh) 2021-12-27 2021-12-27 一种数据存储方法、系统、电子设备及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN114416730A (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108282519A (zh) * 2017-12-29 2018-07-13 深圳中兴网信科技有限公司 基于中间件的接口实现方法、接口实现系统
CN109766347A (zh) * 2017-07-21 2019-05-17 腾讯科技（深圳）有限公司 一种数据更新方法、装置、系统、计算机设备及存储介质
CN110196884A (zh) * 2019-05-31 2019-09-03 北京大米科技有限公司 基于分布式数据库的数据写入方法、存储介质和电子设备
CN112286907A (zh) * 2020-10-26 2021-01-29 中信百信银行股份有限公司 一种数据库配置方法、装置、电子设备和可读存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109766347A (zh) * 2017-07-21 2019-05-17 腾讯科技（深圳）有限公司 一种数据更新方法、装置、系统、计算机设备及存储介质
CN108282519A (zh) * 2017-12-29 2018-07-13 深圳中兴网信科技有限公司 基于中间件的接口实现方法、接口实现系统
CN110196884A (zh) * 2019-05-31 2019-09-03 北京大米科技有限公司 基于分布式数据库的数据写入方法、存储介质和电子设备
CN112286907A (zh) * 2020-10-26 2021-01-29 中信百信银行股份有限公司 一种数据库配置方法、装置、电子设备和可读存储介质

Similar Documents

Publication Publication Date Title
CN108156006B (zh) 一种埋点数据上报方法、装置及电子设备
US9836346B2 (en) Error troubleshooting using a correlated knowledge base
CN112153627A (zh) 物联网卡的管理方法、系统及电子设备
CN112256318B (zh) 一种用于依赖产品的构建方法及设备
CN111343267B (zh) 一种配置的管理方法及系统
CN108366098B (zh) 一种网络节点的数据交互方法及装置
CN111523844B (zh) 仓储管理方法、装置、服务器及可读存储介质
CN111563199A (zh) 一种数据处理方法及装置
CN113590017B (zh) 用于处理数据的方法、电子设备和计算机程序产品
CN110888790B (zh) 日志管理方法及装置、电子设备、存储介质
CN114416730A (zh) 一种数据存储方法、系统、电子设备及计算机可读存储介质
CN110309028B (zh) 监控信息获取方法、服务监控方法、装置及系统
CN112579682A (zh) 数据模型变更的通知方法、装置、电子设备及存储介质
CN112433757A (zh) 一种确定接口调用关系的方法和装置
CN111737269A (zh) 数据查询响应方法、装置及计算机可读存储介质
CN107506474B (zh) 基于对象映射的数据库操作方法及装置
CN111399849A (zh) 一种应用程序安装包的确定方法及系统
CN111191234B (zh) 一种病毒信息检测的方法及装置
CN114896082A (zh) 消息处理方法、装置、电子设备和存储介质
CN111641959A (zh) 一种网络环境信息的检测方法和装置
CN114629942B (zh) 一种诈骗预警任务生成方法、装置、设备及介质
WO2014173129A1 (en) Mobile terminal flow identification method and apparatus
CN111159196A (zh) 基于分片的区块链数据存储、获取方法及装置
CN116132395B (zh) 消息处理方法、电子设备及计算机可读存储介质
CN116974856B (zh) 一种自动获取日志文件的方法、装置、设备及介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination