CN115391308A - 数据存储方法以及装置 - Google Patents

数据存储方法以及装置 Download PDF

Info

Publication number
CN115391308A
CN115391308A CN202210988225.7A CN202210988225A CN115391308A CN 115391308 A CN115391308 A CN 115391308A CN 202210988225 A CN202210988225 A CN 202210988225A CN 115391308 A CN115391308 A CN 115391308A
Authority
CN
China
Prior art keywords
row
data
data row
access
target data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210988225.7A
Other languages
English (en)
Inventor
刘东顺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang eCommerce Bank Co Ltd
Original Assignee
Zhejiang eCommerce Bank Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang eCommerce Bank Co Ltd filed Critical Zhejiang eCommerce Bank Co Ltd
Priority to CN202210988225.7A priority Critical patent/CN115391308A/zh
Publication of CN115391308A publication Critical patent/CN115391308A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21Design, administration or maintenance of databases
    • G06F16/211Schema design and management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0751Error or fault detection not based on redundancy
    • G06F11/0754Error or fault detection not based on redundancy by exceeding limits
    • G06F11/076Error or fault detection not based on redundancy by exceeding limits by exceeding a count or rate limit, e.g. word- or bit count limit
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0793Remedial or corrective actions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21Design, administration or maintenance of databases
    • G06F16/217Database tuning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22Indexing; Data structures therefor; Storage structures

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Quality & Reliability (AREA)
  • Software Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本说明书实施例提供数据存储方法以及装置,其中数据存储方法应用于数据存储系统中的服务端,所述方法包括:接收应用端发送的数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息;根据数据行访问结果和数据行属性信息,确定目标数据行,其中,目标数据行是指发生过访问失败,且为指定类型的数据行;将目标数据行的行标识发送至应用端,以使应用端基于行标识生成针对目标数据行的拆分指令,其中,拆分指令用于指示数据库对目标数据行进行拆分存储。通过准确确定目标数据行,进一步生成目标数据行的拆分指令,实现对目标数据行的及时拆分存储,提高了目标数据行的访问成功率,进一步提高用户体验度。

Description

数据存储方法以及装置
技术领域
本说明书实施例涉及计算机技术领域,特别涉及数据存储方法。本说明书一个或者多个实施例同时涉及数据存储装置,数据存储系统,一种计算设备,一种计算机可读存储介质以及一种计算机程序
背景技术
随着计算机技术的发展,用户工作产生的大量数据被存储在数据库中,数据库是“按照数据结构来组织、存储和管理数据的仓库”,是一个长期存储在计算机内的、有组织的、可共享的、统一管理的大量数据的集合。
但是,随着数据库中存储的数据量的快速增长,访问数据库的频率越来越高,容易出现数据库访问失败的问题,导致用户工作不稳定,用户体验感极差。因此,如何实现准确、访问成功率高的数据库存储方案成为亟需解决的问题。
发明内容
有鉴于此,本说明书实施例提供了数据存储方法。本说明书一个或者多个实施例同时涉及数据存储装置,数据存储系统,一种计算设备,一种计算机可读存储介质以及一种计算机程序,以解决现有技术中存在的技术缺陷。
根据本说明书实施例的第一方面,提供了一种数据存储方法,应用于数据存储系统中的服务端,该数据存储系统包括服务端和应用端,数据存储方法包括:
接收应用端发送的数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息;
根据数据行访问结果和数据行属性信息,确定目标数据行,其中,目标数据行是指发生过访问失败,且为指定类型的数据行;
将目标数据行的行标识发送至应用端,以使应用端基于行标识生成针对目标数据行的拆分指令,其中,拆分指令用于指示数据库对目标数据行进行拆分存储。
根据本说明书实施例的第二方面,提供了一种数据存储方法,应用于数据存储系统中的应用端,该数据存储系统包括服务端和应用端,数据存储方法包括:
向服务端发送数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息;
接收服务端发送的目标数据行的行标识,其中,目标数据行为服务端根据数据行访问结果和数据行属性信息确定的;
基于行标识生成针对目标数据行的拆分指令,并将拆分指令发送至数据库,以使数据库根据拆分指令对目标数据行进行拆分存储。
根据本说明书实施例的第三方面,提供了一种数据存储方法,应用于数据存储系统中的服务端,该数据存储系统包括服务端和应用端,数据存储方法包括:
接收应用端发送的针对指定类型数据行的访问信息,其中,访问信息包括访问结果;
根据访问结果,确定目标数据行,其中,目标数据行是指发生过访问失败的指定类型数据行;
将目标数据行的行标识发送至应用端,以使应用端基于行标识生成针对目标数据行的拆分指令,其中,拆分指令用于指示数据库对目标数据行进行拆分存储。
根据本说明书实施例的第四方面,提供了一种数据存储方法,应用于数据存储系统中的应用端,该数据存储系统包括服务端和应用端,数据存储方法包括:
获取数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息;
根据数据行属性信息,确定指定类型数据行;
向服务端发送针对指定类型数据行的访问信息,其中,访问信息包括访问结果;
接收服务端发送的目标数据行的行标识,其中,目标数据行为服务端根据数据行访问结果确定的;
基于行标识生成针对目标数据行的拆分指令,并将拆分指令发送至数据库,以使数据库根据拆分指令对目标数据行进行拆分存储。
根据本说明书实施例的第五方面,提供了一种数据存储系统,数据存储系统包括服务端和应用端;
应用端,用于向服务端发送数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息;
服务端,用于接收应用端发送的数据行访问信息;根据数据行访问结果和数据行属性信息,确定目标数据行,其中,目标数据行是指发生过访问失败,且为指定类型的数据行;将目标数据行的行标识发送至应用端;
应用端,还用于接收服务端发送的目标数据行的行标识;基于行标识生成针对目标数据行的拆分指令,并将拆分指令发送至数据库,以使数据库根据拆分指令对目标数据行进行拆分存储。
根据本说明书实施例的第六方面,提供了一种数据存储系统,数据存储系统包括服务端和应用端;
应用端,用于获取数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息;根据数据行属性信息,确定指定类型数据行;向服务端发送针对指定类型数据行的访问信息,其中,访问信息包括访问结果;
服务端,用于接收应用端发送的针对指定类型数据行的访问信息;根据访问结果,确定目标数据行,其中,目标数据行是指发生过访问失败的指定类型数据行;将目标数据行的行标识发送至应用端;
应用端,还用于接收服务端发送的目标数据行的行标识;基于行标识生成针对目标数据行的拆分指令,并将拆分指令发送至数据库,以使数据库根据拆分指令对目标数据行进行拆分存储。
根据本说明书实施例的第七方面,提供了一种数据存储装置,应用于数据存储系统中的服务端,该数据存储系统包括服务端和应用端,数据存储装置包括:
第一接收模块,被配置为接收应用端发送的数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息;
第一确定模块,被配置为根据数据行访问结果和数据行属性信息,确定目标数据行,其中,目标数据行是指发生过访问失败,且为指定类型的数据行;
第一发送模块,被配置为将目标数据行的行标识发送至应用端,以使应用端基于行标识生成针对目标数据行的拆分指令,其中,拆分指令用于指示数据库对目标数据行进行拆分存储。
根据本说明书实施例的第八方面,提供了一种数据存储装置,应用于数据存储系统中的应用端,该数据存储系统包括服务端和应用端,数据存储装置包括:
第二发送模块,被配置为向服务端发送数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息;
第二接收模块,被配置为接收服务端发送的目标数据行的行标识,其中,目标数据行为服务端根据数据行访问结果和数据行属性信息确定的;
第一生成模块,被配置为基于行标识生成针对目标数据行的拆分指令,并将拆分指令发送至数据库,以使数据库根据拆分指令对目标数据行进行拆分存储。
根据本说明书实施例的第九方面,提供了一种数据存储装置,应用于数据存储系统中的服务端,该数据存储系统包括服务端和应用端,数据存储装置包括:
第三接收模块,被配置为接收应用端发送的针对指定类型数据行的访问信息,其中,访问信息包括访问结果;
第二确定模块,被配置为根据访问结果,确定目标数据行,其中,目标数据行是指发生过访问失败的指定类型数据行;
第三发送模块,被配置为将目标数据行的行标识发送至应用端,以使应用端基于行标识生成针对目标数据行的拆分指令,其中,拆分指令用于指示数据库对目标数据行进行拆分存储。
根据本说明书实施例的第十方面,提供了一种数据存储装置,应用于数据存储系统中的应用端,该数据存储系统包括服务端和应用端,数据存储装置包括:
第一获取模块,被配置为获取数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息;
第三确定模块,被配置为根据数据行属性信息,确定指定类型数据行;
第四发送模块,被配置为向服务端发送针对指定类型数据行的访问信息,其中,访问信息包括访问结果;
第四接收模块,被配置为接收服务端发送的目标数据行的行标识,其中,目标数据行为服务端根据数据行访问结果确定的;
第二生成模块,被配置为基于行标识生成针对目标数据行的拆分指令,并将拆分指令发送至数据库,以使数据库根据拆分指令对目标数据行进行拆分存储。
根据本说明书实施例的第十一方面,提供了一种计算设备,包括:
存储器和处理器;
所述存储器用于存储计算机可执行指令,所述处理器用于执行所述计算机可执行指令,该计算机可执行指令被处理器执行时实现上述第一方面或第二方面或第三方面或第四方面提供的数据存储方法的步骤。
根据本说明书实施例的第十二方面,提供了一种计算机可读存储介质,其存储有计算机可执行指令,该指令被处理器执行时实现上述第一方面或第二方面或第三方面或第四方面提供的数据存储方法的步骤。
根据本说明书实施例的第十三方面,提供了一种计算机程序,其中,当所述计算机程序在计算机中执行时,令计算机执行上述第一方面或第二方面或第三方面或第四方面提供的数据存储方法的步骤。
本说明书一个实施例提供的数据存储方法,应用于数据存储系统中的服务端,数据存储系统包括服务端和应用端,数据存储方法包括:接收应用端发送的数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息;根据数据行访问结果和数据行属性信息,确定目标数据行,其中,目标数据行是指发生过访问失败,且为指定类型的数据行;将目标数据行的行标识发送至应用端,以使应用端基于行标识生成针对目标数据行的拆分指令,其中,拆分指令用于指示数据库对目标数据行进行拆分存储。通过准确确定目标数据行,进一步生成目标数据行的拆分指令,实现对目标数据行的及时拆分存储,提高了目标数据行的访问成功率,进一步提高用户体验度。
附图说明
图1是本说明书一个实施例提供的一种数据存储系统下数据存储方法的处理流程图;
图2是本说明书一个实施例提供的第一种数据存储方法的流程图;
图3是本说明书一个实施例提供的第二种数据存储方法的流程图;
图4a是本说明书一个实施例提供的数据存储方法中一种应用端显示界面示意图;
图4b是本说明书一个实施例提供的数据存储方法中另一种应用端显示界面示意图;
图5是本说明书一个实施例提供的另一种数据存储系统下数据存储方法的处理流程图;
图6是本说明书一个实施例提供的第三种数据存储方法的流程图;
图7是本说明书一个实施例提供的第四种数据存储方法的流程图;
图8是本说明书一个实施例提供的一种数据存储方法的处理过程流程图;
图9a是本说明书一个实施例提供的一种数据库结构示意图;
图9b是本说明书一个实施例提供的应用数据存储方法的数据库结构示意图;
图10是本说明书一个实施例提供的第一种数据存储装置的结构示意图;
图11是本说明书一个实施例提供的第二种数据存储装置的结构示意图;
图12是本说明书一个实施例提供的第三种数据存储装置的结构示意图;
图13是本说明书一个实施例提供的第四种数据存储装置的结构示意图;
图14是本说明书一个实施例提供的一种计算设备的结构框图。
具体实施方式
在下面的描述中阐述了很多具体细节以便于充分理解本说明书。但是本说明书能够以很多不同于在此描述的其它方式来实施,本领域技术人员可以在不违背本说明书内涵的情况下做类似推广,因此本说明书不受下面公开的具体实施的限制。
在本说明书一个或多个实施例中使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本说明书一个或多个实施例。在本说明书一个或多个实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本说明书一个或多个实施例中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本说明书一个或多个实施例中可能采用术语第一、第二等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本说明书一个或多个实施例范围的情况下,第一也可以被称为第二,类似地,第二也可以被称为第一。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
首先,对本说明书一个或多个实施例涉及的名词术语进行解释。
流式计算:对大规模流动数据在不断变化的运动过程中实时地进行分析,捕捉到可能有用的信息,并把结果发送到下一计算节点的一种数据处理模式,流式计算引擎是指能够实现流式计算的工具。
数据库:数据库是“按照数据结构来组织、存储和管理数据的仓库”,是一个长期存储在计算机内的、有组织的、可共享的、统一管理的大量数据的集合。
行热点:数据库单行因过高的访问频率,超出能够处理的速度,从而引发数据库访问异常,这一现象叫做行热点。
锁操作:由于数据库是一个多用户使用的共享资源,当多个用户并发的存取数据时,在数据库中会产生多个项目同时存取同一数据的情况,若对并发操作不加以控制就可能会造成数据的错误读取和存储,破坏数据库的数据一致性,因此,加锁是实现数据库并发控制的一个非常重要的技术;数据库加锁的流程是:当项目在对某个数据对象进行操作前,先向系统发出请求对其加锁,加锁后的项目就对该数据对象有了一定的控制,在该项目释放锁之前,其他的项目不能对此数据对象进行更新操作。
宕机:宕机是指操作系统无法从一个严重系统错误中恢复过来,或系统硬件层面出问题,导致系统长时间无响应,而不得不重新启动计算机的现象。
在本说明书中,提供了数据存储方法。本说明书一个或者多个实施例同时涉及数据存储装置,数据存储系统,一种计算设备,一种计算机可读存储介质以及一种计算机程序,在下面的实施例中逐一进行详细说明。
随着项目体量的快速增长,数据库单行数据的访问频率越来越高,导致访问请求等锁操作耗时上升甚至请求失败,进一步可能会导致数据库存储单位DB(Dogga Byte)宕机,TR线程池爆满的问题,从而导致用户项目不稳定,因此,如何实现准确、访问成功率高的数据库存储方案成为亟需解决的问题。
通常,可以提前报备数据库中访问频率高的热点数据,人工对数据库进行调整,但人工调整数据库时效性难以保证,会出现遗漏的情况,极大地影响了项目稳定性。
为了解决上述问题,本说明书实施例提供了一种数据存储方案,接收应用端发送的数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息;根据数据行访问结果和数据行属性信息,确定目标数据行,其中,目标数据行是指发生过访问失败,且为指定类型的数据行;将目标数据行的行标识发送至应用端,以使应用端基于行标识生成针对目标数据行的拆分指令,其中,拆分指令用于指示数据库对目标数据行进行拆分存储。通过准确确定目标数据行,进一步生成目标数据行的拆分指令,实现对目标数据行的及时拆分存储,提高了目标数据行的访问成功率,进一步提高用户体验度。
参见图1,图1示出了本说明书一个实施例提供的一种数据存储系统下数据存储方法的处理流程图,数据存储系统包括服务端和应用端;
应用端,用于向服务端发送数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息;
服务端,用于接收应用端发送的数据行访问信息;根据数据行访问结果和数据行属性信息,确定目标数据行,其中,目标数据行是指发生过访问失败,且为指定类型的数据行;将目标数据行的行标识发送至应用端;
应用端,还用于接收服务端发送的目标数据行的行标识;基于行标识生成针对目标数据行的拆分指令,并将拆分指令发送至数据库,以使数据库根据拆分指令对目标数据行进行拆分存储。
应用本说明书实施例的方案,服务端接收应用端发送的数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息;根据数据行访问结果和数据行属性信息,确定目标数据行,其中,目标数据行是指发生过访问失败,且为指定类型的数据行;将目标数据行的行标识发送至应用端,应用端接收服务端发送的目标数据行的行标识;基于行标识生成针对目标数据行的拆分指令,并将拆分指令发送至数据库,以使数据库根据拆分指令对目标数据行进行拆分存储。通过准确确定目标数据行,进一步生成目标数据行的拆分指令,实现对目标数据行的及时拆分存储,提高了目标数据行的访问成功率,进一步提高用户体验度。
本说明书一个或多个实施例提供的方案,可以应用于各种场景下的数据存储,如电商数据存储、教育学习数据存储等等,具体根据实际情况进行选择,本说明书实施例对此不作任何限定。
参见图2,图2示出了本说明书一个实施例提供的第一种数据存储方法的流程图,该数据存储方法应用于数据存储系统中的服务端,数据存储系统包括服务端和应用端,数据存储方法具体包括以下步骤:
步骤202:接收应用端发送的数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息。
本说明书一个或多个实施例中,可以接收应用端发送的数据行访问信息,利用数据行访问信息进一步确定数据行是否需要拆分处理。
具体地,数据行是指数据库中存储数据的结构为行结构。数据访问信息是指针对数据行产生的访问信息,数据行访问信息包括数据行访问结果和数据行属性信息。数据行访问结果是指数据行访问成功或数据行访问失败的结果。数据行属性信息是指数据行的访问属性信息,包括但不限于数据行的访问时间、访问次数、访问频率等等,具体根据实际情况进行选择,本说明书实施例对此不作任何限定。
实际应用中,接收应用端发送的数据行访问信息的方式可以有多种,一种可能的实现方式中,服务端可以接收应用端主动发送的数据行访问信息。另一种可能的实现方式中,服务端可以向应用端发送数据行访问信息发送指令,以使应用端响应于该发送指令发送数据行访问信息,本说明书中接收应用端发送的数据行访问信息的方式具体根据实际情况进行选择,本说明书实施例对此不作任何限定。
需要说明的是,为了保证应用端和服务端之间的可信交互,可以验证应用端和服务端的身份,在身份验证成功的情况下,服务端接收应用端发送的数据行访问信息。
步骤204:根据数据行访问结果和数据行属性信息,确定目标数据行,其中,目标数据行是指发生过访问失败,且为指定类型的数据行。
本说明书一个或多个实施例中,服务端接收应用端发送的数据行访问信息之后,进一步地,可以根据数据行访问结果和数据行属性信息,确定目标数据行。
具体地,指定类型是指预先指定的数据行类型,本说明书实施例中,可以指出现行热点现象的数据行,还可以是其他类型的数据行,如数据存储量超过N的数据行,具体根据实际情况进行选择,本说明书实施例对此不作任何限定。
本说明书一种可能的实现方式中,可以先确定访问失败的数据行,再从访问失败的数据行中确定指定类型的数据行。由于数据行访问结果表征了数据行访问情况,也即访问成功或访问失败。若数据行访问成功,则表示数据行访问正常;若数据行访问失败,则表示数据行访问异常。进一步,可以利用数据行属性信息判断访问失败的数据行是否为目标数据行。
需要说明的是,根据数据行属性信息,确定目标数据行的方式有多种,一种可能的实现方式中,可以判断数据行的访问次数是否大于访问次数阈值,如访问次数阈值为1000,数据行A的访问次数为5000,则确定数据行A为目标数据行。还可以利用数据行的访问频率确定目标数据行,本说明书实施例中对确定目标数据行的方式不作任何限定。
示例性地,假设数据行A的访问结果为失败,则确定数据行A出现异常,进一步地,通过数据行A的数据行访问次数,确定数据行A为目标数据行。
本说明书一种可选的实现方式中,服务端包括消息队列,可以将访问失败的数据行的数据行属性信息添加至消息队列中,利用消息队列中的数据行属性信息确定目标数据行,也即,上述根据数据行访问结果和数据行属性信息,确定目标数据行的步骤,可以包括以下步骤:
根据数据行访问结果,确定上报数据行,其中,上报数据行是指访问失败的数据行;
将上报数据行对应的数据行属性信息添加至消息队列;
从消息队列中提取第一数据行属性信息,其中,第一数据行属性信息是指消息队列中的任一数据行属性信息;
基于第一数据行属性信息,确定目标数据行。
具体地,消息队列是指存储数据行属性信息的队列,在消息队列中,可以对访问失败的数据行的数据行属性信息进行集合,便于服务端进行处理。
示例性地,获取数据行A的数据行访问结果为失败、数据行B的数据行访问结果为成功、数据行C的数据行访问结果为失败,则确定数据行A和数据行C为上报数据行,将数据行A的数据行属性信息A和数据行B的数据行属性信息B添加至消息队列。从消息队列中提取数据行B的访问次数为5000,由于500大于访问次数阈值1000,则确定数据行B为目标数据行。
应用本说明书实施例的方案,根据数据行访问结果,确定上报数据行,其中,上报数据行是指访问失败的数据行,将上报数据行对应的数据行属性信息添加至消息队列,从消息队列中提取第一数据行属性信息,其中,第一数据行属性信息是指消息队列中的任一数据行属性信息,基于第一数据行属性信息,确定目标数据行,利用消息队列存储访问失败的数据行的数据行属性信息,便于服务端批量处理,提高了确定目标数据行的效率。
本说明书另一种可能的实现方式中,可以先确定指定类型的数据行,再根据指定类型的数据行的数据行访问结果确定目标数据行,也即,上述根据数据行访问结果和数据行属性信息,确定目标数据行的步骤,可以包括以下步骤:
根据数据行属性信息,确定热点数据行;
统计热点数据行的访问失败频率;
在访问失败频率大于预设阈值的情况下,确定热点数据行为目标数据行。
具体地,热点数据行为出现行热点现象的数据行,访问失败频率是指热点数据行在单位时间内出现访问失败的次数,预设阈值是指预先设置的访问频率阈值,如1秒失败次数大于50,具体根据实际情况进行选择,本说明书实施例对此不作任何限定。
需要说明的是,根据数据行属性信息,确定热点数据行的方式有多种,一种可能的实现方式中,可以判断数据行的访问次数是否大于访问次数阈值,如访问次数阈值为1000,数据行A的访问次数为5000,则确定数据行A为热点数据行。还可以利用数据行的访问频率确定热点数据行,本说明书实施例中对确定热点数据行的方式不作任何限定。
进一步地,确定热点数据行之后,可以利用热点数据行的访问失败次数确定目标数据行,如出现访问失败次数大于1时,确定热点数据行为目标数据行。还可以利用访问失败频率确定目标数据行,也即统计热点数据行的访问失败频率,在访问失败频率大于预设阈值的情况下,确定热点数据行为目标数据行。
示例性地,假设预设阈值为50,获取热点数据行的访问时间为2秒,访问次数为200,则确定热点数据行的访问失败频率为200/2=100,由于100大于50,则确定热点数据行为目标数据行。
应用本说明书实施例的方案,根据数据行属性信息,确定热点数据行,统计热点数据行的访问失败频率,在访问失败频率大于预设阈值的情况下,确定热点数据行为目标数据行,提高了目标数据行的准确性,进一步保证数据行拆分存储的准确性。
进一步地,服务端还包括流式计算引擎,上述根据数据行访问结果和数据行属性信息,确定目标数据行的步骤,可以包括以下步骤:
调用流式计算引擎,根据数据行访问结果和数据行属性信息,确定目标数据行。
具体地,流式计算引擎是一种能够实现流式计算的计算引擎,可以产生正确的、一致性的、可回放的结果集,能对大规模流动数据在不断变化的运动过程中及时分析。
实际应用中,流式计算引擎可以与消息队列之间建立联系,流式计算引擎通过订阅消息队列,即可及时感知消息队列中的数据变化,及时根据数据队列中新增的数据行属性信息,确定目标数据行。
应用本说明书实施例的方案,调用流式计算引擎,根据数据行访问结果和数据行属性信息,确定目标数据行,提高了确定目标数据行的及时性以及确定效率。
步骤206:将目标数据行的行标识发送至应用端,以使应用端基于行标识生成针对目标数据行的拆分指令,其中,拆分指令用于指示数据库对目标数据行进行拆分存储。
本说明书一个或多个实施例中,接收应用端发送的数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息,根据数据行访问结果和数据行属性信息,确定目标数据行之后,进一步可以将目标数据行的行标识发送至应用端,以使应用端基于行标识生成针对目标数据行的拆分指令,其中,拆分指令用于指示数据库对目标数据行进行拆分存储。
需要说明的是,行标识是指目标数据行的唯一标识,包括但不限于目标数据行的行编号,也可以是项目的唯一ID,由于数据行访问信息是针对一个数据行的,因此,服务端可以直接获得目标数据行的行标识。并且,服务端将目标数据行的行标识发送至应用端时,可以将目标数据行的行标识发送至发送数据行访问信息的应用端,还可以将行标识发送至任一与数据库建立通信的应用端,具体根据实际情况进行选择,本说明书实施例对此不作任何限定。
应用本说明书实施例的方案,接收应用端发送的数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息;根据数据行访问结果和数据行属性信息,确定目标数据行,其中,目标数据行是指发生过访问失败,且为指定类型的数据行;将目标数据行的行标识发送至应用端,以使应用端基于行标识生成针对目标数据行的拆分指令,其中,拆分指令用于指示数据库对目标数据行进行拆分存储。通过准确确定目标数据行,进一步生成目标数据行的拆分指令,实现对目标数据行的及时拆分存储,提高了目标数据行的访问成功率,进一步提高用户体验度。
实际应用中,不仅可以将目标数据行的行标识发送至应用端,还可以确定目标拆分数据,将行标识和目标拆分数据发送至应用端,也即,上述将目标数据行的行标识发送至应用端的步骤,可以包括以下步骤:
确定访问失败频率所属的频率范围;
根据频率范围,确定目标数据行对应的目标拆分数目;
将行标识和目标拆分数目发送至应用端,以使应用端基于行标识和目标拆分数目生成针对目标数据行的拆分指令。
具体地,可以预先设置频率范围与拆分数目之间的对应关系,如频率范围“10-20”对应的拆分数目为“1”,频率范围“21-30”对应的拆分数目为“2”,频率范围“31-40”对应的拆分数目为“3”,具体根据实际情况进行选择,本说明书实施例对此不作任何限定。
示例性地,确定目标数据行A的访问失败频率12所属的频率范围为“10-20”,进一步确定目标数据行A对应的目标拆分数据为1,则将“A、拆分数目1”发送至应用端,以使应用端基于“A、拆分数目1”生成针对目标数据行A的拆分指令。
应用本说明书实施例的方案,确定访问失败频率所属的频率范围,根据频率范围,确定目标数据行对应的目标拆分数目,将行标识和目标拆分数目发送至应用端,以使应用端基于行标识和目标拆分数目生成针对目标数据行的拆分指令,使得应用端可以直接将拆分数目下发至数据库,提高了数据库对目标数据行的拆分效率。
参见图3,图3示出了本说明书一个实施例提供的第二种数据存储方法的流程图,该数据存储方法应用于数据存储系统中的应用端,数据存储系统包括服务端和应用端,数据存储方法具体包括以下步骤:
步骤302:向服务端发送数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息。
本说明书一个或多个实施例中,应用端访问数据库中的数据行,可以将数据行的访问信息发送至服务端。
实际应用中,向服务端发送数据行访问信息的方式,可以是直接向服务端发送数据行访问信息,还可以是接收服务端的数据行访问信息发送指令,将数据行访问信息发送至服务端,具体根据实际情况进行选择,本说明书实施例对此不作任何限定。进一步地,为了保证数据行访问信息的隐私性与安全性,还可以对数据行访问信息进行加密发送。
参见图4a,图4a示出了本说明书一个实施例提供的数据存储方法中一种应用端显示界面示意图,应用端访问数据库时,在显示界面上可以显示数据行访问信息以及“确定发送”控件和“取消发送”控件,以提示用户是否确认将数据行访问信息发送至服务端,用户对“确定发送”控件进行操作,应用端将数据行访问信息发送至服务端,用户对“取消发送”控件进行操作,则应用端不会将数据行访问信息发送至服务端。
值得说明的是,用户对控件进行操作的方式包括点击、双击、触控、鼠标悬停、滑动、长按、语音控制或摇一摇等任一方式,具体根据实际情况进行选择,本说明书实施例对此不作任何限定。
步骤304:接收服务端发送的目标数据行的行标识,其中,目标数据行为服务端根据数据行访问结果和数据行属性信息确定的。
步骤306:基于行标识生成针对目标数据行的拆分指令,并将拆分指令发送至数据库,以使数据库根据拆分指令对目标数据行进行拆分存储。
参见图4b,图4b示出了本说明书一个实施例提供的数据存储方法中另一种应用端显示界面示意图,应用端基于行标识生成针对目标数据行的拆分指令后,在显示界面上可以显示拆分指令以及“确定发送”控件和“取消发送”控件,以提示用户是否确认将拆分指令发送至数据库,用户对“确定发送”控件进行操作,应用端将拆分指令发送至数据库,用户对“取消发送”控件进行操作,则应用端不会将拆分指令发送至数据库。
应用本说明书实施例的方案,应用端向服务端发送数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息,接收服务端发送的目标数据行的行标识,基于行标识生成针对目标数据行的拆分指令,并将拆分指令发送至数据库,以使数据库根据拆分指令对目标数据行进行拆分存储,实现对目标数据行的及时拆分存储,提高了目标数据行的访问成功率,进一步提高用户体验度。
参见图5,图5示出了本说明书一个实施例提供的另一种数据存储系统下数据存储方法的处理流程图,数据存储系统包括服务端和应用端;
应用端,用于获取数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息;根据数据行属性信息,确定指定类型数据行;向服务端发送针对指定类型数据行的访问信息,其中,访问信息包括访问结果;
服务端,用于接收应用端发送的针对指定类型数据行的访问信息,其中,访问信息包括访问结果;根据访问结果,确定目标数据行,其中,目标数据行是指发生过访问失败的指定类型数据行;将目标数据行的行标识发送至应用端;
应用端,还用于接收服务端发送的目标数据行的行标识;基于行标识生成针对目标数据行的拆分指令,并将拆分指令发送至数据库,以使数据库根据拆分指令对目标数据行进行拆分存储。
应用本说明书实施例的方案,应用端获取数据行访问信息,根据数据行属性信息,确定指定类型数据行,向服务端发送针对指定类型数据行的访问信息,服务端接收应用端发送的针对指定类型数据行的访问信息,根据访问结果,确定目标数据行,将目标数据行的行标识发送至应用端,应用端接收服务端发送的目标数据行的行标识,基于行标识生成针对目标数据行的拆分指令,并将拆分指令发送至数据库,以使数据库根据拆分指令对目标数据行进行拆分存储,通过准确确定目标数据行,进一步生成目标数据行的拆分指令,实现对目标数据行的及时拆分存储,提高了目标数据行的访问成功率,进一步提高用户体验度。
需要说明的是,目标数据行是指发生过访问失败的,且为指定类型的数据行,在上述图2和图3所提供的数据存储方法中,是由服务端同时判断数据行是否发生过访问失败以及数据行是否为指定类型。实际应用中,服务端可以直接接收应用端发送的指定类型数据行,只需判断数据行是否发生过访问失败即可,具体实现方式在下面的实施例中进行详细说明。
参见图6,图6示出了本说明书一个实施例提供的第三种数据存储方法的流程图,该数据存储方法应用于数据存储系统中的服务端,数据存储系统包括服务端和应用端,数据存储方法具体包括以下步骤:
步骤602:接收应用端发送的针对指定类型数据行的访问信息,其中,访问信息包括访问结果。
步骤604:根据访问结果,确定目标数据行,其中,目标数据行是指发生过访问失败的指定类型数据行。
具体地,访问结果包括访问成功以及访问失败,可以将访问失败的执行类型数据行确定为目标数据行。当然,还可以进一步根据访问失败频率、访问失败次数确定目标数据行,具体根据实际情况进行选择,本说明书实施例对此不作任何限定。
步骤606:将目标数据行的行标识发送至应用端,以使应用端基于行标识生成针对目标数据行的拆分指令,其中,拆分指令用于指示数据库对目标数据行进行拆分存储。
具体地,步骤602、步骤604、步骤606的具体实现方式可以参见上述步骤202、步骤204、步骤206,本说明书实施例便不再进行赘述。
应用本说明书实施例的方案,接收应用端发送的针对指定类型数据行的访问信息,其中,访问信息包括访问结果,根据访问结果,确定目标数据行,其中,目标数据行是指发生过访问失败的指定类型数据行,将目标数据行的行标识发送至应用端,以使应用端基于行标识生成针对目标数据行的拆分指令,其中,拆分指令用于指示数据库对目标数据行进行拆分存储,通过准确确定目标数据行,进一步生成目标数据行的拆分指令,实现对目标数据行的及时拆分存储,提高了目标数据行的访问成功率,进一步提高用户体验度。
实际应用中,可以由应用端获取数据行访问信息,根据数据行访问信息中的数据行属性信息确定指定类型数据行,将确定的指定类型数据行发送至服务端,具体实现方式在下面的实施例中进行详细说明。
参见图7,图7示出了本说明书一个实施例提供的第四种数据存储方法的流程图,该数据存储方法应用于数据存储系统中的应用端,数据存储系统包括服务端和应用端,数据存储方法具体包括以下步骤:
步骤702:获取数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息。
步骤704:根据数据行属性信息,确定指定类型数据行。
步骤706:向服务端发送针对指定类型数据行的访问信息,其中,访问信息包括访问结果。
步骤708:接收服务端发送的目标数据行的行标识,其中,目标数据行为服务端根据数据行访问结果确定的。
步骤710:基于行标识生成针对目标数据行的拆分指令,并将拆分指令发送至数据库,以使数据库根据拆分指令对目标数据行进行拆分存储。
具体地,步骤702、步骤704、步骤706、步骤708、步骤710的具体实现方式可以参见图2、图3的方案,本说明书实施例便不再进行赘述。
应用本说明书实施例的方案,获取数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息,根据数据行属性信息,确定指定类型数据行,向服务端发送针对指定类型数据行的访问信息,其中,访问信息包括访问结果,接收服务端发送的目标数据行的行标识,基于行标识生成针对目标数据行的拆分指令,并将拆分指令发送至数据库,以使数据库根据拆分指令对目标数据行进行拆分存储,实现对目标数据行的及时拆分存储,提高了目标数据行的访问成功率,进一步提高用户体验度。
下述结合图8,以本说明书提供的数据存储方法在电商场景的应用为例,对所述数据存储方法进行进一步说明。其中,图8示出了本说明书一个实施例提供的一种数据存储方法的处理过程流程图,具体包括:
应用端:将匹配规则下发至服务端中的流式计算引擎,匹配规则如3秒失败数大于50。应用端访问数据库中的ID=2数据行,在访问失败的情况下,将ID=2数据行的数据行访问信息上报至服务端中的消息队列,也即访问异常上报。其中,数据行访问信息包括ID=2数据行的行标识,匹配规则用来判断访问失败是否由于行热点现象引起,且访问失败的数据行是否达到了数据行拆分标准。参见图9a,图9a示出了本说明书一个实施例提供的一种数据库结构示意图,数据库中包括数据表,数据表中包括三个数据行,这三个数据行分别为ID=1数据行、ID=2数据行、ID=3数据行。实际应用中,应用端也可以理解为应用系统。
服务端:流式计算引擎通过订阅消息队列,根据ID=2数据行的行标识获取数据行访问信息,将数据行访问信息与应用端下发的匹配规则进行匹配,确定ID=2数据行为目标数据行,也即出现行热点现象的数据行。将ID=2数据行的行标识推送至应用端。
应用端:基于行标识生成针对目标数据行的拆分指令,并将拆分指令发送至数据库,以使数据库根据拆分指令对目标数据行进行拆分存储。
数据库:接收应用端发送的拆分指令,对ID=2数据行进行拆分,获得ID=2-1数据行、ID=2-2数据行、ID=2-3数据行。参见图9b,图9b示出了本说明书一个实施例提供的应用数据存储方法的数据库结构示意图,数据库中包括数据表,数据表中包括五个数据行,这五个数据行分别为ID=1数据行、ID=2-1数据行、ID=2-2数据行、ID=2-3数据行、ID=3数据行。其中,数据库根据拆分指令对目标数据行进行拆分时,可以一直拆分,直至数据行访问异常现象消失。
应用本说明书实施例的方案,通过流式计算引擎计算单位时间内某个数据行失败的数目,当失败数达到一定条件后,则认为该数据行出现了行热点现象,可以对数据行进行拆分,拆分也可以理解为执行行热点自愈动作,如将数据库热点数据行由1行扩展到3行,由3行共同分担过高的数据访问频率,以此提高单个数据行的访问频率上限,从而缓解单数据行的行热点现象,提高数据行的访问成功率,进一步提高用户体验度。
与上述数据存储方法实施例相对应,本说明书还提供了数据存储装置实施例,图10示出了本说明书一个实施例提供的第一种数据存储装置的结构示意图。如图10所示,该装置应用于数据存储系统中的服务端,数据存储系统包括服务端和应用端,数据存储装置包括:
第一接收模块1002,被配置为接收应用端发送的数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息;
第一确定模块1004,被配置为根据数据行访问结果和数据行属性信息,确定目标数据行,其中,目标数据行是指发生过访问失败,且为指定类型的数据行;
第一发送模块1006,被配置为将目标数据行的行标识发送至应用端,以使应用端基于行标识生成针对目标数据行的拆分指令,其中,拆分指令用于指示数据库对目标数据行进行拆分存储。
可选地,服务端包括消息队列;第一确定模块1004,进一步被配置为根据数据行访问结果,确定上报数据行,其中,上报数据行是指访问失败的数据行;将上报数据行对应的数据行属性信息添加至消息队列;从消息队列中提取第一数据行属性信息,其中,第一数据行属性信息是指消息队列中的任一数据行属性信息;基于第一数据行属性信息,确定目标数据行。
可选地,服务端还包括流式计算引擎;第一确定模块1004,进一步被配置为调用流式计算引擎,根据数据行访问结果和数据行属性信息,确定目标数据行。
可选地,第一确定模块1004,进一步被配置为根据数据行属性信息,确定热点数据行;统计热点数据行的访问失败频率;在访问失败频率大于预设阈值的情况下,确定热点数据行为目标数据行。
可选地,第一发送模块1006,进一步被配置为确定访问失败频率所属的频率范围;根据频率范围,确定目标数据行对应的目标拆分数目;将行标识和目标拆分数目发送至应用端,以使应用端基于行标识和目标拆分数目生成针对目标数据行的拆分指令。
应用本说明书实施例的方案,接收应用端发送的数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息;根据数据行访问结果和数据行属性信息,确定目标数据行,其中,目标数据行是指发生过访问失败,且为指定类型的数据行;将目标数据行的行标识发送至应用端,以使应用端基于行标识生成针对目标数据行的拆分指令,其中,拆分指令用于指示数据库对目标数据行进行拆分存储。通过准确确定目标数据行,进一步生成目标数据行的拆分指令,实现对目标数据行的及时拆分存储,提高了目标数据行的访问成功率,进一步提高用户体验度。
上述为本实施例的一种数据存储装置的示意性方案。需要说明的是,该数据存储装置的技术方案与上述图2所示的数据存储方法的技术方案属于同一构思,数据存储装置的技术方案未详细描述的细节内容,均可以参见上述图2所示的数据存储方法的技术方案的描述。
与上述数据存储方法实施例相对应,本说明书还提供了数据存储装置实施例,图11示出了本说明书一个实施例提供的第二种数据存储装置的结构示意图。如图11所示,该装置应用于数据存储系统中的应用端,数据存储系统包括服务端和应用端,数据存储装置包括:
第二发送模块1102,被配置为向服务端发送数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息;
第二接收模块1104,被配置为接收服务端发送的目标数据行的行标识,其中,目标数据行为服务端根据数据行访问结果和数据行属性信息确定的;
第一生成模块1106,被配置为基于行标识生成针对目标数据行的拆分指令,并将拆分指令发送至数据库,以使数据库根据拆分指令对目标数据行进行拆分存储。
应用本说明书实施例的方案,应用端向服务端发送数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息,接收服务端发送的目标数据行的行标识,基于行标识生成针对目标数据行的拆分指令,并将拆分指令发送至数据库,以使数据库根据拆分指令对目标数据行进行拆分存储,实现对目标数据行的及时拆分存储,提高了目标数据行的访问成功率,进一步提高用户体验度。
上述为本实施例的一种数据存储装置的示意性方案。需要说明的是,该数据存储装置的技术方案与上述的图3所示的数据存储方法的技术方案属于同一构思,数据存储装置的技术方案未详细描述的细节内容,均可以参见上述图3所示的数据存储方法的技术方案的描述。
与上述数据存储方法实施例相对应,本说明书还提供了数据存储装置实施例,图12示出了本说明书一个实施例提供的第三种数据存储装置的结构示意图。如图12所示,该装置应用于数据存储系统中的服务端,数据存储系统包括服务端和应用端,数据存储装置包括:
第三接收模块1202,被配置为接收应用端发送的针对指定类型数据行的访问信息,其中,访问信息包括访问结果;
第二确定模块1204,被配置为根据访问结果,确定目标数据行,其中,目标数据行是指发生过访问失败的指定类型数据行;
第三发送模块1206,被配置为将目标数据行的行标识发送至应用端,以使应用端基于行标识生成针对目标数据行的拆分指令,其中,拆分指令用于指示数据库对目标数据行进行拆分存储。
应用本说明书实施例的方案,接收应用端发送的针对指定类型数据行的访问信息,其中,访问信息包括访问结果,根据访问结果,确定目标数据行,其中,目标数据行是指发生过访问失败的指定类型数据行,将目标数据行的行标识发送至应用端,以使应用端基于行标识生成针对目标数据行的拆分指令,其中,拆分指令用于指示数据库对目标数据行进行拆分存储,通过准确确定目标数据行,进一步生成目标数据行的拆分指令,实现对目标数据行的及时拆分存储,提高了目标数据行的访问成功率,进一步提高用户体验度。
上述为本实施例的一种数据存储装置的示意性方案。需要说明的是,该数据存储装置的技术方案与上述图6所示的数据存储方法的技术方案属于同一构思,数据存储装置的技术方案未详细描述的细节内容,均可以参见上述图6所示的数据存储方法的技术方案的描述。
与上述数据存储方法实施例相对应,本说明书还提供了数据存储装置实施例,图13示出了本说明书一个实施例提供的第四种数据存储装置的结构示意图。如图13所示,该装置应用于数据存储系统中的应用端,数据存储系统包括服务端和应用端,数据存储装置包括:
第一获取模块1302,被配置为获取数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息;
第三确定模块1304,被配置为根据数据行属性信息,确定指定类型数据行;
第四发送模块1306,被配置为向服务端发送针对指定类型数据行的访问信息,其中,访问信息包括访问结果;
第四接收模块1308,被配置为接收服务端发送的目标数据行的行标识,其中,目标数据行为服务端根据数据行访问结果确定的;
第二生成模块1310,被配置为基于行标识生成针对目标数据行的拆分指令,并将拆分指令发送至数据库,以使数据库根据拆分指令对目标数据行进行拆分存储。
应用本说明书实施例的方案,获取数据行访问信息,其中,数据行访问信息包括数据行访问结果和数据行属性信息,根据数据行属性信息,确定指定类型数据行,向服务端发送针对指定类型数据行的访问信息,其中,访问信息包括访问结果,接收服务端发送的目标数据行的行标识,基于行标识生成针对目标数据行的拆分指令,并将拆分指令发送至数据库,以使数据库根据拆分指令对目标数据行进行拆分存储,实现对目标数据行的及时拆分存储,提高了目标数据行的访问成功率,进一步提高用户体验度。
上述为本实施例的一种数据存储装置的示意性方案。需要说明的是,该数据存储装置的技术方案与上述图7所示的数据存储方法的技术方案属于同一构思,数据存储装置的技术方案未详细描述的细节内容,均可以参见上述图7所示的数据存储方法的技术方案的描述。
图14示出了本说明书一个实施例提供的一种计算设备的结构框图。该计算设备1400的部件包括但不限于存储器1410和处理器1420。处理器1420与存储器1410通过总线1430相连接,数据库1450用于保存数据。
计算设备1400还包括接入设备1440,接入设备1440使得计算设备1400能够经由一个或多个网络1460通信。这些网络的示例包括公用交换电话网(PSTN,Public SwitchedTelephone Network)、局域网(LAN,Local Area Network)、广域网(WAN,Wide AreaNetwork)、个域网(PAN,Personal Area Network)或诸如因特网的通信网络的组合。接入设备1440可以包括有线或无线的任何类型的网络接口(例如,网络接口卡(NIC,NetworkInterface Card))中的一个或多个,诸如IEEE802.11无线局域网(WLAN,Wireless LocalArea Networks)无线接口、全球微波互联接入(Wi-MAX,World Interoperability forMicrowave Access)接口、以太网接口、通用串行总线(USB,Universal Serial Bus)接口、蜂窝网络接口、蓝牙接口、近场通信(NFC,Near Field Communication)接口,等等。
在本说明书的一个实施例中,计算设备1400的上述部件以及图14中未示出的其他部件也可以彼此相连接,例如通过总线。应当理解,图14所示的计算设备结构框图仅仅是出于示例的目的,而不是对本说明书范围的限制。本领域技术人员可以根据需要,增添或替换其他部件。
计算设备1400可以是任何类型的静止或移动计算设备,包括移动计算机或移动计算设备(例如,平板计算机、个人数字助理、膝上型计算机、笔记本计算机、上网本等)、移动电话(例如,智能手机)、可佩戴的计算设备(例如,智能手表、智能眼镜等)或其他类型的移动设备,或者诸如台式计算机或PC的静止计算设备。计算设备1400还可以是移动式或静止式的服务器。
其中,处理器1420用于执行如下计算机可执行指令,该计算机可执行指令被处理器执行时实现上述数据存储方法的步骤。
上述为本实施例的一种计算设备的示意性方案。需要说明的是,该计算设备的技术方案与上述的数据存储方法的技术方案属于同一构思,计算设备的技术方案未详细描述的细节内容,均可以参见上述数据存储方法的技术方案的描述。
本说明书一实施例还提供一种计算机可读存储介质,其存储有计算机可执行指令,该计算机可执行指令被处理器执行时实现上述数据存储方法的步骤。
上述为本实施例的一种计算机可读存储介质的示意性方案。需要说明的是,该存储介质的技术方案与上述的数据存储方法的技术方案属于同一构思,存储介质的技术方案未详细描述的细节内容,均可以参见上述数据存储方法的技术方案的描述。
本说明书一实施例还提供一种计算机程序,其中,当所述计算机程序在计算机中执行时,令计算机执行上述数据存储方法的步骤。
上述为本实施例的一种计算机程序的示意性方案。需要说明的是,该计算机程序的技术方案与上述的数据存储方法的技术方案属于同一构思,计算机程序的技术方案未详细描述的细节内容,均可以参见上述数据存储方法的技术方案的描述。
上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
所述计算机指令包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、电载波信号、电信信号以及软件分发介质等。
需要说明的是,对于前述的各方法实施例,为了简便描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本说明书实施例并不受所描述的动作顺序的限制,因为依据本说明书实施例,某些步骤可以采用其它顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定都是本说明书实施例所必须的。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其它实施例的相关描述。
以上公开的本说明书优选实施例只是用于帮助阐述本说明书。可选实施例并没有详尽叙述所有的细节,也不限制该发明仅为所述的具体实施方式。显然,根据本说明书实施例的内容,可作很多的修改和变化。本说明书选取并具体描述这些实施例,是为了更好地解释本说明书实施例的原理和实际应用,从而使所属技术领域技术人员能很好地理解和利用本说明书。本说明书仅受权利要求书及其全部范围和等效物的限制。

Claims (14)

1.一种数据存储方法,应用于数据存储系统中的服务端,所述数据存储系统包括服务端和应用端,所述方法包括:
接收应用端发送的数据行访问信息,其中,所述数据行访问信息包括数据行访问结果和数据行属性信息;
根据所述数据行访问结果和所述数据行属性信息,确定目标数据行,其中,所述目标数据行是指发生过访问失败,且为指定类型的数据行;
将所述目标数据行的行标识发送至所述应用端,以使所述应用端基于所述行标识生成针对所述目标数据行的拆分指令,其中,所述拆分指令用于指示数据库对所述目标数据行进行拆分存储。
2.根据权利要求1所述的方法,所述服务端包括消息队列;所述根据所述数据行访问结果和所述数据行属性信息,确定目标数据行的步骤,包括:
根据所述数据行访问结果,确定上报数据行,其中,所述上报数据行是指访问失败的数据行;
将所述上报数据行对应的数据行属性信息添加至所述消息队列;
从所述消息队列中提取第一数据行属性信息,其中,所述第一数据行属性信息是指所述消息队列中的任一数据行属性信息;
基于所述第一数据行属性信息,确定目标数据行。
3.根据权利要求1或2所述的方法,所述服务端还包括流式计算引擎;所述根据所述数据行访问结果和所述数据行属性信息,确定目标数据行的步骤,包括:
调用所述流式计算引擎,根据所述数据行访问结果和所述数据行属性信息,确定所述目标数据行。
4.根据权利要求1所述的方法,所述根据所述数据行访问结果和所述数据行属性信息,确定目标数据行的步骤,包括:
根据所述数据行属性信息,确定热点数据行;
统计所述热点数据行的访问失败频率;
在所述访问失败频率大于预设阈值的情况下,确定所述热点数据行为目标数据行。
5.根据权利要求4所述的方法,所述将所述目标数据行的行标识发送至所述应用端的步骤,包括:
确定所述访问失败频率所属的频率范围;
根据所述频率范围,确定所述目标数据行对应的目标拆分数目;
将所述行标识和所述目标拆分数目发送至所述应用端,以使所述应用端基于所述行标识和所述目标拆分数目生成针对所述目标数据行的拆分指令。
6.一种数据存储方法,应用于数据存储系统中的应用端,所述数据存储系统包括服务端和应用端,所述方法包括:
向所述服务端发送数据行访问信息,其中,所述数据行访问信息包括数据行访问结果和数据行属性信息;
接收所述服务端发送的目标数据行的行标识,其中,所述目标数据行为所述服务端根据所述数据行访问结果和所述数据行属性信息确定的;
基于所述行标识生成针对所述目标数据行的拆分指令,并将所述拆分指令发送至数据库,以使所述数据库根据所述拆分指令对所述目标数据行进行拆分存储。
7.一种数据存储方法,应用于数据存储系统中的服务端,所述数据存储系统包括服务端和应用端,所述方法包括:
接收应用端发送的针对指定类型数据行的访问信息,其中,所述访问信息包括访问结果;
根据所述访问结果,确定目标数据行,其中,所述目标数据行是指发生过访问失败的指定类型数据行;
将所述目标数据行的行标识发送至所述应用端,以使所述应用端基于所述行标识生成针对所述目标数据行的拆分指令,其中,所述拆分指令用于指示数据库对所述目标数据行进行拆分存储。
8.一种数据存储方法,应用于数据存储系统中的应用端,所述数据存储系统包括服务端和应用端,所述方法包括:
获取数据行访问信息,其中,所述数据行访问信息包括数据行访问结果和数据行属性信息;
根据所述数据行属性信息,确定指定类型数据行;
向所述服务端发送针对所述指定类型数据行的访问信息,其中,所述访问信息包括访问结果;
接收所述服务端发送的目标数据行的行标识,其中,目标数据行为服务端根据数据行访问结果确定的;
基于所述行标识生成针对所述目标数据行的拆分指令,并将所述拆分指令发送至数据库,以使所述数据库根据所述拆分指令对所述目标数据行进行拆分存储。
9.一种数据存储系统,所述数据存储系统包括服务端和应用端;
所述应用端,用于向所述服务端发送数据行访问信息,其中,所述数据行访问信息包括数据行访问结果和数据行属性信息;
所述服务端,用于接收应用端发送的数据行访问信息;根据所述数据行访问结果和所述数据行属性信息,确定目标数据行,其中,所述目标数据行是指发生过访问失败,且为指定类型的数据行;将所述目标数据行的行标识发送至所述应用端;
所述应用端,还用于接收所述服务端发送的目标数据行的行标识;基于所述行标识生成针对所述目标数据行的拆分指令,并将所述拆分指令发送至数据库,以使所述数据库根据所述拆分指令对所述目标数据行进行拆分存储。
10.一种数据存储系统,所述数据存储系统包括服务端和应用端;
所述应用端,用于获取数据行访问信息,其中,所述数据行访问信息包括数据行访问结果和数据行属性信息;根据所述数据行属性信息,确定指定类型数据行;向所述服务端发送针对所述指定类型数据行的访问信息,其中,所述访问信息包括访问结果;
所述服务端,用于接收应用端发送的针对指定类型数据行的访问信息;根据所述访问结果,确定目标数据行,其中,所述目标数据行是指发生过访问失败的指定类型数据行;将所述目标数据行的行标识发送至所述应用端;
所述应用端,还用于接收所述服务端发送的目标数据行的行标识;基于所述行标识生成针对所述目标数据行的拆分指令,并将所述拆分指令发送至数据库,以使所述数据库根据所述拆分指令对所述目标数据行进行拆分存储。
11.一种数据存储装置,应用于数据存储系统中的服务端,所述数据存储系统包括服务端和应用端,所述装置包括:
第一接收模块,被配置为接收应用端发送的数据行访问信息,其中,所述数据行访问信息包括数据行访问结果和数据行属性信息;
第一确定模块,被配置为根据所述数据行访问结果和所述数据行属性信息,确定目标数据行,其中,所述目标数据行是指发生过访问失败,且为指定类型的数据行;
第一发送模块,被配置为将所述目标数据行的行标识发送至所述应用端,以使所述应用端基于所述行标识生成针对所述目标数据行的拆分指令,其中,所述拆分指令用于指示数据库对所述目标数据行进行拆分存储。
12.一种数据存储装置,应用于数据存储系统中的应用端,所述数据存储系统包括服务端和应用端,所述装置包括:
第二发送模块,被配置为向所述服务端发送数据行访问信息,其中,所述数据行访问信息包括数据行访问结果和数据行属性信息;
第二接收模块,被配置为接收所述服务端发送的目标数据行的行标识,其中,所述目标数据行为所述服务端根据所述数据行访问结果和所述数据行属性信息确定的;
第一生成模块,被配置为基于所述行标识生成针对所述目标数据行的拆分指令,并将所述拆分指令发送至数据库,以使所述数据库根据所述拆分指令对所述目标数据行进行拆分存储。
13.一种计算设备,包括:
存储器和处理器;
所述存储器用于存储计算机可执行指令,所述处理器用于执行所述计算机可执行指令,该计算机可执行指令被处理器执行时实现权利要求1至5或权利要求6或权利要求7或权利要求8任意一项所述数据存储方法的步骤。
14.一种计算机可读存储介质,其存储有计算机可执行指令,该计算机可执行指令被处理器执行时实现权利要求1至5或权利要求6或权利要求7或权利要求8任意一项所述数据存储方法的步骤。
CN202210988225.7A 2022-08-17 2022-08-17 数据存储方法以及装置 Pending CN115391308A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210988225.7A CN115391308A (zh) 2022-08-17 2022-08-17 数据存储方法以及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210988225.7A CN115391308A (zh) 2022-08-17 2022-08-17 数据存储方法以及装置

Publications (1)

Publication Number Publication Date
CN115391308A true CN115391308A (zh) 2022-11-25

Family

ID=84121647

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210988225.7A Pending CN115391308A (zh) 2022-08-17 2022-08-17 数据存储方法以及装置

Country Status (1)

Country Link
CN (1) CN115391308A (zh)

Similar Documents

Publication Publication Date Title
CN113297166B (zh) 数据处理系统、方法以及装置
CN112380093A (zh) 运维处理方法、装置及计算机设备
CN108390933B (zh) 消息分发方法、装置、服务器及存储介质
CN113157648A (zh) 基于区块链的分布式数据存储方法、装置、节点及系统
CN111221484B (zh) 投屏方法及装置
CN107580032B (zh) 数据处理方法、装置及设备
CN113687964B (zh) 数据处理方法、装置、电子设备、存储介质及程序产品
CN117278434A (zh) 流量回放方法、装置、电子设备
CN114416485A (zh) 数据处理方法及装置
CN111338834A (zh) 数据存储方法和装置
CN114218540A (zh) 项目访问方法及装置
CN113946816A (zh) 基于云服务的鉴权方法、装置、电子设备和存储介质
CN113626863A (zh) 数据处理方法及装置
CN113297229B (zh) 路由读请求、反馈报文的方法以及各自装置、数据库
CN111666509A (zh) 基于跨网络地理数据的云查询方法及系统
CN115391308A (zh) 数据存储方法以及装置
CN111327680A (zh) 认证数据同步方法、装置、系统、计算机设备和存储介质
CN115757639A (zh) 数据源同步方法、装置、电子设备及存储介质
CN113204449B (zh) 会话备份方法、计算机可读存储介质及终端设备
CN113312669B (zh) 密码同步方法、设备及存储介质
US20140201233A1 (en) Method, device, and system for uploading data
US20140108420A1 (en) Index creation method and system
CN110941412A (zh) 基于图片化实现多终端动画协同浏览的方法、系统及终端
CN114691051B (zh) 数据处理方法以及装置
CN116861455B (zh) 事件数据处理方法、系统、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination