CN108959341A - 一种数据同步的方法、装置及设备 - Google Patents

一种数据同步的方法、装置及设备 Download PDF

Info

Publication number
CN108959341A
CN108959341A CN201810297307.0A CN201810297307A CN108959341A CN 108959341 A CN108959341 A CN 108959341A CN 201810297307 A CN201810297307 A CN 201810297307A CN 108959341 A CN108959341 A CN 108959341A
Authority
CN
China
Prior art keywords
data
checked
caching
version identifier
database
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810297307.0A
Other languages
English (en)
Other versions
CN108959341B (zh
Inventor
杜娟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Advanced Nova Technology Singapore Holdings Ltd
Original Assignee
Alibaba Group Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba Group Holding Ltd filed Critical Alibaba Group Holding Ltd
Priority to CN201810297307.0A priority Critical patent/CN108959341B/zh
Publication of CN108959341A publication Critical patent/CN108959341A/zh
Priority to SG11202006069SA priority patent/SG11202006069SA/en
Priority to PCT/CN2019/073838 priority patent/WO2019192258A1/zh
Priority to TW108104570A priority patent/TWI735845B/zh
Priority to US16/886,568 priority patent/US20200293494A1/en
Application granted granted Critical
Publication of CN108959341B publication Critical patent/CN108959341B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/17Details of further file system functions
    • G06F16/178Techniques for file synchronisation in file systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2455Query execution
    • G06F16/24552Database cache management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F12/00Accessing, addressing or allocating within memory systems or architectures
    • G06F12/02Addressing or allocation; Relocation
    • G06F12/08Addressing or allocation; Relocation in hierarchically structured memory systems, e.g. virtual memory systems
    • G06F12/0802Addressing of a memory level in which the access to the desired data or data block requires associative addressing means, e.g. caches
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00Digital computing or data processing equipment or methods, specially adapted for specific functions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2212/00Indexing scheme relating to accessing, addressing or allocation within memory systems or architectures
    • G06F2212/60Details of cache memory

Abstract

本说明书公开一种数据同步的方法、装置及设备,该方法中应用可以确定待查询数据,并从缓存中获取该待查询数据对应的版本标识,当确定该待查询数据对应的版本标识与设定版本标识不一致时,则从数据库中查询该待查询数据,并将从该数据库中获取到的待查询数据替换存储在该缓存中的该待查询数据。

Description

一种数据同步的方法、装置及设备
技术领域
本说明书涉及计算机技术领域,尤其涉及一种数据同步的方法、装置及设备。
背景技术
为了满足用户日益增长的数据查询需求,当前,可以将一些常用的用户数据保存在缓存中,这样不仅能够提高数据的查询效率,同时还能有效的缓解数据库的查询压力,如图1所示。
图1为本说明书提供的现有技术中用户通过服务端进行数据查询的示意图。
对于存储在缓存中的数据value1来说,服务端可以在接收到携带有key1的数据查询请求后,直接从缓存中查询到key1对应的数据value1。而对于未存储在缓存中的数据value4来说,服务端可以通过接收到数据查询请求中携带的key4,从缓存中查询是否存在key4对应的数据。若确定缓存中未存储有key4对应的数据,则可以向数据库查询key4对应的数据,进而从数据库中获取到key4对应的数据value4。同时,服务端可以将key4和value4按照对应关系存储在缓存中,以便后续用户能够从缓存中快速的查询key4对应的数据。
在实际应用中,可能会出现数据库存储的业务数据发生了变化,但缓存中存储的业务数据却并未发生变化的情况出现,如图2所示。
图2为本说明书提供的数据库和缓存中存储的数据不一致的示意图。
例如,假设用户1起初并未设置用于进行身份验证的验证信息,则数据库中存储的用户1的用户数据value1中将不包含有用户的验证信息,同时,缓存中存储的用户数据value1中也将不包含有用户的验证信息。而随着用户1对身份验证需求的不断增加,用户1可以在服务端设置用于进行身份验证的验证信息,这样,用户1的验证信息将进一步作为用户1的用户数据进行保存,用户数据value1也将随着变更为value1′。然而,缓存中存储的依然是value1,这样一来,服务端将无法通过从缓存中获取到的用户数据value1,对用户1实施身份验证。
基于现有技术,需要一种有效的数据同步方式。
发明内容
本说明书提供一种数据同步的方法,用以解决现有技术中无法对数据库和缓存中的数据进行同步的问题。
本说明书提供了一种数据同步的方法,包括:
应用确定待查询数据;
从缓存中获取所述待查询数据对应的版本标识;
当确定所述待查询数据对应的版本标识与设定版本标识不一致时,则从数据库中查询所述待查询数据,并将从所述数据库中获取到的待查询数据替换存储在所述缓存中的所述待查询数据。
本说明书提供一种数据同步的装置,用以解决现有技术中无法对数据库和缓存中的数据进行同步的问题。
本说明书提供了一种数据同步的装置,包括:
确定模块,确定待查询数据;
获取模块,从缓存中获取所述待查询数据对应的版本标识;
处理模块,当确定所述待查询数据对应的版本标识与设定版本标识不一致时,则从数据库中查询所述待查询数据,并将从所述数据库中获取到的待查询数据替换存储在所述缓存中的所述待查询数据。
本说明书提供一种数据同步的设备,用以解决现有技术中无法对数据库和缓存中的数据进行同步的问题。
本说明书提供了一种数据同步的设备,包括一个或多个存储器以及处理器,所述存储器存储程序,并且被配置成由所述一个或多个处理器执行以下步骤:
确定待查询数据;
从缓存中获取所述待查询数据对应的版本标识;
当确定所述待查询数据对应的版本标识与设定版本标识不一致时,则从数据库中查询所述待查询数据,并将从所述数据库中获取到的待查询数据替换存储在所述缓存中的所述待查询数据。
本说明书采用的上述至少一个技术方案能够达到以下有益效果:
在本说明书一个或多个实施例中,应用可以确定待查询数据,并从缓存中获取该待查询数据对应的版本标识,当确定该待查询数据对应的版本标识与设定版本标识不一致时,则从数据库中查询该待查询数据,并将从该数据库中获取到的待查询数据替换存储在该缓存中的该待查询数据。
从上述方法中可以看出,由于可以通过比对缓存中存储的待查询数据对应的版本标识与设定版本标识是否一致,来确定缓存和数据库中分别存储的该待查询数据是否一致,并在确定出两者不一致时,进行数据同步,从而有效的保证了数据库和缓存中的数据一致性。
附图说明
此处所说明的附图用来提供对本说明书的进一步理解,构成本说明书的一部分,本说明书的示意性实施例及其说明用于解释本说明书,并不构成对本说明书的不当限定。在附图中:
图1为本说明书提供的现有技术中用户通过服务端进行数据查询的示意图;
图2为本说明书提供的数据库和缓存中存储的数据不一致的示意图;
图3为本说明书提供的数据同步的过程示意图;
图4为本说明书提供的应用从缓存中获取待查询数据对应的版本标识的示意图;
图5为本说明书提供的数据同步的装置示意图;
图6为本说明书提供的数据同步的设备示意图。
具体实施方式
为了使本技术领域的人员更好地理解本说明书一个或多个实施例中的技术方案,下面将结合本说明书一个或多个实施例中的附图,对本说明书一个或多个实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本说明书一部分实施例,而不是全部的实施例。基于本说明书中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都应当属于本说明书保护的范围。
图3为本说明书提供的数据同步的过程示意图,具体包括以下步骤:
S300:应用确定待查询数据。
在本说明书中,应用可以在业务执行过程中确定待查询数据。其中,该待查询数据可以是应用根据用户发送的数据查询请求确定出的,即,用户需要通过该应用执行数据查询业务。
当然,该待查询数据也可以是应用对用户发送的业务请求进行处理过程中,确定出的执行该业务时所要查询的数据。例如,应用可以根据用户发送的支付请求(即上述提到的业务请求),确定在对该支付请求对应的支付业务进行处理的过程中,需要查询该用户的账户数据,这里提到的账户数据即为上述的待查询数据。
这里提到的应用可以指能够对用户执行的业务进行处理的服务端,当然也可以是指安装在诸如手机、电脑等终端设备上的客户端。随着业务的不断更新,该应用在执行业务过程的业务逻辑、数据格式等也将会发生相应的变化。相应的,该应用每更新一次,其对应的版本信息也将随之发生变化。在本说明书中,当监测到该应用的版本信息发生变更时,可以根据变更后的版本信息确定出设定版本标识,以通过该设定版本标识,对后续从缓存中获取到的待查询数据对应的版本标识进行比对。换句话说,该设定版本标识将随着该应用的更新而发生改变,变更为与该应用当前的版本信息相对应的版本标识。
S302:从缓存中获取所述待查询数据对应的版本标识。
应用在确定该待查询数据后,可以根据确定出的该待查询数据对应的数据标识,从缓存中查询该数据标识对应的数据。这里提到的数据标识用于标识需要查询的数据。例如,缓存中以key-value形式存储数据时,key即为数据标识,value即为数据标识key对应的数据。这里提到的缓存可以是设置于业务系统中的分布式缓存。
应用可以通过确定出的该数据标识,从缓存中查询与该数据标识对应的数据。若确定该分布式缓存中存储有与数据标识对应的数据(即待查询数据),则可以获取该待查询数据对应的版本标识,其中,该版本标识可以版本号、版本变更的时间信息等形式出现。
在本说明书中,该版本标识可以携带在缓存中存储的该待查询数据中。相应的,应用可以根据确定出的数据标识,从该缓存中获取与该数据标识对应的待查询数据,进而从该待查询数据中获取该待查询数据对应的版本标识,如图4所示。
图4为本说明书提供的应用从缓存中获取待查询数据对应的版本标识的示意图。
当缓存中以key-value形式存储数据时,应用可以根据待查询数据对应的查询主键key1,从缓存中查询出与该key1对应的值:value1,其中,该value1中携带有版本标识V1,因此,应用可以从该value1中获取出该value1(即待查询数据)对应的版本标识。
当然,在本说明书中,该版本标识也可以携带在缓存中存储的数据所对应的标识信息,这里可以将该标识信息称之为存储在缓存中的数据对应的实际标识。相应的,应用在确定出待查询数据对应的数据标识后,可以从该缓存中确定与该数据标识相匹配的实际标识,进而从该实际标识中获取该待查询数据对应的版本标识。
例如,假设待查询数据value1在缓存中以key1_V1-value1的形式存储,该待查询数据value1对应的实际标识为key1_V1,V1即为携带在该实际标识中的版本标识。因此,应用可以根据待查询数据对应的数据标识key1,从缓存中确定与该数据标识key1相匹配的实际标识key1_V1,继而可以从该实际标识key1_V1中确定出该待查询数据value1对应的版本标识V1。
S304:当确定所述待查询数据对应的版本标识与设定版本标识不一致时,则从数据库中查询所述待查询数据,并将从所述数据库中获取到的待查询数据替换存储在所述缓存中的待查询数据。
应用从缓存中获取到待查询数据对应的版本标识后,可以将该版本标识与设定版本标识进行比对,当确定两者不一致时,则可以确定数据库存储的该待查询数据和缓存中存储的该待查询数据不同步,进而将数据库中存储的该待查询数据同步至缓存中。
具体的,当确定从缓存中获取到的待查询数据对应的版本标识与设定版本标识不一致时,则可以失效该缓存中存储的待查询数据,并将从数据库中获取到的待查询数据存储在缓存中。
例如,在图4中,应用当前的版本标识为V2,可以将该版本标识V2作为设定版本标识。并且,数据库中存储的各数据对应的版本标识均为V2。应用从缓存中获取到待查询数据value1对应的版本标识V1后,确定出版本标识V1与该设定版本标识V2不符,则可以通过预设的指令,强制失效缓存中存储的待查询数据V1。同时,该应用可以通过该待查询数据对应的数据标识key1,从数据库中查询出该数据标识key1对应的数据value1′,以获取数据value1′,并将value1′存储在缓存中。
即,相当于在确定缓存中存储的待查询数据对应的版本标识与设定版本标识不一致时,通过数据库中存储的版本标识与设定版本标识相一致的数据替换存储在缓存中的待查询数据,从而完成数据库和缓存中的数据同步。
当然,若是确定待查询数据对应的版本标识与该设定版本标识相一致,则可以确定出数据库中存储的该待查询数据与缓存中存储的待查询数据相同步,进而可直接获取缓存中存储的待查询数据。
从上述可以看出,在本说明书提供的数据同步方法中,相当于以数据库中存储的数据的版本标识为基准,来判断缓存中存储的数据的版本标识与数据库中存储的数据的版本标识是否一致,以此来实现数据库和缓存中的数据同步,从而有效的保证了数据库和缓存中的数据一致性。
需要说明的是,上述提到的设定版本标识可以是根据应用当前的版本信息确定出的版本标识,也可以是根据当前数据库中存储的数据对应的版本标识。应用当前的版本信息所对应的版本标识可以与数据库中存储的数据对应的版本标识相一致,当然也可不一致。但无论是以应用当前的版本信息确定出的版本标识作为设定版本标识,还是以数据库中存储的数据对应的版本标识为设定版本标识,若是从缓存中获取到的待查询数据的版本标识与该设定版本标识不一致,即可将数据库中存储的待查询数据替换缓存中存储的待查询数据,以实现该待查询数据在数据库和缓存中的数据同步。
以上为本说明书的一个或多个实施例提供的数据同步的方法,基于同样的思路,本说明书还提供了相应的数据同步的装置,如图5所示。
图5为本说明书提供的数据同步的装置示意图,具体包括:
确定模块501,确定待查询数据;
获取模块502,从缓存中获取所述待查询数据对应的版本标识;
处理模块503,当确定所述待查询数据对应的版本标识与设定版本标识不一致时,则从数据库中查询所述待查询数据,并将从所述数据库中获取到的待查询数据替换存储在所述缓存中的所述待查询数据。
所述处理模块503,当确定所述待查询数据对应的版本标识与所述设定版本标识相一致时,则从所述缓存中获取所述待查询数据。
所述确定模块501,确定所述待查询数据对应的数据标识;
所述获取模块502,根据确定出的所述数据标识,从所述缓存中获取与所述数据标识对应的待查询数据;从所述待查询数据中获取所述待查询数据对应的版本标识。
所述确定模块501,确定所述待查询数据对应的数据标识;
所述获取模块502,从所述缓存中确定与所述数据标识相匹配的实际标识;从所述实际标识中获取所述待查询数据对应的版本标识。
所述处理模块503,失效所述缓存中存储的所述待查询数据;将从所述数据库中获取到的待查询数据存储在所述缓存中。
所述装置还包括:
监测模块504,当监测到所述装置的版本信息发生变更时,根据变更后的版本信息确定所述设定版本标识。
基于上述说明的数据同步的方法,本说明书还对应提供了一种用于数据同步的设备,如图6所示。该设备包括一个或多个存储器以及处理器,所述存储器存储程序,并且被配置成由所述一个或多个处理器执行以下步骤:
确定待查询数据;
从缓存中获取所述待查询数据对应的版本标识;
当确定所述待查询数据对应的版本标识与设定版本标识不一致时,则从数据库中查询所述待查询数据,并将从所述数据库中获取到的待查询数据替换存储在所述缓存中的所述待查询数据。
在本说明书的一个或多个实施例中,应用可以确定待查询数据,并从缓存中获取该待查询数据对应的版本标识,当确定该待查询数据对应的版本标识与设定版本标识不一致时,则从数据库中查询该待查询数据,并将从该数据库中获取到的待查询数据替换存储在该缓存中的该待查询数据。
从上述方法中可以看出,由于可以通过比对缓存中存储的待查询数据对应的版本标识与设定版本标识是否一致,来确定缓存和数据库中分别存储的该待查询数据是否一致,并在确定出两者不一致时,进行数据同步,从而有效的保证了数据库和缓存中的数据一致性。
在20世纪90年代,对于一个技术的改进可以很明显地区分是硬件上的改进(例如,对二极管、晶体管、开关等电路结构的改进)还是软件上的改进(对于方法流程的改进)。然而,随着技术的发展,当今的很多方法流程的改进已经可以视为硬件电路结构的直接改进。设计人员几乎都通过将改进的方法流程编程到硬件电路中来得到相应的硬件电路结构。因此,不能说一个方法流程的改进就不能用硬件实体模块来实现。例如,可编程逻辑器件(Programmable Logic Device,PLD)(例如现场可编程门阵列(Field Programmable GateArray,FPGA))就是这样一种集成电路,其逻辑功能由用户对器件编程来确定。由设计人员自行编程来把一个数字系统“集成”在一片PLD上,而不需要请芯片制造厂商来设计和制作专用的集成电路芯片。而且,如今,取代手工地制作集成电路芯片,这种编程也多半改用“逻辑编译器(logic compiler)”软件来实现,它与程序开发撰写时所用的软件编译器相类似,而要编译之前的原始代码也得用特定的编程语言来撰写,此称之为硬件描述语言(Hardware Description Language,HDL),而HDL也并非仅有一种,而是有许多种,如ABEL(Advanced Boolean Expression Language)、AHDL(Altera Hardware DescriptionLanguage)、Confluence、CUPL(Cornell University Programming Language)、HDCal、JHDL(Java Hardware Description Language)、Lava、Lola、MyHDL、PALASM、RHDL(RubyHardware Description Language)等,目前最普遍使用的是VHDL(Very-High-SpeedIntegrated Circuit Hardware Description Language)与Verilog。本领域技术人员也应该清楚,只需要将方法流程用上述几种硬件描述语言稍作逻辑编程并编程到集成电路中,就可以很容易得到实现该逻辑方法流程的硬件电路。
控制器可以按任何适当的方式实现,例如,控制器可以采取例如微处理器或处理器以及存储可由该(微)处理器执行的计算机可读程序代码(例如软件或固件)的计算机可读介质、逻辑门、开关、专用集成电路(Application Specific Integrated Circuit,ASIC)、可编程逻辑控制器和嵌入微控制器的形式,控制器的例子包括但不限于以下微控制器:ARC 625D、Atmel AT91SAM、Microchip PIC18F26K20以及Silicone Labs C8051F320,存储器控制器还可以被实现为存储器的控制逻辑的一部分。本领域技术人员也知道,除了以纯计算机可读程序代码方式实现控制器以外,完全可以通过将方法步骤进行逻辑编程来使得控制器以逻辑门、开关、专用集成电路、可编程逻辑控制器和嵌入微控制器等的形式来实现相同功能。因此这种控制器可以被认为是一种硬件部件,而对其内包括的用于实现各种功能的装置也可以视为硬件部件内的结构。或者甚至,可以将用于实现各种功能的装置视为既可以是实现方法的软件模块又可以是硬件部件内的结构。
上述实施例阐明的系统、装置、模块或单元,具体可以由计算机芯片或实体实现,或者由具有某种功能的产品来实现。一种典型的实现设备为计算机。具体的,计算机例如可以为个人计算机、膝上型计算机、蜂窝电话、相机电话、智能电话、个人数字助理、媒体播放器、导航设备、电子邮件设备、游戏控制台、平板计算机、可穿戴设备或者这些设备中的任何设备的组合。
为了描述的方便,描述以上装置时以功能分为各种单元分别描述。当然,在实施本说明书时可以把各单元的功能在同一个或多个软件和/或硬件中实现。
本领域内的技术人员应明白,本说明书的实施例可提供为方法、系统、或计算机程序产品。因此,本说明书可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本说明书可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本说明书是参照根据本说明书一个或多个实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中,计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。
本说明书可以在由计算机执行的计算机可执行指令的一般上下文中描述,例如程序模块。一般地,程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等等。也可以在分布式计算环境中实践本说明书的一个或多个实施例,在这些分布式计算环境中,由通过通信网络而被连接的远程处理设备来执行任务。在分布式计算环境中,程序模块可以位于包括存储设备在内的本地和远程计算机存储介质中。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
以上所述仅为本说明书的一个或多个实施例而已,并不用于限制本说明书。对于本领域技术人员来说,本说明书的一个或多个实施例可以有各种更改和变化。凡在本说明书的一个或多个实施例的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本说明书的权利要求范围之内。

Claims (13)

1.一种数据同步的方法,包括:
应用确定待查询数据;
从缓存中获取所述待查询数据对应的版本标识;
当确定所述待查询数据对应的版本标识与设定版本标识不一致时,则从数据库中查询所述待查询数据,并将从所述数据库中获取到的待查询数据替换存储在所述缓存中的所述待查询数据。
2.如权利要求1所述的方法,所述方法还包括:当确定所述待查询数据对应的版本标识与所述设定版本标识相一致时,则从所述缓存中获取所述待查询数据。
3.如权利要求1所述的方法,应用确定待查询数据,具体包括:
确定所述待查询数据对应的数据标识;
从缓存中获取所述待查询数据对应的版本标识,具体包括:
根据确定出的所述数据标识,从所述缓存中获取与所述数据标识对应的待查询数据;
从所述待查询数据中获取所述待查询数据对应的版本标识。
4.如权利要求1所述的方法,应用确定待查询数据,具体包括:
确定所述待查询数据对应的数据标识;
从缓存中获取所述待查询数据对应的版本标识,具体包括:
从所述缓存中确定与所述数据标识相匹配的实际标识;
从所述实际标识中获取所述待查询数据对应的版本标识。
5.如权利要求1所述的方法,将从所述数据库中获取到的待查询数据替换存储在所述缓存中的所述待查询数据,具体包括:
失效所述缓存中存储的所述待查询数据;
将从所述数据库中获取到的待查询数据存储在所述缓存中。
6.如权利要求1~5任一所述的方法,所述方法还包括:
当监测到所述应用的版本信息发生变更时,根据变更后的版本信息确定所述设定版本标识。
7.一种数据同步的装置,包括:
确定模块,确定待查询数据;
获取模块,从缓存中获取所述待查询数据对应的版本标识;
处理模块,当确定所述待查询数据对应的版本标识与设定版本标识不一致时,则从数据库中查询所述待查询数据,并将从所述数据库中获取到的待查询数据替换存储在所述缓存中的所述待查询数据。
8.如权利要求7所述的装置,所述处理模块,当确定所述待查询数据对应的版本标识与所述设定版本标识相一致时,则从所述缓存中获取所述待查询数据。
9.如权利要求7所述的装置,所述确定模块,确定所述待查询数据对应的数据标识;
所述获取模块,根据确定出的所述数据标识,从所述缓存中获取与所述数据标识对应的待查询数据;从所述待查询数据中获取所述待查询数据对应的版本标识。
10.如权利要求7所述的装置,所述确定模块,确定所述待查询数据对应的数据标识;
所述获取模块,从所述缓存中确定与所述数据标识相匹配的实际标识;从所述实际标识中获取所述待查询数据对应的版本标识。
11.如权利要求7所述的装置,所述处理模块,失效所述缓存中存储的所述待查询数据;将从所述数据库中获取到的待查询数据存储在所述缓存中。
12.如权利要求7~11任一所述的装置,所述装置还包括:
监测模块,当监测到所述装置的版本信息发生变更时,根据变更后的版本信息确定所述设定版本标识。
13.一种数据同步的设备,包括一个或多个存储器以及处理器,所述存储器存储程序,并且被配置成由所述一个或多个处理器执行以下步骤:
确定待查询数据;
从缓存中获取所述待查询数据对应的版本标识;
当确定所述待查询数据对应的版本标识与设定版本标识不一致时,则从数据库中查询所述待查询数据,并将从所述数据库中获取到的待查询数据替换存储在所述缓存中的所述待查询数据。
CN201810297307.0A 2018-04-04 2018-04-04 一种数据同步的方法、装置及设备 Active CN108959341B (zh)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN201810297307.0A CN108959341B (zh) 2018-04-04 2018-04-04 一种数据同步的方法、装置及设备
SG11202006069SA SG11202006069SA (en) 2018-04-04 2019-01-30 Data synchronization methods, apparatuses, and devices
PCT/CN2019/073838 WO2019192258A1 (zh) 2018-04-04 2019-01-30 一种数据同步的方法、装置及设备
TW108104570A TWI735845B (zh) 2018-04-04 2019-02-12 資料同步的方法、裝置及設備
US16/886,568 US20200293494A1 (en) 2018-04-04 2020-05-28 Data synchronization methods, apparatuses, and devices

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810297307.0A CN108959341B (zh) 2018-04-04 2018-04-04 一种数据同步的方法、装置及设备

Publications (2)

Publication Number Publication Date
CN108959341A true CN108959341A (zh) 2018-12-07
CN108959341B CN108959341B (zh) 2020-06-19

Family

ID=64498637

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810297307.0A Active CN108959341B (zh) 2018-04-04 2018-04-04 一种数据同步的方法、装置及设备

Country Status (5)

Country Link
US (1) US20200293494A1 (zh)
CN (1) CN108959341B (zh)
SG (1) SG11202006069SA (zh)
TW (1) TWI735845B (zh)
WO (1) WO2019192258A1 (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019192258A1 (zh) * 2018-04-04 2019-10-10 阿里巴巴集团控股有限公司 一种数据同步的方法、装置及设备
CN110633324A (zh) * 2019-09-18 2019-12-31 中化信息技术有限公司 用于同步数据的方法、装置、电子设备和计算机可读介质
CN110795421A (zh) * 2019-10-31 2020-02-14 神州数码融信软件有限公司 一种防止脏数据产生的方法
CN110968646A (zh) * 2019-12-20 2020-04-07 睿住科技有限公司 一种嵌入式系统数据库同步方法、装置及存储介质
CN111651520A (zh) * 2020-05-25 2020-09-11 北京字节跳动网络技术有限公司 一种缓存架构访问方法、装置、介质和电子设备
CN111831915A (zh) * 2020-07-23 2020-10-27 北京奇艺世纪科技有限公司 响应数据查询请求的方法、装置、电子设备及存储介质
CN117033398A (zh) * 2023-10-09 2023-11-10 之江实验室 一种基于dolt数据库的数据闪回查询方法及装置

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111090675B (zh) * 2019-11-22 2022-12-02 福建亿榕信息技术有限公司 多入口数据缓存方法及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050120061A1 (en) * 2003-12-02 2005-06-02 Kraft Frank M. Updating and maintaining data in a multi-system network using asynchronous message transfer
CN104391862A (zh) * 2014-10-23 2015-03-04 北京锐安科技有限公司 一种缓存数据更新方法及装置
CN105843895A (zh) * 2016-03-22 2016-08-10 北京建飞无限科技有限公司 基于Ehcache的数据查询及同步方法,装置及系统
CN107122410A (zh) * 2017-03-29 2017-09-01 武汉斗鱼网络科技有限公司 一种缓存更新方法及装置
CN107644071A (zh) * 2017-09-18 2018-01-30 广州爱九游信息技术有限公司 缓存更新方法、装置及数据存储系统

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9031916B2 (en) * 2006-12-28 2015-05-12 Hewlett-Packard Development Company, L.P. Storing log data efficiently while supporting querying to assist in computer network security
WO2010028279A1 (en) * 2008-09-05 2010-03-11 Arcsight, Inc. Storing log data efficiently while supporting querying
CN108959341B (zh) * 2018-04-04 2020-06-19 阿里巴巴集团控股有限公司 一种数据同步的方法、装置及设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050120061A1 (en) * 2003-12-02 2005-06-02 Kraft Frank M. Updating and maintaining data in a multi-system network using asynchronous message transfer
CN104391862A (zh) * 2014-10-23 2015-03-04 北京锐安科技有限公司 一种缓存数据更新方法及装置
CN105843895A (zh) * 2016-03-22 2016-08-10 北京建飞无限科技有限公司 基于Ehcache的数据查询及同步方法,装置及系统
CN107122410A (zh) * 2017-03-29 2017-09-01 武汉斗鱼网络科技有限公司 一种缓存更新方法及装置
CN107644071A (zh) * 2017-09-18 2018-01-30 广州爱九游信息技术有限公司 缓存更新方法、装置及数据存储系统

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019192258A1 (zh) * 2018-04-04 2019-10-10 阿里巴巴集团控股有限公司 一种数据同步的方法、装置及设备
CN110633324A (zh) * 2019-09-18 2019-12-31 中化信息技术有限公司 用于同步数据的方法、装置、电子设备和计算机可读介质
CN110633324B (zh) * 2019-09-18 2022-07-26 中化信息技术有限公司 用于同步数据的方法、装置、电子设备和计算机可读介质
CN110795421A (zh) * 2019-10-31 2020-02-14 神州数码融信软件有限公司 一种防止脏数据产生的方法
CN110968646A (zh) * 2019-12-20 2020-04-07 睿住科技有限公司 一种嵌入式系统数据库同步方法、装置及存储介质
CN110968646B (zh) * 2019-12-20 2023-06-06 广东睿住智能科技有限公司 一种嵌入式系统数据库同步方法、装置及存储介质
CN111651520A (zh) * 2020-05-25 2020-09-11 北京字节跳动网络技术有限公司 一种缓存架构访问方法、装置、介质和电子设备
CN111651520B (zh) * 2020-05-25 2023-04-18 北京字节跳动网络技术有限公司 一种缓存架构访问方法、装置、介质和电子设备
CN111831915A (zh) * 2020-07-23 2020-10-27 北京奇艺世纪科技有限公司 响应数据查询请求的方法、装置、电子设备及存储介质
CN117033398A (zh) * 2023-10-09 2023-11-10 之江实验室 一种基于dolt数据库的数据闪回查询方法及装置
CN117033398B (zh) * 2023-10-09 2024-01-16 之江实验室 一种基于dolt数据库的数据闪回查询方法及装置

Also Published As

Publication number Publication date
WO2019192258A1 (zh) 2019-10-10
TWI735845B (zh) 2021-08-11
TW201942757A (zh) 2019-11-01
US20200293494A1 (en) 2020-09-17
CN108959341B (zh) 2020-06-19
SG11202006069SA (en) 2020-07-29

Similar Documents

Publication Publication Date Title
CN108959341A (zh) 一种数据同步的方法、装置及设备
CN107562775A (zh) 一种基于区块链的数据处理方法及设备
CN107402824A (zh) 一种数据处理的方法及装置
CN108537063A (zh) 一种数据存储的方法、装置及设备
CN110134668A (zh) 应用于区块链的数据迁移方法、装置和设备
CN108345977A (zh) 一种业务处理方法及装置
CN110096528A (zh) 一种分布式系统中生成序列的方法、装置及系统
CN107679700A (zh) 业务流程处理方法、装置及服务器
CN109582485A (zh) 一种配置变更异常检测方法及装置
CN108268289A (zh) web应用的参数配置方法、装置及系统
CN109344348A (zh) 一种资源更新方法及装置
CN109145240A (zh) 一种基于扫码操作的页面访问方法、装置及系统
CN109241026A (zh) 数据管理的方法、装置及系统
CN108848244A (zh) 一种分页显示的方法及装置
CN110263050A (zh) 数据处理方法、装置、设备及存储介质
CN109002357A (zh) 资源分配方法、装置及物联网系统
CN108304455A (zh) 一种处理业务请求的方法、装置及设备
CN108460070A (zh) 一种基于数据库的数据处理方法、装置及设备
CN109389386A (zh) 一种扫码控制方法、装置及系统
CN109635020A (zh) 一种业务的处理方法、装置、设备及系统
CN109597678A (zh) 任务处理方法及装置
CN110119381A (zh) 一种索引更新方法、装置、设备及介质
CN108255471A (zh) 一种基于配置套件的系统配置项配置装置、方法及设备
CN109614393A (zh) 数据核对方法及装置
CN109144600A (zh) 一种应用程序的运行方法、设备及计算机可读介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20201028

Address after: Cayman Enterprise Centre, 27 Hospital Road, George Town, Grand Cayman Islands

Patentee after: Innovative advanced technology Co.,Ltd.

Address before: Cayman Enterprise Centre, 27 Hospital Road, George Town, Grand Cayman Islands

Patentee before: Advanced innovation technology Co.,Ltd.

Effective date of registration: 20201028

Address after: Cayman Enterprise Centre, 27 Hospital Road, George Town, Grand Cayman Islands

Patentee after: Advanced innovation technology Co.,Ltd.

Address before: A four-storey 847 mailbox in Grand Cayman Capital Building, British Cayman Islands

Patentee before: Alibaba Group Holding Ltd.

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20240228

Address after: 128 Meizhi Road, Guohao Times City # 20-01, Singapore 189773

Patentee after: Advanced Nova Technology (Singapore) Holdings Ltd.

Country or region after: Singapore

Address before: Cayman Enterprise Centre, 27 Hospital Road, George Town, Grand Cayman Islands

Patentee before: Innovative advanced technology Co.,Ltd.

Country or region before: Cayman Islands

TR01 Transfer of patent right