CN113377289A - 一种缓存管理方法、系统、计算设备及可读存储介质 - Google Patents
一种缓存管理方法、系统、计算设备及可读存储介质 Download PDFInfo
- Publication number
- CN113377289A CN113377289A CN202110610908.4A CN202110610908A CN113377289A CN 113377289 A CN113377289 A CN 113377289A CN 202110610908 A CN202110610908 A CN 202110610908A CN 113377289 A CN113377289 A CN 113377289A
- Authority
- CN
- China
- Prior art keywords
- data
- interface
- cache
- interface parameter
- updating
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000007726 management method Methods 0.000 title claims abstract description 31
- 238000000034 method Methods 0.000 claims abstract description 41
- 238000001914 filtration Methods 0.000 claims description 2
- 238000012163 sequencing technique Methods 0.000 claims description 2
- 238000004891 communication Methods 0.000 abstract description 18
- 238000010586 diagram Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 5
- 230000004044 response Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 230000002093 peripheral effect Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000007723 transport mechanism Effects 0.000 description 2
- 238000012384 transportation and delivery Methods 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 238000013523 data management Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0604—Improving or facilitating administration, e.g. storage management
- G06F3/0607—Improving or facilitating administration, e.g. storage management by facilitating the process of upgrading existing storage systems, e.g. for improving compatibility between host and storage device
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
- G06F3/0656—Data buffering arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种缓存管理方法,适于在缓存服务器中执行,缓存服务器中具有第一存储区和第二存储区,第一存储区存储接口参数表,第二存储区存储缓存数据,缓存服务器与数据库服务器通信连接,数据库服务器适于存储源数据,方法包括:接收数据库服务器发送的源数据更新请求,源数据更新请求中包含源数据更新的关联接口参数;根据关联接口参数在接口参数表中获取关联接口参数记录;根据关联接口参数记录生成更新数据键值;更新更新数据键值对应的缓存数据。本发明一并公开了相应的系统、计算设备及可读存储介质。
Description
技术领域
本发明涉及数据缓存领域,尤其涉及一种缓存管理方法、系统、计算设备及可读存储介质。
背景技术
为了提高用户访问数据的响应速度以及降低数据回源数据库的频率,通常会在靠近用户端一侧设置数据缓存服务器,对用户访问数据进行缓存,从而在用户请求数据时,能够快速响应。用户通过用户终端请求数据时,在数据请求中会携带接口参数,用以指定请求的目标数据,在缓存服务器中,根据接口参数获取目标数据的键值(key),例如:通过哈希运算获得key值,进而根据key值在缓存服务器中获取目标数据。由于接口参数中可能会混合有与目标数据属性无关的参数,使得生成的key值有所不同,会导致相同数据可能在缓存数据中存储多个备份,造成资源浪费、响应时间的增加以及回源次数的增加。同时,因为缓存数据设有固定的缓存周期,在缓存周期内更新的数据并不能更新到缓存中,用户不能获取到最新的数据。
发明内容
为此,本发明提供了一种缓存管理方法、系统、计算设备及可读存储介质,以力图解决或者至少缓解上面存在的问题。
根据本发明的一个方面,提供一种缓存管理方法,适于在缓存服务器中执行,缓存服务器中具有第一存储区和第二存储区,第一存储区存储接口参数表,第二存储区存储缓存数据,缓存服务器与数据库服务器通信连接,数据库服务器适于存储源数据,方法包括:接收数据库服务器发送的源数据更新请求,源数据更新请求中包含源数据更新的关联接口参数;根据关联接口参数在接口参数表中获取关联接口参数记录;根据关联接口参数记录生成更新数据键值;更新更新数据键值对应的缓存数据。
可选的,在根据本发明的缓存管理方法中,根据关联接口参数记录生成更新数据键值包括:对关联接口参数记录中的接口参数按照预设规则进行排序;对排序后的接口参数按照预定方法进行计算,获得关键数据键值。
可选的,在根据本发明的缓存管理方法中,更新更新数据键值对应的缓存数据包括:根据更新数据键值从缓存数据获取到需要更新的数据;从数据库服务器获取最新数据对需要更新的数据进行更新。
可选的,在根据本发明的缓存管理方法中,缓存服务器与用户终端通信连接,方法还包括:接收用户终端的数据请求,并获取数据请求中的接口参数;过滤接口参数中的无效接口参数,并将过滤后的接口参数存储到接口参数表中;根据过滤后的接口参数生成目标数据的键值,并根据键值从缓存数据中获取目标数据;若获取目标数据成功,则将目标数据返回用户终端;若获取目标数据失败,则从数据库服务器获取目标数据并返回用户终端,存储目标数据到缓存数据中。
可选的,在根据本发明的缓存管理方法中,根据过滤后的接口参数生成目标数据的键值包括:对过滤后的接口参数按照预设规则进行排序;对排序后的接口参数按照预定方法进行计算,获得目标数据对应的键值。
可选的,在根据本发明的缓存管理方法中,将过滤后的接口参数存储到接口参数表中包括:根据过滤后的接口参数生成接口参数记录,接口参数记录包括的字段有接口类型、接口路径、接口名称、接口参数、接口参数键值对数组;将接口参数记录存储到接口参数表中。
可选的,在根据本发明的缓存管理方法中,接口类型包括多数据查询,根据过滤后的接口参数生成目标数据的键值还包括:当接口类型为多数据查询时,根据多数据中的每个数据的ID生成一个键值。
可选的,在根据本发明的缓存管理方法中,还包括:当数据库服务器中的源数据更新时,获取更新的源数据对应的更新属性;根据更新属性获取关联接口参数;根据关联接口参数生成源数据更新请求。
可选的,在根据本发明的缓存管理方法中,缓存数据对应最新更新时间,根据关联数据键值完成缓存数据更新还包括:获取当前时间,根据当前时间和最新更新时间计算本次更新周期,当本次更新周期没有达到预设更新周期时,忽略此次更新。
根据本发明的另一个方面,提供一种数据缓存系统,包括缓存服务器、数据库服务器,相互通信连接,其中,缓存服务器,包括第一存储区和第二存储区,第一存储区存储接口参数表,第二存储区存储缓存数据,接收数据库服务器发送的源数据更新请求,源数据更新请求中包含源数据更新的关联接口参数;根据关联接口参数在接口参数表中获取关联接口参数记录;根据关联接口参数记录生成更新数据键值;更新更新数据键值对应的缓存数据;数据库服务器,适于存储源数据。
根据本发明的又一个方面,提供一种计算设备,包括:至少一个处理器;以及存储器,存储有程序指令,其中,程序指令被配置为适于由至少一个处理器执行,程序指令包括用于执行如上的任一项缓存管理方法的指令。
根据本发明的又一方面,提供一种存储有程序指令的可读存储介质,当程序指令被计算设备读取并执行时,使得计算设备执行如上的任一项缓存管理方法。
根据本发明的缓存管理方法,在数据库服务器上的源数据发生变化时,会主动发送源数据更新请求,并在数据更新请求中携带本次数据更新关联的接口参数,由于缓存服务器中存储有接口参数表,从而可以根据源数据更新请求获取数据更新应用的接口,进而个根据接口参数生成缓存数据的键值,从而获取到需要更新的缓存数据,触发缓存数据的更新,从而保证缓存数据能够及时更新,对于更新频率较快的数据,可以让用户能够获取到最新数据。
另一方面,在缓存服务器中存储有过滤掉无效参数的接口参数,并根据过滤后的接口参数生成缓存数据的key值,保证相同的接口对应一份数据缓存,避免由于无效接口参数对键值的影响,减少了大量数据回源查询,提升了接口响应速度。
附图说明
为了实现上述以及相关目的,本文结合下面的描述和附图来描述某些说明性方面,这些方面指示了可以实践本文所公开的原理的各种方式,并且所有方面及其等效方面旨在落入所要求保护的主题的范围内。通过结合附图阅读下面的详细描述,本公开的上述以及其它目的、特征和优势将变得更加明显。遍及本公开,相同的附图标记通常指代相同的部件或元素。
图1示出了根据本发明一个实施例的缓存管理系统100的示意图;
图2示出了根据本发明一个实施例的计算设备200的框图;
图3示出了根据本发明一个实施例的缓存管理方法300的流程图;
图4示出了根据本发明一个实施例的缓存管理方法400的流程图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
用户通过终端设备获取网络数据时,为了提高数据响应速度,减少高并发场景下数据回源带来的延迟和过高的网络负载,通常会在靠近用户终端设备一侧设有缓存服务器,将目标数据缓存在缓存服务器中,从而减少数据回源查询,提高服务性能。
图1示出了根据本发明一个实施例的缓存管理系统100的示意图。如图1所示,缓存管理系统包括用户终端110、缓存服务器120和数据库服务器130,应当指出,图1所示的缓存管理系统仅为示例性的,在实际使用过程中,可以根据需要进行设计。
用户终端110例如可以是桌面计算机、笔记本计算机等个人配置的计算机,也可以是手机、平板电脑、智能电视等设备,但不限于此。用户终端通常安装有应用客户端,用户通过应用客户端发送数据请求,获取网络数据。
缓存服务器120可以实现为一台服务器,也可以实现为由多台服务器所构成的集群或分布式系统,当其是多台服务器时,这多台服务器可以部署于同一地理位置,也可以分散布置于多个地理位置,缓存中的数据存储形式可以是redis、Hazelcast等,本发明对远程缓存服务器所包括的服务器的数量、各服务器的部署位置以及缓存的实现形式均不做限制。根据本发明的缓存服务器120中,包括第一存储区和第二存储区,第一存储区存储接口参数表,即用户数据请求中携带的接口参数,并在第二存储区存储有缓存数据。
数据库服务器130适于存储源数据,可以配置为关系型数据库,例如MySQL、ACCESS等,也可以是非关系型数据库例如NoSQL等,数据服务器用于存储数据,本发明对数据服务器的具体部署、配置情况不做限制。
根据本发明的一个实施例,用户通过用户终端110上的应用客户端获取目标数据A,例如用户通过应用客户端点击一个连接或搜索一个关键词等操作,本发明对此不作限制。在应用客户端会生成数据查询请求,携带查询接口参数,发送至缓存服务器120。缓存服务器120获取数据查询请求中的查询接口参数,对参数进行过滤,删除其中的无效参数,并存储过滤后的接口参数,同时,根据过滤后的参数按照预定算法(例如哈希算法)生成目标数据的键值key,进而根据key值在缓存数据中获取目标数据,并返回给用户终端110。如果目标数据不存在,则回源到数据库服务器130进行数据查询,将获取到的数据返回用户终端110,并相应存储到数据缓存服务器中。
根据本发明的又一个实施例,当数据库服务器130中的源数据进行更新时,可以主动向缓存服务器120发送数据更新请求,完成缓存服务器上的缓存数据的更新,保证用户获取到最新到的数据。
图1中的所有设备均可以由计算设备实现,图2示出了根据本发明一个实施例的计算设备200的框图。需要说明的是,图2所示的计算设备200仅为一个示例,在实践中,用于实施本发明的缓存管理方法的计算设备可以是任意型号的设备,其硬件配置情况可以与图2所示的计算设备200相同,也可以与图2所示的计算设备200不同。实践中用于实施本发明的缓存管理方法的计算设备可以对图2所示的计算设备200的硬件组件进行增加或删减,本发明对计算设备的具体硬件配置情况不做限制。
如图2所示,在基本配置202中,计算设备200典型地包括系统存储器206和一个或者多个处理器204。存储器总线208可以用于在处理器204和系统存储器206之间的通信。
取决于期望的配置,处理器204可以是任何类型的处理,包括但不限于:微处理器(μP)、微控制器(μC)、数字信息处理器(DSP)或者它们的任何组合。处理器204可以包括诸如一级高速缓存210和二级高速缓存212之类的一个或者多个级别的高速缓存、处理器核心214和寄存器216。示例的处理器核心214可以包括运算逻辑单元(ALU)、浮点数单元(FPU)、数字信号处理核心(DSP核心)或者它们的任何组合。示例的存储器控制器218可以与处理器204一起使用,或者在一些实现中,存储器控制器218可以是处理器204的一个内部部分。
取决于期望的配置,系统存储器206可以是任意类型的存储器,包括但不限于:易失性存储器(诸如RAM)、非易失性存储器(诸如ROM、闪存等)或者它们的任何组合。计算设备中的物理内存通常指的是易失性存储器RAM,磁盘中的数据需要加载至物理内存中才能够被处理器204读取。系统存储器206可以包括操作系统220、一个或者多个应用222以及程序数据224。在一些实施方式中,应用222可以布置为在操作系统上由一个或多个处理器204利用程序数据224执行指令。操作系统220例如可以是Linux、Windows等,其包括用于处理基本系统服务以及执行依赖于硬件的任务的程序指令。应用222包括用于实现各种用户期望的功能的程序指令,应用222例如可以是浏览器、即时通讯软件、软件开发工具(例如集成开发环境IDE、编译器等)等,但不限于此。当应用222被安装到计算设备200中时,可以向操作系统220添加驱动模块。
在计算设备200启动运行时,处理器204会从存储器206中读取操作系统220的程序指令并执行。应用222运行在操作系统220之上,利用操作系统220以及底层硬件提供的接口来实现各种用户期望的功能。当用户启动应用222时,应用222会加载至存储器206中,处理器204从存储器206中读取并执行应用222的程序指令。
计算设备200还包括储存设备232,储存设备232包括可移除储存器236和不可移除储存器238,可移除储存器236和不可移除储存器238均与储存接口总线234连接。
计算设备200还可以包括有助于从各种接口设备(例如,输出设备242、外设接口244和通信设备246)到基本配置202经由总线/接口控制器230的通信的接口总线240。示例的输出设备242包括图形处理单元248和音频处理单元250。它们可以被配置为有助于经由一个或者多个A/V端口252与诸如显示器或者扬声器之类的各种外部设备进行通信。示例外设接口244可以包括串行接口控制器254和并行接口控制器256,它们可以被配置为有助于经由一个或者多个I/O端口258和诸如输入设备(例如,键盘、鼠标、笔、语音输入设备、触摸输入设备)或者其他外设(例如打印机、扫描仪等)之类的外部设备进行通信。示例的通信设备246可以包括网络控制器260,其可以被布置为便于经由一个或者多个通信端口264与一个或者多个其他计算设备262通过网络通信链路的通信。
网络通信链路可以是通信介质的一个示例。通信介质通常可以体现为在诸如载波或者其他传输机制之类的调制数据信号中的计算机可读指令、数据结构、程序模块,并且可以包括任何信息递送介质。“调制数据信号”可以这样的信号,它的数据集中的一个或者多个或者它的改变可以在信号中编码信息的方式进行。作为非限制性的示例,通信介质可以包括诸如有线网络或者专线网络之类的有线介质,以及诸如声音、射频(RF)、微波、红外(IR)或者其它无线介质在内的各种无线介质。这里使用的术语计算机可读介质可以包括存储介质和通信介质二者。
在根据本发明的计算设备200中,应用222包括用于执行本发明的缓存管理方法300/400的指令,该指令可以指示处理器204执行本发明的缓存管理方法300/400。
图3示出了根据本发明一个实施例的缓存管理方法300的流程图,适于在计算设备(如图2所示的计算设备)中执行。
如图3所示,方法300始于步骤S310,即接收用户终端发送的数据请求。根据本发明的一个实施例,用户通过用户终端发送数据请求,例如,通过点击链接论坛A连接生成数据请求,请求该论坛中的文章列表,其中包括接口参数,本次数据请求对应的URL为:http://maindata.api.autohome.com.cn/data/page/club_get_topics_list?club_bbs_id=4707&club_is_poll=0&club_is_quality=0&club_order_type=1&club_refine=0&page_num=1&page_size=50&_appid=m×tamp=163568798566,其中包括的接口参数有:club_bbs_id=4707,club_is_poll=0,club_is_quality=0,club_order_type=1,club_refine=0,page_num=1,page_size=50,_appid=m,timestamp=163568798566。
随后进入步骤S320,过滤数据请求中的接口参数,删除其中的无效参数,在上述实施例中,_appid=m,timestamp=163568798566属于无效参数,将无效参数删除后,接口参数为:club_bbs_id=4707&club_is_poll=0&club_is_quality=0&club_order_type=1&club_refine=0&page_num=1&page_size=50,根据过滤后的接口参数生成接口参数记录,存储到接口参数表中,其中每一条接口参数记录包含的字段有接口类型、接口路径、接口名称、接口参数、接口参数键值对数组,示例结构如下所示。
随后进入步骤S330,根据过滤后的接口参数生成目标数据的键值,并根据键值从缓存数据中获取目标数据。根据过滤后的接口参数生成键值,可以避免无效参数对key值的影响,可以实现一个数据请求只对应一个key值,一份缓存数据。
根据本发明的一个实施例,在生成目标数据key时,首先对接口参数按照预定规则进行排序(例如可以按照参数字符串长度排序),进而通过预定算法根据排序后的接口参数获得key值,预定算法可以是md5运算、哈希运算等,本发明对此不做限制。以生成的key为索引,在缓存数据中获取目标数据。
根据本发明的又一个实施例,当用户同时请求多个目标数据时,根据接口参数中各个目标数据的ID分别生成多个键值。
当在缓存数据中获取目标数据成功时,进入步骤S340,将目标数据返回用户终端。
当在缓存数据中获取目标数据失败时,进入步骤S350,回源到数据库服务器,从源数据中获取目标数据返回用户终端,并缓存到缓存服务器中,以便用户下一次请求该数据时能够快速响应,减少回源次数。
图4示出了根据本发明一个实施例的缓存数据管理方法400的流程图,方法400适于在计算设备(如图2所示的计算设备)中执行。
如图4所示,方法400始于步骤S410,获取更新数据的相关属性。根据本发明的一个实施例,论坛A上的一篇文章标题进行了更新,其中,论坛ID和文章标题都是文章的属性,论坛A的ID为“2246”,文章名称由“宝马车很耗油”更新成“丰田车很省油”,则获取到文章标题属性发生了变化。
随后进入步骤S420,根据文章属性的变化获取其影响的接口参数,数据都对具有相应的属性,包括内容属性(例如图片、视频)、位置属性(例如:所在论坛、文章列表位置等)。在上述实施例中,文章名称变更,会影响获取文章名称列表的接口,根据该文章具体的位置可以生成关联接口参数,例如:“丰田车很省油”在论坛A的第2页,根据文章的这些属性信息,根据这些属性信息可以生成关联接口参数,包括接口名称、文章位置,即"apiName":"club_get_topics_list","page_num":"2","club_bbs_id":"2246"。
随后进入步骤S430,根据关联接口参数生成源数据更新请求,发送至缓存服务器。数据更新请求可以通过kafka消息队列管理。
随后进入步骤S440,缓存服务器收到源数据更新请求后,获取其中的关联接口参数,并从接口参数表中获取包含所有关联接口参数的接口参数记录,根据接口参数记录中的接口参数生成键值,例如上述实施例中,根据接口参数("apiName":"club_get_topics_list","page_num":"2","club_bbs_id":"2246")获取接口参数记录,对获取到的接口参数记录中的参数进行排序,并通过哈希运算获得键值,进而根据键值获取需要根据更新的缓存数据,并从数据库服务器拉取最新数据,完成数据更新。以便用户在获取该缓存数据时能够获取到最新数据。
根据本发明的一个实施例,可以设置缓存数据更新频率,例如,可以设置缓存数据更新周期,在数据拉取更新前,获取当前时间和上一次更新时间,计算本次更新时间间隔,当本次更新时间间隔没有达到预设更新周期时,忽略此次更新。也可以设置缓存数据单位时间内的更新次数,例如,每条数据一分钟最多更新3次,根据计数器统计,当在一分钟内检测到第四次数据更新时,则忽略此次更新,等到下一分钟新的更新请求时再进行最新数据的更新。
根据本发明的缓存管理方法,在数据库服务器上的源数据发生变化时,会主动发送源数据更新请求,并在数据更新请求中携带本次数据更新关联的接口参数,由于缓存服务器中存储有接口参数表,从而可以根据源数据更新请求获取数据更新应用的接口,进而个根据接口参数生成缓存数据的键值,从而获取到需要更新的缓存数据,触发缓存数据的更新,从而保证缓存数据能够及时更新,对于更新频率较快的数据,可以让用户能够获取到最新数据。
另一方面,在缓存服务器中存储有过滤掉无效参数的接口参数,并根据过滤后的接口参数生成缓存数据的键值,保证相同的接口对应一份数据缓存,避免由于无效接口参数对键值的影响,减少了大量数据回源查询,提升了接口响应速度。
A8、如A1-A7中任意一项所述的方法,还包括:
当所述数据库服务器中的源数据更新时,获取更新的源数据对应的更新属性;
根据所述更新属性获取关联接口参数;
根据所述关联接口参数生成源数据更新请求。
A9、如A1-A8中任一项所述的方法,其中,所述缓存数据对应最新更新时间,所述根据所述关联数据键值完成缓存数据更新还包括:
获取当前时间,根据所述当前时间和最新更新时间计算本次更新周期,当所述本次更新周期没有达到预设更新周期时,忽略此次更新。
这里描述的各种技术可结合硬件或软件,或者它们的组合一起实现。从而,本发明的方法和设备,或者本发明的方法和设备的某些方面或部分可采取嵌入有形媒介,例如可移动硬盘、U盘、软盘、CD-ROM或者其它任意机器可读的存储介质中的程序代码(即指令)的形式,其中当程序被载入诸如计算机之类的机器,并被所述机器执行时,所述机器变成实践本发明的设备。
在程序代码在可编程计算机上执行的情况下,计算设备一般包括处理器、处理器可读的存储介质(包括易失性和非易失性存储器和/或存储元件),至少一个输入装置,和至少一个输出装置。其中,存储器被配置用于存储程序代码;处理器被配置用于根据该存储器中存储的所述程序代码中的指令,执行本发明的缓存管理方法。
以示例而非限制的方式,可读介质包括可读存储介质和通信介质。可读存储介质存储诸如计算机可读指令、数据结构、程序模块或其它数据等信息。通信介质一般以诸如载波或其它传输机制等已调制数据信号来体现计算机可读指令、数据结构、程序模块或其它数据,并且包括任何信息传递介质。以上的任一种的组合也包括在可读介质的范围之内。
在此处所提供的说明书中,算法和显示不与任何特定计算机、虚拟系统或者其它设备固有相关。各种通用系统也可以与本发明的示例一起使用。根据上面的描述,构造这类系统所要求的结构是显而易见的。此外,本发明也不针对任何特定编程语言。应当明白,可以利用各种编程语言实现在此描述的本发明的内容,并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。
在此处所提供的说明书中,说明了大量具体细节。然而,能够理解,本发明的实施例可以在没有这些具体细节的情况下被实践。在一些实例中,并未详细示出公知的方法、结构和技术,以便不模糊对本说明书的理解。
应当理解,为了精简本公开并帮助理解各个发明方面中的一个或多个,在上面对本发明的示例性实施例的描述中,本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而,并不应将该公开的方法解释成反映如下意图:即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多特征。更确切地说,如下面的权利要求书所反映的那样,发明方面在于少于前面公开的单个实施例的所有特征。因此,遵循具体实施方式的权利要求书由此明确地并入该具体实施方式,其中每个权利要求本身都作为本发明的单独实施例。
本领域那些技术人员应当理解在本文所公开的示例中的设备的模块或单元或组件可以布置在如该实施例中所描述的设备中,或者可替换地可以定位在与该示例中的设备不同的一个或多个设备中。前述示例中的模块可以组合为一个模块或者此外可以分成多个子模块。
本领域那些技术人员可以理解,可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件,以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外,可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述,本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
此外,本领域的技术人员能够理解,尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征,但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如,在下面的权利要求书中,所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
此外,所述实施例中的一些在此被描述成可以由计算机系统的处理器或者由执行所述功能的其它装置实施的方法或方法元素的组合。因此,具有用于实施所述方法或方法元素的必要指令的处理器形成用于实施该方法或方法元素的装置。此外,装置实施例的在此所述的元素是如下装置的例子:该装置用于实施由为了实施该发明的目的的元素所执行的功能。
如在此所使用的那样,除非另行规定,使用序数词“第一”、“第二”、“第三”等等来描述普通对象仅仅表示涉及类似对象的不同实例,并且并不意图暗示这样被描述的对象必须具有时间上、空间上、排序方面或者以任意其它方式的给定顺序。
尽管根据有限数量的实施例描述了本发明,但是受益于上面的描述,本技术领域内的技术人员明白,在由此描述的本发明的范围内,可以设想其它实施例。此外,应当注意,本说明书中使用的语言主要是为了可读性和教导的目的而选择的,而不是为了解释或者限定本发明的主题而选择的。因此,在不偏离所附权利要求书的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。对于本发明的范围,对本发明所做的公开是说明性的,而非限制性的,本发明的范围由所附权利要求书限定。
Claims (10)
1.一种缓存管理方法,适于在缓存服务器中执行,所述缓存服务器中具有第一存储区和第二存储区,所述第一存储区存储接口参数表,所述第二存储区存储缓存数据,所述缓存服务器与数据库服务器通信连接,所述数据库服务器适于存储源数据,所述方法包括:
接收所述数据库服务器发送的源数据更新请求,所述源数据更新请求中包含所述源数据更新的关联接口参数;
根据所述关联接口参数在所述接口参数表中获取关联接口参数记录;
根据所述关联接口参数记录生成更新数据键值;
更新所述更新数据键值对应的缓存数据。
2.如权利要求1所述的方法,其中,所述根据所述关联接口参数记录生成更新数据键值包括:
对所述关联接口参数记录中的接口参数按照预设规则进行排序;
对排序后的接口参数按照预定方法进行计算,获得关键数据键值。
3.如权利要求1或2所述的方法,其中,所述更新所述更新数据键值对应的缓存数据包括:
根据所述更新数据键值从所述缓存数据获取到需要更新的数据;
从所述数据库服务器获取最新数据对所述需要更新的数据进行更新。
4.如权利要求1-3中任一项所述的方法,所述缓存服务器与用户终端通信连接,所述方法还包括:
接收所述用户终端的数据请求,并获取所述数据请求中的接口参数;
过滤所述接口参数中的无效接口参数,并将过滤后的接口参数存储到接口参数表中;
根据过滤后的接口参数生成目标数据的键值,并根据所述键值从所述缓存数据中获取目标数据;
若获取目标数据成功,则将所述目标数据返回所述用户终端;
若获取目标数据失败,则从所述数据库服务器获取目标数据并返回用户终端,存储所述目标数据到缓存数据中。
5.如权利要求4所述的方法,其中,所述根据过滤后的接口参数生成目标数据的键值包括:
对所述过滤后的接口参数按照预设规则进行排序;
对排序后的接口参数按照预定方法进行计算,获得目标数据对应的键值。
6.如权利要求4或5所述的方法,其中,所述将过滤后的接口参数存储到接口参数表中包括:
根据过滤后的接口参数生成接口参数记录,所述接口参数记录包括的字段有接口类型、接口路径、接口名称、接口参数、接口参数键值对数组;
将所述接口参数记录存储到所述接口参数表中。
7.如权利要求4所述的方法,其中,所述接口类型包括多数据查询,所述根据过滤后的接口参数生成目标数据的键值还包括:
当所述接口类型为多数据查询时,根据所述多数据中的每个数据的ID生成一个键值。
8.一种数据缓存系统,包括缓存服务器、数据库服务器,相互通信连接,其中,
缓存服务器,包括第一存储区和第二存储区,所述第一存储区存储接口参数表,所述第二存储区存储缓存数据,接收所述数据库服务器发送的源数据更新请求,所述源数据更新请求中包含所述源数据更新的关联接口参数;根据所述关联接口参数在所述接口参数表中获取关联接口参数记录;根据所述关联接口参数记录生成更新数据键值;更新所述更新数据键值对应的缓存数据;
数据库服务器,适于存储源数据。
9.一种计算设备,包括:
至少一个处理器;以及
存储器,存储有程序指令,其中,所述程序指令被配置为适于由所述至少一个处理器执行,所述程序指令包括用于执行如权利要求1-7中任一项所述方法的指令。
10.一种存储有程序指令的可读存储介质,当所述程序指令被计算设备读取并执行时,使得所述计算设备执行如权利要求1-7中任一项所述方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110610908.4A CN113377289B (zh) | 2021-06-01 | 2021-06-01 | 一种缓存管理方法、系统、计算设备及可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110610908.4A CN113377289B (zh) | 2021-06-01 | 2021-06-01 | 一种缓存管理方法、系统、计算设备及可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113377289A true CN113377289A (zh) | 2021-09-10 |
CN113377289B CN113377289B (zh) | 2024-08-13 |
Family
ID=77575311
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110610908.4A Active CN113377289B (zh) | 2021-06-01 | 2021-06-01 | 一种缓存管理方法、系统、计算设备及可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113377289B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115203135A (zh) * | 2022-09-09 | 2022-10-18 | 统信软件技术有限公司 | 存储设备列表管控方法、计算设备及存储介质 |
CN116132513A (zh) * | 2023-02-24 | 2023-05-16 | 重庆长安汽车股份有限公司 | 服务编排的参数更新方法、装置、设备及存储介质 |
CN116383250A (zh) * | 2023-03-07 | 2023-07-04 | 深圳市丰宜科技有限公司 | 一种生成缓存的方法、存储介质 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101291202A (zh) * | 2008-05-30 | 2008-10-22 | 华为技术有限公司 | 数据传输路径的管理方法和主机服务器 |
CN102741843A (zh) * | 2011-03-22 | 2012-10-17 | 青岛海信传媒网络技术有限公司 | 从数据库中读取数据的方法及装置 |
US8386540B1 (en) * | 2008-03-31 | 2013-02-26 | Amazon Technologies, Inc. | Scalable relational database service |
US20170272546A1 (en) * | 2016-03-17 | 2017-09-21 | Dell Products L.P. | Blocking an interface of a redirected usb composite device |
US9971526B1 (en) * | 2015-06-29 | 2018-05-15 | Amazon Technologies, Inc. | Volume-based key-value store |
CN109614559A (zh) * | 2018-11-16 | 2019-04-12 | 泰康保险集团股份有限公司 | 数据处理方法及装置 |
CN111563102A (zh) * | 2020-04-10 | 2020-08-21 | 中国联合网络通信集团有限公司 | 缓存更新方法、服务器、系统及存储介质 |
CN112148619A (zh) * | 2020-10-10 | 2020-12-29 | 北京嘀嘀无限科技发展有限公司 | 测试用例集的优化处理方法、装置、电子设备及存储介质 |
CN112612546A (zh) * | 2020-12-24 | 2021-04-06 | 广州虎牙科技有限公司 | 页面加载方法、装置、电子设备和存储介质 |
-
2021
- 2021-06-01 CN CN202110610908.4A patent/CN113377289B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8386540B1 (en) * | 2008-03-31 | 2013-02-26 | Amazon Technologies, Inc. | Scalable relational database service |
CN101291202A (zh) * | 2008-05-30 | 2008-10-22 | 华为技术有限公司 | 数据传输路径的管理方法和主机服务器 |
CN102741843A (zh) * | 2011-03-22 | 2012-10-17 | 青岛海信传媒网络技术有限公司 | 从数据库中读取数据的方法及装置 |
US9971526B1 (en) * | 2015-06-29 | 2018-05-15 | Amazon Technologies, Inc. | Volume-based key-value store |
US20170272546A1 (en) * | 2016-03-17 | 2017-09-21 | Dell Products L.P. | Blocking an interface of a redirected usb composite device |
CN109614559A (zh) * | 2018-11-16 | 2019-04-12 | 泰康保险集团股份有限公司 | 数据处理方法及装置 |
CN111563102A (zh) * | 2020-04-10 | 2020-08-21 | 中国联合网络通信集团有限公司 | 缓存更新方法、服务器、系统及存储介质 |
CN112148619A (zh) * | 2020-10-10 | 2020-12-29 | 北京嘀嘀无限科技发展有限公司 | 测试用例集的优化处理方法、装置、电子设备及存储介质 |
CN112612546A (zh) * | 2020-12-24 | 2021-04-06 | 广州虎牙科技有限公司 | 页面加载方法、装置、电子设备和存储介质 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115203135A (zh) * | 2022-09-09 | 2022-10-18 | 统信软件技术有限公司 | 存储设备列表管控方法、计算设备及存储介质 |
CN116132513A (zh) * | 2023-02-24 | 2023-05-16 | 重庆长安汽车股份有限公司 | 服务编排的参数更新方法、装置、设备及存储介质 |
CN116132513B (zh) * | 2023-02-24 | 2024-04-19 | 重庆长安汽车股份有限公司 | 服务编排的参数更新方法、装置、设备及存储介质 |
CN116383250A (zh) * | 2023-03-07 | 2023-07-04 | 深圳市丰宜科技有限公司 | 一种生成缓存的方法、存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN113377289B (zh) | 2024-08-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113377289B (zh) | 一种缓存管理方法、系统、计算设备及可读存储介质 | |
CN111427766B (zh) | 一种请求处理方法、装置和代理服务器 | |
CN111651464B (zh) | 数据处理方法、系统及计算设备 | |
CN111475483B (zh) | 数据库迁移方法、装置及计算设备 | |
CN112615907B (zh) | 一种数据同步系统及方法 | |
US9928178B1 (en) | Memory-efficient management of computer network resources | |
CN113032432A (zh) | 一种数据缓存处理方法、系统、计算设备及可读存储介质 | |
US10409800B2 (en) | Priority queue for exclusive locks | |
CN110727727B (zh) | 一种数据库的统计方法及装置 | |
CN110968765B (zh) | 书籍搜索方法、计算设备及计算机存储介质 | |
CN111651374A (zh) | 一种数据处理方法、装置、计算设备及可读存储介质 | |
US20140019454A1 (en) | Systems and Methods for Caching Data Object Identifiers | |
CN105608159A (zh) | 数据缓存的方法和装置 | |
US8712992B2 (en) | Method and apparatus for web crawling | |
US11941611B2 (en) | Shareable and nested transactions on hash chains | |
CN112559913B (zh) | 一种数据处理方法、装置、计算设备及可读存储介质 | |
CN113535650A (zh) | 一种文件命名方法及计算设备 | |
CN111814029B (zh) | 一种数据查询方法、系统及计算设备 | |
CN111753141A (zh) | 一种数据管理方法及相关设备 | |
CN109522282A (zh) | 图片管理方法、装置、计算机装置及存储介质 | |
CN107508705B (zh) | 一种http元素的资源树构建方法及计算设备 | |
CN116842292A (zh) | 动态页面缓存方法、电子设备、车辆及存储介质 | |
CN111581492A (zh) | 一种内容推荐方法、计算设备及可读存储介质 | |
CN112883307B (zh) | 一种缓存更新方法、装置和社交网络系统 | |
CN114422502A (zh) | 一种资源下载方法、计算设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |