CN109992428B - 数据处理方法及系统 - Google Patents

数据处理方法及系统 Download PDF

Info

Publication number
CN109992428B
CN109992428B CN201711498805.3A CN201711498805A CN109992428B CN 109992428 B CN109992428 B CN 109992428B CN 201711498805 A CN201711498805 A CN 201711498805A CN 109992428 B CN109992428 B CN 109992428B
Authority
CN
China
Prior art keywords
data
end application
processing mode
local cache
message
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201711498805.3A
Other languages
English (en)
Other versions
CN109992428A (zh
Inventor
武跃峰
李凡
吴江旭
雍兴辉
姚思昆
陈涛
陈臣
张昀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Jingdong Century Trading Co Ltd
Beijing Jingdong Shangke Information Technology Co Ltd
Original Assignee
Beijing Jingdong Century Trading Co Ltd
Beijing Jingdong Shangke Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Jingdong Century Trading Co Ltd, Beijing Jingdong Shangke Information Technology Co Ltd filed Critical Beijing Jingdong Century Trading Co Ltd
Priority to CN201711498805.3A priority Critical patent/CN109992428B/zh
Publication of CN109992428A publication Critical patent/CN109992428A/zh
Application granted granted Critical
Publication of CN109992428B publication Critical patent/CN109992428B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication
    • G06F9/544Buffers; Shared memory; Pipes

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本公开提供了一种数据处理方法,包括:通过消息管道接收来自后端服务的第一数据,其中,消息管道连接在前端应用与后端服务之间,用于进行数据传输;以及基于第一数据更新前端应用的本地缓存。本公开还提供了一种数据处理系统、一种计算机系统和一种计算机可读存储介质。

Description

数据处理方法及系统
技术领域
本公开涉及互联网技术领域,更具体地,涉及一种数据处理方法、一种数据处理系统、一种计算机系统和一种计算机可读存储介质。
背景技术
随着互联网技术的快速发展,目前前端应用为了提高网络请求的吞吐量,一般会启用本地缓存,以减少网络开销。但同时又带来了另外一个问题,就是本地缓存的数据更新会滞后,进而影响前端应用与后端服务的数据的一致性,给线上业务带来比较大的影响。
相关技术中为了尽量减轻数据更新滞后带来的影响,在负载均衡的情况下部署了多个前端应用,当后端服务中的数据发生变化时,通过http接口通知各前端应用清理并更新本地缓存。由于通知前端应用清理并更新本地缓存需要遵循http协议,因而需要ip加端口的模式遍历前端应用来完成清理并更新。
在实现本公开构思的过程中,发明人发现相关技术中至少存在如下问题:后端服务通过http协议通知前端应用清理并更新本地缓存易受到网络抖动等因素的影响,造成通知无法送达,导致前端应用与后端服务的数据不一致,以及前端应用可用性低。
发明内容
有鉴于此,本公开提供了一种数据处理方法、一种数据处理系统、一种计算机系统和一种计算机可读存储介质。
本公开的一个方面提供了一种数据处理方法,包括通过消息管道接收来自后端服务的第一数据,其中,上述消息管道连接在前端应用与上述后端服务之间,用于进行数据传输;以及基于上述第一数据更新上述前端应用的本地缓存。
根据本公开的实施例,在基于上述第一数据更新上述前端应用的本地缓存之前,上述方法还包括确定上述第一数据的处理模式,其中,在不同的处理模式下,更新上述前端应用的本地缓存的方式不同。
根据本公开的实施例,上述处理模式包括第一处理模式,上述方法还包括在确定上述第一数据的处理模式为上述第一处理模式的情况下,基于上述第一数据实时更新上述前端应用的本地缓存。
根据本公开的实施例,上述处理模式包括第二处理模式,上述方法还包括在上述第一数据的处理模式为上述第二处理模式的情况下,判断是否已在第一预定时间段内通过上述消息管道接收到来自上述后端服务的第二数据,其中,上述第二数据中包含的关键字与上述第一数据中包含的关键字相同;以及若已在上述第一预定时间段内通过上述消息管道接收到来自上述后端服务的上述第二数据,则基于上述第二数据在第二预定时间段内更新上述前端应用的本地缓存。
根据本公开的实施例,上述前端应用包括至少一个前端应用,上述方法还包括监听上述消息管道中是否有数据传输;以及在监听到上述消息管道中有数据传输的情况下,使上述至少一个前端应用通过上述消息管道接收上述后端服务以广播模式发送的上述第一数据。
本公开的另一个方面提供了一种数据处理系统,包括第一接收模块和更新模块。第一接收模块用于通过消息管道接收来自后端服务的第一数据,其中,上述消息管道连接在前端应用与上述后端服务之间,用于进行数据传输;以及更新模块用于基于上述第一数据更新上述前端应用的本地缓存。
根据本公开的实施例,上述系统还包括确定模块,用于在基于上述第一数据更新上述前端应用的本地缓存之前,确定上述第一数据的处理模式,其中,在不同的处理模式下,更新上述前端应用的本地缓存的方式不同。
根据本公开的实施例,上述处理模式包括第一处理模式,上述更新模块包括第一更新单元,用于在确定上述第一数据的处理模式为上述第一处理模式的情况下,基于上述第一数据实时更新上述前端应用的本地缓存。
根据本公开的实施例,上述处理模式包括第二处理模式,上述更新模块还包括判断单元和第二更新单元。判断单元用于在上述第一数据的处理模式为上述第二处理模式的情况下,判断是否已在第一预定时间段内通过上述消息管道接收到来自上述后端服务的第二数据,其中,上述第二数据中包含的关键字与上述第一数据中包含的关键字相同;以及第二更新单元用于若已在上述第一预定时间段内通过上述消息管道接收到来自上述后端服务的上述第二数据,则基于上述第二数据在第二预定时间段内更新上述前端应用的本地缓存。
根据本公开的实施例,上述前端应用包括至少一个前端应用,上述系统还包括监听模块和第二接收模块。监听模块用于监听上述消息管道中是否有数据传输;以及第二接收模块用于在监听到上述消息管道中有数据传输的情况下,使上述至少一个前端应用通过上述消息管道接收上述后端服务以广播模式发送的上述第一数据。
本公开的另一个方面提供了一种计算机系统,包括一个或多个处理器;存储器,用于存储一个或多个程序,其中,当上述一个或多个程序被上述一个或多个处理器执行时,使得上述一个或多个处理器实现如上所述的数据处理方法。
本公开的另一个方面提供了一种计算机可读存储介质,其上存储有可执行指令,该指令被处理器执行时使处理器实现如上所述的数据处理方法。
本公开的另一方面提供了一种计算机程序,所述计算机程序包括计算机可执行指令,所述指令在被执行时用于实现如上所述的数据处理方法。
根据本公开的实施例,因为采用在前端应用和后端服务之间架设消息管道,使得后端服务可以通过该消息管道向前端应用传输数据,由于消息管道传输数据不受网络抖动的影响,所以至少部分地克服了相关技术中在对前端应用进行数据传输时,通过http协议通知前端应用清理并更新本地缓存易受到网络抖动等因素的影响,导致前端应用与后端服务的数据不一致,以及前端应用可用性低的技术问题,进而达到了提高数据传输的稳定性和前端应用的可用性的技术效果。
附图说明
通过以下参照附图对本公开实施例的描述,本公开的上述以及其他目的、特征和优点将更为清楚,在附图中:
图1示意性示出了根据本公开实施例的可以应用数据处理方法及其系统的示例性系统架构;
图2示意性示出了根据本公开实施例的数据处理方法的流程图;
图3A示意性示出了根据本公开实施例的基于第一数据更新前端应用的本地缓存的流程图;
图3B示意性示出了根据本公开另一实施例的数据处理方法的流程图;
图3C示意性示出了根据本公开实施例的以广播模式向多个前端应用发送第一数据的示意图;
图4示意性示出了根据本公开实施例的数据处理系统的框图;
图5A示意性示出了根据本公开另一实施例的数据处理系统的框图;
图5B示意性示出了根据本公开实施例的更新模块的框图;
图5C示意性示出了根据本公开另一实施例的数据处理系统的框图;以及
图6示意性示出了根据本公开实施例的适于实现数据处理方法的计算机系统的框图。
具体实施方式
以下,将参照附图来描述本公开的实施例。但是应该理解,这些描述只是示例性的,而并非要限制本公开的范围。此外,在以下说明中,省略了对公知结构和技术的描述,以避免不必要地混淆本公开的概念。
在此使用的术语仅仅是为了描述具体实施例,而并非意在限制本公开。在此使用的术语“包括”、“包含”等表明了所述特征、步骤、操作和/或部件的存在,但是并不排除存在或添加一个或多个其他特征、步骤、操作或部件。
在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义,除非另外定义。应注意,这里使用的术语应解释为具有与本说明书的上下文相一致的含义,而不应以理想化或过于刻板的方式来解释。
在使用类似于“A、B和C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B和C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。在使用类似于“A、B或C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B或C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。本领域技术人员还应理解,实质上任意表示两个或更多可选项目的转折连词和/或短语,无论是在说明书、权利要求书还是附图中,都应被理解为给出了包括这些项目之一、这些项目任一方、或两个项目的可能性。例如,短语“A或B”应当被理解为包括“A”或“B”、或“A和B”的可能性。
本公开的实施例提供了一种数据处理方法、一种数据处理系统、一种计算机系统和一种计算机可读存储介质。该数据处理方法包括通过消息管道接收来自后端服务的第一数据,其中,消息管道连接在前端应用与后端服务之间,用于进行数据传输;以及基于第一数据更新前端应用的本地缓存。
图1示意性示出了根据本公开实施例的可以应用数据处理方法及其系统的示例性系统架构。需要注意的是,图1所示仅为可以应用本公开实施例的系统架构的示例,以帮助本领域技术人员理解本公开的技术内容,但并不意味着本公开实施例不可以用于其他设备、系统、环境或场景。
如图1所示,根据该实施例的系统架构100可以包括终端设备101、102、103,网络104和服务器105。网络104用以在终端设备101、102、103和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型,例如有线和/或无线通信链路等等。
用户可以使用终端设备101、102、103通过网络104与服务器105交互,以接收或发送消息等。终端设备101、102、103上可以安装有各种通讯客户端应用,例如购物类应用、网页浏览器应用、搜索类应用、即时通信工具、邮箱客户端和/或社交平台软件等(仅为示例)。
终端设备101、102、103可以是具有显示屏并且支持网页浏览的各种电子设备,包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。
服务器105可以是提供各种服务的服务器,例如对用户利用终端设备101、102、103所浏览的网站提供支持的后台管理服务器(仅为示例)。后台管理服务器可以对接收到的用户请求等数据进行分析等处理,并将处理结果(例如根据用户请求获取或生成的网页、信息、或数据等)反馈给终端设备。
需要说明的是,本公开实施例所提供的数据处理方法一般可以由终端设备101、102、或103执行,或者也可以由不同于终端设备101、102、或103的其他终端设备执行。相应地,本公开实施例所提供的数据处理系统一般可以设置于终端设备101、102、或103中,或设置于不同于终端设备101、102、或103的其他终端设备中。
应该理解,图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。
图2示意性示出了根据本公开实施例的数据处理方法的流程图。
如图2所示,该数据处理方法包括操作S201~S202,其中:
在操作S201,通过消息管道接收来自后端服务的第一数据,其中,消息管道连接在前端应用与后端服务之间,用于进行数据传输。
在操作S202,基于第一数据更新前端应用的本地缓存。
根据本公开的实施例,消息管道是前端应用与后端服务用来通讯的共享区域,后端服务可以对前端应用的数据进行修改、增加或删除,并通过消息管道通知前端应用进行相应的更新。
例如,前端应用为某电商应用程序,在应用程序的物品页面上包括物品详细数据,物品页面的布局数据等等。后端服务为该电商平台的服务器,存储有不同物品的原始数据,以及页面布局数据等等。运营人员可以在服务器中修改前端应用的数据。以修改手机的相关数据为例,运营人员可以在服务器中修改手机的详细数据,服务器通过消息管道将修改的手机的详细数据发送到应用前端,此时消息管道可以先确定连接的一个或多个应用前端的个数,在这种情况下,可以将修改的数据同时发送给连接的一个或多个应用前端,使得一个或多个应用前端可以清理本地缓存,并基于修改的数据及时更新本地缓存。
通过本公开的实施例,因为采用在前端应用和后端服务之间架设消息管道,使得后端服务可以通过该消息管道向前端应用传输数据,由于消息管道传输数据不受网络抖动的影响,所以至少部分地克服了相关技术中在对前端应用进行数据传输时,通过http协议通知前端应用清理并更新本地缓存易受到网络抖动等因素的影响,导致前端应用与后端服务的数据不一致,以及前端应用可用性低的技术问题,进而达到了提高数据传输的稳定性和前端应用的可用性的技术效果。
根据本公开的实施例,在基于第一数据更新前端应用的本地缓存之前,数据处理方法还包括确定第一数据的处理模式,其中,在不同的处理模式下,更新前端应用的本地缓存的方式不同。
根据本公开的实施例,在不同的处理模式下更新前端应用的本地缓存的方式不同,可以在后端服务上设置一选择开关,用于选择更新前端应用的本地缓存的处理模式。该选择开关可以通过程序模块或硬件实现。
通过本公开的实施例,提供了用于前端应用与后端服务之间的多种数据处理方法,使得数据处理模式多样化。进一步地,通过本公开的实施例,在对前端应用进行扩容或缩容时,后端服务无需修改配置,接入消息管道的前端应用都可以在不同的处理模式下接收到后端服务发送的数据,提高了服务的可用性。
根据本公开的实施例,处理模式包括第一处理模式,数据处理方法还包括在确定第一数据的处理模式为第一处理模式的情况下,基于第一数据实时更新前端应用的本地缓存。
根据本公开的实施例,通过消息管道可以实时的将后端服务发送的第一数据传输至一个或多个前端应用,并且,一个或多个前端应用在接收到第一数据后,也可以实时的更新本地缓存,以避免数据的不一致现象。
通过本公开的实施例,通过实时更新前端应用的本地缓存,实现了前端应用与后端服务的数据的一致性。
下面参考图3A~图3C,结合具体实施例对图2所示的方法做进一步说明。
图3A示意性示出了根据本公开实施例的基于第一数据更新前端应用的本地缓存的流程图。
根据本公开的实施例,处理模式包括第二处理模式,如图3A所示,基于第一数据更新前端应用的本地缓存包括操作S2021和S2022。其中:
在操作S2021,在第一数据的处理模式为第二处理模式的情况下,判断是否已在第一预定时间段内通过消息管道接收到来自后端服务的第二数据,其中,第二数据中包含的关键字与第一数据中包含的关键字相同。
在操作S2022,若已在第一预定时间段内通过消息管道接收到来自后端服务的第二数据,则基于第二数据在第二预定时间段内更新前端应用的本地缓存。
根据本公开的实施例,在前端应用和后端服务之间架设有消息管道,可以把前端应用和后端服务都确认的关键字,写入关键字队列,该关键字队列用于存放前端应用和后端服务约定好的关键字信息。后端服务收到有请求变更数据信息时,根据数据信息中的关键字可以到关键字队列中去检索,检索结果为真时,就通过消息管道发送通知给前端应用。
根据本公开的实施例,第一预设时间段的时长可以是1分钟或者2分钟等,第一预设时间段与第二预设时间段可以相同或不同。判断是否已在第一预定时间段内通过消息管道接收到来自后端服务的第二数据,其中,第二数据中包含的关键字与第一数据中包含的关键字相同,说明在一定时间内后端服务发送了多次包含相同的关键字的数据。此时可以去除包含相同关键字的一部分数据,使得更新时更新最近发送的数据,以减少本地缓存清理的次数。
通过本公开的实施例,对在一定时间内请求多次的关键字,去重后定时组装数据,更新到本地缓存,减少了本地缓存清理的次数,提高前端应用的可用性。
需要说明的是,上述第一处理模式和第二处理模式只是本公开的一部分,本公开的数据处理模式不限于上述第一处理模式和第二处理模式,在此不再赘述。
图3B示意性示出了根据本公开另一实施例的数据处理方法的流程图。
根据本公开的实施例,前端应用包括至少一个前端应用,如图3B所示,该数据处理方法除了包括操作S201~S202之外,还包括操作S203~S204,其中:
在操作S203,监听消息管道中是否有数据传输。
在操作S204,在监听到消息管道中有数据传输的情况下,使至少一个前端应用通过消息管道接收后端服务以广播模式发送的第一数据。
根据本公开的实施例,至少一个前端应用可以时刻监听消息管道中是否有数据传输,或者在一定时间内监听消息管道中是否有数据传输。当前端应用包括多个的情况下,消息管道检测所连接的前端应用的数量,并以广播模式向多个前端应用发送第一数据。
图3C示意性示出了根据本公开实施例的以广播模式向多个前端应用发送第一数据的示意图。
如图3C所示,服务器与多个应用前端通过消息管道进行通讯连接,服务器可以通过消息管道向多个应用前端传输数据,以实现服务器与多个应用前端之间的数据一致。该消息管道可以以广播模式同时向多个前端应用发送第一数据,从而减少服务器的工作次数。
通过本公开的实施例,通过广播模式发送数据,可以实现多个前端应用同时接收到数据,减少了后端服务的工作次数,提高了工作效率。
图4示意性示出了根据本公开实施例的数据处理系统的框图。
如图4所示,数据处理系统400包括第一接收模块410和更新模块420。
第一接收模块410用于通过消息管道接收来自后端服务的第一数据,其中,消息管道连接在前端应用与后端服务之间,用于进行数据传输。
更新模块420用于基于第一数据更新前端应用的本地缓存。
通过本公开的实施例,因为采用在前端应用和后端服务之间架设消息管道,使得后端服务可以通过该消息管道向前端应用传输数据,由于消息管道传输数据不受网络抖动的影响,所以至少部分地克服了相关技术中在对前端应用进行数据传输时,通过http协议通知前端应用清理并更新本地缓存易受到网络抖动等因素的影响,导致前端应用与后端服务的数据不一致,以及前端应用可用性低的技术问题,进而达到了提高数据传输的稳定性和前端应用的可用性的技术效果。
图5A示意性示出了根据本公开另一实施例的数据处理系统的框图。
如图5A所示,根据本公开的实施例,数据处理系统400除了包括第一接收模块410和更新模块420,还包括确定模块430。确定模块430用于在基于第一数据更新前端应用的本地缓存之前,确定第一数据的处理模式,其中,在不同的处理模式下,更新前端应用的本地缓存的方式不同。
通过本公开的实施例,提供了用于前端应用与后端服务之间的多种数据处理方法,使得数据处理模式多样化。
根据本公开的实施例,处理模式包括第一处理模式,更新模块420包括第一更新单元,用于在确定第一数据的处理模式为第一处理模式的情况下,基于第一数据实时更新前端应用的本地缓存。
通过本公开的实施例,通过实时更新前端应用的本地缓存,实现了前端应用与后端服务的数据的一致性。
图5B示意性示出了根据本公开实施例的更新模块的框图。
如图5B所示,根据本公开的实施例,处理模式包括第二处理模式,更新模块420还包括判断单元421和第二更新单元422。
判断单元421用于在第一数据的处理模式为第二处理模式的情况下,判断是否已在第一预定时间段内通过消息管道接收到来自后端服务的第二数据,其中,第二数据中包含的关键字与第一数据中包含的关键字相同。
第二更新单元422用于若已在第一预定时间段内通过消息管道接收到来自后端服务的第二数据,则基于第二数据在第二预定时间段内更新前端应用的本地缓存。
通过本公开的实施例,通过实时更新前端应用的本地缓存,实现了前端应用与后端服务的数据的一致性。
图5C示意性示出了根据本公开另一实施例的数据处理系统的框图。
如图5C所示,根据本公开的实施例,前端应用包括至少一个前端应用,数据处理系统400除了包括第一接收模块410、更新模块420和确定模块430之外,还包括监听模块440和第二接收模块450。
监听模块440用于监听消息管道中是否有数据传输。
第二接收模块450用于在监听到消息管道中有数据传输的情况下,使至少一个前端应用通过消息管道接收后端服务以广播模式发送的第一数据。
通过本公开的实施例,通过广播模式发送数据,可以实现多个前端应用同时接收到数据,减少了后端服务的工作次数,提高了工作效率。
可以理解的是,第一接收模块410、更新模块420、确定模块430、监听模块440以及第二接收模块450可以合并在一个模块中实现,或者其中的任意一个模块可以被拆分成多个模块。或者,这些模块中的一个或多个模块的至少部分功能可以与其他模块的至少部分功能相结合,并在一个模块中实现。根据本发明的实施例,第一接收模块410、更新模块420、确定模块430、监听模块440以及第二接收模块450中的至少一个可以至少被部分地实现为硬件电路,例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC),或可以以对电路进行集成或封装的任何其他的合理方式等硬件或固件来实现,或以软件、硬件以及固件三种实现方式的适当组合来实现。或者,第一接收模块410、更新模块420、确定模块430、监听模块440以及第二接收模块450中的至少一个可以至少被部分地实现为计算机程序模块,当该程序被计算机运行时,可以执行相应模块的功能。
需要说明的是,本公开的实施例中数据处理系统部分与本公开的实施例中数据处理方法部分是相对应的,数据处理系统部分的描述具体参考数据处理方法部分,在此不再赘述。
本公开的另一个方面提供了一种计算机系统,包括一个或多个处理器;存储器,用于存储一个或多个程序,其中,当上述一个或多个程序被上述一个或多个处理器执行时,使得上述一个或多个处理器实现如上所述的数据处理方法。
图6示意性示出了根据本公开实施例的适于实现数据处理方法的计算机系统的框图。图6示出的计算机系统仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图6所示,根据本公开实施例的计算机系统600包括处理器601,其可以根据存储在只读存储器(ROM)602中的程序或者从存储部分608加载到随机访问存储器(RAM)603中的程序而执行各种适当的动作和处理。处理器601例如可以包括通用微处理器(例如CPU)、指令集处理器和/或相关芯片组和/或专用微处理器(例如,专用集成电路(ASIC)),等等。处理器601还可以包括用于缓存用途的板载存储器。处理器601可以包括用于执行参考图2,图3A~图3C描述的根据本公开实施例的方法流程的不同动作的单一处理单元或者是多个处理单元。
在RAM 603中,存储有系统600操作所需的各种程序和数据。处理器601、ROM 602以及RAM 603通过总线604彼此相连。处理器601通过执行ROM 602和/或RAM 603中的程序来执行以上参考图2,图3A~图3C描述的各种操作。需要注意,所述程序也可以存储在除ROM 602和RAM 603以外的一个或多个存储器中。处理器601也可以通过执行存储在所述一个或多个存储器中的程序来执行以上参考图2,图3A~图3C描述的各种操作。
根据本公开的实施例,系统600还可以包括输入/输出(I/O)接口605,输入/输出(I/O)接口605也连接至总线604。系统600还可以包括连接至I/O接口605的以下部件中的一项或多项:包括键盘、鼠标等的输入部分606;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分607;包括硬盘等的存储部分608;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分609。通信部分609经由诸如因特网的网络执行通信处理。驱动器610也根据需要连接至I/O接口605。可拆卸介质611,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器610上,以便于从其上读出的计算机程序根据需要被安装入存储部分608。
根据本公开的实施例,上文参考流程图描述的方法可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读存储介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分609从网络上被下载和安装,和/或从可拆卸介质611被安装。在该计算机程序被处理器601执行时,执行本公开实施例的系统中限定的上述功能。根据本公开的实施例,上文描述的系统、设备、装置、模块、单元等可以通过计算机程序模块来实现。
需要说明的是,本公开所示的计算机可读存储介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读存储介质,该计算机可读存储介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读存储介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。根据本公开的实施例,计算机可读存储介质可以包括上文描述的ROM 602和/或RAM 603和/或ROM602和RAM 603以外的一个或多个存储器。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
作为另一方面,本公开还提供了一种计算机可读存储介质,该计算机可读存储介质可以是上述实施例中描述的设备中所包含的;也可以是单独存在,而未装配入该设备中。计算机可读存储介质承载有一个或者多个程序,当一个或者多个程序被一个该设备执行时,使得该设备执行通过消息管道接收来自后端服务的第一数据,其中,消息管道连接在前端应用与后端服务之间,用于进行数据传输;以及基于第一数据更新前端应用的本地缓存。可选地,在基于第一数据更新前端应用的本地缓存之前,还包括确定第一数据的处理模式,其中,在不同的处理模式下,更新前端应用的本地缓存的方式不同。可选地,处理模式包括第一处理模式,方法还包括在确定第一数据的处理模式为第一处理模式的情况下,基于第一数据实时更新前端应用的本地缓存。可选地,处理模式包括第二处理模式,方法还包括在第一数据的处理模式为第二处理模式的情况下,判断是否已在第一预定时间段内通过消息管道接收到来自后端服务的第二数据,其中,第二数据中包含的关键字与第一数据中包含的关键字相同;以及若已在第一预定时间段内通过消息管道接收到来自后端服务的第二数据,则基于第二数据在第二预定时间段内更新前端应用的本地缓存。可选地,前端应用包括至少一个前端应用,还包括监听消息管道中是否有数据传输;以及在监听到消息管道中有数据传输的情况下,使至少一个前端应用通过消息管道接收后端服务以广播模式发送的第一数据。
以上对本公开的实施例进行了描述。但是,这些实施例仅仅是为了说明的目的,而并非为了限制本公开的范围。尽管在以上分别描述了各实施例,但是这并不意味着各个实施例中的措施不能有利地结合使用。本公开的范围由所附权利要求及其等同物限定。不脱离本公开的范围,本领域技术人员可以做出多种替代和修改,这些替代和修改都应落在本公开的范围之内。

Claims (10)

1.一种数据处理方法,包括:
通过消息管道接收来自后端服务的第一数据,其中,所述消息管道连接在至少一个前端应用与所述后端服务之间,用于作为共享区域进行数据传输以及确定所述前端应用的数量,所述第一数据包括所述后端服务对每个所述前端应用的数据进行的修改;
确定所述第一数据的处理模式,其中,在不同的处理模式下,更新所述前端应用的本地缓存的方式不同;以及
基于所述第一数据和所述第一数据的处理模式更新每个所述前端应用的本地缓存。
2.根据权利要求1所述的方法,其中,所述处理模式包括第一处理模式,所述方法还包括:
在确定所述第一数据的处理模式为所述第一处理模式的情况下,基于所述第一数据实时更新所述前端应用的本地缓存。
3.根据权利要求1所述的方法,其中,所述处理模式包括第二处理模式,所述方法还包括:
在所述第一数据的处理模式为所述第二处理模式的情况下,判断是否已在第一预定时间段内通过所述消息管道接收到来自所述后端服务的第二数据,其中,所述第二数据中包含的关键字与所述第一数据中包含的关键字相同;以及
若已在所述第一预定时间段内通过所述消息管道接收到来自所述后端服务的所述第二数据,则基于所述第二数据在第二预定时间段内更新所述前端应用的本地缓存。
4.根据权利要求1所述的方法,其中,所述前端应用包括至少一个前端应用,所述方法还包括:
监听所述消息管道中是否有数据传输;以及
在监听到所述消息管道中有数据传输的情况下,使所述至少一个前端应用通过所述消息管道接收所述后端服务以广播模式发送的所述第一数据。
5.一种数据处理系统,包括:
第一接收模块,用于通过消息管道接收来自后端服务的第一数据,其中,所述消息管道连接在至少一个前端应用与所述后端服务之间,用于作为共享区域进行数据传输以及确定所述前端应用的数量,所述第一数据包括所述后端服务对每个所述前端应用的数据进行的修改;
确定模块,用于在基于所述第一数据更新所述前端应用的本地缓存之前,确定所述第一数据的处理模式,其中,在不同的处理模式下,更新所述前端应用的本地缓存的方式不同;以及
更新模块,用于基于所述第一数据和所述第一数据的处理模式更新每个所述前端应用的本地缓存。
6.根据权利要求5所述的系统,其中,所述处理模式包括第一处理模式,所述更新模块包括:
第一更新单元,用于在确定所述第一数据的处理模式为所述第一处理模式的情况下,基于所述第一数据实时更新所述前端应用的本地缓存。
7.根据权利要求5所述的系统,其中,所述处理模式包括第二处理模式,所述更新模块还包括:
判断单元,用于在所述第一数据的处理模式为所述第二处理模式的情况下,判断是否已在第一预定时间段内通过所述消息管道接收到来自所述后端服务的第二数据,其中,所述第二数据中包含的关键字与所述第一数据中包含的关键字相同;以及
第二更新单元,用于若已在所述第一预定时间段内通过所述消息管道接收到来自所述后端服务的所述第二数据,则基于所述第二数据在第二预定时间段内更新所述前端应用的本地缓存。
8.根据权利要求5所述的系统,其中,所述前端应用包括至少一个前端应用,所述系统还包括:
监听模块,用于监听所述消息管道中是否有数据传输;以及
第二接收模块,用于在监听到所述消息管道中有数据传输的情况下,使所述至少一个前端应用通过所述消息管道接收所述后端服务以广播模式发送的所述第一数据。
9.一种计算机系统,包括:
一个或多个处理器;
存储器,用于存储一个或多个程序,
其中,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现权利要求1至4中任一项所述的数据处理方法。
10.一种计算机可读存储介质,其上存储有可执行指令,该指令被处理器执行时使处理器实现权利要求1至4中任一项所述的数据处理方法。
CN201711498805.3A 2017-12-29 2017-12-29 数据处理方法及系统 Active CN109992428B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711498805.3A CN109992428B (zh) 2017-12-29 2017-12-29 数据处理方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711498805.3A CN109992428B (zh) 2017-12-29 2017-12-29 数据处理方法及系统

Publications (2)

Publication Number Publication Date
CN109992428A CN109992428A (zh) 2019-07-09
CN109992428B true CN109992428B (zh) 2022-06-07

Family

ID=67110293

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711498805.3A Active CN109992428B (zh) 2017-12-29 2017-12-29 数据处理方法及系统

Country Status (1)

Country Link
CN (1) CN109992428B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6675261B2 (en) * 2000-12-22 2004-01-06 Oblix, Inc. Request based caching of data store data
CN102355429A (zh) * 2011-08-12 2012-02-15 北京思创银联科技股份有限公司 基于管道的多进程间消息通信方法
CN105279034A (zh) * 2015-10-26 2016-01-27 北京皮尔布莱尼软件有限公司 一致性缓存控制系统和方法
CN106789377A (zh) * 2017-03-24 2017-05-31 聚好看科技股份有限公司 网元集群的服务参数更新方法
CN107291913A (zh) * 2017-06-27 2017-10-24 武汉斗鱼网络科技有限公司 超文本标记语言网页加载方法及装置

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8949546B2 (en) * 2012-05-31 2015-02-03 Vmware, Inc. Network cache system for reducing redundant data
CN105208097B (zh) * 2015-08-24 2018-05-25 用友网络科技股份有限公司 主数据共享装置和方法
CN105743979B (zh) * 2016-02-02 2019-06-04 北京京东尚科信息技术有限公司 一种数据通信的系统和方法
CN106790629A (zh) * 2017-01-03 2017-05-31 努比亚技术有限公司 数据同步装置及其实现数据同步的方法、客户端访问系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6675261B2 (en) * 2000-12-22 2004-01-06 Oblix, Inc. Request based caching of data store data
CN102355429A (zh) * 2011-08-12 2012-02-15 北京思创银联科技股份有限公司 基于管道的多进程间消息通信方法
CN105279034A (zh) * 2015-10-26 2016-01-27 北京皮尔布莱尼软件有限公司 一致性缓存控制系统和方法
CN106789377A (zh) * 2017-03-24 2017-05-31 聚好看科技股份有限公司 网元集群的服务参数更新方法
CN107291913A (zh) * 2017-06-27 2017-10-24 武汉斗鱼网络科技有限公司 超文本标记语言网页加载方法及装置

Also Published As

Publication number Publication date
CN109992428A (zh) 2019-07-09

Similar Documents

Publication Publication Date Title
CN109992406B (zh) 图片请求方法、响应图片请求的方法及客户端
CN107656768B (zh) 控制页面跳转的方法及其系统
CN110874227B (zh) 实现于api网关的灰度发布的分流方法、系统和电子设备
CN110888696A (zh) 页面展示方法及其系统、计算机系统及计算机可读介质
CN108989369B (zh) 对用户请求进行限流的方法及其系统
CN111125107A (zh) 数据处理方法、装置、电子设备和介质
CN111580882A (zh) 应用程序启动方法、装置、计算机系统和介质
CN109981553B (zh) 访问控制方法及其系统、计算机系统和可读存储介质
CN111866211B (zh) 应用于终端的网络访问方法、装置、终端和介质
CN112882895A (zh) 健康检查方法、装置、计算机系统及可读存储介质
CN111859225A (zh) 程序文件的访问方法、装置、计算设备和介质
CN109992428B (zh) 数据处理方法及系统
CN112948138A (zh) 一种处理消息的方法和装置
CN109213815B (zh) 控制执行次数的方法、装置、服务器终端以及可读介质
CN112688982B (zh) 一种用户请求处理方法和装置
CN112581154A (zh) 一种结算处理方法和装置
CN113742617A (zh) 一种缓存更新的方法和装置
CN112579282A (zh) 数据处理方法、装置、系统、计算机可读存储介质
CN110572331B (zh) 消息处理方法及其系统
CN110851754A (zh) 网页访问方法及系统、计算机系统和计算机可读存储介质
CN109871303B (zh) 信息处理方法及其系统、计算机系统及可读存储介质
CN108881352B (zh) 一种处理点击日志的方法、装置和系统
CN116112880B (zh) 基于mq的高并发短信发送方法和装置
CN110262756B (zh) 用于缓存数据的方法和装置
CN112860268B (zh) 模板热部署的方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant