CN113742377A - 一种处理数据的方法和装置 - Google Patents

一种处理数据的方法和装置 Download PDF

Info

Publication number
CN113742377A
CN113742377A CN202011217647.1A CN202011217647A CN113742377A CN 113742377 A CN113742377 A CN 113742377A CN 202011217647 A CN202011217647 A CN 202011217647A CN 113742377 A CN113742377 A CN 113742377A
Authority
CN
China
Prior art keywords
data
request information
unit
client
return
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011217647.1A
Other languages
English (en)
Inventor
戚华南
周正
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Jingdong Century Trading Co Ltd
Beijing Wodong Tianjun Information Technology Co Ltd
Original Assignee
Beijing Jingdong Century Trading Co Ltd
Beijing Wodong Tianjun Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Jingdong Century Trading Co Ltd, Beijing Wodong Tianjun Information Technology Co Ltd filed Critical Beijing Jingdong Century Trading Co Ltd
Priority to CN202011217647.1A priority Critical patent/CN113742377A/zh
Publication of CN113742377A publication Critical patent/CN113742377A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2455Query execution
    • G06F16/24552Database cache management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9535Search customisation based on user profiles and personalisation

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明公开了一种处理数据的方法和装置,涉及计算机技术领域。该方法的一具体实施方式包括:能够接收客户端的请求,根据请求信息或请求的返回数据确定请求信息的关联数据,发送通知消息给各个提供数据的业务单元,业务单元根据通知消息推送对应的单元数据到下游业务单元或缓存单元,缓存单元根据单元数据组成关联数据,在接收客户端的后续请求时,判断若在先请求的关联数据包含后续请求信息,并且在关联数据中查找到对应于后续请求的返回数据,则直接从缓存单元返回数据给客户端,提高了系统的响应效率,提升了用户体验。

Description

一种处理数据的方法和装置
技术领域
本发明涉及计算机技术领域,尤其涉及一种处理数据的方法和装置。
背景技术
随着互联网应用系统的复杂度提高,系统性能优化成为开发应用系统中需要考虑的因素之一,目前常用的系统性能优化的主要方法包括变更配置参数、优化系统功能代码的业务逻辑、网络资源调度或者资源配置、硬件增强等。
在实现本发明过程中,发明人发现现有技术中至少存在如下问题:
目前应用系统的架构无论是多层模型还是分布式模型,从实现上主要是通过请求和响应模型来完成的,即客户端发送业务请求,服务端根据请求拉取数据,在复杂度较高的系统架构中,存在请求响应拉取数据模型中消耗处理时间较长和计算资源较多的情况。
发明内容
有鉴于此,本发明实施例提供一种数据处理的方法和装置,能够接收客户端的请求,根据请求信息或请求的返回数据确定请求信息的关联数据,发送通知消息给各个提供数据的业务单元,业务单元根据通知消息推送对应的单元数据到下游业务单元或缓存单元,缓存单元根据单元数据组成关联数据,在接收客户端的后续请求时,判断若在先请求的关联数据包含后续请求信息,并且在关联数据中查找到对应于后续请求的返回数据,则直接从缓存单元返回数据给客户端,提高了系统的响应效率,提升了用户体验。
为实现上述目的,根据本发明实施例的一个方面,提供了一种处理数据的方法,其特征在于,包括:接收客户端的第一请求信息,通过一个或多个业务单元获取对应于所述第一请求信息的返回数据,将所返回数据发送给客户端;根据所述第一请求信息或者所述返回数据,确定对应于所述第一请求信息的关联数据;根据所述关联数据计算给一个或多个所述业务单元的推送消息,以使所述业务单元根据接收到的所述推送消息,获取单元数据并推送所述单元数据给下游业务单元或者给缓存单元,从而在所述缓存单元中组成所述关联数据。
可选地,所述处理数据的方法,其特征在于,
接收客户端的第二请求信息,当判断所述第一请求信息的关联数据包含所述第二请求信息时,在所述缓存单元中查找与所述第二请求信息对应的返回数据,在查找到所述返回数据后,发送所述返回数据给客户端。
可选地,所述处理数据的方法,其特征在于,
根据所述第一请求信息或者所述返回数据,确定对应于所述第一请求信息的关联数据,包括:根据所述第一请求信息包含的用户唯一标识,获取所述用户唯一标识的特征数据,并根据所述特征数据确定对应于所述第一请求信息的所述关联数据;所述特征数据为基于所述用户唯一标识对应的历史数据,利用用户画像模型所获取。
可选地,所述处理数据的方法,其特征在于,
根据所述第一请求信息或者所述返回数据,确定对应于所述第一请求信息的关联数据,包括:获取所述第一请求信息包含的一个或多个物品信息;基于所述物品信息获取与所述物品信息具有相同类别的多个关联物品信息;根据所述关联物品信息分别生成中间请求,分别将所述中间请求以及所述中间请求对应的返回数据作为所述第一请求信息的所述关联数据。
可选地,所述处理数据的方法,其特征在于,
根据所述第一请求信息或者所述返回数据,确定对应于所述第一请求信息的关联数据,包括:获取对应于所述第一请求信息的所述返回数据,获取所述返回数据中一个或多个结果数据,并获取与所述结果数据具有相同属性的一个或多个参考数据,根据所述参考数据分别生成中间请求,分别将所述中间请求以及所述中间请求对应的返回数据作为所述第一请求信息的所述关联数据。
可选地,所述处理数据的方法,其特征在于,
在所述第一请求信息的所述关联数据不包含所述第二请求信息,或者所述缓存单元中未查找到与所述第二请求信息对应的返回数据的情况下;通过一个或多个所述业务单元获取对应于所述第二请求信息的返回数据,并发送给客户端。
为实现上述目的,根据本发明实施例的第二方面,提供了一种处理数据的装置,其特征在于,包括:第一业务模块、第二业务模块;其中:
所述第一业务模块,用于接收客户端的第一请求信息,通过一个或多个业务单元获取对应于所述第一请求信息的返回数据,将所返回数据发送给客户端;
所述第二业务模块,用于根据所述第一请求信息或者所述返回数据,确定对应于所述第一请求信息的关联数据;根据所述关联数据,计算给一个或多个所述业务单元的推送消息,以使所述业务单元根据所述推送消息,推送单元数据给下游业务单元或者给缓存模块。
可选地,所述处理数据的装置,还包括:缓存模块;其中,
所述缓存模块,用于接收一个或多个所述业务单元的单元数据,将所述单元数据组成所述关联数据并缓存。
可选地,所述处理数据的装置,所述第一业务模块还用于接收客户端的第二请求信息,当判断所述第一请求信息的关联数据包含所述第二请求信息时,在所述缓存模块中查找与所述第二请求信息对应的返回数据,在查找到所述返回数据后,发送所述返回数据给客户端。
为实现上述目的,根据本发明实施例的第三方面,提供了一种处理数据的电子设备,其特征在于,包括:一个或多个处理器;存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如上述处理数据的方法中任一所述的方法。
为实现上述目的,根据本发明实施例的第四方面,提供了一种计算机可读介质,其上存储有计算机程序,其特征在于,所述程序被处理器执行时实现如上述处理数据的方法中任一所述的方法。
上述发明中的一个实施例具有如下优点或有益效果:能够接收客户端的请求,根据请求信息或请求的返回数据确定请求信息的关联数据,发送通知消息给各个提供数据的业务单元,业务单元根据通知消息推送对应的单元数据到下游业务单元或缓存单元,缓存单元根据单元数据组成关联数据,在接收客户端的后续请求时,判断若在先请求的关联数据包含后续请求信息,并且在关联数据中查找到对应于后续请求的返回数据,则直接从缓存单元返回数据给客户端,提高了系统的响应效率,提升了用户体验。
上述的非惯用的可选方式所具有的进一步效果将在下文中结合具体实施方式加以说明。
附图说明
附图用于更好地理解本发明,不构成对本发明的不当限定。其中:
图1是本发明一个实施例提供的一种处理数据的方法的流程示意图;
图2是本发明一个实施例描述的一种现有的处理数据的流程示意图;
图3是本发明一个实施例提供的一种处理数据的流程示意图;
图4是本发明一个实施例提供的一种处理请求信息的流程示意图;
图5是本发明一个实施例提供的一种处理数据的装置的结构示意图;
图6是本发明实施例可以应用于其中的示例性系统架构图;
图7是适于用来实现本发明实施例的终端设备或服务器的计算机系统的结构示意图。
具体实施方式
以下结合附图对本发明的示范性实施例做出说明,其中包括本发明实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本发明的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
如图1所示,本发明实施例提供了一种处理数据的方法,该方法可以包括以下步骤:
步骤S101:接收客户端的第一请求信息,通过一个或多个业务单元获取对应于所述第一请求信息的返回数据,将所返回数据发送给客户端。
具体地,根据客户端的第一请求信息,获取对应于所述第一请求信息的返回数据,其中,第一请求信息包含用户的标识、用户所访问的网络地址链接等,本发明对第一请求信息的具体内容不做限定。
下面用户浏览商品并获取商品的详细信息(返回数据)为例说明根据客户端的第一请求信息,获取对应于所述第一请求信息的返回数据的流程:例如:用户abcd通过浏览器浏览物品所发送的第一请求信息包含的链接为http://item.aaa.com/12345.html,服务端利用代理服务器接收第一请求信息(其中,第一请求信息包含用户abcd的标识,以及网络地址链接http://item.aaa.com/12345.html,假设12345为商品的标识)并获取商品12345的返回数据,返回数据可以包含商品12345的基本信息包括商品名称、商品图片介绍等数据,根据获取到的基本信息获取品牌信息、评价信息、店铺信息;进一步地,根据用户abcd的标识获取用户所在地址,通过所在地址获取价格、促销、时效、库存等信息;还可以判断用户abcd是否是店铺会员从而获取会员权益的数据等;可以理解的是,根据应用系统的架构设计,提供返回数据的业务单元可以是一个或者多个,也可以是一层(包含一个或多个业务单元)或者多层(每层包含一个或多个业务单元),即经过一个应用系统内的多次请求和响应,进行拉取数据完成的。
可以理解的是,步骤S101所描述为现有技术中客户端发送请求后从服务端获取返回数据的流程,图2中的步骤S201-步骤S206描述了步骤S101中根据客户端的第一请求信息,获取对应于所述第一请求信息的返回数据的示例流程;可以理解的是,根据应用系统业务的架构不同,设置的业务单元的数量、层级、数据单元的数量也不同,本发明对应用系统架构的具体内容不做限定。
步骤S102:根据所述第一请求信息或者所述返回数据,确定对应于所述第一请求信息的关联数据。
具体地,根据所述第一请求信息或者所述返回数据,确定对应于所述第一请求信息的关联数据有以下方法:
第一种方法:根据所述第一请求信息包含的用户唯一标识,获取所述用户唯一标识的特征数据,并根据所述特征数据确定对应于所述第一请求信息的所述关联数据;所述特征数据为基于所述用户唯一标识对应的历史数据,利用用户画像模型所获取。
具体地,根据用户唯一标识(例如:abcd)获取用户abcd的特征数据,所述特征数据为所述用户唯一标识对应的历史数据,利用用户画像模型所获取。,例如:利用用户abcd的历史购买记录、历史访问记录、所在地、年龄特征等用户特征,利用用户画像模型获取并形成特征数据,进一步地,确定对应于所述用户唯一标识的关联数据;例如:用户abcd浏览商品aaa,基于用户的特征数据确定abcd还可能浏览商品bbb、商品ccc等,因此将商品bbb、商品ccc的数据作为用户第一请求信息的关联数据。即,根据所述特征数据确定对应于所述第一请求信息的所述关联数据。本发明对用户的特征数据的内容、获取用户画像的算法模型不做限定。
第二种方法:获取所述第一请求信息包含的一个或多个物品信息;基于所述物品信息获取与所述物品信息具有相同类别的多个关联物品信息;根据所述关联物品信息分别生成中间请求,分别将所述中间请求以及所述中间请求对应的返回数据作为所述第一请求信息的所述关联数据。
具体地,第一请求信息可以包含一个或多个物品信息,例如:用户浏览的商品为手机,其中与手机相关的物品信息有手机颜色信息和手机存储内存信息,当用户查看黑色(颜色)128G(存储内存信息)的手机的详细信息时,根据手机颜色信息和手机内存信息,相同类别(例如:相同品牌)的手机基于颜色和内存划分,还可能包括如下关联信息:红色128G、紫色128G、黑色256G、红色256G版本、紫色256G等,每个手机包含不一致的详细信息(例如:价格、销售区域等),则上述各个手机的数据作为对应于用户所查看的黑色128G的手机的相同类别的多个关联物品信息,进一步地,根据所述关联物品信息分别生成中间请求,分别将所述中间请求以及所述中间请求对应的返回数据作为所述第一请求信息的所述关联数据。
第三种方法:结合用户的特征数据与第一请求信息的物品信息,确定关联数据,具体地,关于用户的特征数据的描述与第一种方法的描述一致,在此不再赘述;关于物品信息的描述与第二种方法的描述一致,在此不再赘述;进一步地,结合两者确定关联数据,例如,根据用户A浏览的产品B,确定与用户A同样年龄段的用户所推荐的最多的与产品B同类别的产品C。本发明对确定关联数据的算法模型不做限定。
第四种方法:获取对应于所述第一请求信息的所述返回数据,获取所述返回数据中一个或多个结果数据,并获取与所述结果数据具有相同属性的一个或多个参考数据,根据所述参考数据分别生成中间请求,分别将所述中间请求以及所述中间请求对应的返回数据作为所述第一请求信息的所述关联数据。
具体地,获取第一请求信息的返回数据,可以理解的是返回数据可以是通过多层的多个业务单元获取的,例如:用户浏览的物品Q,返回数据中包含的区域促销信息(即为参考数据的示例)是基于第N个业务单元所获得并返回的,而非直接基于第一请求信息的参数或者用户唯一标识所获取;则获取返回数据中的结果数据,根据结果数据中具有相同属性的参考数据,确定关联数据,例如:请求A的返回数据包含的一个结果数据为促销信息,则根据促销信息相同属性的一个或多个参考数据(例如:满减信息、打折信息等)生成中间请求并获取数据作为第一请求信息的关联数据;即,获取所述返回数据中一个或多个结果数据,并获取与所述结果数据具有相同属性的一个或多个参考数据,根据所述参考数据分别生成中间请求,分别将所述中间请求以及所述中间请求对应的返回数据作为所述第一请求信息的所述关联数据,本发明对确定关联数据的算法模型不做限定。
步骤S103:根据所述关联数据计算给一个或多个所述业务单元的推送消息,以使所述业务单元根据接收到的所述推送消息,获取单元数据并推送所述单元数据给下游业务单元或者给缓存单元,从而在所述缓存单元中组成所述关联数据。
具体地,假设根据步骤S102获取了关联数据,则进一步地,根据所述关联数据计算给一个或多个所述业务单元的推送消息,以使所述业务单元根据接收到的所述推送消息;当存在多个所述业务单元时,获取单元数据并推送所述单元数据给下游业务单元或者给缓存单元,从而在所述缓存单元中组成所述关联数据;例如:用户A浏览物品W的信息(即为第一请求信息)的关联数据对应于业务单元1、业务单元2、业务单元3,则分别发送推送消息给业务单元1、业务单元2、业务单元3,例如:业务单元1提供物品W的基本信息数据(即为单元数据);业务单元2提供物品W的区域信息数据(即为单元数据);业务单元3提供物品W的用户权益数据(即为单元数据)等;其中,所述推送消息包含对所述单元数据的具体请求信息,例如业务单元1、业务单元2、业务单元3分别根据推送消息,推送对应的物品W的单元数据到缓存单元。进一步地,当存在多个所述业务单元时,所述推送消息包含所述业务单元推送所述单元数据的下游业务单元的标识例如:发送给业务单元3的推送消息指示业务单元3推送其单元数据到业务单元2(即为下游业务单元);又例如:发送给业务单元1的推送消息指示业务单元1推动其单元数据到缓存单元等;即,获取单元数据并推送所述单元数据给下游业务单元或者给缓存单元。其中,下游业务单元为接收单元数据的单元,例如:若业务单元a推送单元数据到业务单元b,则业务单元b为业务单元a的下游业务单元;若业务单元b推送单元数据到业务单元a,则业务单元a为业务单元b的下游业务单元;下游业务单元可以是一个或多个;当业务单元不存在下游业务单元时,则推送单元数据到缓存单元;可以理解的是,本申请中的“下游”与应用系统构架中,业务单元所在的系统中布局的上下位置无关;进一步地,业务单元与下游业务单元可以归属于同一个物理机器,也可以归属于系统中不同的物理机器。
进一步地,当存在多个所述业务单元时,所述推送消息指示多个所述业务单元在推送所述单元数据时是否存在顺序关系。具体地,所述推送消息还指示多个业务单元所提供的单元数据的依赖关系,即,所述推送消息指示多个所述业务单元在推送所述单元数据时是否存在顺序关系;例如:发送给业务单元3的推送消息指示业务单元3推送单元数据给业务单元2(下游业务单元),发送给业务单元2的推送消息指示业务单元2推送单元数据给缓存单元。可以理解的是,业务单元从数据源获取数据、或(和)从其他业务单元获取数据,可以进行数据处理后形成单元数据。
进一步地,所述缓存单元中组成所述关联数据,一个或多个业务单元推送单元数据到缓存单元,其中,执行推送单元数据到缓存单元的可以为设定业务单元,例如:业务单元2推送单元数据到业务单元1;业务单元1推送单元数据到缓存单元;可以理解的是,业务单元之间的业务关系,以及与缓存单元之间的关联性根据系统的具体场景和架构所设定,本发明对系统的机构的具体形式和业务内容不做限定。
进一步地,缓存单元根据单元数据组成所述关联数据;并缓存所述关联数据;其中,缓存单元所采用的缓存工具可以为消息队列、代理服务器(例如Nginx服务器)的本地缓存、分布式系统(例如Redis)的缓存。
本发明对缓存的具体形式和所使用的方法不做限定。进一步地,所述缓存服务单元可以根据设定策略,删除所述目标数据集合中的关联数据。具体地,所述缓存服务单元根据设定策略(例如:设定时间范围、设定数据优先级等)删除所述目标数据集合中的关联数据,可以理解的是,通过删除所述目标数据集合中的关联数据,进行关联数据的动态更新,减少造成目标数据集合数据量过大的风险。
如图2所示,本发明实施例描述的一种现有的处理数据的流程示意图,该方法可以包括以下步骤:
步骤S201:用户通过客户端发送浏览物品的请求1。
步骤S202:发送对应于请求1的信息,获取各个业务单元的单元数据,形成获取请求1的返回数据。
步骤S203:业务单元1获取单元数据
步骤S204:业务单元3获取单元数据。
步骤S205:业务单元4获取单元数据。
步骤S206:业务单元2获取单元数据。
具体地,步骤S201-步骤S206描述了现有技术中客户端发送第一请求信息并获得返回数据的流程,由此可以看出,在现有的处理数据的流程中,各个业务单元通过发送请求并通过对应的数据源(例如:数据库中的数据表等)拉取单元数据。
如图3所示,本发明实施例提供了一种处理数据的方法,该方法可以包括以下步骤;
步骤S301:用户通过客户端发送浏览物品的请求1。
步骤S302:发送对应于请求1的信息并获取返回数据。
具体地,步骤S301-步骤S302的描述即为:接收客户端的第一请求信息,通过一个或多个业务单元获取对应于所述第一请求信息的返回数据,将所返回数据发送给客户端;且与步骤S201-步骤S206的描述一致,在此不再赘述。
步骤S303:根据返回数据确定关联数据,发送推送消息。
步骤S304:业务单元1接收推送消息1,并获取单元数据。
具体地,业务单元1获取单元数据,并将单元数据推送到缓存单元。
步骤S305:业务单元2接收推送消息2,并获取单元数据。
具体地,业务单元2获取单元数据,并将单元数据推送到下游业务单元(业务单元1)。
步骤S306:业务单元3接收推送消息3,并获取单元数据。
具体地,业务单元3获取单元数据,并将单元数据推送到缓存单元。
步骤S307:缓存单元缓存各个单元数据,组成关联数据。
步骤S303-步骤S307的描述即为:根据所述关联数据计算给一个或多个所述业务单元的推送消息,以使所述业务单元根据接收到的所述推送消息,获取单元数据并推送所述单元数据给下游业务单元或者给缓存单元,从而在所述缓存单元中组成所述关联数据。
如图4所示,本发明实施例提供了一种请求信息的方法,该方法可以包括以下步骤;
其中,步骤S401-步骤S404描述的请求2是步骤S301-步骤S307中所描述的请求1的后续请求;可以理解的是,请求2(即第二请求信息)可以为一个或多个,以下以请求2为例说明。
步骤S401:用户通过客户端发送浏览物品的请求2。
步骤S402:判断请求1的关联数据是否包含请求2,并且在缓存单元中查找到请求2的返回数据。具体地,如果是,执行步骤S403,否则执行步骤S404。
步骤S403:从缓存单元中的关联数据中获取请求2的返回数据。
具体地,步骤S401-步骤S403的描述即为:接收客户端的第二请求信息,当判断所述第一请求信息的关联数据包含所述第二请求信息时,在所述缓存单元中查找与所述第二请求信息对应的返回数据,在查找到所述返回数据后,发送所述返回数据给客户端。
进一步地,第二请求信息可以为一个或多个;例如:第一请求信息为手机型号1,其特征为黑色128G;假设第二请求信息为手机型号1,其特征为红色256G,可以通过用户画像的特征数据、第二请求信息包含的物品信息、第一请求的返回数据包含的结果数据、群体用户画像等策略,当判断所述第一请求信息的关联数据包含所述第二请求信息时;在所述缓存单元中查找与所述第二请求信息对应的返回数据,在查找到所述返回数据后,发送所述返回数据给客户端;可以理解的是,通过步骤S401-步骤S403的流程,可以使第二请求直接从缓存单元获取返回数据,提高了返回数据的效率,提升了用户体验;本发明对判断判断所述第一请求信息的关联数据包含所述第二请求信息的具体方法和策略不做限定。
步骤S404:通过一个或多个所述业务单元获取对应于请求2的返回数据,并发送给客户端;
具体地,步骤S404的描述即为:在所述第一请求信息的所述关联数据不包含所述第二请求信息,或者所述缓存单元中未查找到与所述第二请求信息对应的返回数据的情况下;通过一个或多个所述业务单元获取对应于所述第二请求信息的返回数据,并发送给客户端。即,在所述第一请求信息的所述关联数据不包含所述第二请求信息,或者所述缓存单元中未查找到与所述第二请求信息对应的返回数据的情况下,利用与请求1一致的拉取数据的方法获得返回数据的流程处理请求2。
进一步地,结合图2所示的步骤S201-步骤S206所描述的现有的客户端发送第一请求信息并获得返回数据的流程可知,现有的流程采用拉取数据的方式,图3所述的步骤S301-步骤S307所描述的流程采用推送消息和推送数据到缓存单元的方式,以及图4所述的步骤S401-步骤S404所描述的通过缓存单元获取返回数据的流程,提高了返回数据的响应效率;例如:在一些平台的直播活动场景中,假设参与活动的商品为手机,假设手机对应的物品信息有颜色、内存和存储空间等,用上述物品信息做组合,可以有如下版本:黑色8G128G版本、红色8G128G版本、紫色8G128G版本、黑色8G256G版本、红色8G256G版本、紫色8G256G版本等,可以理解的是,不同的版本所展示的物品详细信息可能不相同,例如:展示的价格、促销力度、销售区域不同,商品详情介绍图片内容也同,因此当为用户展示其中一个版本的数据时,能够提前获取其关联数据并缓存其关联数据,特别是在直播等高并发场景,可以较大程度地提升响应速度和用户体验。
如图5所示,本发明实施例提供了一种处理数据的装置500,包括:第一业务模块501和第二业务模块502;其中:
所述第一业务模块501,用于接收客户端的第一请求信息,通过一个或多个业务单元获取对应于所述第一请求信息的返回数据,将所返回数据发送给客户端;
所述第二业务模块502,用于根据所述第一请求信息或者所述返回数据,确定对应于所述第一请求信息的关联数据;根据所述关联数据,计算给一个或多个所述业务单元的推送消息,以使所述业务单元根据所述推送消息,推送单元数据给下游业务单元或者给缓存模块;所述缓存模块,用于接收一个或多个所述业务单元的单元数据,将所述单元数据组成所述关联数据并缓存。
可选地,所述第一业务模块501,还用于接收客户端的第二请求信息,当判断所述第一请求信息的关联数据包含所述第二请求信息时,在所述缓存模块中查找与所述第二请求信息对应的返回数据,在查找到所述返回数据后,发送所述返回数据给客户端。
本发明实施例还提供了一种处理数据的电子设备,包括:一个或多个处理器;存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现上述任一实施例提供的方法。
本发明实施例还提供了一种计算机可读介质,其上存储有计算机程序,所述程序被处理器执行时实现上述任一实施例提供的方法。
图6示出了可以应用本发明实施例的处理数据的方法或处理数据的系统的示例性系统架构600。
如图6所示,系统架构600可以包括终端设备601、602、603,网络604和服务器605。网络604用以在终端设备601、602、603和服务器605之间提供通信链路的介质。网络604可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
用户可以使用终端设备601、602、603通过网络604与服务器605交互,以接收或发送消息等。终端设备601、602、603上可以安装有各种客户端应用,例如电子商城客户端应用、网页浏览器应用、搜索类应用等。
终端设备601、602、603可以是具有显示屏并且支持各种客户端应用的各种电子设备,包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。
服务器605可以是提供各种服务的服务器,例如对用户利用终端设备601、602、603所使用的客户端应用提供支持的后台管理服务器。后台管理服务器可以对接收到的请求进行处理,并将对应于请求的返回数据反馈给终端设备。
需要说明的是,本发明实施例所提供的处理数据的方法一般由终端设备601、602、603执行,相应地,处理数据的装置一般设置于终端设备601、602、603中或者服务器605中。
应该理解,图6中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。
下面参考图7,其示出了适于用来实现本发明实施例的终端设备的计算机系统700的结构示意图。图7示出的终端设备仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图7所示,计算机系统700包括中央处理单元(CPU)701,其可以根据存储在只读存储器(ROM)702中的程序或者从存储部分708加载到随机访问存储器(RAM)703中的程序而执行各种适当的动作和处理。在RAM 703中,还存储有系统700操作所需的各种程序和数据。CPU 701、ROM 702以及RAM 703通过总线704彼此相连。输入/输出(I/O)接口705也连接至总线704。
以下部件连接至I/O接口705:包括键盘、鼠标等的输入部分706;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分707;包括硬盘等的存储部分708;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分709。通信部分709经由诸如因特网的网络执行通信处理。驱动器710也根据需要连接至I/O接口705。可拆卸介质711,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器710上,以便于从其上读出的计算机程序根据需要被安装入存储部分708。
特别地,根据本发明公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本发明公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分709从网络上被下载和安装,和/或从可拆卸介质711被安装。在该计算机程序被中央处理单元(CPU)701执行时,执行本发明的系统中限定的上述功能。
需要说明的是,本发明所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本发明中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本发明各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本发明实施例中所涉及到的模块和/或单元可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的模块和/或单元也可以设置在处理器中,例如,可以描述为:一种处理器包括第一业务模块和第二业务模块。其中,这些模块的名称在某种情况下并不构成对该模块本身的限定,例如,第二业务模块还可以被描述为“根据第一请求信息的关联数据,计算推送消息并接收各个业务单元根据推送消息所推送的单元数据的模块”。
作为另一方面,本发明还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的设备中所包含的;也可以是单独存在,而未装配入该设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被一个该设备执行时,使得该设备包括:接收客户端的第一请求信息,通过一个或多个业务单元获取对应于所述第一请求信息的返回数据,将所返回数据发送给客户端;根据所述第一请求信息或者所述返回数据,确定对应于所述第一请求信息的关联数据;根据所述关联数据计算给一个或多个所述业务单元的推送消息,以使所述业务单元根据接收到的所述推送消息,获取单元数据并推送所述单元数据给下游业务单元或者给缓存单元,从而在所述缓存单元中组成所述关联数据。
由此可见,本发明能够接收客户端的请求,根据请求信息或请求的返回数据确定请求信息的关联数据,发送通知消息给各个提供数据的业务单元,业务单元根据通知消息推送对应的单元数据到下游业务单元或缓存单元,缓存单元根据单元数据组成关联数据,在接收客户端的后续请求时,判断若在先请求的关联数据包含后续请求信息,并且在关联数据中查找到对应于后续请求的返回数据,则直接从缓存单元返回数据给客户端,提高了系统的响应效率,提升了用户体验。
上述具体实施方式,并不构成对本发明保护范围的限制。本领域技术人员应该明白的是,取决于设计要求和其他因素,可以发生各种各样的修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等,均应包含在本发明保护范围之内。

Claims (11)

1.一种处理数据的方法,其特征在于,包括:
接收客户端的第一请求信息,通过一个或多个业务单元获取对应于所述第一请求信息的返回数据,将所返回数据发送给客户端;
根据所述第一请求信息或者所述返回数据,确定对应于所述第一请求信息的关联数据;
根据所述关联数据计算给一个或多个所述业务单元的推送消息,以使所述业务单元根据接收到的所述推送消息,获取单元数据并推送所述单元数据给下游业务单元或者给缓存单元,从而在所述缓存单元中组成所述关联数据。
2.根据权利要求1所述的方法,其特征在于,
接收客户端的第二请求信息,当判断所述第一请求信息的关联数据包含所述第二请求信息时,在所述缓存单元中查找与所述第二请求信息对应的返回数据,在查找到所述返回数据后,发送所述返回数据给客户端。
3.根据权利要求1所述的方法,其特征在于,
根据所述第一请求信息或者所述返回数据,确定对应于所述第一请求信息的关联数据,包括:
根据所述第一请求信息包含的用户唯一标识,获取所述用户唯一标识的特征数据,并根据所述特征数据确定对应于所述第一请求信息的所述关联数据;所述特征数据为基于所述用户唯一标识对应的历史数据,利用用户画像模型所获取。
4.根据权利要求1所述的方法,其特征在于,
根据所述第一请求信息或者所述返回数据,确定对应于所述第一请求信息的关联数据,包括:
获取所述第一请求信息包含的一个或多个物品信息;基于所述物品信息获取与所述物品信息具有相同类别的多个关联物品信息;根据所述关联物品信息分别生成中间请求,分别将所述中间请求以及所述中间请求对应的返回数据作为所述第一请求信息的所述关联数据。
5.根据权利要求1所述的方法,其特征在于,
根据所述第一请求信息或者所述返回数据,确定对应于所述第一请求信息的关联数据,包括:
获取对应于所述第一请求信息的所述返回数据,获取所述返回数据中一个或多个结果数据,并获取与所述结果数据具有相同属性的一个或多个参考数据,根据所述参考数据分别生成中间请求,分别将所述中间请求以及所述中间请求对应的返回数据作为所述第一请求信息的所述关联数据。
6.根据权利要求2所述的方法,其特征在于,
在所述第一请求信息的所述关联数据不包含所述第二请求信息,或者所述缓存单元中未查找到与所述第二请求信息对应的返回数据的情况下;通过一个或多个所述业务单元获取对应于所述第二请求信息的返回数据,并发送给客户端。
7.一种处理数据的装置,其特征在于,包括:第一业务模块、第二业务模块;其中:
所述第一业务模块,用于接收客户端的第一请求信息,通过一个或多个业务单元获取对应于所述第一请求信息的返回数据,将所返回数据发送给客户端;
所述第二业务模块,用于根据所述第一请求信息或者所述返回数据,确定对应于所述第一请求信息的关联数据;根据所述关联数据,计算给一个或多个所述业务单元的推送消息,以使所述业务单元根据所述推送消息,推送单元数据给下游业务单元或者给缓存模块。
8.根据权利要求7所述的装置,还包括:缓存模块;其中,
所述缓存模块,用于接收一个或多个所述业务单元的单元数据,将所述单元数据组成所述关联数据并缓存。
9.根据权利要求7所述的装置,所述第一业务模块,还用于:
接收客户端的第二请求信息,当判断所述第一请求信息的关联数据包含所述第二请求信息时,在所述缓存模块中查找与所述第二请求信息对应的返回数据,在查找到所述返回数据后,发送所述返回数据给客户端。
10.一种电子设备,其特征在于,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-6中任一所述的方法。
11.一种计算机可读介质,其上存储有计算机程序,其特征在于,所述程序被处理器执行时实现如权利要求1-6中任一所述的方法。
CN202011217647.1A 2020-11-04 2020-11-04 一种处理数据的方法和装置 Pending CN113742377A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011217647.1A CN113742377A (zh) 2020-11-04 2020-11-04 一种处理数据的方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011217647.1A CN113742377A (zh) 2020-11-04 2020-11-04 一种处理数据的方法和装置

Publications (1)

Publication Number Publication Date
CN113742377A true CN113742377A (zh) 2021-12-03

Family

ID=78728138

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011217647.1A Pending CN113742377A (zh) 2020-11-04 2020-11-04 一种处理数据的方法和装置

Country Status (1)

Country Link
CN (1) CN113742377A (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108769083A (zh) * 2018-08-01 2018-11-06 北京奇虎科技有限公司 基于分布式服务器的登录方法、装置及系统
CN108920616A (zh) * 2018-06-28 2018-11-30 郑州云海信息技术有限公司 一种元数据访问性能优化方法、系统、装置及存储介质
CN110445632A (zh) * 2018-05-04 2019-11-12 北京京东尚科信息技术有限公司 一种预防客户端崩溃的方法和装置
CN111190926A (zh) * 2019-11-25 2020-05-22 腾讯云计算(北京)有限责任公司 资源缓存方法、装置、设备及存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110445632A (zh) * 2018-05-04 2019-11-12 北京京东尚科信息技术有限公司 一种预防客户端崩溃的方法和装置
CN108920616A (zh) * 2018-06-28 2018-11-30 郑州云海信息技术有限公司 一种元数据访问性能优化方法、系统、装置及存储介质
CN108769083A (zh) * 2018-08-01 2018-11-06 北京奇虎科技有限公司 基于分布式服务器的登录方法、装置及系统
CN111190926A (zh) * 2019-11-25 2020-05-22 腾讯云计算(北京)有限责任公司 资源缓存方法、装置、设备及存储介质

Similar Documents

Publication Publication Date Title
CN106874471B (zh) 信息推送方法和装置
CN110888696A (zh) 页面展示方法及其系统、计算机系统及计算机可读介质
CN112884405A (zh) 一种询价系统及其调度方法
CN112835904A (zh) 一种数据处理方法和数据处理装置
CN110866040A (zh) 用户画像生成方法、装置和系统
CN109992719B (zh) 用于确定推送优先级信息的方法和装置
CN111258988A (zh) 资产管理方法、装置、电子设备以及介质
CN111010453B (zh) 服务请求处理方法、系统、电子设备及计算机可读介质
CN110928594A (zh) 服务开发方法和平台
CN113378346A (zh) 模型仿真的方法和装置
CN113282852A (zh) 编辑网页的方法和装置
CN113032702A (zh) 一种页面加载方法和装置
CN113742377A (zh) 一种处理数据的方法和装置
CN111815381A (zh) 一种信息生成方法和装置
CN110807095A (zh) 一种物品匹配方法和装置
CN114896244A (zh) 配置数据库表的方法、装置、设备和计算机可读介质
CN113112285B (zh) 数据分析方法和装置
US20170034266A1 (en) System and Method for the Departmentalization of Structured Content on a Website (URL) through a Secure Content Management System
CN113326454B (zh) 展示标签的方法和装置
US20160156693A1 (en) System and Method for the Management of Content on a Website (URL) through a Device where all Content Originates from a Secured Content Management System
CN112784187A (zh) 页面展示方法和装置
CN108831012B (zh) 一种贩售机的售货方法和装置
CN111586133B (zh) 一种信息推送方法及相关装置
CN113760557A (zh) 页面数据的发送方法、装置、电子设备和存储介质
CN108881352B (zh) 一种处理点击日志的方法、装置和系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination