CN115914399A - 请求数据发送方法、装置、设备、介质和程序产品 - Google Patents

请求数据发送方法、装置、设备、介质和程序产品 Download PDF

Info

Publication number
CN115914399A
CN115914399A CN202211204401.XA CN202211204401A CN115914399A CN 115914399 A CN115914399 A CN 115914399A CN 202211204401 A CN202211204401 A CN 202211204401A CN 115914399 A CN115914399 A CN 115914399A
Authority
CN
China
Prior art keywords
request
server
server information
service request
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211204401.XA
Other languages
English (en)
Inventor
常姜洲
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jingdong Technology Information Technology Co Ltd
Original Assignee
Jingdong Technology Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jingdong Technology Information Technology Co Ltd filed Critical Jingdong Technology Information Technology Co Ltd
Priority to CN202211204401.XA priority Critical patent/CN115914399A/zh
Publication of CN115914399A publication Critical patent/CN115914399A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本公开的实施例公开了请求数据发送方法、装置、设备、介质和程序产品。该方法的一具体实施方式包括:响应于接收到目标服务请求,确定本地缓存中是否存在与目标服务请求相匹配的路由字段,其中,本地缓存中存储有未过期的服务请求所对应的路由字段;响应于本地缓存中不存在与目标服务请求相匹配的路由字段,将目标服务请求确定为非热点请求;将非热点请求发送至目标服务器信息对应的目标服务器。该实施方式与大数据有关,实现了避免整个应用层服务器集群缓存资源的浪费,提高了应用层服务器集群的缓存利用率,同时,避免了应用层服务器集群缓存击穿,缩短了请求的响应时间。

Description

请求数据发送方法、装置、设备、介质和程序产品
技术领域
本公开的实施例涉及计算机技术领域,具体涉及请求数据发送方法、装置、设备、介质和程序产品。
背景技术
在应用层服务器集群中,各台服务器内的缓存数据几乎大致相同。在服务提供者发起服务请求时,通常采用的方式是将服务请求分别发送给所有应用层服务器,造成整个应用层服务器中的缓存数据相互冗余。
然而,发明人发现,当采用上述方式时,经常会存在如下技术问题:
由于各台应用层服务器几乎缓存了相同的数据,造成整个应用层服务器集群缓存资源的浪费,同时,对于请求发送至所有应用层服务器,存在应用层服务器缓存击穿的较大可能性。
该背景技术部分中所公开的以上信息仅用于增强对本发明构思的背景的理解,并因此,其可包含并不形成本国的本领域普通技术人员已知的现有技术的信息。
发明内容
本公开的内容部分用于以简要的形式介绍构思,这些构思将在后面的具体实施方式部分被详细描述。本公开的内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征,也不旨在用于限制所要求的保护的技术方案的范围。
本公开的一些实施例提出了请求数据发送方法、装置、设备、介质和程序产品,来解决以上背景技术部分提到的技术问题。
第一方面,本公开的一些实施例提供了一种请求数据发送方法,该方法包括:响应于接收到目标服务请求,确定本地缓存中是否存在与上述目标服务请求相匹配的路由字段,其中,上述本地缓存中存储有未过期的服务请求所对应的路由字段;响应于上述本地缓存中不存在与上述目标服务请求相匹配的路由字段,将上述目标服务请求确定为非热点请求;将上述非热点请求发送至目标服务器信息对应的目标服务器。
可选地,上述方法还包括:响应于上述本地缓存中存在与上述目标服务请求相匹配的路由字段,将上述目标服务请求确定为热点请求;根据上述热点请求,从上述预先获取的服务器信息集合中随机筛选服务器信息,作为筛选服务器信息;将上述热点请求发送至上述筛选服务器信息对应的服务器。
可选地,在上述将上述非热点请求发送至目标服务器信息对应的目标服务器之前,上述方法还包括:将上述非热点请求保存至上述本地缓存中。
可选地,上述将上述非热点请求发送至目标服务器信息对应的目标服务器,包括:获取服务器信息集合;确定上述服务器信息集合中每个服务器信息对应的服务器哈希值,得到服务器哈希值集合;确定上述非热点请求对应的请求哈希值;对上述服务器哈希值集合中的各个服务器哈希值进行排序,得到服务器哈希值序列;根据上述服务器哈希值序列,构建一致性哈希环;确定上述请求哈希值在上述一致性哈希环中的位置,得到目标位置;将上述目标位置顺时针方向的第一个服务器哈希值对应的服务器,确定为目标服务器信息。
可选地,上述预先获取的服务器信息集合中的服务器信息包括服务器序号;以及上述根据上述热点请求,从上述预先获取的服务器信息集合中随机筛选服务器信息,作为筛选服务器信息,包括:为上述热点请求设置随机数;确定上述预先获取的服务器信息集合中服务器信息的数量;对上述随机数和上述服务器信息的数量进行求余处理,得到余数;将上述预先获取的服务器信息集合中,服务器序号与上述余数相匹配的服务器信息确定为筛选服务器信息。
第二方面,本公开的一些实施例提供了一种请求数据发送装置,装置包括:第一确定单元,被配置成响应于接收到目标服务请求,确定本地缓存中是否存在与上述目标服务请求相匹配的路由字段,其中,上述本地缓存中存储有未过期的服务请求所对应的路由字段;第二确定单元,被配置成响应于上述本地缓存中不存在与上述目标服务请求相匹配的路由字段,将上述目标服务请求确定为非热点请求;发送单元,被配置成将上述非热点请求发送至目标服务器信息对应的目标服务器。
可选地,请求数据发送装置还包括:第三确定单元、随机筛选单元和热点请求发送单元。其中,第三确定单元被配置成响应于上述本地缓存中存在与上述目标服务请求相匹配的路由字段,将上述目标服务请求确定为热点请求。随机筛选单元被配置成根据上述热点请求,从上述预先获取的服务器信息集合中随机筛选服务器信息,作为筛选服务器信息。热点请求发送单元被配置成将上述热点请求发送至上述筛选服务器信息对应的服务器。
可选地,在发送单元之前,请求数据发送装置还包括:保存单元,被配置成将上述非热点请求保存至上述本地缓存中。
可选地,发送单元进一步被配置成:获取服务器信息集合;确定上述服务器信息集合中每个服务器信息对应的服务器哈希值,得到服务器哈希值集合;确定上述非热点请求对应的请求哈希值;对上述服务器哈希值集合中的各个服务器哈希值进行排序,得到服务器哈希值序列;根据上述服务器哈希值序列,构建一致性哈希环;确定上述请求哈希值在上述一致性哈希环中的位置,得到目标位置;将上述目标位置顺时针方向的第一个服务器哈希值对应的服务器,确定为目标服务器信息。
可选地,上述预先获取的服务器信息集合中的服务器信息包括服务器序号。
可选地,随机筛选单元进一步被配置成:为上述热点请求设置随机数;确定上述预先获取的服务器信息集合中服务器信息的数量;对上述随机数和上述服务器信息的数量进行求余处理,得到余数;将上述预先获取的服务器信息集合中,服务器序号与上述余数相匹配的服务器信息确定为筛选服务器信息。
第三方面,本公开的一些实施例提供了一种电子设备,包括:一个或多个处理器;存储装置,其上存储有一个或多个程序,当一个或多个程序被一个或多个处理器执行,使得一个或多个处理器实现上述第一方面任一实现方式所描述的方法。
第四方面,本公开的一些实施例提供了一种计算机可读介质,其上存储有计算机程序,其中,程序被处理器执行时实现上述第一方面任一实现方式所描述的方法。
第五方面,本公开的一些实施例提供了一种计算机程序产品,包括计算机程序,计算机程序在被处理器执行时实现上述第一方面任一实现方式所描述的方法。
本公开的上述各个实施例具有如下有益效果:通过本公开的一些实施例的请求数据发送方法,可以避免整个应用层服务器集群缓存资源的浪费,提高应用层服务器集群的缓存利用率,同时,可以避免应用层服务器集群缓存击穿,从而,缩短请求的响应时间。具体来说,造成整个应用层服务器集群缓存利用率不高、请求响应不及时的原因在于:由于各台应用层服务器几乎缓存了相同的数据,造成整个应用层服务器集群缓存资源的浪费,同时,对于请求发送至所有应用层服务器,存在应用层服务器缓存击穿的较大可能性。基于此,本公开的一些实施例的请求数据发送方法,首先,响应于接收到目标服务请求,确定本地缓存中是否存在与上述目标服务请求相匹配的路由字段,其中,上述本地缓存中存储有未过期的服务请求所对应的路由字段。实际中,本地缓存中缓存的路由字段在一定时间后会被删除,从而,在提高本地缓存的利用率的同时,还可以根据请求是否被删除,确定目标服务请求属于热点请求还是非热点请求。其次,响应于上述本地缓存中不存在与上述目标服务请求相匹配的路由字段,将上述目标服务请求确定为非热点请求。由此,可以将请求访问频率不高的非热点请求发送至同一个服务器,实现非热点请求由对应的服务器进行数据处理。最后,将上述非热点请求发送至目标服务器信息对应的目标服务器。由此,将同一个请求发送至同一台服务器节点上,避免整个应用层服务器中缓存的热点数据的冗余,释放了应用层服务器集群的缓存容量,提高了应用层服务器集群的缓存利用率。同时,应用层服务器集群缓存不会被击穿,可以缩短请求链路,提高请求的响应时间。
附图说明
结合附图并参考以下具体实施方式,本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中,相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的,元件和元素不一定按照比例绘制。
图1是根据本公开一些实施例的请求数据发送方法的现有技术的示意图;
图2是根据本公开的一些实施例的请求数据发送方法的应用场景的示意图;
图3是根据本公开的请求数据发送方法的一些实施例的流程图;
图4是根据本公开的请求数据发送方法的另一些实施例的流程图;
图5是根据本公开的实现自定义负载均衡策略的具体示例;
图6是根据本公开的请求数据发送方法中热点请求和非热点请求的判断和处理的具体示例;
图7是根据本公开的请求数据发送装置的一些实施例的结构示意图;
图8是适于用来实现本公开的一些实施例的电子设备的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例,然而应当理解的是,本公开可以通过各种形式来实现,而且不应该被解释为限于这里阐述的实施例。相反,提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是,本公开的附图及实施例仅用于示例性作用,并非用于限制本公开的保护范围。
另外还需要说明的是,为了便于描述,附图中仅示出了与有关发明相关的部分。在不冲突的情况下,本公开中的实施例及实施例中的特征可以相互组合。
需要注意,本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分,并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意,本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的,本领域技术人员应当理解,除非在上下文另有明确指出,否则应该理解为“一个或多个”。
本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的,而并不是用于对这些消息或信息的范围进行限制。
图1是根据本公开一些实施例的请求数据发送方法的现有技术的示意图。
在图1的示意图中,服务调用方可以发起服务请求,服务请求会通过通信链路1发送至服务提供者应用集群,即将服务请求同时发送至4个服务器。4个服务器中的缓存数据几乎大致相同。
所有应用层服务器的内存加起来是非常大的,而每台机器几乎缓存了相同的数据,造成了缓存资源的浪费。例如,50台服务器中每台服务器均为8G内存,且每台服务器仅能缓存2G左右的服务请求数据。当面临高并发流量的请求时,热点请求数据所占的内存远大于2G时,请求会穿透到分布式缓存集群,给分布式缓存集群带来高负载压力,并且,此时整个请求链路为1-2-3-4,请求的响应时间较长。其中,在服务请求发送至服务器后,服务器缓存中没有服务请求对应的数据时,服务请求会进一步发送至分布式缓存集群,以获取相关数据,导致请求链路较长。
基于此,本公开提供了一种请求数据发送方法,实现了避免整个应用层服务器集群缓存资源的浪费,提高了应用层服务器集群的缓存利用率,同时,避免了应用层服务器集群缓存击穿,缩短了请求的响应时间。
下面将参考附图并结合实施例来详细说明本公开。
图2是根据本公开一些实施例的请求数据发送方法的应用场景的示意图。
在图2的应用场景中,计算设备可以响应于接收到目标服务请求,确定本地缓存中是否存在与上述目标服务请求相匹配的路由字段,其中,上述本地缓存中存储有未过期的服务请求所对应的路由字段。然后,响应于上述本地缓存中不存在与上述目标服务请求相匹配的路由字段,将上述目标服务请求确定为非热点请求。最后,将上述非热点请求发送至目标服务器信息对应的目标服务器。
可选地,计算设备还可以从配置中心获取热点判定阈值。其中,热点判定阈值可以根据实际情况在配置中心进行设置。配置中心可以是用于对配置进行设置和管理的服务中心。计算设备获取到热点判定阈值后,通过热点探测路由算法选择器,确定将服务请求发送到哪台服务器。热点探测路由算法选择器可以判断服务请求属于热点请求或者非热点请求,并根据服务请求的不同,将服务请求发送至不同的服务器。计算设备可以在接收到目标服务请求后,确定本地缓存中是否存在与目标服务请求相匹配的路由字段。响应于本地缓存中不存在与上述目标服务请求相匹配的路由字段,将上述目标服务请求确定为非热点请求。对于非热点请求,可以将非热点请求发送至目标服务器信息对应的目标服务器。例如,当目标服务请求相匹配的路由字段属于子集合001时,可以将目标服务请求发送至子集合001所属的服务器。当目标服务请求相匹配的路由字段属于子集合002时,可以将目标服务请求发送至子集合002所属的服务器。当目标服务请求相匹配的路由字段属于子集合003时,可以将目标服务请求发送至子集合003所属的服务器。由此,可以将同一个服务请求发送至同一个服务器进行处理。
需要说明的是,上述计算设备可以是硬件,也可以是软件。当计算设备为硬件时,可以实现成多个服务器或终端设备组成的分布式集群,也可以实现成单个服务器或单个终端设备。当计算设备体现为软件时,可以安装在上述所列举的硬件设备中。其可以实现成例如用来提供分布式服务的多个软件或软件模块,也可以实现成单个软件或软件模块。在此不做具体限定。
应该理解,图2中的计算设备的数目仅仅是示意性的。根据实现需要,可以具有任意数目的计算设备。
继续参考图3,示出了根据本公开的请求数据发送方法的一些实施例的流程300。该请求数据发送方法,包括以下步骤:
步骤301,响应于接收到目标服务请求,确定本地缓存中是否存在与目标服务请求相匹配的路由字段。
在一些实施例中,请求数据发送方法的执行主体可以通过有线连接方式或者无线连接方式,接收到目标服务请求,响应于接收到目标服务请求,确定本地缓存中是否存在与上述目标服务请求相匹配的路由字段。其中,上述本地缓存中存储有未过期的服务请求所对应的路由字段。其中,上述目标服务请求可以是向对应服务器发送的请求。实践中,上述目标服务请求可以是向服务器发送的数据处理请求,还可以是向服务器发送的数据查询请求。上述数据处理请求可以是对数据进行增加、删除和修改的请求。上述数据查询请求可以是查询目标数据的请求。例如,目标服务请求可以是查询物品的详细信息的请求,或者是查询用户信息的请求。上述目标服务请求可以包括路由字段。路由字段可以表征不同的服务请求。服务请求与路由字段之间为一一对应的关系。例如,服务请求A存在唯一对应路由字段A。服务请求B存在唯一对应路由字段B。服务请求C存在唯一对应路由字段C。路由字段可以用于在数据库中查看物品的详细信息或者用户信息等等。需要指出的是,上述无线连接方式可以包括但不限于3G/4G连接、WiFi连接、蓝牙连接、WiMAX连接、Zigbee连接、UWB(ultra wideband)连接、以及其他现在已知或将来开发的无线连接方式。
实践中,上述执行主体可以从配置中心获取缓存过期时间阈值,然后,接收服务请求,并将各个服务请求对应的路由字段保存至上述本地缓存中。接着,对本地缓存保存时间超过缓存过期时间阈值的路由字段进行删除,从而,可以提高本地缓存的利用率。配置中心可以是用于对配置进行设置和管理的服务中心。缓存过期时间阈值可以根据实际情况在配置中心进行设置。例如,缓存过期时间阈值可以是1000毫秒。
步骤302,响应于本地缓存中不存在与目标服务请求相匹配的路由字段,将目标服务请求确定为非热点请求。
在一些实施例中,上述执行主体可以响应于上述本地缓存中不存在与上述目标服务请求相匹配的路由字段,将上述目标服务请求确定为非热点请求。其中,上述非热点请求可以是预定时长内访问频次低于预定阈值的请求。例如,预定时长可以是1000毫秒。预定阈值可以为1。
实践中,上述执行主体可以将上述目标服务请求分别与本地缓存中的各个路由字段进行比对,得到比对结果集合。响应于上述比对结果集合中存在满足预设条件的比对结果,确定本地缓存中存在与上述目标服务请求数据相匹配的服务请求数据。其中,满足预设条件的比对结果可以是目标服务请求与本地缓存中的路由字段比对一致的比对结果。响应于上述比对结果集合中不存在满足预设条件的比对结果,确定本地缓存中不存在与上述目标服务请求相匹配的路由字段。
步骤303,将非热点请求发送至目标服务器信息对应的目标服务器。
在一些实施例中,上述执行主体可以将上述非热点请求发送至目标服务器信息对应的目标服务器。
在一些实施例的一些可选的实现方式中,上述执行主体将上述非热点请求发送至目标服务器信息对应的目标服务器,可以包括以下步骤:
第一步,获取服务器信息集合。其中,上述执行主体可以通过有线连接方式或者无线连接方式,获取服务器信息集合。例如,上述服务器信息集合中的服务器信息可以是服务器编号或服务器名称。
第二步,确定上述服务器信息集合中每个服务器信息对应的服务器哈希值,得到服务器哈希值集合。
作为示例,上述执行主体可以采用哈希函数确定服务器信息的服务器哈希值。
第三步,确定上述非热点请求对应的请求哈希值。
作为示例,上述执行主体可以采用哈希函数确定非热点请求的请求哈希值。
第四步,对上述服务器哈希值集合中的各个服务器哈希值进行排序,得到服务器哈希值序列。例如,可以按照从小到大的顺序进行排序。
第五步,根据上述服务器哈希值序列,构建一致性哈希环。
作为示例,上述执行主体可以确定各个服务器哈希值在一致性哈希环中的唯一位置,构建一致性哈希环。
第六步,确定上述请求哈希值在上述一致性哈希环中的位置,得到目标位置。
第七步,将上述目标位置顺时针方向的第一个服务器哈希值对应的服务器,确定为目标服务器信息。
在一些实施例的一些可选的实现方式中,上述执行主体在上述将上述非热点请求发送至目标服务器信息对应的目标服务器之前,还可以包括以下步骤:将上述非热点请求保存至上述本地缓存中。
由此,可以在目标服务请求访问一次后,将该服务请求包括的路由字段进行缓存,以便目标服务请求下一次访问时,判断该服务请求是热点请求还是非热点请求。
本公开的上述各个实施例具有如下有益效果:通过本公开的一些实施例的请求数据发送方法,可以避免整个应用层服务器集群缓存资源的浪费,提高应用层服务器集群的缓存利用率,同时,可以避免应用层服务器集群缓存击穿,从而,缩短请求的响应时间。具体来说,造成整个应用层服务器集群缓存利用率不高、请求响应不及时的原因在于:由于各台应用层服务器几乎缓存了相同的数据,造成整个应用层服务器集群缓存资源的浪费,同时,对于请求发送至所有应用层服务器,存在应用层服务器缓存击穿的较大可能性。基于此,本公开的一些实施例的请求数据发送方法,首先,响应于接收到目标服务请求,确定本地缓存中是否存在与上述目标服务请求相匹配的路由字段,其中,上述本地缓存中存储有未过期的服务请求所对应的路由字段。实际中,本地缓存中缓存的路由字段在一定时间后会被删除,从而,在提高本地缓存的利用率的同时,还可以根据请求是否被删除,确定目标服务请求属于热点请求还是非热点请求。其次,响应于上述本地缓存中不存在与上述目标服务请求相匹配的路由字段,将上述目标服务请求确定为非热点请求。由此,可以将请求访问频率不高的非热点请求发送至同一个服务器,实现非热点请求由对应的服务器进行数据处理。最后,将上述非热点请求发送至目标服务器信息对应的目标服务器。由此,将同一个请求发送至同一台服务器节点上,避免整个应用层服务器中缓存的热点数据的冗余,释放了应用层服务器集群的缓存容量,提高了应用层服务器集群的缓存利用率。同时,应用层服务器集群缓存不会被击穿,可以缩短请求链路,提高请求的响应时间。
进一步参考图4,其示出了请求数据发送方法的另一些实施例的流程400。该请求数据发送方法的流程400,包括以下步骤:
步骤401,响应于接收到目标服务请求,确定本地缓存中是否存在与目标服务请求相匹配的路由字段。
步骤402,响应于本地缓存中不存在与目标服务请求相匹配的路由字段,将目标服务请求确定为非热点请求。
步骤403,将非热点请求发送至目标服务器信息对应的目标服务器。
在一些实施例中,步骤401-403的具体实现及所带来的技术效果可以参考图3对应的那些实施例中的步骤301-303,在此不再赘述。
步骤404,响应于本地缓存中存在与目标服务请求相匹配的路由字段,将目标服务请求确定为热点请求。
在一些实施例中,上述执行主体可以响应于上述本地缓存中存在与上述目标服务请求相匹配的路由字段,将上述目标服务请求确定为热点请求。其中,上述热点请求可以是一段时间内访问频次大于等于预定阈值的请求。例如,在1000毫秒内访问次数大于等于1的请求。
作为示例,本地缓存中保存的路由字段可以是路由字段A、路由字段B和路由字段C。目标服务请求A包括的路由字段可以是路由字段A。本地缓存中存在与目标服务请求A相匹配的路由字段A,因此,可以将目标服务请求A确定为热点请求。
步骤405,根据热点请求,从预先获取的服务器信息集合中随机筛选服务器信息,作为筛选服务器信息。
在一些实施例中,上述执行主体可以根据上述热点请求,从上述预先获取的服务器信息集合中随机筛选服务器信息,作为筛选服务器信息。
在一些实施例的一些可选的实现方式中,上述执行主体根据上述热点请求,从上述预先获取的服务器信息集合中随机筛选服务器信息,作为筛选服务器信息,其中,上述预先获取的服务器信息集合中的服务器信息包括服务器序号,可以包括以下步骤:
第一步,为上述热点请求设置随机数。
作为示例,上述执行主体可以使用随机函数为上述热点请求生成随机数。
第二步,确定上述预先获取的服务器信息集合中服务器信息的数量。
作为示例,上述执行主体可以通过遍历的方式确定服务器信息的数量。
第三步,对上述随机数和上述服务器信息的数量进行求余处理,得到余数。
作为示例,上述执行主体可以对上述随机数和上述服务器信息的数量求余数。
第四步,将上述预先获取的服务器信息集合中,服务器序号与上述余数相匹配的服务器信息确定为筛选服务器信息。例如,余数可以是2,则可以将服务器序号为2的服务器信息确定为筛选服务器信息。
可选地,上述执行主体还可以根据上述热点请求,利用轮询的方式,从上述预先获取的服务器信息集合中筛选服务器信息,将上述热点请求发送至所筛选的服务器信息对应的服务器。
步骤406,将热点请求发送至筛选服务器信息对应的服务器。
在一些实施例中,上述执行主体可以将上述热点请求发送至上述筛选服务器信息对应的服务器。
从图4中可以看出,与图3对应的一些实施例的描述相比,图4对应的一些实施例中的请求数据发送方法的流程400体现了对于热点请求的处理步骤。由此,这些实施例描述的方案可以防止同一服务请求并发量太高,同一个服务器无法承载该服务请求的并发量,影响服务器可用率,当服务请求为热点请求时,将该热点请求发送至整个服务器集群中随机选择的服务器节点上,有效避免了服务器崩溃情况的出现。
图5是根据本公开的实现自定义负载均衡策略的具体示例。计算设备可以从配置中心获取热点判定阈值为M毫秒,并接收多个服务请求,最后,利用毫秒级本地缓存工具将接收到的多个服务请求保存至本地缓存中。具体地,当计算设备接收到服务请求A时,使用自定义负载均衡策略对服务请求A进行判断和处理。实现自定义负载均衡策略可以包括以下步骤:第一步,响应于接收到服务请求A,确定本地缓存中是否存在与服务请求A相匹配的路由字段。本地缓存中存在的多个路由字段可以包括:路由字段A、路由字段B和路由字段C。本地缓存中存在的路由字段的保存时间可以是1000毫秒。1000毫秒之后,可以将过期的路由字段删除。服务请求A中可以包括路由字段A。第二步,如果本地缓存中不存在路由字段A,则将服务请求A确定为非热点请求,将非热点请求发送至目标服务器信息对应的服务器1。第三步,如果本地缓存中存在路由字段A,则将服务请求A确定为热点请求,根据热点请求,从预先获取的服务器信息集合中随机筛选服务器信息,作为筛选服务器信息。并将上述热点请求发送至上述筛选服务器信息对应的服务器X,服务器X可以是服务器集群中的一个服务器。
图6是根据本公开的请求数据发送方法中热点请求和非热点请求的判断和处理的具体示例。服务请求A在1000毫秒内的第一次访问时,本地缓存中不存在与服务请求A相匹配的路由字段A,将服务请求A发送至目标服务器信息对应的服务器1。同时,在本地缓存中记录服务请求A相匹配的路由字段A。当服务请求A在1000毫秒内第二次访问时,本地缓存中存在与服务请求A相匹配的路由字段A,将服务请求A随机发送给服务器集群中的一个服务器。同时,在本地缓存中记录服务请求A相匹配的路由字段A。
进一步参考图7,作为对上述各图所示方法的实现,本公开提供了一种请求数据发送装置的一些实施例,这些装置实施例与图3所示的那些方法实施例相对应,该装置具体可以应用于各种电子设备中。
如图7所示,一些实施例的请求数据发送装置700包括:第一确定单元701、第二确定单元702和发送单元703。其中,第一确定单元701,被配置成响应于接收到目标服务请求,确定本地缓存中是否存在与上述目标服务请求相匹配的路由字段,其中,上述本地缓存中存储有未过期的服务请求所对应的路由字段;第二确定单元702,被配置成响应于上述本地缓存中不存在与上述目标服务请求相匹配的路由字段,将上述目标服务请求确定为非热点请求;发送单元703,被配置成将上述非热点请求发送至目标服务器信息对应的目标服务器。
可选地,请求数据发送装置还包括:第三确定单元、随机筛选单元和热点请求发送单元(图中未示出)。其中,第三确定单元被配置成响应于上述本地缓存中存在与上述目标服务请求相匹配的路由字段,将上述目标服务请求确定为热点请求。随机筛选单元被配置成根据上述热点请求,从上述预先获取的服务器信息集合中随机筛选服务器信息,作为筛选服务器信息。热点请求发送单元被配置成将上述热点请求发送至上述筛选服务器信息对应的服务器。
可选地,在发送单元703之前,请求数据发送装置还包括:保存单元(图中未示出),被配置成将上述非热点请求保存至上述本地缓存中。
可选地,发送单元703进一步被配置成:获取服务器信息集合;确定上述服务器信息集合中每个服务器信息对应的服务器哈希值,得到服务器哈希值集合;确定上述非热点请求对应的请求哈希值;对上述服务器哈希值集合中的各个服务器哈希值进行排序,得到服务器哈希值序列;根据上述服务器哈希值序列,构建一致性哈希环;确定上述请求哈希值在上述一致性哈希环中的位置,得到目标位置;将上述目标位置顺时针方向的第一个服务器哈希值对应的服务器,确定为目标服务器信息。
可选地,上述预先获取的服务器信息集合中的服务器信息包括服务器序号。
可选地,随机筛选单元(图中未示出)进一步被配置成:为上述热点请求设置随机数;确定上述预先获取的服务器信息集合中服务器信息的数量;对上述随机数和上述服务器信息的数量进行求余处理,得到余数;将上述预先获取的服务器信息集合中,服务器序号与上述余数相匹配的服务器信息确定为筛选服务器信息。
可以理解的是,该装置700中记载的诸单元与参考图3描述的方法中的各个步骤相对应。由此,上文针对方法描述的操作、特征以及产生的有益效果同样适用于装置700及其中包含的单元,在此不再赘述。
下面参考图8,其示出了适于用来实现本公开的一些实施例的电子设备(例如图1中的计算设备)800的结构示意图。本公开的一些实施例中的电子设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图8示出的电子设备仅仅是一个示例,不应对本公开的实施例的功能和使用范围带来任何限制。
如图8所示,电子设备800可以包括处理装置(例如中央处理器、图形处理器等)801,其可以根据存储在只读存储器(ROM)802中的程序或者从存储装置808加载到随机访问存储器(RAM)803中的程序而执行各种适当的动作和处理。在RAM 803中,还存储有电子设备800操作所需的各种程序和数据。处理装置801、ROM 802以及RAM 803通过总线804彼此相连。输入/输出(I/O)接口805也连接至总线804。
通常,以下装置可以连接至I/O接口805:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置806;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置807;包括例如磁带、硬盘等的存储装置808;以及通信装置809。通信装置809可以允许电子设备800与其他设备进行无线或有线通信以交换数据。虽然图8示出了具有各种装置的电子设备800,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。图8中示出的每个方框可以代表一个装置,也可以根据需要代表多个装置。
特别地,根据本公开的一些实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的一些实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的一些实施例中,该计算机程序可以通过通信装置809从网络上被下载和安装,或者从存储装置808被安装,或者从ROM 802被安装。在该计算机程序被处理装置801执行时,执行本公开的一些实施例的方法中限定的上述功能。
需要说明的是,本公开的一些实施例中记载的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开的一些实施例中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开的一些实施例中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
在一些实施方式中,客户端、服务器可以利用诸如HTTP(HyperText TransferProtocol,超文本传输协议)之类的任何当前已知或未来研发的网络协议进行通信,并且可以与任意形式或介质的数字数据通信(例如,通信网络)互连。通信网络的示例包括局域网(“LAN”),广域网(“WAN”),网际网(例如,互联网)以及端对端网络(例如,ad hoc端对端网络),以及任何当前已知或未来研发的网络。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备:响应于接收到目标服务请求,确定本地缓存中是否存在与上述目标服务请求相匹配的路由字段,其中,上述本地缓存中存储有未过期的服务请求所对应的路由字段;响应于上述本地缓存中不存在与上述目标服务请求相匹配的路由字段,将上述目标服务请求确定为非热点请求;将上述非热点请求发送至目标服务器信息对应的目标服务器。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的一些实施例的操作的计算机程序代码,上述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)——连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开的一些实施例中的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的单元也可以设置在处理器中,例如,可以描述为:一种处理器包括第一确定单元、第二确定单元和发送单元。其中,这些单元的名称在某种情况下并不构成对该单元本身的限定,例如,第一确定单元还可以被描述为“响应于接收到目标服务请求,确定本地缓存中是否存在与上述目标服务请求相匹配的路由字段的单元”。
本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如,非限制性地,可以使用的示范类型的硬件逻辑部件包括:现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上系统(SOC)、复杂可编程逻辑设备(CPLD)等等。
本公开的一些实施例还提供一种计算机程序产品,包括计算机程序,计算机程序在被处理器执行时实现上述的任一种请求数据发送方法。
以上描述仅为本公开的一些较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开的实施例中所涉及的发明范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述发明构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开的实施例中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (10)

1.一种请求数据发送方法,包括:
响应于接收到目标服务请求,确定本地缓存中是否存在与所述目标服务请求相匹配的路由字段,其中,所述本地缓存中存储有未过期的服务请求所对应的路由字段;
响应于所述本地缓存中不存在与所述目标服务请求相匹配的路由字段,将所述目标服务请求确定为非热点请求;
将所述非热点请求发送至目标服务器信息对应的目标服务器。
2.根据权利要求1所述的方法,其中,所述方法还包括:
响应于所述本地缓存中存在与所述目标服务请求相匹配的路由字段,将所述目标服务请求确定为热点请求;
根据所述热点请求,从预先获取的服务器信息集合中随机筛选服务器信息,作为筛选服务器信息;
将所述热点请求发送至所述筛选服务器信息对应的服务器。
3.根据权利要求2所述的方法,其中,在所述将所述非热点请求发送至目标服务器信息对应的目标服务器之前,所述方法还包括:
将所述非热点请求保存至所述本地缓存中。
4.根据权利要求1所述的方法,其中,所述将所述非热点请求发送至目标服务器信息对应的目标服务器,包括:
获取服务器信息集合;
确定所述服务器信息集合中每个服务器信息对应的服务器哈希值,得到服务器哈希值集合;
确定所述非热点请求对应的请求哈希值;
对所述服务器哈希值集合中的各个服务器哈希值进行排序,得到服务器哈希值序列;
根据所述服务器哈希值序列,构建一致性哈希环;
确定所述请求哈希值在所述一致性哈希环中的位置,得到目标位置;
将所述目标位置顺时针方向的第一个服务器哈希值对应的服务器,确定为目标服务器信息。
5.根据权利要求2所述的方法,其中,所述预先获取的服务器信息集合中的服务器信息包括服务器序号;以及
所述根据所述热点请求,从预先获取的服务器信息集合中随机筛选服务器信息,作为筛选服务器信息,包括:
为所述热点请求设置随机数;
确定所述预先获取的服务器信息集合中服务器信息的数量;
对所述随机数和所述服务器信息的数量进行求余处理,得到余数;
将所述预先获取的服务器信息集合中,服务器序号与所述余数相匹配的服务器信息确定为筛选服务器信息。
6.一种请求数据发送装置,包括:
第一确定单元,被配置成响应于接收到目标服务请求,确定本地缓存中是否存在与所述目标服务请求相匹配的路由字段,其中,所述本地缓存中存储有未过期的服务请求所对应的路由字段;
第二确定单元,被配置成响应于所述本地缓存中不存在与所述目标服务请求相匹配的路由字段,将所述目标服务请求确定为非热点请求;
发送单元,被配置成将所述非热点请求发送至目标服务器信息对应的目标服务器。
7.根据权利要求6所述的装置,其中,所述请求数据发送装置还包括:第三确定单元、随机筛选单元和热点请求发送单元,所述第三确定单元被配置成响应于所述本地缓存中存在与所述目标服务请求相匹配的路由字段,将所述目标服务请求确定为热点请求,所述随机筛选单元被配置成根据所述热点请求,从所述预先获取的服务器信息集合中随机筛选服务器信息,作为筛选服务器信息,所述热点请求发送单元被配置成将所述热点请求发送至所述筛选服务器信息对应的服务器。
8.一种电子设备,包括:
一个或多个处理器;
存储装置,其上存储有一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-5中任一所述的方法。
9.一种计算机可读介质,其上存储有计算机程序,其中,所述程序被处理器执行时实现如权利要求1-5中任一所述的方法。
10.一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时实现根据权利要求1-5中任一项所述的方法。
CN202211204401.XA 2022-09-29 2022-09-29 请求数据发送方法、装置、设备、介质和程序产品 Pending CN115914399A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211204401.XA CN115914399A (zh) 2022-09-29 2022-09-29 请求数据发送方法、装置、设备、介质和程序产品

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211204401.XA CN115914399A (zh) 2022-09-29 2022-09-29 请求数据发送方法、装置、设备、介质和程序产品

Publications (1)

Publication Number Publication Date
CN115914399A true CN115914399A (zh) 2023-04-04

Family

ID=86483006

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211204401.XA Pending CN115914399A (zh) 2022-09-29 2022-09-29 请求数据发送方法、装置、设备、介质和程序产品

Country Status (1)

Country Link
CN (1) CN115914399A (zh)

Similar Documents

Publication Publication Date Title
CN111800513B (zh) 用于推送信息的方法、装置、电子设备计算机可读介质
CN111209306A (zh) 业务逻辑判断方法、装置、电子设备和存储介质
CN112035529A (zh) 缓存方法、装置、电子设备及计算机可读存储介质
CN112256733A (zh) 数据缓存方法、装置、电子设备及计算机可读存储介质
CN113760991A (zh) 数据操作方法、装置、电子设备和计算机可读介质
CN112181733A (zh) 一种服务请求的处理方法、装置、设备及存储介质
CN113553206B (zh) 数据事件执行方法、装置、电子设备和计算机可读介质
CN115914399A (zh) 请求数据发送方法、装置、设备、介质和程序产品
CN112507676B (zh) 能源报表生成方法、装置、电子设备和计算机可读介质
CN114785770A (zh) 镜像层文件发送方法、装置、电子设备和计算机可读介质
CN113760927A (zh) 数据处理方法、装置、电子设备和计算机可读介质
CN113760929A (zh) 数据同步方法、装置、电子设备和计算机可读介质
CN113760178A (zh) 缓存数据处理方法、装置、电子设备和计算机可读介质
CN113515576A (zh) 数据处理方法、装置、电子设备和计算机可读介质
CN113360348A (zh) 异常请求处理方法、装置、电子设备和存储介质
CN112100205A (zh) 数据处理方法、装置、设备和计算机可读介质
CN115348260B (zh) 基于校园信息安全的信息处理方法、装置、设备和介质
CN115993942B (zh) 数据缓存方法、装置、电子设备和计算机可读介质
CN112822247B (zh) 系统异步通讯方法、装置、电子设备和计算机可读介质
CN113342837B (zh) 数据发送方法、装置、电子设备和计算机可读介质
CN112650722B (zh) 基于android应用程序的文件处理方法、装置、电子设备和介质
CN113438284B (zh) 请求处理方法、装置、电子设备和计算机可读介质
CN112667607B (zh) 一种历史数据的管理方法及相关设备
CN110262756B (zh) 用于缓存数据的方法和装置
CN115827694A (zh) 用户信息查询方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination