CN116112446B - 基于消息队列的延时反馈方法、计算机设备和存储介质 - Google Patents
基于消息队列的延时反馈方法、计算机设备和存储介质 Download PDFInfo
- Publication number
- CN116112446B CN116112446B CN202211530555.8A CN202211530555A CN116112446B CN 116112446 B CN116112446 B CN 116112446B CN 202211530555 A CN202211530555 A CN 202211530555A CN 116112446 B CN116112446 B CN 116112446B
- Authority
- CN
- China
- Prior art keywords
- data
- client
- delay feedback
- target
- message queue
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 42
- 230000005540 biological transmission Effects 0.000 claims abstract description 63
- 230000004044 response Effects 0.000 claims abstract description 26
- 238000009499 grossing Methods 0.000 claims abstract description 17
- 238000004590 computer program Methods 0.000 claims description 8
- 230000002441 reversible effect Effects 0.000 claims description 7
- 230000001360 synchronised effect Effects 0.000 claims description 5
- 238000012935 Averaging Methods 0.000 claims description 4
- 230000011218 segmentation Effects 0.000 claims description 4
- 230000001105 regulatory effect Effects 0.000 abstract description 3
- 238000007781 pre-processing Methods 0.000 description 11
- 230000008569 process Effects 0.000 description 8
- 238000010606 normalization Methods 0.000 description 7
- 238000004364 calculation method Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 230000004927 fusion Effects 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 229910002056 binary alloy Inorganic materials 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000014759 maintenance of location Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012886 linear function Methods 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000000087 stabilizing effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/10—Flow control; Congestion control
- H04L47/26—Flow control; Congestion control using explicit feedback to the source, e.g. choke packets
- H04L47/263—Rate modification at the source after receiving feedback
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0852—Delays
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Environmental & Geological Engineering (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
- Communication Control (AREA)
Abstract
本发明提供的基于消息队列的延时反馈方法、计算机设备和存储介质,所述方法包括:根据消息队列的限定积压量、当前积压量和客户端的单次数据发送量,得到初始延时反馈值;对客户端发送数据的闲忙状态进行预测,得到与目标时间段相对应的预测因子;对所述初始延时反馈值和所述预测因子进行平滑处理,得到目标时间段的目标延时反馈值,根据所述目标延时反馈值对客户端进行延时响应。本发明通过对未来时间段客户端发送数据的闲忙状态进行预测,动态计算出的延时反馈时间,进而调节客户端系统在未来目标时间端的数据传输并发数,当本发明应用在数据传输方法中时不仅可以防止数据丢失,还可以自适应调节数据传输效率。
Description
技术领域
本发明涉及计算机技术领域,具体涉及基于消息队列的延时反馈方法、计算机设备和存储介质。
背景技术
跨厂商域间基于1400协议的数据级联是安防领域常见的级联场景,由于上下级域是不同的厂商,各厂商的服务并发处理能力存在差异,下级的数据传输的速度可能会大于上级的处理的能力,那么就需要上级根据自身的负载能力做一些自保护措施,达到稳定自身服务,对数据接收削峰填谷的目的;上级域一般的处理方法为:判断订阅的数据类型,主要根据订阅类型判断下级是否传递大图、小图二进制,两者分别对应了上级不同的接收能力;不同的接收能力,对应了不同的请求处理的基线QPS(规格数值),上级域通过该值对下级的级联接口做限流处理。
在一般情况下,上面的处理流程已经能达到数据正常接收的目的,但是在实际场景中,存在反向依赖的情况,即下级应传Base64格式的图片数据,但只传递了图片数据的URL地址,那么需要上级接收端调用URL地址获取图片数据后才能完成一次请求响应,当上级调用URL地址获取图片数据的时长超过了级联接口的最大响应等待时长时,就会出现连接中断(close_wait),从而出现数据丢失或者无法传输等问题。
可见,现有技术中的数据传输方法存在数据丢失或者无法传输的问题。
发明内容
针对现有技术中所存在的不足,本发明提供的基于消息队列的延时反馈方法、计算机设备和存储介质,其解决了现有技术中的数据传输方法存在数据丢失或者无法传输的问题,本发明通过对未来时间段客户端发送数据的闲忙状态进行预测,动态计算出的延时反馈时间,使所述服务器根据延时反馈值对客户端进行延时响应,进而调节客户端系统在未来目标时间端的数据传输并发数,当本发明应用在数据传输方法中时不仅可以防止数据丢失,还可以自适应调节数据传输效率。
第一方面,本发明提供一种基于消息队列的延时反馈方法,应用于服务器端,所述方法包括:根据消息队列的限定积压量、当前积压量和客户端的单次数据发送量,得到初始延时反馈值;对客户端发送数据的闲忙状态进行预测,得到与目标时间段相对应的预测因子;其中,所述目标时间段表示当前时刻之后的预测时间段;对所述初始延时反馈值和所述预测因子进行平滑处理,得到目标时间段的目标延时反馈值,根据所述目标延时反馈值对客户端进行延时响应。
可选地,对客户端发送数据的闲忙状态进行预测,得到与目标时间段相对应的预测因子,包括:根据客户端当天的数据发送量,获取当天中预设时刻到当前时刻的数据分段向量;将当天每个数据分段向量与每个历史日期中相对应时段的历史数据分段向量进行相似度比较,获取相似度排名前n的历史日期;获取排名前n的历史日期中与目标时间段相对应的n个目标数据接收量;对所述n个目标数据接收量进行平均,得到预测均值;将所述预测均值与服务器的预设阈值的比值作为预测因子,其中所述服务器的预设阈值为服务器的每秒请求处理量。
可选地,根据消息队列的限定积压量、当前积压量和客户端的单次数据发送量,得到初始延时反馈值的公式表达式为:
其中,α0表示初始延时反馈值,K表示消息队列的限定积压量,Pt表示消息队列的当前积压量,Vdp表示客户端的单次数据发送量。
可选地,对所述初始延时反馈值和所述预测因子进行平滑处理,得到目标时间段的目标延时反馈值,包括:对所述初始延时反馈值依次进行归一化处理和平滑调节,得到第一预处理延时反馈值;将所述第一预处理延时反馈值与所述预测因子进行融合运算,得到第二预处理延时反馈值;对所述第二预处理延时反馈值进行反归一化,得到所述目标延时反馈值。
可选地,对所述初始延时反馈值和所述预测因子进行平滑处理,得到目标时间段的目标延时反馈值的公式表达式为:
其中,m表示预测因子,Cdt表示客户端发送数据后响应等待时长,Cdn表示客户端发送数据的网络传输时长与服务器发送响应的网络传输时长的和。
可选地,在对所述初始延时反馈值和所述预测因子进行平滑处理,得到目标时间段的目标延时反馈值之后,所述方法还包括:根据所述客户端发送的数据传输请求判断是否存在反向依赖,其中所述反向依赖为服务器端根据所述数据传输请求中的传输数据依赖客户端获取目标数据;当存在反向依赖时,将所述数据传输请求中的传输数据存入消息队列,并根据所述目标延时反馈值对客户端进行延时响应。
可选地,当不存在反向依赖时,所述方法还包括:根据同步逻辑将所述数据传输请求中传输数据存入相对应的数据库。
可选地,在根据所述客户端发送的数据传输请求判断是否存在反向依赖之前,所述方法还包括:根据客户端发送的数据传输请求,获取当前传输的数据类型;判断所述数据类型是否属于订阅数据类型;当所述数据类型不属于所述订阅数据类型时,发送拒收反馈到所述客户端;当所述数据类型属于所述订阅数据类型时,再判断是否存在反向依赖。
第二方面,本发明提供一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现以下步骤:根据消息队列的限定积压量、当前积压量和客户端的单次数据发送量,得到初始延时反馈值;对客户端发送数据的闲忙状态进行预测,得到与目标时间段相对应的预测因子;其中,所述目标时间段表示当前时刻之后的预测时间段;对所述初始延时反馈值和所述预测因子进行平滑处理,得到目标时间段的目标延时反馈值,根据所述目标延时反馈值对客户端进行延时响应。
第三方面,本发明提供一种可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:根据消息队列的限定积压量、当前积压量和客户端的单次数据发送量,得到初始延时反馈值;对客户端发送数据的闲忙状态进行预测,得到与目标时间段相对应的预测因子;其中,所述目标时间段表示当前时刻之后的预测时间段;对所述初始延时反馈值和所述预测因子进行平滑处理,得到目标时间段的目标延时反馈值,根据所述目标延时反馈值对客户端进行延时响应。
相比于现有技术,本发明具有如下有益效果:
本发明通过引入消息队列作为缓冲层,服务器将客户端发送的数据直接存入消息队列,并给客户端反馈接收成功的响应,然后通过新开线程对消息队列的数据进行处理;当客户端数据大量涌入,而服务器处理不及时,会出现消息队列数据积压的问题;进一步地,为了防止数据超过消息队列的限定积压量而出现数据丢失的情况,本发明通过对未来时间段客户端发送数据的闲忙状态进行预测,再与消息队列的当前积压量进融合计算,可以动态计算出相对应的延时反馈时间,使所述服务器根据延时反馈值对客户端进行延时响应,进而调节客户端系统在未来目标时间端的数据传输并发数,当本发明应用在数据传输方法中时不仅可以防止数据丢失,还可以自适应调节数据传输效率。
附图说明
图1所示为本发明实施例提供的一种基于消息队列的延时反馈方法的流程示意图;
图2所示为本发明实施例提供的一种α0与Pt的线性曲线示意图;
图3所示为图1中步骤S102的具体流程示意图;
图4所示为本发明实施例提供的一种α1与Pt的平滑曲线示意图;
图5所示为本发明实施例提供的另一种基于消息队列的延时反馈方法的流程示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请的一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本申请保护的范围。
第一方面,本发明提供一种基于消息队列的延时反馈方法,具体包括以下实施例:
实施例一
图1所示为本发明实施例提供的一种基于消息队列的延时反馈方法的流程示意图,如图1所示,具体包括以下步骤:
步骤S101,根据消息队列的限定积压量、当前积压量和客户端的单次数据发送量,得到初始延时反馈值。
在本实施例中,得到初始延时反馈值的公式表达式为:
其中,α0表示初始延时反馈值,K表示消息队列的限定积压量,Pt表示消息队列的当前积压量,Vdp表示客户端的单次数据发送量。
需要说明的是,将基于Kafka的消息队列允许的限定积压量设定为常量K,该其限定积压量K可根据kafka的数据留存大小和每条消息的大小计算得出,计算公式如下:K=数据留存大小/每条消息大小。
在本实施例中,设一个单位时间内消息队列产生的偏移量表示为由于消息队列的当前积压量Pt+单位时间内消息队列产生的偏移量Pt+1要小于消息队列的限定积压量K,则:
对上述公式进行转换后,即可得到初始延时反馈值的公式表达式为:
其中,Vdp和K都是常量,所以初始延时反馈值α0与Pt的关系可表示为如图2所示的线性曲线;需要说明的是,为了便于说明,图2中纵坐标α0的取值是进行归一化处理后限定在0-1的区间。
步骤S102,对客户端发送数据的闲忙状态进行预测,得到与目标时间段相对应的预测因子,所述目标时间段表示当前时刻之后的预测时间段。
在本实施例中,如图3所示,步骤S102的具体流程如下:
步骤S201,根据客户端当天的数据发送量,获取当天中预设时刻到当前时刻的数据分段向量;
步骤S202,将当天每个数据分段向量与每个历史日期中相对应时段的历史数据分段向量进行相似度比较,获取相似度排名前n的历史日期;
步骤S203,获取排名前n的历史日期中与目标时间段相对应的n个目标数据接收量;
步骤S204,对所述n个目标数据接收量进行平均,得到预测均值;
步骤S205,将所述预测均值与服务器的预设阈值的比值作为预测因子,其中所述服务器的预设阈值为服务器的每秒请求处理量。
需要说明的是,获取数据库中与所述客户端相关的历史数据发送量,以及当前这一天的数据发送量;将每天的数据根据一小时作为一个步长,划分为N个数据段,每个数据段可以看做向量的一个维度,作为数据分段向量;将当天的每个数据分段向量与历史相对应时段的数据分段向量进行欧式距离计算,得到最相似走势的排名前n的历史日期;获得排名前n的历史日期中与目标时间段相对应的n个数据接收量,并对n个数据接收量去平均得到预测均值,使用预测均值与预设阈值的比值作为预测因子m;将预测因子m作为闲忙时的判定条件;当m越大表示系统越繁忙;m越小表示系统越闲,也就是将m与1进行比较,当m大于1时表示该客户端在目标时间段发送的数据较频繁,当m小于1时表示该客户端在目标时间段发送的数据较少。其中,所述目标时间段表示当前时刻之后的预测时间段,如未来1小时。
步骤S103,对所述初始延时反馈值和所述预测因子进行平滑处理,得到目标时间段的目标延时反馈值,根据所述目标延时反馈值对客户端进行延时响应。
在本实施例中,对所述初始延时反馈值和所述预测因子进行平滑处理,得到目标时间段的目标延时反馈值,包括:对所述初始延时反馈值依次进行归一化处理和平滑调节,得到第一预处理延时反馈值;将所述第一预处理延时反馈值与所述预测因子进行融合运算,得到第二预处理延时反馈值;对所述第二预处理延时反馈值进行反归一化,得到所述目标延时反馈值。
需要说明的是,由于初始延时反馈值α0与消息队列的当前积压量Pt呈线性关系,而线性函数的单调性不适合对函数进行多维度的调节,因此本实施例基于机器学习Sigmoid函数思想,以自然函数e为底,以为指数,对初始延时反馈值α0进行平滑处理,得到第一预处理延时反馈值α1的公式表达式为:
其中,将转变成/>是对初始延时反馈值α0进行归一化处理,使第一预处理延时反馈值α1最终形成如图4所示的平滑曲线。
从图4中可以看出,随着Pt越来越接近K,所需延迟返回的时间越来越大;同时本实施例通过历史数据预测未来目标时间段内系统的闲忙程度,来进一步调节反馈值:当客户端比较繁忙时,即使当前积压量离限定积压量距离较大,仍然需要扩大延时反馈值,以免造成数据大量涌入出现数据丢失的问题;当客户端比较闲时,减小延时反馈值,可以更快速的响应客户端,提高数据传输的实时性。因此,将代表客户端闲忙状态的预测因子m与第一预处理延时反馈值α1进行融合计算,再进行反归一化处理后就可以得到未来目标时间段的目标延时反馈值:
其中,Cdt表示客户端发送数据后响应等待时长,Cdn表示客户端发送数据的网络传输时长与服务器发送响应的网络传输时长的和,第二预处理延时反馈值由于α≤Cdt-Cdn,且α2的取值为0-1,所以将α2乘以(Cdt-Cdn)是对α2的反归一化处理。
为了验证本实施例提供的目标延时反馈值计算公式是否准确,提供如下举例说明:首先设定初始恒定值,设消息队列的限定积压量K=10w,(Cdt-Cdn)=2500ms,Vdp设为15000。
举例说明一
设当前积压量Pt=1000,闲忙预测后得到m=0.3时,表示客户端系统不忙,将上述参数代入目标延时反馈值的公式中计算出α的值为:6ms;由此可以看出,计算出α的值符合预期,当消息队列的积压量不大且客户端系统不忙的时候,快速的返回结果。
假设闲忙预测后得到m=2时,表示客户端系统比较忙,将上述参数代入目标延时反馈值的公式中计算出α的值为:6ms1535 ms;由此可以看出,计算出α的值也符合预期,当消息队列的积压量不大但客户端系统较忙的时候,需要更长时间的延时反馈。
举例说明二
设当前积压量Pt=9w,闲忙预测后得到m=0.3时,表示客户端系统不忙,将上述参数代入目标延时反馈值的公式中计算出α的值为:1800ms;由此可以看出,计算出α的值符合预期:当消息队列虽有积压,但是接下来系统不忙的时候,响应时间适中。
假设闲忙预测后得到m=2时,表示客户端系统比较忙,将上述参数代入目标延时反馈值的公式中计算出α的值为:2379ms;由此可以看出,计算出α的值符合预期:当消息队列的积压量大且忙的时候,延时反馈响应时间也比较大。
由此可知,本发明通过引入消息队列作为缓冲层,服务器将客户端发送的数据直接存入消息队列,并给客户端反馈接收成功的响应,然后通过新开线程对消息队列的数据进行处理;当客户端数据大量涌入,而服务器处理不及时,会出现消息队列数据积压的问题;进一步地,为了防止数据超过消息队列的限定积压量而出现数据丢失的情况,本发明通过对未来时间段客户端发送数据的闲忙状态进行预测,再与消息队列的当前积压量进融合计算,可以动态计算出相对应的延时反馈时间,使所述服务器根据延时反馈值对客户端进行延时响应,进而调节客户端系统在未来目标时间端的数据传输并发数,当本发明应用在数据传输方法中时不仅可以防止数据丢失,还可以自适应调节数据传输效率。
实施例二
如图5所示,在对所述初始延时反馈值和所述预测因子进行平滑处理,得到目标时间段的目标延时反馈值之后,所述方法还包括:
根据所述客户端发送的数据传输请求判断是否存在反向依赖,其中所述反向依赖为服务器端根据所述数据传输请求中的传输数据依赖客户端获取目标数据;当存在反向依赖时,将所述数据传输请求中的传输数据存入消息队列,并根据所述目标延时反馈值对客户端进行延时响应。
进一步地,当不存在反向依赖时,所述方法还包括:根据同步逻辑将所述数据传输请求中传输数据存入相对应的数据库。
进一步地,在根据所述客户端发送的数据传输请求判断是否存在反向依赖之前,所述方法还包括:根据客户端发送的数据传输请求,获取当前传输的数据类型;判断所述数据类型是否属于订阅数据类型;当所述数据类型不属于所述订阅数据类型时,发送拒收反馈到所述客户端;当所述数据类型属于所述订阅数据类型时,再判断是否存在反向依赖。
需要说明的是,本实施例借自动控制原理中反馈控制系统的负反馈控制思路,设定缓冲层消息队列的限定积压量为设定值,通过检测程序检测消息队列的当前积压量与限定积压量的差值,通过历史数据预测闲忙时,引入平滑调节函数,动态的计算出最适合当前系统的延迟响应值,进而调节下级系统的传输并发数,使得系统能根据自身处理能力平滑的完成接入。
第二方面,本发明提供一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现以下步骤:根据消息队列的限定积压量、当前积压量和客户端的单次数据发送量,得到初始延时反馈值;对客户端发送数据的闲忙状态进行预测,得到与目标时间段相对应的预测因子;其中,所述目标时间段表示当前时刻之后的预测时间段;对所述初始延时反馈值和所述预测因子进行平滑处理,得到目标时间段的目标延时反馈值,根据所述目标延时反馈值对客户端进行延时响应。
第三方面,本发明实施例提供一种可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:根据消息队列的限定积压量、当前积压量和客户端的单次数据发送量,得到初始延时反馈值;对客户端发送数据的闲忙状态进行预测,得到与目标时间段相对应的预测因子;对所述初始延时反馈值和所述预测因子进行平滑处理,得到目标时间段的目标延时反馈值,根据所述目标延时反馈值对客户端进行延时响应。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一非易失性计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
需要说明的是,在本文中,诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
Claims (6)
1.一种基于消息队列的延时反馈方法,其特征在于,应用于服务器端,所述方法包括:
根据消息队列的限定积压量、当前积压量和客户端的单次数据发送量,得到初始延时反馈值,初始延时反馈值的公式表达式为:
其中,ɑ0表示初始延时反馈值,K表示消息队列的限定积压量,Pt表示消息队列的当前积压量,Vdp表示客户端的单次数据发送量;
对所述客户端发送数据的闲忙状态进行预测,得到与目标时间段相对应的预测因子,包括:
根据所述客户端当天的数据发送量,获取当天中预设时刻到当前时刻的数据分段向量;
将当天每个数据分段向量与每个历史日期中相对应时段的历史数据分段向量进行相似度比较,获取相似度排名前n的历史日期;
获取排名前n的历史日期中与目标时间段相对应的n个目标数据接收量;
对所述n个目标数据接收量进行平均,得到预测均值;
将所述预测均值与服务器的预设阈值的比值作为预测因子,其中所述服务器的预设阈值为服务器的每秒请求处理量;
其中,所述目标时间段表示当前时刻之后的预测时间段;
对所述初始延时反馈值和所述预测因子进行平滑处理,得到目标时间段的目标延时反馈值,根据所述目标延时反馈值对所述客户端进行延时响应;
目标时间段的目标延时反馈值的公式表达式为:
其中,m表示预测因子,Cdt表示客户端发送数据后响应等待时长,Cdn表示客户端发送数据的网络传输时长与服务器发送响应的网络传输时长的和。
2.如权利要求1所述的基于消息队列的延时反馈方法,其特征在于,在对所述初始延时反馈值和所述预测因子进行平滑处理,得到目标时间段的目标延时反馈值之后,所述方法还包括:
根据所述客户端发送的数据传输请求判断是否存在反向依赖,其中所述反向依赖为服务器端根据所述数据传输请求中的传输数据依赖客户端获取目标数据;
当存在反向依赖时,将所述数据传输请求中的传输数据存入消息队列,并根据所述目标延时反馈值对客户端进行延时响应。
3.如权利要求2所述的基于消息队列的延时反馈方法,其特征在于,当不存在反向依赖时,所述方法还包括:根据同步逻辑将所述数据传输请求中传输数据存入相对应的数据库。
4.如权利要求3所述的基于消息队列的延时反馈方法,其特征在于,在根据所述客户端发送的数据传输请求判断是否存在反向依赖之前,所述方法还包括:
根据客户端发送的数据传输请求,获取当前传输的数据类型;
判断所述数据类型是否属于订阅数据类型;
当所述数据类型不属于所述订阅数据类型时,发送拒收反馈到所述客户端;
当所述数据类型属于所述订阅数据类型时,再判断是否存在反向依赖。
5.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至4中任意一项基于消息队列的延时反馈方法的步骤。
6.一种可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至4中任意一项基于消息队列的延时反馈方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211530555.8A CN116112446B (zh) | 2022-11-30 | 2022-11-30 | 基于消息队列的延时反馈方法、计算机设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211530555.8A CN116112446B (zh) | 2022-11-30 | 2022-11-30 | 基于消息队列的延时反馈方法、计算机设备和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN116112446A CN116112446A (zh) | 2023-05-12 |
CN116112446B true CN116112446B (zh) | 2024-06-07 |
Family
ID=86262891
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211530555.8A Active CN116112446B (zh) | 2022-11-30 | 2022-11-30 | 基于消息队列的延时反馈方法、计算机设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116112446B (zh) |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101023455A (zh) * | 2004-08-17 | 2007-08-22 | 加州理工大学 | 使用排队控制和单向延迟测量实现网络拥塞控制的方法和设备 |
CN101548512A (zh) * | 2006-12-05 | 2009-09-30 | 高通股份有限公司 | 在无线网络中减小基站切换过程中的回程利用的方法和系统 |
CN101964755A (zh) * | 2010-11-03 | 2011-02-02 | 中南大学 | 高带宽延时网络中基于带宽估计的显式拥塞控制方法 |
CN105357138A (zh) * | 2015-09-30 | 2016-02-24 | 四川大学 | 一种基于低优先级的自适应可靠传输方法 |
CN111444012A (zh) * | 2020-03-03 | 2020-07-24 | 中国科学院计算技术研究所 | 一种保证延迟敏感应用延迟slo的动态调控资源方法及系统 |
CN111526096A (zh) * | 2020-03-13 | 2020-08-11 | 北京交通大学 | 智融标识网络状态预测与拥塞控制系统 |
CN112612607A (zh) * | 2020-12-16 | 2021-04-06 | 平安消费金融有限公司 | 基于消息队列的数据处理方法、装置、计算机设备和介质 |
CN112714417A (zh) * | 2021-01-29 | 2021-04-27 | 南京邮电大学 | 一种蜂窝车联网c-v2x业务流控制方法 |
CN113141590A (zh) * | 2021-03-24 | 2021-07-20 | 中国科学院沈阳计算技术研究所有限公司 | 一种面向工业物联网的无线通信调度方法及装置 |
CN113138860A (zh) * | 2020-01-17 | 2021-07-20 | 中国移动通信集团浙江有限公司 | 消息队列的管理方法及装置 |
CN114500661A (zh) * | 2021-12-22 | 2022-05-13 | 新奥新智科技有限公司 | 一种限流设备、方法、装置及存储介质 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7039013B2 (en) * | 2001-12-31 | 2006-05-02 | Nokia Corporation | Packet flow control method and device |
-
2022
- 2022-11-30 CN CN202211530555.8A patent/CN116112446B/zh active Active
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101023455A (zh) * | 2004-08-17 | 2007-08-22 | 加州理工大学 | 使用排队控制和单向延迟测量实现网络拥塞控制的方法和设备 |
CN101548512A (zh) * | 2006-12-05 | 2009-09-30 | 高通股份有限公司 | 在无线网络中减小基站切换过程中的回程利用的方法和系统 |
CN101964755A (zh) * | 2010-11-03 | 2011-02-02 | 中南大学 | 高带宽延时网络中基于带宽估计的显式拥塞控制方法 |
CN105357138A (zh) * | 2015-09-30 | 2016-02-24 | 四川大学 | 一种基于低优先级的自适应可靠传输方法 |
CN113138860A (zh) * | 2020-01-17 | 2021-07-20 | 中国移动通信集团浙江有限公司 | 消息队列的管理方法及装置 |
CN111444012A (zh) * | 2020-03-03 | 2020-07-24 | 中国科学院计算技术研究所 | 一种保证延迟敏感应用延迟slo的动态调控资源方法及系统 |
WO2021174735A1 (zh) * | 2020-03-03 | 2021-09-10 | 中国科学院计算技术研究所 | 一种保证延迟敏感应用延迟slo的动态调控资源方法及系统 |
CN111526096A (zh) * | 2020-03-13 | 2020-08-11 | 北京交通大学 | 智融标识网络状态预测与拥塞控制系统 |
CN112612607A (zh) * | 2020-12-16 | 2021-04-06 | 平安消费金融有限公司 | 基于消息队列的数据处理方法、装置、计算机设备和介质 |
CN112714417A (zh) * | 2021-01-29 | 2021-04-27 | 南京邮电大学 | 一种蜂窝车联网c-v2x业务流控制方法 |
CN113141590A (zh) * | 2021-03-24 | 2021-07-20 | 中国科学院沈阳计算技术研究所有限公司 | 一种面向工业物联网的无线通信调度方法及装置 |
CN114500661A (zh) * | 2021-12-22 | 2022-05-13 | 新奥新智科技有限公司 | 一种限流设备、方法、装置及存储介质 |
Non-Patent Citations (4)
Title |
---|
Improved prediction for Web server delay control;Henriksson等;Proceedings. 16th Euromicro Conference on Real-Time Systems;20040712;全文 * |
Web服务器系统中基于反馈控制的比例延迟保证;潘文平;慕德俊;戴冠中;武航星;;计算机科学;20071125(第11期);全文 * |
基于802.11环境的TCP协议改进研究;赵陇等;现代计算机(专业版);20170915;全文 * |
基于预测的最长队列优先调度算法;徐刚等;万方;20080415;全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN116112446A (zh) | 2023-05-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108449286B (zh) | 网络带宽资源分配方法及装置 | |
CN111144937B (zh) | 广告素材确定方法、装置、设备及存储介质 | |
CN105847447B (zh) | 消息推送方法和装置 | |
CN110334702B (zh) | 基于配置平台的数据传输方法、装置和计算机设备 | |
CN111010303A (zh) | 一种服务器控制方法及装置 | |
CN112612618A (zh) | 接口限流方法、装置、计算机设备和存储介质 | |
CN114866563A (zh) | 扩容方法、装置、系统和存储介质 | |
CN116112446B (zh) | 基于消息队列的延时反馈方法、计算机设备和存储介质 | |
CN112738895B (zh) | Wifi信道分配方法及设备 | |
CN112069386B (zh) | 一种请求处理方法、装置、系统、终端及服务器 | |
CN113515056A (zh) | 功能的执行方法及智能家电 | |
CN110889524B (zh) | 停电预约申请处理方法、装置、计算机设备和介质 | |
CN114650297B (zh) | 一种多微服务调用环境下自适应自动缩放方法及系统 | |
CN111309442A (zh) | 微服务容器数量的调整方法、装置、系统、介质及设备 | |
CN116055401A (zh) | 一种消息处理方法、装置、设备及存储介质 | |
CN113612701B (zh) | 数据处理方法、装置、计算机设备和存储介质 | |
CN116266321A (zh) | 广告策略确定方法及装置 | |
CN110688379B (zh) | 一种数据存储方法、系统、存储介质及电子设备 | |
CN110740166B (zh) | 基于距离的信息发送方法、装置、计算机设备和存储介质 | |
CN110535853B (zh) | 一种视频请求调度方法、装置、服务器及存储介质 | |
CN112287236A (zh) | 文本消息的推送方法、装置、计算机设备及存储介质 | |
CN114020209A (zh) | 一种客户端业务限速方法、装置、设备及存储介质 | |
CN111047042A (zh) | 一种推理服务模型的运行方法及装置 | |
CN110764916B (zh) | 一种信息处理方法、装置、存储介质及设备 | |
CN110381168A (zh) | 预测周期确定方法、预测内容推送方法、装置及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant |