CN114079638A - 多协议混合网络的数据传输方法、装置和存储介质 - Google Patents
多协议混合网络的数据传输方法、装置和存储介质 Download PDFInfo
- Publication number
- CN114079638A CN114079638A CN202010825304.7A CN202010825304A CN114079638A CN 114079638 A CN114079638 A CN 114079638A CN 202010825304 A CN202010825304 A CN 202010825304A CN 114079638 A CN114079638 A CN 114079638A
- Authority
- CN
- China
- Prior art keywords
- queue
- network
- protocol
- type
- data transmission
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000005540 biological transmission Effects 0.000 title claims abstract description 50
- 238000000034 method Methods 0.000 title claims abstract description 33
- 238000003860 storage Methods 0.000 title claims abstract description 14
- 238000012545 processing Methods 0.000 claims abstract description 24
- 230000015654 memory Effects 0.000 claims description 21
- 238000004590 computer program Methods 0.000 claims description 10
- 230000004044 response Effects 0.000 claims description 6
- 238000009826 distribution Methods 0.000 claims description 5
- 238000004458 analytical method Methods 0.000 claims description 4
- 238000001514 detection method Methods 0.000 claims description 2
- 239000003550 marker Substances 0.000 claims 2
- 238000004220 aggregation Methods 0.000 claims 1
- 230000002776 aggregation Effects 0.000 claims 1
- 230000008569 process Effects 0.000 abstract description 2
- 238000010586 diagram Methods 0.000 description 16
- 241000406668 Loxodonta cyclotis Species 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 230000009467 reduction Effects 0.000 description 3
- 230000006855 networking Effects 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000013468 resource allocation Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/10—Flow control; Congestion control
- H04L47/24—Traffic characterised by specific attributes, e.g. priority or QoS
- H04L47/2483—Traffic characterised by specific attributes, e.g. priority or QoS involving identification of individual flows
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/10—Flow control; Congestion control
- H04L47/12—Avoiding congestion; Recovering from congestion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/10—Flow control; Congestion control
- H04L47/24—Traffic characterised by specific attributes, e.g. priority or QoS
- H04L47/2441—Traffic characterised by specific attributes, e.g. priority or QoS relying on flow classification, e.g. using integrated services [IntServ]
Abstract
本发明公开了一种多协议混合网络的数据传输方法、装置和存储介质,涉及网络技术领域。多协议混合网络的数据传输方法包括:解析获取的网络流量;在获取的网络流量的协议为RoCE的情况下,将网络流量的类型确定为低时延类型;在获取的网络流量的协议为TCP、并且网络流量满足预设条件的情况下,将网络流量的类型确定为尽力转发类型;将获取的网络流量分配到对应的队列中;对于低时延类型的队列和尽力转发类型的队列,分别采用第一队列长度阈值和第二队列长度阈值进行拥塞处理,第一队列长度阈值高于第二队列长度阈值;转发各个队列中的网络流量。本发明采用更激进的拥塞处理策略处理对RoCE流量产生较大影响的TCP流量,从而保障了RDMA网络的性能。
Description
技术领域
本发明涉及网络技术领域,特别涉及一种多协议混合网络的数据传输方法、装置和存储介质。
背景技术
在云数据中心、边缘计算等应用场景中,对于人工智能(ArtificialIntelligence,简称:AI)类业务等高性能计算业务,需要网络提供超低时延、零丢包等能力,避免网络成为瓶颈。此类业务的部署通常会采用远程直接数据存取(Remote DirectMemory Access,简称:RDMA)的无损网络技术,满足其对超低时延网络特性的需求。RDMA基于RoCE(RDMA over Converged Ethernet,聚合以太网RDMA)协议,可以从发送端地址空间中取出数据,并直接传送到接收端的地址空间中,从而快速完成了计算节点内存间数据的快速交换,而不需要内核内存的参与,大大降低了服务器侧的处理时延。基于以太网的RoCE技术已经逐步替代无限带宽(Infiniband,简称:IB)等专用技术,成为主流技术。目前最新的RoCEv2版本使用IP(Internet Protocol,网络协议)/UDP(User Datagram Protocol,用户数据报协议)替代IB网络层,提供IP路由及等价路由(Equal-cost multi-path routing,简称:ECMP)能力,成为高性能数据中心网络主要部署协议。
发明内容
发明人经过分析后发现,在边缘数据中心(Data Center,简称:DC)等场景中,受限于组网规模及成本的局限,面向高性能计算的边缘网络在满足RoCE网络传输的同时,还需要兼容已有的传统TCP(Transmission Control Protocol,传输控制协议)网络服务。而在边缘网络同时进行TCP流量和RDMA流量混合数据传输时,TCP拥塞控制算法会加剧RoCE的拥塞程度,极大降低了RDMA网络性能。
而在相关技术中,大多将TCP和RDMA流量分别配置到不同端口进行独立数据传输。该方案成本高昂,资源配置不灵活。
本发明实施例所要解决的一个技术问题是:如何在兼容RDMA和TCP网络服务的网络中,提供一种降低成本的、保障RDMA网络性能的方案。
根据本发明一些实施例的第一个方面,提供一种多协议混合网络的数据传输方法,包括:解析获取的网络流量;在获取的网络流量的协议为RoCE的情况下,将网络流量的类型确定为低时延类型;在获取的网络流量的协议为TCP、并且网络流量满足预设条件的情况下,将网络流量的类型确定为尽力转发类型;将获取的网络流量分配到网络流量的类型对应的队列中;对于低时延类型的队列和尽力转发类型的队列,分别采用第一队列长度阈值和第二队列长度阈值进行拥塞处理,其中,第一队列长度阈值高于第二队列长度阈值;转发各个队列中的网络流量。
在一些实施例中,对于低时延类型的队列和尽力转发类型的队列中的每一个,在队列长度大于相应的队列长度阈值的情况下,对队列中的网络流量的报文进行标记,其中,标记用于指示流量的发送端降低发送速率。
在一些实施例中,在队列长度大于相应的队列长度阈值的情况下,通过基于队列对应的标记概率、使用WRED算法确定队列中需要标记的报文,其中,第一队列的标记概率低于第二队列的标记概率。
在一些实施例中,使用WRED算法确定队列中需要标记的报文包括:响应于将网络流量的报文分配到队列,使用WRED算法确定获取的报文的标记概率;响应于标记概率大于队列对应的标记概率,对队列中待发送的报文进行标记。
在一些实施例中,标记为ECN标记中的拥塞发生标记。
在一些实施例中,预设条件为网络流量的报文长度大于预设值、并且生命周期长度大于预设长度。
在一些实施例中,数据传输还包括:在获取的网络流量的协议为TCP、并且网络流量不满足预设条件的情况下,将网络流量的类型确定为带宽保障类型。
在一些实施例中,解析获取的网络流量包括:根据网络流量的报文的IP协议号、TCP或UDP协议标识中的一种或多种,确定网络流量的协议类型;在网络流量的协议类型为TCP协议的情况下,确定网络流量的报文长度和生命周期。
根据本发明一些实施例的第二个方面,提供一种多协议混合网络的数据传输装置,包括:解析模块,被配置为解析获取的网络流量;在获取的网络流量的协议为RoCE的情况下,将网络流量的类型确定为低时延类型;在获取的网络流量的协议为TCP、并且网络流量满足预设条件的情况下,将网络流量的类型确定为尽力转发类型;流量分配模块,被配置为将获取的网络流量分配到网络流量的类型对应的队列中;拥塞处理模块,被配置为对于低时延类型的队列和尽力转发类型的队列,分别采用第一队列长度阈值和第二队列长度阈值进行拥塞处理,其中,第一队列长度阈值高于第二队列长度阈值;转发模块,被配置为转发各个队列中的网络流量。
根据本发明一些实施例的第三个方面,提供一种多协议混合网络的数据传输装置,包括:存储器;以及耦接至存储器的处理器,处理器被配置为基于存储在存储器中的指令,执行前述任意一种多协议混合网络的数据传输方法。
根据本发明一些实施例的第四个方面,提供一种计算机可读存储介质,其上存储有计算机程序,其中,该程序被处理器执行时实现前述任意一种多协议混合网络的数据传输方法。
上述发明中的一些实施例具有如下优点或有益效果:在获取网络流量时,根据网络流量的类型,将RoCE流量、以及会对RoCE流量产生较大影响的TCP流量分配到不同的队列中,并会对RoCE流量产生较大影响的TCP流量采用更激进的拥塞处理策略。从而,在兼容RDMA和TCP网络服务的网络中,能够以更低的成本保障RDMA网络性能。
通过以下参照附图对本发明的示例性实施例的详细描述,本发明的其它特征及其优点将会变得清楚。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1示出了根据本发明一些实施例的多协议混合网络的数据传输方法的流程示意图。
图2示出了根据本发明一些实施例的多协议混合网络的数据传输装置的结构示意图。
图3示出了根据本发明另一些实施例的多协议混合网络的数据传输装置的结构示意图。
图4示出了根据本发明又一些实施例的多协议混合网络的数据传输装置的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。以下对至少一个示例性实施例的描述实际上仅仅是说明性的,决不作为对本发明及其应用或使用的任何限制。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
除非另外具体说明,否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值不限制本发明的范围。
同时,应当明白,为了便于描述,附图中所示出的各个部分的尺寸并不是按照实际的比例关系绘制的。
对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论,但在适当情况下,所述技术、方法和设备应当被视为授权说明书的一部分。
在这里示出和讨论的所有示例中,任何具体值应被解释为仅仅是示例性的,而不是作为限制。因此,示例性实施例的其它示例可以具有不同的值。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步讨论。
发明人经过进一步分析后发现,RDMA网络的性能对时延、丢包非常敏感,尤其是网络拥塞所导致的丢包,会直接影响RDMA网络性能。而在边缘网络同时进行TCP流量和RDMA流量混合数据传输时,TCP拥塞控制算法会导致占用过多的队列缓存,对RoCE的队列缓存造成冲击,加剧RoCE的拥塞程度,极大降低了RDMA网络性能。
因此,发明人提出了一种多队列调度方法,将部分会对RoCE流量造成较大冲击的TCP流量与RoCE流量分配到不同的队列中,并采用不同的拥塞处理机制,以保障RDMA网络的性能。下面参考图1描述本发明多协议混合网络的数据传输方法的实施例。
图1示出了根据本发明一些实施例的多协议混合网络的数据传输方法的流程示意图。如图1所示,该实施例的多协议混合网络的数据传输方法包括步骤S102~S112。
在步骤S102中,解析获取的网络流量。
在一些实施例中,对网络流量的报文进行解析。解析的对象包括报文的IP源地址、IP目的地址、IP协议号、TCP或UDP协议标识中的一种或多种。
在一些实施例中,根据网络流量的报文的IP协议号、TCP或UDP协议标识中的一种或多种,确定网络流量的协议类型;在网络流量的协议类型为TCP协议的情况下,确定网络流量的报文长度和生命周期。
例如,对于TCP协议,报文的IP首部中有8位协议号,用于指明IP的上层协议,其中协议号6表示TCP协议。
例如,RoCE v1协议的报文结构是在原有的IB架构的报文上增加二层以太网的报文头,并通过Ethertype 0x8915标识RoCE报文;RoCE v2协议是基于UDP/IP协议承载,其在原有的IB架构的报文的基础上增加了UDP头、IP头和二层以太网报文头,通过UDP目的端口号4791来标识RoCE报文。
在一些实施例中,解析的内容还可以包括其他信息,例如包括网络流量的报文的IP源地址和IP目的地址。通过结合IP源地址和IP目的地址以及其他解析内容,可以确定流量所属的用户或者业务。当用户或业务对QoS有特殊需求时,可以将这类流量划分到单独的队列中,并且配置专用的队列长度阈值,以对该队列中的流量进行有别于其他队列的拥塞处理。
在步骤S104中,在获取的网络流量的协议为RoCE的情况下,将网络流量的类型确定为低时延类型。
在步骤S106中,在获取的网络流量的协议为TCP、并且网络流量满足预设条件的情况下,将网络流量的类型确定为尽力转发类型。
在一些实施例中,满足预设条件的TCP流量是指会产生拥塞的概率高于预设程度的TCP流量。产生拥塞的概率例如可以通过报文长度、生命周期来衡量。
在一些实施例中,TCP流量可以划分为“大象流”和“老鼠流”。“大象流”是指网络流量的报文长度大于预设值、并且生命周期长度大于预设长度的流量,即,进行大量、持续的数据传递的流量;“老鼠流”是指流量的报文长度不大于预设值、并且生命周期长度不大于预设长度的流量,即,进行少量、短时间的数据传递的流量。在一些实施例中,将TCP大象流确定为尽力转发的类型,因为此类流量在产生拥塞后,会较严重地影响RoCE流量的性能。
在一些实施例中,在获取的网络流量的协议为TCP、并且网络流量不满足预设条件的情况下,将网络流量的类型确定为带宽保障类型。例如,对于“TCP老鼠流”,将其确定为带宽保障类型。从而,对于TCP和RoCE流量混跑的网络,可以将流量分配到三个队列中。
在步骤S108中,将获取的网络流量分配到网络流量的类型对应的队列中。
RDMA网络的性能对时延、丢包非常敏感,因此将RoCE协议的流量分配到低时延类型的队列中。符合预设条件的TCP流量(例如TCP大象流)对RDMA流量造成冲击的可能性更高,因此将其分配到尽力转发类型的队列。
在步骤S110中,对于低时延类型的队列和尽力转发类型的队列,分别采用第一队列长度阈值和第二队列长度阈值进行拥塞处理,其中,第一队列长度阈值高于第二队列长度阈值。
当队列的长度超过相应的长度阈值时,就需要进行拥塞处理。低时延类型的队列对应的长度阈值小于尽力转发类型的队列对应的长度阈值,说明符合条件的TCP流量需要更早地开始进行拥塞控制,以降低对RoCE流量的影响。
在一些实施例中,对于带宽保障类型的队列,不设置用于拥塞处理的队列长度阈值。由于低时延类型的队列和尽力转发类型的队列已采用相应的拥塞处理策略,因此不会对带宽保障类型的队列造成影响。
在步骤S112中,转发各个队列中的网络流量。例如,完成报文的下一跳编辑,以及出口端转发操作。
上述实施例的方法在获取网络流量时,根据网络流量的类型,将RoCE流量、以及会对RoCE流量产生较大影响的TCP流量分配到不同的队列中,并会对RoCE流量产生较大影响的TCP流量采用更激进的拥塞处理策略。从而,在兼容RDMA和TCP网络服务的网络中,能够以更低的成本保障RDMA网络性能。
在一些实施例中,对于低时延类型的队列和尽力转发类型的队列中的每一个,在队列长度大于相应的队列长度阈值的情况下,对队列中超出队列长度阈值的网络流量的流量进行标记,其中,该标记用于指示流量的发送端降低发送速率。由于包括预设类型的TCP流量(例如TCP大象流)的队列的队列长度阈值更小,因此,可以尽早通知源服务器对这类TCP流量提前进行降速处理。
在一些实施例中,在队列长度大于相应的队列长度阈值的情况下,通过基于队列对应的标记概率、使用加权随机早期检测(Weighted Random Early Detection,简称:WRED)算法确定队列中需要标记的报文,其中,第一队列的标记概率低于第二队列的标记概率。
WRED算法在拥塞发生时,一般有选择地丢弃较低优先级的报文。然而,由于丢弃报文也会加重网络的负担,因此在一些实施例中,将利用WRED算法确定的需要丢弃的报文、确定为需要标记的报文。例如,当获取报文时,利用WRED算法计算其“丢弃概率”作为本发明实施例中进行报文标记的标记概率。如果计算出的标记概率大于相应队列对应的预设的标记概率,则认为该报文需要标记。
由于第一队列的标记概率低于第二队列的标记概率,因此当TCP大象流等预设类型的TCP流量的队列和RoCE流量的队列长度相同时,TCP大象流有更高的概率被标记,从而能够进行更大幅度的降速处理。因此,提高了RoCE流量在拥塞时的转发带宽。
在一些实施例中,响应于将网络流量的报文分配到某个队列,使用WRED算法确定获取的报文的标记概率;响应于所记概率大于队列对应的标记概率,对队列中待发送的报文进行标记。当计算出获取的某个报文需要被标记时,由于该报文需要被添加到队列尾部,因此需要等待一段时间才能够将标记传导到发送端。而通过该实施例的方法,当计算出当前有标记报文的需求时,优先选择待发送的报文进行标记、而不对刚刚获取的报文进行标记,从而能够尽快通知源服务器进行降速,更快速、有效地缓解了网络压力。
在一些实施例中,该标记为ECN标记中的拥塞发生标记。ECN标记是通过发送端、接收端以及位于二者之间的路由器的配合,检测路径的拥塞,并主动降低发送端的发送速率,从而尽早避免因网络拥塞而导致的丢包。
在一些实施例中,网络流量的报文包括ECN字段,该字段有四个取值。当ECN字段取值为00时,代表报文不支持ECN,当拥塞发生时,基于WRED算法对这类报文进行丢包处理;当ECN字段取值为01或者10时,在拥塞发生的情况下,将其取值修改为11以表示报文经过了拥塞。当接收端收到具有ECN字段值为11的标记、即拥塞发生标记的报文时,向发送端发送包括降速指示的确认报文。从而,发送端降低发送速率以缓解网络压力,提高了RoCE流量在拥塞时的转发带宽。
下面参考图2描述本发明多协议混合网络的数据传输装置的实施例。
图2示出了根据本发明一些实施例的多协议混合网络的数据传输装置的结构示意图。如图2所示,该实施例的多协议混合网络的数据传输装置20包括:解析模块210,被配置为解析获取的网络流量;在获取的网络流量的协议为RoCE的情况下,将网络流量的类型确定为低时延类型;在获取的网络流量的协议为TCP、并且网络流量满足预设条件的情况下,将网络流量的类型确定为尽力转发类型;流量分配模块220,被配置为将获取的网络流量分配到网络流量的类型对应的队列中;拥塞处理模块230,被配置为对于低时延类型的队列和尽力转发类型的队列,分别采用第一队列长度阈值和第二队列长度阈值进行拥塞处理,其中,第一队列长度阈值高于第二队列长度阈值;转发模块240,被配置为转发各个队列中的网络流量。
在一些实施例中,拥塞处理模块230进一步被配置为对于低时延类型的队列和尽力转发类型的队列中的每一个,在队列长度大于相应的队列长度阈值的情况下,对队列中的网络流量的报文进行标记,其中,标记用于指示流量的发送端降低发送速率。
在一些实施例中,拥塞处理模块230进一步被配置为在队列长度大于相应的队列长度阈值的情况下,通过基于队列对应的标记概率、使用WRED算法确定队列中需要标记的报文,其中,第一队列的标记概率低于第二队列的标记概率。
在一些实施例中,拥塞处理模块230进一步被配置为响应于将网络流量的报文分配到队列,使用WRED算法确定获取的报文的标记概率;响应于标记概率大于队列对应的标记概率,对队列中待发送的报文进行标记。
在一些实施例中,标记为ECN标记中的拥塞发生标记。
在一些实施例中,预设条件为网络流量的报文长度大于预设值、并且生命周期长度大于预设长度。
在一些实施例中,解析模块210进一步被配置为在获取的网络流量的协议为TCP、并且网络流量不满足预设条件的情况下,将网络流量的类型确定为带宽保障类型。
在一些实施例中,解析模块210进一步被配置为根据网络流量的报文的IP源地址、IP目的地址、IP协议号、TCP或UDP协议标识中的一种或多种,确定网络流量的协议类型;在网络流量的协议类型为TCP协议的情况下,确定网络流量的报文长度和生命周期。
图3示出了根据本发明另一些实施例的多协议混合网络的数据传输装置的结构示意图。如图3所示,该实施例的多协议混合网络的数据传输装置30包括:存储器310以及耦接至该存储器310的处理器320,处理器320被配置为基于存储在存储器310中的指令,执行前述任意一个实施例中的多协议混合网络的数据传输方法。
其中,存储器310例如可以包括系统存储器、固定非易失性存储介质等。系统存储器例如存储有操作系统、应用程序、引导装载程序(Boot Loader)以及其他程序等。
图4示出了根据本发明又一些实施例的多协议混合网络的数据传输装置的结构示意图。如图4所示,该实施例的多协议混合网络的数据传输装置40包括:存储器410以及处理器420,还可以包括输入输出接口430、网络接口440、存储接口450等。这些接口430,440,450以及存储器410和处理器420之间例如可以通过总线460连接。其中,输入输出接口430为显示器、鼠标、键盘、触摸屏等输入输出设备提供连接接口。网络接口440为各种联网设备提供连接接口。存储接口450为SD卡、U盘等外置存储设备提供连接接口。
本发明的实施例还提供一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现前述任意一种多协议混合网络的数据传输方法。
本领域内的技术人员应当明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用非瞬时性存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解为可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (11)
1.一种多协议混合网络的数据传输方法,包括:
解析获取的网络流量;
在获取的网络流量的协议为聚合以太网的远程直接数据存取RoCE的情况下,将所述网络流量的类型确定为低时延类型;
在获取的网络流量的协议为传输控制协议TCP、并且所述网络流量满足预设条件的情况下,将所述网络流量的类型确定为尽力转发类型;
将获取的网络流量分配到所述网络流量的类型对应的队列中;
对于低时延类型的队列和尽力转发类型的队列,分别采用第一队列长度阈值和第二队列长度阈值进行拥塞处理,其中,第一队列长度阈值高于第二队列长度阈值;
转发各个队列中的网络流量。
2.根据权利要求1所述的数据传输方法,其中,对于所述低时延类型的队列和所述尽力转发类型的队列中的每一个,在所述队列长度大于相应的队列长度阈值的情况下,对所述队列中的网络流量的报文进行标记,其中,所述标记用于指示所述流量的发送端降低发送速率。
3.根据权利要求2所述的数据传输方法,其中,在所述队列长度大于相应的队列长度阈值的情况下,通过基于所述队列对应的标记概率、使用加权随机早期检测WRED算法确定所述队列中需要标记的报文,其中,所述第一队列的标记概率低于所述第二队列的标记概率。
4.根据权利要求3所述的数据传输方法,其中,所述使用WRED算法确定所述队列中需要标记的报文包括:
响应于将所述网络流量的报文分配到所述队列,使用WRED算法确定获取的所述报文的标记概率;
响应于所述标记概率大于所述队列对应的标记概率,对所述队列中待发送的报文进行标记。
5.根据权利要求2~4中任一项所述的数据传输方法,其中,所述标记为ECN标记中的拥塞发生标记。
6.根据权利要求1所述的数据传输方法,其中,所述预设条件为所述网络流量的报文长度大于预设值、并且生命周期长度大于预设长度。
7.根据权利要求1所述的数据传输方法,还包括:
在获取的网络流量的协议为TCP、并且所述网络流量不满足所述预设条件的情况下,将所述网络流量的类型确定为带宽保障类型。
8.根据权利要求1所述的数据传输方法,其中,所述解析获取的网络流量包括:
根据所述网络流量的报文的网络协议IP协议号、TCP或用户数据报协议UDP标识中的一种或多种,确定所述网络流量的协议类型;
在所述网络流量的协议类型为TCP协议的情况下,确定所述网络流量的报文长度和生命周期。
9.一种多协议混合网络的数据传输装置,包括:
解析模块,被配置为解析获取的网络流量;在获取的网络流量的协议为RoCE的情况下,将所述网络流量的类型确定为低时延类型;在获取的网络流量的协议为TCP、并且所述网络流量满足预设条件的情况下,将所述网络流量的类型确定为尽力转发类型;
流量分配模块,被配置为将获取的网络流量分配到所述网络流量的类型对应的队列中;
拥塞处理模块,被配置为对于低时延类型的队列和尽力转发类型的队列,分别采用第一队列长度阈值和第二队列长度阈值进行拥塞处理,其中,第一队列长度阈值高于第二队列长度阈值;
转发模块,被配置为转发各个队列中的网络流量。
10.一种多协议混合网络的数据传输装置,包括:
存储器;以及
耦接至所述存储器的处理器,所述处理器被配置为基于存储在所述存储器中的指令,执行如权利要求1~8中任一项所述的多协议混合网络的数据传输方法。
11.一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现权利要求1~8中任一项所述的多协议混合网络的数据传输方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010825304.7A CN114079638A (zh) | 2020-08-17 | 2020-08-17 | 多协议混合网络的数据传输方法、装置和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010825304.7A CN114079638A (zh) | 2020-08-17 | 2020-08-17 | 多协议混合网络的数据传输方法、装置和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114079638A true CN114079638A (zh) | 2022-02-22 |
Family
ID=80281146
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010825304.7A Pending CN114079638A (zh) | 2020-08-17 | 2020-08-17 | 多协议混合网络的数据传输方法、装置和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114079638A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114884823A (zh) * | 2022-04-29 | 2022-08-09 | 北京有竹居网络技术有限公司 | 流量拥塞控制方法、装置、计算机可读介质及电子设备 |
CN115955437A (zh) * | 2023-03-14 | 2023-04-11 | 苏州浪潮智能科技有限公司 | 一种数据传输方法、装置、设备及介质 |
CN115996195A (zh) * | 2023-03-23 | 2023-04-21 | 腾讯科技(深圳)有限公司 | 一种数据传输方法、装置、设备及介质 |
CN117579559A (zh) * | 2024-01-17 | 2024-02-20 | 企商在线(北京)数据技术股份有限公司 | 一种基于AI的RoCEv2拥塞控制方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030067878A1 (en) * | 2001-10-04 | 2003-04-10 | Zboril Thomas George | Method and system for traffic management in packet networks using random early marking |
US20190044861A1 (en) * | 2018-09-26 | 2019-02-07 | Intel Corporation | Technologies for congestion control for ip-routable rdma over converged ethernet |
US20190342199A1 (en) * | 2019-02-08 | 2019-11-07 | Intel Corporation | Managing congestion in a network |
US20190379610A1 (en) * | 2019-06-28 | 2019-12-12 | Intel Corporation | On-demand packet queuing in a network device |
US20200099620A1 (en) * | 2017-06-01 | 2020-03-26 | Huawei Technologies Co., Ltd. | Data transmission method and device |
-
2020
- 2020-08-17 CN CN202010825304.7A patent/CN114079638A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030067878A1 (en) * | 2001-10-04 | 2003-04-10 | Zboril Thomas George | Method and system for traffic management in packet networks using random early marking |
US20200099620A1 (en) * | 2017-06-01 | 2020-03-26 | Huawei Technologies Co., Ltd. | Data transmission method and device |
US20190044861A1 (en) * | 2018-09-26 | 2019-02-07 | Intel Corporation | Technologies for congestion control for ip-routable rdma over converged ethernet |
US20190342199A1 (en) * | 2019-02-08 | 2019-11-07 | Intel Corporation | Managing congestion in a network |
US20190379610A1 (en) * | 2019-06-28 | 2019-12-12 | Intel Corporation | On-demand packet queuing in a network device |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114884823A (zh) * | 2022-04-29 | 2022-08-09 | 北京有竹居网络技术有限公司 | 流量拥塞控制方法、装置、计算机可读介质及电子设备 |
WO2023207521A1 (zh) * | 2022-04-29 | 2023-11-02 | 北京有竹居网络技术有限公司 | 流量拥塞控制方法、装置、计算机可读介质及电子设备 |
CN114884823B (zh) * | 2022-04-29 | 2024-03-22 | 北京有竹居网络技术有限公司 | 流量拥塞控制方法、装置、计算机可读介质及电子设备 |
CN115955437A (zh) * | 2023-03-14 | 2023-04-11 | 苏州浪潮智能科技有限公司 | 一种数据传输方法、装置、设备及介质 |
CN115996195A (zh) * | 2023-03-23 | 2023-04-21 | 腾讯科技(深圳)有限公司 | 一种数据传输方法、装置、设备及介质 |
CN117579559A (zh) * | 2024-01-17 | 2024-02-20 | 企商在线(北京)数据技术股份有限公司 | 一种基于AI的RoCEv2拥塞控制方法 |
CN117579559B (zh) * | 2024-01-17 | 2024-04-23 | 企商在线(北京)数据技术股份有限公司 | 一种基于AI的RoCEv2拥塞控制方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11134132B2 (en) | Accelerated network packet processing | |
EP2928134B1 (en) | High-performance, scalable and packet drop-free data center switch fabric | |
EP2928136B1 (en) | Host network accelerator for data center overlay network | |
CN114079638A (zh) | 多协议混合网络的数据传输方法、装置和存储介质 | |
EP2928135B1 (en) | Pcie-based host network accelerators (hnas) for data center overlay network | |
CN108353029B (zh) | 用于管理计算网络中的数据业务的方法和系统 | |
US9674090B2 (en) | In-line network accelerator | |
US9419908B2 (en) | Network congestion management using flow rebalancing | |
US10135735B2 (en) | Method and system for managing flows in a network | |
EP3286966B1 (en) | Resource reallocation | |
US11290388B2 (en) | Flow control method and apparatus | |
EP2928132B1 (en) | Flow-control within a high-performance, scalable and drop-free data center switch fabric | |
CN109995608B (zh) | 网络速率计算方法和装置 | |
CN111970149A (zh) | 一种基于硬件防火墙qos的共享带宽实现方法 | |
CN113973342A (zh) | 流量控制方法、装置、电子设备及存储介质 | |
CN111224884B (zh) | 拥塞控制的处理方法、报文转发装置及报文接收装置 | |
Barakat et al. | A markovian model for TCP analysis in a differentiated services network | |
CN111953598B (zh) | 一种分布式流量转发方法、装置及系统 | |
CN117579543B (zh) | 一种数据流分割方法、装置、设备和计算机可读存储介质 | |
JP7251060B2 (ja) | 情報処理装置、情報処理システム及び情報処理プログラム | |
US20240056401A1 (en) | Multi-Queue Packet Processing Performed by an Intermediate Device in a Communication Network | |
CN117041166A (zh) | 拥塞控制方法和装置、交换机和计算机可读存储介质 | |
CN113872881A (zh) | 队列信息的处理方法及装置 | |
CN112804159A (zh) | 流量分配方法及装置 | |
CN116686332A (zh) | 一种数据交换的控制方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |