CN110022269A - 通信数据处理方法、装置和设备 - Google Patents

通信数据处理方法、装置和设备 Download PDF

Info

Publication number
CN110022269A
CN110022269A CN201810020089.6A CN201810020089A CN110022269A CN 110022269 A CN110022269 A CN 110022269A CN 201810020089 A CN201810020089 A CN 201810020089A CN 110022269 A CN110022269 A CN 110022269A
Authority
CN
China
Prior art keywords
communication data
priority
service quality
service
queue
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810020089.6A
Other languages
English (en)
Other versions
CN110022269B (zh
Inventor
李强
吴忠杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alibaba Group Holding Ltd
Original Assignee
Alibaba Group Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba Group Holding Ltd filed Critical Alibaba Group Holding Ltd
Priority to CN201810020089.6A priority Critical patent/CN110022269B/zh
Publication of CN110022269A publication Critical patent/CN110022269A/zh
Application granted granted Critical
Publication of CN110022269B publication Critical patent/CN110022269B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08Configuration management of networks or network elements
    • H04L41/0803Configuration setting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/50Network service management, e.g. ensuring proper service fulfilment according to agreements
    • H04L41/5003Managing SLA; Interaction between SLA and QoS
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L49/00Packet switching elements
    • H04L49/90Buffering arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/51Discovery or management thereof, e.g. service location protocol [SLP] or web services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/60Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
    • H04L67/61Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources taking into account QoS or priority requirements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/16Implementation or adaptation of Internet protocol [IP], of transmission control protocol [TCP] or of user datagram protocol [UDP]
    • H04L69/163In-band adaptation of TCP data exchange; In-band control procedures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/16Implementation or adaptation of Internet protocol [IP], of transmission control protocol [TCP] or of user datagram protocol [UDP]
    • H04L69/164Adaptation or special uses of UDP protocol
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/22Parsing or analysis of headers

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明实施例提供一种通信数据处理方法、装置和设备,该方法应用于业务服务器中,包括:接收业务产生的通信数据,通信数据中包括业务优先级;根据业务优先级与服务质量优先级的预设映射关系,确定与通信数据对应的服务质量优先级;将通信数据存入与服务质量优先级对应的网卡队列中,以供队列调度算法基于网卡队列对应的服务质量优先级对网卡队列中的通信数据进行调度。通过为各网卡队列设置不同的服务质量优先级以反映网卡队列的优先级,使得基于网卡队列优先级进行网卡队列调度时,高服务质量优先级的通信数据能够优先被调度,低服务质量优先级的通信数据能够滞后被调度,从而实现不同通信数据的差异性QOS保证。

Description

通信数据处理方法、装置和设备
技术领域
本发明涉及通信技术领域,尤其涉及一种通信数据处理方法、装置和设备。
背景技术
随着云计算技术的发展,各种类型的业务被越来越多地部署在数据中心,比如数据存储业务、支付业务等等,这些业务对网络的服务质量(Qual ity of Service,简称QOS)的需求不尽相同。
目前大多网络都采用传输控制协议(Transmission Control Protocol,简称TCP)或用户数据报协议(User Datagram Protocol,简称UDP)来进行业务产生的通信数据的传输,因此,目前满足业务的QOS需求的策略,也基本都是针对某种特定传输协议而制定的,比如针对TCP而制定的丢包、流量控制等策略来满足业务的QOS需求。
但是,现有TCP/IP软硬件架构和业务的高CPU消耗的特征对于满足业务的QOS需求产生了不利影响,主要体现为不能满足业务的低延迟需求。为此,远程直接内存访问(Remote Direct Memory Access,简称RDMA)协议应运而生,RDMA能够很好地满足延迟敏感业务的QOS需求。
因此,当在现有网络架构中部署RDMA以形成兼容了TCP/UDP和RDMA的混合网络架构时,如何满足业务的不同通信数据的差异性QOS需求,成为亟待解决的问题。
发明内容
有鉴于此,本发明实施例提供一种通信数据处理方法、装置和设备,用以满足不同通信数据的差异性QOS需求。
第一方面,本发明实施例提供一种通信数据处理方法,应用于业务服务器,该方法包括:
接收业务产生的通信数据,所述通信数据中包括业务优先级;
根据业务优先级与服务质量优先级的预设映射关系,确定与所述通信数据对应的服务质量优先级;
将所述通信数据存入与所述服务质量优先级对应的网卡队列中,以供队列调度算法基于所述网卡队列对应的服务质量优先级对所述网卡队列中的通信数据进行调度。
第二方面,本发明实施例提供一种通信数据处理装置,应用于业务服务器,该装置包括:
接收模块,用于接收业务产生的通信数据,所述通信数据中包括业务优先级;
确定模块,用于根据业务优先级与服务质量优先级的预设映射关系,确定与所述通信数据对应的服务质量优先级;
处理模块,用于将所述通信数据存入与所述服务质量优先级对应的网卡队列中,以供队列调度算法基于所述网卡队列对应的服务质量优先级对所述网卡队列中的通信数据进行调度。
第三方面,本发明实施例提供一种服务器,该服务器具体为支持至少一种业务的业务服务器,包括处理器和存储器,所述存储器用于存储支持服务器执行上述第一方面中通信数据处理方法的程序,所述处理器被配置为用于执行所述存储器中存储的程序。该服务器中还可以包括通信接口,用于与其他设备或通信网络通信。
另外,本发明实施例提供了一种计算机存储介质,用于储存上述服务器所用的计算机软件指令,其包含用于执行上述第一方面中通信数据处理方法所涉及的程序。
第四方面,本发明实施例提供一种通信数据处理方法,应用于交换机,该方法包括:
接收业务服务器发送的通信数据,所述通信数据中包括服务质量优先级标识;
根据预先为各交换机队列设置的服务质量优先级,确定与所述服务质量优先级标识对应的交换机队列;
将所述通信数据存入所述交换机队列,以供队列调度算法基于所述交换机队列对应的服务质量优先级对所述交换机队列中的通信数据进行调度。
第五方面,本发明实施例提供一种通信数据处理装置,应用于交换机,该装置包括:
接收模块,用于接收业务服务器发送的通信数据,所述通信数据中包括服务质量优先级标识;
确定模块,用于根据预先为各交换机队列设置的服务质量优先级,确定与所述服务质量优先级标识对应的交换机队列;
处理模块,用于将所述通信数据存入所述交换机队列,以供队列调度算法基于所述交换机队列对应的服务质量优先级对所述交换机队列中的通信数据进行调度。
第六方面,本发明实施例提供一种交换机,包括处理器和存储器,所述存储器用于存储支持交换机执行上述第四方面中通信数据处理方法的程序,所述处理器被配置为用于执行所述存储器中存储的程序。该交换机中还可以包括通信接口,用于与其他设备或通信网络通信。
另外,本发明实施例提供了一种计算机存储介质,用于储存上述交换机所用的计算机软件指令,其包含用于执行上述第四方面中通信数据处理方法所涉及的程序。
第七方面,本发明实施例提供一种通信数据处理方法,应用于网络控制平台,该方法包括:
接收各业务服务器发送的服务质量需求;
根据接收到的服务质量需求确定N个服务质量优先级以及所述N个服务质量优先级各自对应的传输协议和资源配置参数;
将所述N个服务质量优先级以及所述N个服务质量优先级各自对应的传输协议和资源配置参数发送至交换机;
对于所述各业务服务器中的任一业务服务器,根据所述任一业务服务器的服务质量需求从所述N个服务质量优先级中确定所述任一业务服务器对应的M个服务质量优先级,其中N≥M≥1;
将所述M个服务质量优先级以及所述M个服务质量优先级各自对应的传输协议和资源配置参数发送至所述任一业务服务器。
第八方面,本发明实施例提供一种通信数据处理装置,应用于网络控制平台,该装置包括:
接收模块,用于接收各业务服务器发送的服务质量需求;
第一确定模块,用于根据接收到的服务质量需求确定N个服务质量优先级以及所述N个服务质量优先级各自对应的传输协议和资源配置参数;
第二确定模块,用于对于所述各业务服务器中的任一业务服务器,根据所述任一业务服务器的服务质量需求从所述N个服务质量优先级中确定所述任一业务服务器对应的M个服务质量优先级,其中N≥M≥1;
发送模块,用于将所述N个服务质量优先级以及所述N个服务质量优先级各自对应的传输协议和资源配置参数发送至交换机;以及将所述M个服务质量优先级以及所述M个服务质量优先级各自对应的传输协议和资源配置参数发送至所述任一业务服务器。
第九方面,本发明实施例提供一种电子设备,该电子设备可以是控制主机,包括处理器和存储器,所述存储器用于存储支持电子设备执行上述第七方面中通信数据处理方法的程序,所述处理器被配置为用于执行所述存储器中存储的程序。该电子设备中还可以包括通信接口,用于与其他设备或通信网络通信。
另外,本发明实施例提供了一种计算机存储介质,用于储存上述电子设备所用的计算机软件指令,其包含用于执行上述第七方面中通信数据处理方法所涉及的程序。
本发明实施例提供的通信数据处理方法、装置和设备,网络控制平台通过收集各业务的QOS需求以确定网络需要支持的N种QOS优先级以及为不同的QOS优先级设定对应的传输协议和资源配置参数,进而,针对每个交换机:可以将设定的N种QOS优先级及其各自对应的传输协议和资源配置参数发送至交换机,以使在交换机侧实现满足各种QOS需求的交换机队列配置,即为支持不同传输协议的交换机队列设置不同的QOS优先级以及分配不同的资源;针对每个业务服务器:可以将满足该业务服务器的QOS需求的M种QOS优先级及其各自对应的传输协议和资源配置参数发送至该业务服务器,以在业务服务器中为支持不同传输协议的网卡队列设置不同的QOS优先级以及分配不同的资源。从而,基于对业务服务器和交换机的上述设置,当业务服务器产生通信数据时,该通信数据中携带有表征业务重要性的业务优先级,通过预设的业务优先级与QOS优先级的映射关系可以确定该通信数据的QOS优先级,将该通信数据存入该QOS优先级对应的网卡队列中,从而通过基于各网卡队列的QOS优先级对各网卡队列中的通信数据进行调度可以在业务服务器侧实现对不同通信数据的差异性QOS处理。另外,当业务服务器将携带有QOS优先级的通信数据发送至交换机时,交换机基于该QOS优先级将该通信数据存入相应的交换机队列中,从而通过基于各交换机队列的QOS优先级对各交换机队列中的通信数据进行调度可以在交换机侧实现对不同通信数据的差异性QOS处理。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种网络系统的示意图;
图2为图1所示网络系统中业务服务器的组成示意图;
图3为图1所示网络系统中交换机的组成示意图;
图4为图1所示网络系统中网络控制平台的组成示意图;
图5为本发明实施例提供的一种通信数据处理方法的流程图;
图6为本发明实施例提供的另一种通信数据处理方法的流程图;
图7为本发明实施例提供的又一种通信数据处理方法的流程图;
图8为本发明实施例提供的再一种通信数据处理方法的流程图;
图9为本发明实施例提供的还一种通信数据处理方法的流程图;
图10为本发明实施例提供的一种通信数据处理方法的交互图;
图11为本发明实施例提供的一种通信数据处理装置的结构示意图;
图12为与图11所示通信数据处理装置对应的服务器的结构示意图;
图13为本发明实施例提供的另一种通信数据处理装置的结构示意图;
图14为与图13所示通信数据处理装置对应的交换机的结构示意图;
图15为本发明实施例提供的又一种通信数据处理装置的结构示意图;
图16为与图15所示通信数据处理装置对应的电子设备的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
在本发明实施例中使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本发明。在本发明实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义,“多种”一般包含至少两种,但是不排除包含至少一种的情况。
应当理解,本文中使用的术语“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
应当理解,尽管在本发明实施例中可能采用术语第一、第二、第三等来描述XXX,但这些XXX不应限于这些术语。这些术语仅用来将XXX区分开。例如,在不脱离本发明实施例范围的情况下,第一XXX也可以被称为第二XXX,类似地,第二XXX也可以被称为第一XXX。
取决于语境,如在此所使用的词语“如果”、“若”可以被解释成为“在……时”或“当……时”或“响应于确定”或“响应于检测”。类似地,取决于语境,短语“如果确定”或“如果检测(陈述的条件或事件)”可以被解释成为“当确定时”或“响应于确定”或“当检测(陈述的条件或事件)时”或“响应于检测(陈述的条件或事件)”。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的商品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种商品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的商品或者系统中还存在另外的相同要素。
另外,下述各方法实施例中的步骤时序仅为一种举例,而非严格限定。
图1为本发明实施例提供的一种网络系统的示意图,如图1所示,该网络系统包括至少一个业务服务器、至少一个交换机以及网络控制平台,其中,一个业务服务器会连接到一个交换机上,网络控制平台与各业务服务器和各交换机分别连接。
其中,业务服务器上运行有至少一个业务应用,在每个业务服务器上需要实现针对该业务服务器上的业务所产生的不同通信数据的差异性QOS保证。
一般地,一个交换机上往往连接有多个业务服务器,各个交换机上需要实现统一的QOS策略,该QOS策略需保证为来自不同业务的通信数据或来自同一业务的不同通信数据提供差异性的QOS保证。
网络控制平台,负责根据业务和网络的特征制定QOS策略以及向业务服务器和交换机分发QOS策略。
下面分别简单介绍下上述业务服务器、交换机和网络控制平台的功能逻辑。
如图2所示,业务服务器中包括业务、计算资源和通信逻辑。
其中,业务为部署在业务服务器中的一个或多个业务,一个业务还可能可以细分为更细粒度的子任务,比如网络购物业务中包括支付业务,数据统计与分析业务。可以根据业务或子业务的重要性程度不同,为业务或子业务设定不同的业务优先级。
计算资源可以包括CPU、内存等资源,负责提供业务运行所需要的资源。
通信逻辑,负责业务与网络之间的通信,区分业务产生的通信数据,可以提供差异性的QOS。其中,进一步地,如图2所示,可以将通信逻辑进一步细分为:控制逻辑、网卡队列、网卡收发逻辑。
其中,控制逻辑,负责与网络控制平台交互,以根据网络控制平台下发的QOS策略对本地的网卡队列进行设置,具体地,可以为不同网卡队列设置不同的QOS优先级以及分配不同的资源;以及将业务产生的通信数据映射到不同的网卡队列中。
网卡队列可以包括硬件队列以及通过软件模拟方式模拟出的虚拟队列,网卡队列中包括支持不同传输协议的网卡队列,比如包括支持RDMA的网卡队列以及支持TCP的网卡队列。
网卡收发逻辑,主要负责网卡队列中通信数据的发送与接收,其中,该收发逻辑主要是基于预设的队列调度算法,通过基于各个网卡队列的QOS优先级来对各网卡队列进行调度从而实现控制各网卡队列中通信数据的收发。
如图3所示,交换机中包括交换机端口、交换管理逻辑、交换逻辑。
其中,交换机端口是交换机的通信通道,每个交换机端口内部包含一定数目的交换机队列,一般为8个交换机队列。交换机队列中包括支持不同传输协议的队列,比如包括支持RDMA的队列以及支持TCP的队列。
交换管理逻辑,负责交换机的管理、配置以及相关管理策略的映射执行。本发明实施例中,可以通过交换机管理逻辑实现对各交换机端口中各交换机队列的QOS优先级的设置以及相应资源的分配。
交换逻辑,负责实现交换机接收到的通信数据从源端口到目的端口的通信逻辑实现。其中,该交换逻辑主要是基于预设的队列调度算法,通过基于任一端口的各个交换机队列的QOS优先级来对各交换机队列进行调度从而实现交换机队列中通信数据的收发控制。
如图4所示,网络控制平台包括策略请求单元,策略决策单元和策略分发单元。
其中,策略请求单元,与各业务服务器交互,以获得各业务的QOS需求。
策略决策单元,用于根据各业务的QOS需求,将其映射为业务服务器的网卡和交换机上的不同QOS设置,即生成QOS策略,亦即根据各业务的QOS确定网络需支持的QOS优先级以及每个QOS优先级所需使用的传输协议和所需的资源。
策略分发单元,用于向各交换机下发统一的QOS策略,以实现各交换机的统一的QOS设置,以及向各业务服务器下发各自对应的QOS策略,因为不同业务服务器的业务不同,相应的,业务的QOS需求往往不同,因此,各业务服务器获得的QOS策略可能是不同的。值得说明的是,任一业务服务器获得的QOS策略是下发给交换机的QOS策略中的全部或部分内容,也就是说,其实交换机和业务服务器使用的是同一套QOS策略,只是因为交换机需要为众多业务服务器服务,因此需要下发给交换机完备的QOS策略,而业务服务器只需获得该完备的QOS策略中符合自身需求的部分QOS策略即可。
基于上述网络系统,下面分别以业务服务器、交换机和网络控制平台的角度,对本发明实施例提供的通信数据处理方法进行说明。
图5为本发明实施例提供的一种通信数据处理方法的流程图,本实施例提供的该通信数据处理方法可以由图1中的网络控制平台来执行。如图5所示,该方法包括如下步骤:
501、网络控制平台接收各业务服务器发送的服务质量需求。
502、网络控制平台根据接收到的服务质量需求确定N个服务质量优先级以及N个服务质量优先级各自对应的传输协议和资源配置参数。
503、网络控制平台对于各业务服务器中的任一业务服务器,根据任一业务服务器的服务质量需求从N个服务质量优先级中确定该任一业务服务器对应的M个服务质量优先级,其中N≥M≥1。
504、网络控制平台将N个服务质量优先级以及N个服务质量优先级各自对应的传输协议和资源配置参数发送至交换机;以及将M个服务质量优先级以及M个服务质量优先级各自对应的传输协议和资源配置参数发送至该任一业务服务器。
一个业务服务器中可能部署了多个业务,每个业务中可能包含多个子业务。为了满足不同业务产生的通信数据或者同一业务的不同子业务产生的不同通信数据的差异性QOS需求,在通信数据产生的源端即业务服务器中需要进行一定的设置,该设置主要体现为对业务服务器的网卡队列进行QOS优先级的设置以及进行资源分配,同样地,在网络侧的交换机中也需要对交换机队列进行QOS优先级的设置以及进行资源分配。
而要为网卡队列和交换机队列进行QOS优先级的设置,则需要先确定出可以有哪些QOS优先级。本发明实施例中,网络控制平台通过收集各业务服务器中各业务、各子业务的QOS需求来确定出QOS优先级。
对于任一业务服务器,相关工作人员可以根据实际需要预先为其中部署的各业务,每个业务中包含的各子业务设定QOS需求,进而将该业务服务器对应的QOS需求发送至网络控制平台。其中,QOS需求可以从两个维度来考虑,其一是延迟敏感性,其二是带宽敏感性。针对延迟敏感性,可选地,可以进一步预先划定不同的延迟容忍程度。同理,针对带宽敏感性,也可以预先划定不同的带宽需求量。对于不同业务服务器来说,业务服务器各自的相关工作人员设定的延迟容忍程度数值、带宽需求量可能是不同的。从而,任一业务服务器可以将描述其上部署的各业务、子业务的延迟、带宽需求的QOS需求发送至网络控制平台,以使网络控制平台可以汇集众多业务服务器发送的QOS需求,以便确定出适用于全网的QOS策略。其中,该QOS策略中主要描述了根据收到的若干QOS需求确定出的N个QOS优先级以及这N个QOS优先级各自对应的传输协议和资源配置参数。
其中,QOS优先级包含有QOS种类和每个种类对应的级别的含义,而QOS种类即为通过汇总及归类上述若干QOS需求得到的,具体地,可以根据QOS需求涉及到哪些类型的需求以及每种类型的需求的具体需求资源等信息得到。
举例来说,假设QOS优先级可以包括高优先级的延迟敏感,以及低优先级的带宽敏感,即将QOS划分为延迟敏感和带宽敏感两类,其中的延迟敏感的优先级高于带宽敏感的优先级。可选地,还可以分别针对延迟敏感和带宽敏感进行更细粒度的划分。比如,针对带宽敏感,还可以进一步划分为更细粒度的优先级,如自高到低依次包括:对带宽有一定要求并且对延迟也较为敏感;对带宽有要求即带宽保证;对带宽和延迟均没有特殊要求即最大努力带宽(Best Effort)等QOS优先级。基于该举例,N个QOS优先级自高到低依次包括:延迟敏感,对带宽有一定要求并且对延迟也较为敏感,带宽保证,最大努力带宽这四种QOS优先级。其中,上述对带宽有要求的QOS优先级中对带宽的具体要求可以基于QOS需求中提供的带宽需求量而划定。
另外,为了使得映射到不同QOS优先级的通信数据能够得到差异性的QOS保证,还可以设定不同QOS优先级所对应的传输协议。本发明实施例中,在业务服务器和交换机上可以部署不同的传输协议,比如可以包括RDMA和TCP/UDP。其中,RDMA是为了解决传输延迟问题而产生的,因此,可以为对应于延迟敏感的QOS优先级设置RDMA协议,而为对应于带宽敏感的QOS优先级设置TCP协议,或者也可以为排在前预设数量的QOS优先级设置RDMA,其他的QOS优先级设置TCP,因为RDMA相比TCP在吞吐量、丢包率、延迟等性能方面具有明显优势。
另外,对于带宽敏感的各QOS优先级,针对每个QOS优先级对带宽的具体需求,还可以为QOS优先级设置资源配置参数,以便在业务服务器、交换机侧分配相应的资源。比如,通过汇集各业务服务器的QOS需求发现,如果为“对带宽有一定要求并且对延迟也较为敏感”的这个带宽敏感的QOS优先级分配300MB的带宽则可以满足有这类QOS需求的众多业务,则为之设置的资源分配参数可以是300MB带宽。再比如,针对带宽保证的QOS优先级,还可以进一步根据所需带宽的不同划分为更细粒度的QOS优先级,比如200MB的QOS优先级高于100MB的QOS优先级,相应地,资源配置参数中包括对应的带宽需求。
综上,网络控制平台通过汇集各业务的QOS需求而划定了多种QOS种类,并为每种QOS种类设定了优先级,以及为每种QOS种类设定了对应的传输协议和资源分配参数,从而形成了可以适用于全网的完备的QOS策略。
网络控制平台可以将该完备的QOS策略携带在下发给交换机的设置通知中,以使得交换机根据该QOS策略对交换机队列进行设置,详见图6所示实施例。
但是在向各业务服务器下发QOS策略时,在一可选实施例中,并非直接将上述完备的QOS策略直接无差异地下发给各业务服务器,因此,对于任一业务服务器而言,其可能用不上其中的部分QOS优先级,因为该业务服务器中可能并未部署相应QOS需求的业务。因此,在向各个业务服务器发送QOS策略时,需要先从完备的QOS策略中确定出分别与每个业务服务器的QOS需求相对应的部分QOS策略,该部分QOS策略中包括从N个QOS优先级中确定出的M个QOS优先级以及M个QOS优先级各自对应的传输协议和资源配置参数,以使得该业务服务器根据收到的该部分QOS策略对网卡队列进行设置,详见图7所示实施例。
举例来说,假设总共有两个业务服务器——业务服务器1和业务服务器2,再假设业务服务器1的QOS需求包括需求a、需求b和需求c,业务服务器2的QOS需求包括需求d和需求e。再假设N个QOS优先级包括根据需求a和需求d确定的第一QOS优先级,根据需求b和需求c确定的第二QOS优先级,以及根据需求e确定的第三QOS优先级。则向业务服务器1下发的QOS策略中包括第一QOS优先级和第二QOS优先级及其相关设置信息;向业务服务器2下发的QOS策略中包括第一QOS优先级和第三QOS优先级及其相关设置信息。
综上,网络控制平台通过汇集各业务服务器中各业务的QOS需求而划定出N种QOS种类以及为每种QOS种类设定优先级从而形成N个QOS优先级,并且,为了保证映射到每种QOS优先级的通信数据能够得到差异性的QOS保证,还为每个QOS优先级设定保证QOS需求的传输协议和资源配置参数。进而,将N个QOS优先级及其相关设置信息下发至各交换机,使得交换机能够基于该优先级设置情况完成交换机队列的设置,同时,针对各业务服务器的QOS需求,从N个QOS优先级中选定与业务服务器匹配的部分QOS优先级下发至业务服务器,以使业务服务器对网卡队列进行设置,从而,基于网卡队列的设置以及交换机队列的设置,对实现针对不同通信数据的差异性QOS保证提供了保障。
图6为本发明实施例提供的另一种通信数据处理方法的流程图,本实施例提供的该通信数据处理方法可以由图1中的交换机来执行。本实施例介绍了交换机中交换机队列的设置过程,如图6所示,该过程可以包括如下步骤:
601、交换机接收网络控制平台发送的设置通知,设置通知中包括N个服务质量优先级以及N个服务质量优先级各自对应的传输协议和资源配置参数。
602、交换机根据各交换机队列支持的传输协议和N个服务质量优先级各自对应的传输协议为各交换机队列设置服务质量优先级,根据N个服务质量优先级各自对应的资源配置参数为各交换机队列分配资源。
对于任一交换机来说,其一般包括多个端口,每个端口中一般包括一定数目的交换机队列,一般为8个。为支持不同传输协议,以RDMA和TCP为例,在交换机队列中会包括一定数目的支持RDMA的交换机队列以及一定数目的支持TCP的交换机队列,其中,TCP可以使用RDMA剩余的交换机队列。由于RDMA需要基于无损(loss less)以太网实现,其需要在交换机的每个端口上预留相应的缓冲区资源以避免丢包,同时为了避免缓冲膨胀(BufferBloat)问题,交换机缓冲区相对不能太大,因此在目前的交换机上,RDMA仅能在有限数目的交换机队列上采用,比如采用一个或两个RDMA交换机队列。
交换机在接收到网络控制平台发送的QOS策略即N个QOS优先级以及N个QOS优先级各自对应的传输协议和资源配置参数之后,首先基于N个QOS优先级各自对应的传输协议以及各交换机队列所支持的传输协议,为N个QOS分配交换机队列,亦即将N个QOS优先级映射到交换机队列上:为支持RDMA的交换机队列设置对应于RDMA的QOS优先级,为支持TCP的交换机队列设置对应于TCP的QOS优先级。可选地,如果对应于RDMA的QOS优先级数量大于支持RDMA的交换机队列数量时,可以进行多对一的映射设置。对应于TCP的QOS优先级亦同理。可以理解的是,为交换机队列设置QOS优先级,其实就相当于为交换机队列打上QOS优先级标识。
在为各交换机队列设置好QOS优先级后,还需根据各自的QOS优先级所对应的资源配置参数,为各交换机队列分配资源,比如分配带宽资源。
可以理解的是,当为各交换机队列设置好QOS优先级后,该QOS优先级即体现了交换机队列的优先级,即具有高QOS优先级的交换机队列的优先级比具有低QOS优先级的交换机队列的优先级高。
基于上述交换机队列的设置,后续基于交换机队列对应的QOS优先级对交换机队列进行调度时,能够实现不同通信数据的差异性QOS保证,因为简单来说,越高QOS优先级交换机队列中的通信数据越会被优先以充足的资源进行处理,从而越高QOS优先级交换机队列中的通信数据越会得到更佳的QOS保证。
图7为本发明实施例提供的又一种通信数据处理方法的流程图,本实施例提供的该通信数据处理方法可以由图1中的业务服务器来执行。本实施例介绍了业务服务器中网卡的队列设置过程,如图7所示,可以包括如下步骤:
701、业务服务器向网络控制平台发送服务质量需求,以使网络控制平台根据服务质量需求确定N个服务质量优先级以及N个服务质量优先级各自对应的传输协议和资源配置参数。
702、业务服务器接收网络控制平台发送的设置通知,设置通知中包括与服务质量需求对应的M个服务质量优先级以及M个服务质量优先级各自对应的传输协议和资源配置参数,其中N≥M≥1。
上述步骤中业务服务器向网络控制平台发送QOS需求以及网络控制平台汇集各业务服务器发送的QOS需求而确定出N个QOS优先级以及为N个QOS优先级设定传输协议和资源配置参数的过程可以参见前述实施例的说明,在此不赘述。
703、业务服务器根据各网卡队列支持的传输协议和M个服务质量优先级各自对应的传输协议为各网卡队列设置服务质量优先级,根据M个服务质量优先级各自对应的资源配置参数为各网卡队列分配资源。
对于任一业务服务器来说,当接收到网络控制平台发送的M个QOS优先级以及M个QOS优先级各自对应的传输协议和资源配置参数之后,需要对本地的网卡队列进行设置。
具体地,业务服务器的网卡中会有支持RDMA的网卡队列也会有支持TCP的网卡队列。其中,支持RDMA的网卡队列是硬件队列,而支持TCP的网卡队列可以是硬件队列,也可以是软件模拟的虚拟队列。基于M个QOS优先级各自对应的传输协议以及各网卡机队列所支持的传输协议,为M个QOS分配网卡队列,亦即将M个QOS优先级映射到网卡队列上:为支持RDMA的网卡队列设置对应于RDMA的QOS优先级,为支持TCP的网卡队列设置对应于TCP的QOS优先级。在为各网卡队列设置好QOS优先级后,还需根据各自的QOS优先级所对应的资源配置参数,为各网卡队列分配资源,比如分配带宽资源。
其中,为网卡队列进行QOS优先级设置时,可以为网卡队列设置QOS优先级标识,当网卡队列中存入通信数据时,该QOS优先级标识会被填充到通信数据中,可以是填充到通信数据的封装结构的特定域中,比如服务类型(Type of Service,简称TOS)、服务类别分类(Class of Service,简称COS)、差分服务代码点(Different iated services codepoint,简称DSCP)等域中。
可以理解的是,当为各网卡队列设置好QOS优先级后,该QOS优先级即体现了网卡队列的优先级,即具有高QOS优先级的网卡队列的优先级比具有低QOS优先级的网卡队列的优先级高。从而,后续基于网卡队列的优先级对各网卡队列进行调度时,能够实现不同通信数据的差异性QOS保证,因为,越高优先级的网卡队列越会被优先以充足的资源进行调度。
前述各实施例分别从网络控制平台、业务服务器、交换机角度对QOS策略的确定和设置过程进行了介绍,基于业务服务器和交换机的上述设置结果,当业务服务器中某业务或子业务产生通信数据时,对该通信数据的处理过程可以参见图8和图9所示实施例的介绍。
图8为本发明实施例提供的再一种通信数据处理方法的流程图,本实施例提供的该通信数据处理方法可以由图1中的业务服务器来执行。本实施例介绍了基于图7中业务服务器对网卡队列的设置结果,对业务产生的通信数据在业务服务器侧的处理过程,如图8所示,包括如下步骤:
801、接收业务产生的通信数据,通信数据中包括业务优先级。
802、根据业务优先级与服务质量优先级的预设映射关系,确定与通信数据对应的服务质量优先级。
803、将通信数据存入与服务质量优先级对应的网卡队列中,以供队列调度算法基于网卡队列对应的服务质量优先级对网卡队列中的通信数据进行调度。
一个业务服务器中可能部署了多个业务,每个业务中可能包含多个子业务,不管是业务还是子业务,都可以为其设定不同的业务优先级,而设定业务优先级的依据可以是根据业务或子业务的重要性、QOS需求等。
其中,重要性可以体现在:如果某业务或子业务是面向用户需要提供实时在线服务的即是与用户实时交互的,则可以认为该类业务或子业务的重要性很高,赋予其高业务优先级,相对的,比如存储类业务、可以离线处理的业务如大数据统计分析业务,可以认为重要性较低,赋予其低业务优先级。
可选地,在基于业务重要性区分业务优先级的基础上,还可以进一步结合不同业务或子业务的QOS需求来区分业务优先级。其中,如前所述,QOS需求可以从两个维度来考虑,其一是延迟敏感性,其二是带宽敏感性。针对延迟敏感性,可选地,可以预先划定不同的延迟容忍程度,不同的延迟容忍程度对应不同的业务优先级,延迟容忍程度越小,业务优先级越高,相反地,延迟容忍程度越大,业务优先级越低。同理,针对带宽敏感性,也可以预先划定不同的带宽需求量,不同的带宽需求量对应不同的业务优先级,带宽需求量越多,业务优先级越高,相反地,带宽需求量越少,业务优先级越低。
值得说明的是,可以仅基于业务重要性进行业务优先级设定,也可以仅基于业务的QOS需求进行业务优先级设定,还可以综合结合业务重要性和业务的QOS需求进行业务优先级设定。另外,在结合业务的QOS需求进行业务优先级设定时,可选地,可以设定所有延迟敏感业务的业务优先级都高于带宽敏感性业务的业务优先级,也可以设定较高带宽需求量业务的业务优先级高于较高延迟容忍程度业务的业务优先级。
另外,由于QOS优先级是基于汇集各业务服务器的QOS需求而确定出来的,因此,在结合QOS需求而设定业务优先级时,还可以在确定QOS优先级的过程中,建立QOS优先级与业务优先级的映射关系。比如,业务服务器1的QOS需求包括需求a、需求b和需求c,假设N个QOS优先级包括结合需求a确定的第一QOS优先级,结合需求b和需求c确定的第二QOS优先级,则可以建立需求a与第一QOS优先级,以及需求b和需求c与第二QOS优先级的映射关系。
另外,可选地,当仅依据业务的重要性来设定业务优先级时,可以按照一定的预设比例设定业务优先级与QOS优先级的映射关系,比如自高而低排列所有业务对应的业务优先级,得到业务优先级序列,其中排在前面x%的对应于最高QOS优先级,排在其后y%的对应于次高QOS优先级,以此类推。
上述设定反映的整体思想是:越重要的、对QOS需求越高的业务,对应于越高的QOS优先级,以便优先保证这些业务的QOS。
基于此,当某业务服务器中的某业务产生携带有业务优先级的通信数据后,可以基于业务优先级与QOS优先级的映射关系,确定该通信数据对应的QOS优先级,从而将该通信数据存入与该QOS优先级对应的网卡队列中。由于已经预先为网卡队列设置了QOS优先级标识,因此,可以将该QOS优先级标识填充至通信数据的相关域比如TOS、COS等域中,以便标识该通信数据的QOS优先级。
在业务服务器中会设置有队列调度算法,该队列调度算法会基于网卡队列的优先级对网卡队列进行调度,其中,网卡队列的优先级即体现为网卡队列被设置的QOS优先级。该队列调度算法可以采用现有成熟的算法,整体原则就是,越高QOS优先级的网卡队列越会被优先调度,从而可以优先保证对应于高QOS优先级的网卡队列中的通信数据的QOS需求。对于某网卡队列,在调度到该网卡队列中的所述通信数据时,将填充了QOS优先级标识的通信数据发送至交换机。
在实际应用中,位于应用层的业务产生的通信数据到被存入网卡队列之前,往往可能还需一定的处理,比如进行数据包的封装处理等。而网卡队列中包括支持RDMA的队列,也包括支持TCP的队列,支持RDMA的队列为硬件队列,该硬件队列以硬件逻辑实现对通信数据的封装处理,而支持TCP的队列是基于软件逻辑实现对通信数据的封装处理,因此,在将通信数据存入网卡队列之前,还可以包括如下步骤:
确定与通信数据的业务优先级对应的传输协议;
若传输协议为TCP或UDP,则采用该传输协议对通信数据进行封装,将封装后的通信数据存入确定出的网卡队列中,可以理解,该网卡队列支持TCP或UDP。
若传输协议为RDMA,则将通信数据存入网卡队列中,可以理解,该网卡队列支持RDMA。
可选地,可以根据如下方式确定业务优先级对应的传输协议:假设N个QOS优先级中对应于RDMA的QOS优先级数量与对应于TCP的QOS优先级数量的比值为r,则设定业务优先级排在前r%的业务优先级对应于RDMA,其他业务优先级对应于TCP/UDP。
综上,本发明实施例中,对于业务产生的通信数据,首先会将高业务优先级的通信数据映射到RDMA流量,低业务优先级的通信数据映射为TCP流量,实现了网络流量的划分。进一步地,针对RDMA流量,根据相应通信数据中携带的业务优先级会确定出较高的QOS优先级,将RDMA流量存入该较高QOS优先级对应的网卡队列中;而针对TCP流量,根据相应通信数据中携带的业务优先级会确定出较低的QOS优先级,将TCP流量存入该较低QOS优先级对应的网卡队列中,从而实现了不同业务优先级的业务的差异性QOS保证。
图9为本发明实施例提供的还一种通信数据处理方法的流程图,本实施例提供的该通信数据处理方法可以由图1中的交换机来执行。本实施例介绍了基于图6中交换机对交换机队列的设置结果,对从业务服务器接收的通信数据在交换机侧的处理过程,如图9所示,该方法包括如下步骤:
901、接收业务服务器发送的通信数据,通信数据中包括服务质量优先级标识。
902、根据预先为各交换机队列设置的服务质量优先级,确定与服务质量优先级标识对应的交换机队列。
903、将通信数据存入确定出的交换机队列,以供队列调度算法基于该交换机队列对应的服务质量优先级对交换机队列中的通信数据进行调度。
在交换机侧,其通过解析从业务服务器接收到的通信数据中的相关域比如TOS、COS、DSCP可以获知该通信数据对应的QOS优先级,从而,基于该QOS优先级可以将该通信数据存入对应的交换机队列中。在交换机中会设置有队列调度算法,该队列调度算法会基于交换机队列的优先级对交换机队列进行调度,其中,交换机队列的优先级即体现为交换机队列被设置的QOS优先级。该队列调度算法可以采用现有成熟的算法,整体原则就是,越高QOS优先级的交换机队列越会被优先调度,从而可以优先保证对应于高QOS优先级的交换机队列中的通信数据的QOS需求。
图10为本发明实施例提供的一种通信数据处理方法的交互图,如图10所示,该方法包括如下步骤:
1001、网络控制平台接收各业务服务器发送的服务质量需求。
1002、网络控制平台根据接收到的服务质量需求确定第一QOS策略。
该第一QOS策略即为前述实施例中所述的N个服务质量优先级以及N个服务质量优先级各自对应的传输协议和资源配置参数。
1003、网络控制平台根据各业务服务器的服务质量需求确定针对各业务服务器的第二QOS策略。
第二QOS策略中的内容为第一QOS策略中的全部或部分,即为前述实施例中所述的M个服务质量优先级以及M个服务质量优先级各自对应的传输协议和资源配置参数。
1004、网络控制平台向各交换机发送第一QOS策略。
1005、网络控制平台向各业务服务器交换机发送各自对应的第二QOS策略。
1006、交换机基于第一QOS策略完成对各交换机队列的设置。
1007、业务服务器基于接收到的第二QOS策略完成对各网卡队列的设置。
1008、业务服务器接收业务产生的通信数据,通信数据中包括业务优先级。
1009、业务服务器确定与业务优先级对应的传输协议以进行封装处理,以及确定与业务优先级对应的QOS优先级,将通信数据存入与该QOS优先级对应的网卡队列中。
1010、业务服务器在基于网卡队列的QOS优先级调度到所述网卡队列中的该通信数据时,将填充有QOS优先级标识的通信数据发送至交换机。
1011、交换机基于接收到的通信数据中的QOS优先级标识,将通信数据存入对应的交换机队列中,以基于该交换机队列对应的QOS优先级对交换机队列中的通信数据进行调度。
本实施例中简述了业务服务器、网络控制平台和交换机的处理过程,未尽描述可以参见前述相关实施例中的介绍。
以下将详细描述本发明的一个或多个实施例的通信数据处理装置。本领域技术人员可以理解,这些通信数据处理装置均可使用市售的硬件组件通过本方案所教导的步骤进行配置来构成。
图11为本发明实施例提供的一种通信数据处理装置的结构示意图,该通信数据处理装置位于业务服务器中,如图11所示,该装置包括:第一接收模块11、语确定模块12、处理模块13。
第一接收模块11,用于接收业务产生的通信数据,所述通信数据中包括业务优先级。
确定模块12,用于根据业务优先级与服务质量优先级的预设映射关系,确定与所述通信数据对应的服务质量优先级。
处理模块13,用于将所述通信数据存入与所述服务质量优先级对应的网卡队列中,以供队列调度算法基于所述网卡队列对应的服务质量优先级对所述网卡队列中的通信数据进行调度。
可选地,所述确定模块12还用于:确定与所述业务优先级对应的传输协议。
相应地,所述处理模块13还用于:若确定模块12确定出的所述传输协议为TCP或UDP,则采用所述传输协议对所述通信数据进行封装,将封装后的通信数据存入所述网卡队列中,所述网卡队列为支持所述TCP或UDP的队列;若确定模块12确定出的所述传输协议为RDMA,则将所述通信数据存入所述网卡队列中,所述网卡队列为支持所述RDMA的队列。
可选地,所述处理模块13还用于:将预先为所述网卡队列设置的表示所述服务质量优先级的标识填充至所述通信数据中;在调度到所述网卡队列中的所述通信数据时,将填充后的通信数据发送至交换机。
可选地,该装置中还可以包括:发送模块14、第二接收模块15、设置模块16。
发送模块14,用于向网络控制平台发送服务质量需求,以使所述网络控制平台根据所述服务质量需求确定N个服务质量优先级以及所述N个服务质量优先级各自对应的传输协议和资源配置参数。
第二接收模块15,用于接收所述网络控制平台发送的设置通知,所述设置通知中包括与所述服务质量需求对应的M个服务质量优先级以及所述M个服务质量优先级各自对应的传输协议和资源配置参数,其中N≥M≥1。
设置模块16,用于根据各网卡队列支持的传输协议和所述M个服务质量优先级各自对应的传输协议为所述各网卡队列设置服务质量优先级;根据所述M个服务质量优先级各自对应的资源配置参数为所述各网卡队列分配资源。
图11所示装置可以执行图7和图8所示实施例的方法,本实施例未详细描述的部分,可参考对图7和图8所示实施例的相关说明。该技术方案的执行过程和技术效果参见图7和图8所示实施例中的描述,在此不再赘述。
以上描述了通信数据处理装置的内部功能和结构,在一个可能的设计中,图11所示通信数据处理装置的结构可实现为服务器,该服务器为部署有至少一种业务的业务服务器,如图12所示,该服务器可以包括:处理器21和存储器22。其中,所述存储器22用于存储支持服务器执行上述图7和图8所示实施例中提供的通信数据处理方法的程序,所述处理器21被配置为用于执行所述存储器22中存储的程序。
所述程序包括一条或多条计算机指令,其中,所述一条或多条计算机指令被所述处理器21执行时能够实现如下步骤:
接收业务产生的通信数据,所述通信数据中包括业务优先级;
根据业务优先级与服务质量优先级的预设映射关系,确定与所述通信数据对应的服务质量优先级;
将所述通信数据存入与所述服务质量优先级对应的网卡队列中,以供队列调度算法基于所述网卡队列对应的服务质量优先级对所述网卡队列中的通信数据进行调度。
可选地,所述处理器21还用于执行前述图7和图8所示实施例中的全部或部分步骤。
其中,所述服务器的结构中还可以包括通信接口23,用于服务器与其他设备或通信网络通信。
另外,本发明实施例提供了一种计算机存储介质,用于储存图12所示服务器所用的计算机软件指令,其包含用于执行上述图7和图8所示方法实施例中通信数据处理方法所涉及的程序。
图13为本发明实施例提供的另一种通信数据处理装置的结构示意图,该通信数据处理装置位于交换机中,如图13所示,该装置包括:接收模块31、确定模块32、处理模块33。
接收模块31,用于接收业务服务器发送的通信数据,所述通信数据中包括服务质量优先级标识。
确定模块32,用于根据预先为各交换机队列设置的服务质量优先级,确定与所述服务质量优先级标识对应的交换机队列。
处理模块33,用于将所述通信数据存入所述交换机队列,以供队列调度算法基于所述交换机队列对应的服务质量优先级对所述交换机队列中的通信数据进行调度。
可选地,所述装置还包括:设置模块34。
此时,所述接收模块31还用于:接收网络控制平台发送的设置通知,所述设置通知中包括N个服务质量优先级以及所述N个服务质量优先级各自对应的传输协议和资源配置参数,N>1。
所述设置模块34,用于根据各交换机队列支持的传输协议和所述N个服务质量优先级各自对应的传输协议为所述各交换机队列设置服务质量优先级;根据所述N个服务质量优先级各自对应的资源配置参数为所述各交换机队列分配资源。
图13所示装置可以执行图6和图9所示实施例的方法,本实施例未详细描述的部分,可参考对图6和图9所示实施例的相关说明。该技术方案的执行过程和技术效果参见图6和图9所示实施例中的描述,在此不再赘述。
以上描述了通信数据处理装置的内部功能和结构,在一个可能的设计中,图13所示通信数据处理装置的结构可实现为交换机,如图14所示,该交换机可以包括:处理器41和存储器42。其中,所述存储器42用于存储支持交换机执行上述图6和图9所示实施例中提供的通信数据处理方法的程序,所述处理器41被配置为用于执行所述存储器42中存储的程序。
所述程序包括一条或多条计算机指令,其中,所述一条或多条计算机指令被所述处理器41执行时能够实现如下步骤:
接收业务服务器发送的通信数据,所述通信数据中包括服务质量优先级标识;
根据预先为各交换机队列设置的服务质量优先级,确定与所述服务质量优先级标识对应的交换机队列;
将所述通信数据存入所述交换机队列,以供队列调度算法基于所述交换机队列对应的服务质量优先级对所述交换机队列中的通信数据进行调度。
可选地,所述处理器41还用于执行前述图6和图9所示实施例中的全部或部分步骤。
其中,所述交换机的结构中还可以包括通信接口43,用于交换机与其他设备或通信网络通信。
另外,本发明实施例提供了一种计算机存储介质,用于储存图14所示交换机所用的计算机软件指令,其包含用于执行上述图6和图9所示方法实施例中通信数据处理方法所涉及的程序。
图15为本发明实施例提供的又一种通信数据处理装置的结构示意图,该通信数据处理装置位于网络控制平台中,如图15所示,该装置包括:接收模块51、第一确定模块52、第二确定模块53、发送模块54。
接收模块51,用于接收各业务服务器发送的服务质量需求。
第一确定模块52,用于根据接收到的服务质量需求确定N个服务质量优先级以及所述N个服务质量优先级各自对应的传输协议和资源配置参数。
第二确定模块53,用于对于所述各业务服务器中的任一业务服务器,根据所述任一业务服务器的服务质量需求从所述N个服务质量优先级中确定所述任一业务服务器对应的M个服务质量优先级,其中N≥M≥1。
发送模块54,用于将所述N个服务质量优先级以及所述N个服务质量优先级各自对应的传输协议和资源配置参数发送至交换机;以及将所述M个服务质量优先级以及所述M个服务质量优先级各自对应的传输协议和资源配置参数发送至所述任一业务服务器。
图15所示装置可以执行图5所示实施例的方法,本实施例未详细描述的部分,可参考对图5所示实施例的相关说明。该技术方案的执行过程和技术效果参见图5所示实施例中的描述,在此不再赘述。
以上描述了通信数据处理装置的内部功能和结构,在一个可能的设计中,图15所示通信数据处理装置的结构可实现为某电子设备,如图16所示,该电子设备可以包括:处理器61和存储器62。其中,所述存储器62用于存储支持电子设备执行上述图5所示实施例中提供的通信数据处理方法的程序,所述处理器61被配置为用于执行所述存储器62中存储的程序。
所述程序包括一条或多条计算机指令,其中,所述一条或多条计算机指令被所述处理器31执行时能够实现如下步骤:
接收各业务服务器发送的服务质量需求;
根据接收到的服务质量需求确定N个服务质量优先级以及所述N个服务质量优先级各自对应的传输协议和资源配置参数;
对于所述各业务服务器中的任一业务服务器,根据所述任一业务服务器的服务质量需求从所述N个服务质量优先级中确定所述任一业务服务器对应的M个服务质量优先级,其中N≥M≥1;
将所述N个服务质量优先级以及所述N个服务质量优先级各自对应的传输协议和资源配置参数发送至交换机;以及将所述M个服务质量优先级以及所述M个服务质量优先级各自对应的传输协议和资源配置参数发送至所述任一业务服务器。
可选地,所述处理器61还用于执行前述图5所示实施例中的全部或部分步骤。
其中,所述电子设备的结构中还可以包括通信接口63,用于电子设备与其他设备或通信网络通信。
另外,本发明实施例提供了一种计算机存储介质,用于储存图15所示电子设备所用的计算机软件指令,其包含用于执行上述图5所示方法实施例中通信数据处理方法所涉及的程序。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助加必需的通用硬件平台的方式来实现,当然也可以通过硬件和软件结合的方式来实现。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以计算机产品的形式体现出来,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中,计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括暂存电脑可读媒体(trans itory media),如调制的数据信号和载波。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (14)

1.一种通信数据处理方法,其特征在于,应用于业务服务器,包括:
接收业务产生的通信数据,所述通信数据中包括业务优先级;
根据业务优先级与服务质量优先级的预设映射关系,确定与所述通信数据对应的服务质量优先级;
将所述通信数据存入与所述服务质量优先级对应的网卡队列中,以供队列调度算法基于所述网卡队列对应的服务质量优先级对所述网卡队列中的通信数据进行调度。
2.根据权利要求1所述的方法,其特征在于,所述根据业务优先级与服务质量优先级的预设映射关系,确定与所述通信数据对应的服务质量优先级之前,还包括:
确定与所述业务优先级对应的传输协议;
若所述传输协议为TCP或UDP,则采用所述传输协议对所述通信数据进行封装;
所述将所述通信数据存入所述网卡队列中,包括:
将封装后的通信数据存入所述网卡队列中,所述网卡队列为支持所述TCP或UDP的队列。
3.根据权利要求2所述的方法,其特征在于,所述将所述通信数据存入所述网卡队列中,包括:
若所述传输协议为RDMA,则将所述通信数据存入所述网卡队列中,所述网卡队列为支持所述RDMA的队列。
4.根据权利要求1至3中任一项所述的方法,其特征在于,所述将所述通信数据存入与所述服务质量优先级对应的网卡队列中之后,还包括:
将预先为所述网卡队列设置的表示所述服务质量优先级的标识填充至所述通信数据中;
在调度到所述网卡队列中的所述通信数据时,将填充后的通信数据发送至交换机。
5.根据权利要求1至3中任一项所述的方法,其特征在于,所述方法还包括:
向网络控制平台发送服务质量需求,以使所述网络控制平台根据所述服务质量需求确定N个服务质量优先级以及所述N个服务质量优先级各自对应的传输协议和资源配置参数;
接收所述网络控制平台发送的设置通知,所述设置通知中包括与所述服务质量需求对应的M个服务质量优先级以及所述M个服务质量优先级各自对应的传输协议和资源配置参数,其中N≥M≥1;
根据各网卡队列支持的传输协议和所述M个服务质量优先级各自对应的传输协议为所述各网卡队列设置服务质量优先级;
根据所述M个服务质量优先级各自对应的资源配置参数为所述各网卡队列分配资源。
6.一种通信数据处理装置,其特征在于,应用于业务服务器,包括:
接收模块,用于接收业务产生的通信数据,所述通信数据中包括业务优先级;
确定模块,用于根据业务优先级与服务质量优先级的预设映射关系,确定与所述通信数据对应的服务质量优先级;
处理模块,用于将所述通信数据存入与所述服务质量优先级对应的网卡队列中,以供队列调度算法基于所述网卡队列对应的服务质量优先级对所述网卡队列中的通信数据进行调度。
7.一种服务器,其特征在于,包括存储器和处理器;其中,
所述存储器用于存储一条或多条计算机指令,其中,所述一条或多条计算机指令被所述处理器执行时实现如权利要求1至5中任一项所述的通信数据处理方法。
8.一种通信数据处理方法,其特征在于,应用于交换机,包括:
接收业务服务器发送的通信数据,所述通信数据中包括服务质量优先级标识;
根据预先为各交换机队列设置的服务质量优先级,确定与所述服务质量优先级标识对应的交换机队列;
将所述通信数据存入所述交换机队列,以供队列调度算法基于所述交换机队列对应的服务质量优先级对所述交换机队列中的通信数据进行调度。
9.根据权利要求8所述的方法,其特征在于,所述方法还包括:
接收网络控制平台发送的设置通知,所述设置通知中包括N个服务质量优先级以及所述N个服务质量优先级各自对应的传输协议和资源配置参数,N>1;
根据各交换机队列支持的传输协议和所述N个服务质量优先级各自对应的传输协议为所述各交换机队列设置服务质量优先级;
根据所述N个服务质量优先级各自对应的资源配置参数为所述各交换机队列分配资源。
10.一种通信数据处理装置,其特征在于,应用于交换机,包括:
接收模块,用于接收业务服务器发送的通信数据,所述通信数据中包括服务质量优先级标识;
确定模块,用于根据预先为各交换机队列设置的服务质量优先级,确定与所述服务质量优先级标识对应的交换机队列;
处理模块,用于将所述通信数据存入所述交换机队列,以供队列调度算法基于所述交换机队列对应的服务质量优先级对所述交换机队列中的通信数据进行调度。
11.一种交换机,其特征在于,包括存储器和处理器;其中,
所述存储器用于存储一条或多条计算机指令,其中,所述一条或多条计算机指令被所述处理器执行时实现如权利要求8或9所述的通信数据处理方法。
12.一种通信数据处理方法,其特征在于,应用于网络控制平台,包括:
接收各业务服务器发送的服务质量需求;
根据接收到的服务质量需求确定N个服务质量优先级以及所述N个服务质量优先级各自对应的传输协议和资源配置参数;
对于所述各业务服务器中的任一业务服务器,根据所述任一业务服务器的服务质量需求从所述N个服务质量优先级中确定所述任一业务服务器对应的M个服务质量优先级,其中N≥M≥1;
将所述N个服务质量优先级以及所述N个服务质量优先级各自对应的传输协议和资源配置参数发送至交换机;以及将所述M个服务质量优先级以及所述M个服务质量优先级各自对应的传输协议和资源配置参数发送至所述任一业务服务器。
13.一种通信数据处理装置,其特征在于,应用于网络控制平台,包括:
接收模块,用于接收各业务服务器发送的服务质量需求;
第一确定模块,用于根据接收到的服务质量需求确定N个服务质量优先级以及所述N个服务质量优先级各自对应的传输协议和资源配置参数;
第二确定模块,用于对于所述各业务服务器中的任一业务服务器,根据所述任一业务服务器的服务质量需求从所述N个服务质量优先级中确定所述任一业务服务器对应的M个服务质量优先级,其中N≥M≥1;
发送模块,用于将所述N个服务质量优先级以及所述N个服务质量优先级各自对应的传输协议和资源配置参数发送至交换机;以及将所述M个服务质量优先级以及所述M个服务质量优先级各自对应的传输协议和资源配置参数发送至所述任一业务服务器。
14.一种电子设备,其特征在于,包括存储器和处理器;其中,
所述存储器用于存储一条或多条计算机指令,其中,所述一条或多条计算机指令被所述处理器执行时实现如权利要求12所述的通信数据处理方法。
CN201810020089.6A 2018-01-09 2018-01-09 通信数据处理方法、装置和设备 Active CN110022269B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810020089.6A CN110022269B (zh) 2018-01-09 2018-01-09 通信数据处理方法、装置和设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810020089.6A CN110022269B (zh) 2018-01-09 2018-01-09 通信数据处理方法、装置和设备

Publications (2)

Publication Number Publication Date
CN110022269A true CN110022269A (zh) 2019-07-16
CN110022269B CN110022269B (zh) 2022-12-16

Family

ID=67187824

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810020089.6A Active CN110022269B (zh) 2018-01-09 2018-01-09 通信数据处理方法、装置和设备

Country Status (1)

Country Link
CN (1) CN110022269B (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111580993A (zh) * 2020-05-11 2020-08-25 广州虎牙信息科技有限公司 数据处理方法和装置、电子设备及存储介质
CN113300978A (zh) * 2021-02-05 2021-08-24 阿里巴巴集团控股有限公司 数据传输方法以及装置
CN113676416A (zh) * 2021-10-22 2021-11-19 浙江锐文科技有限公司 一种在高速网卡/dpu内提升网络服务质量的方法
WO2022007470A1 (zh) * 2020-07-06 2022-01-13 华为技术有限公司 一种数据传输的方法、芯片和设备
CN114124830A (zh) * 2021-11-19 2022-03-01 南京大学 一种面向数据中心多应用场景的rdma服务质量保证方法及系统
CN114531399A (zh) * 2020-11-05 2022-05-24 中移(苏州)软件技术有限公司 一种内存阻塞平衡方法、装置、电子设备和存储介质
WO2022146466A1 (en) * 2020-12-30 2022-07-07 Oracle International Corporation Class-based queueing for scalable multi-tenant rdma traffic
CN115865831A (zh) * 2023-02-25 2023-03-28 广州翼辉信息技术有限公司 一种基于多队列加速网络性能的方法
CN116436869A (zh) * 2023-04-25 2023-07-14 清华大学 通用的rdma流级优先级调度方法、装置、设备及介质

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11991246B2 (en) 2020-12-30 2024-05-21 Oracle International Corporation Cloud scale multi-tenancy for RDMA over converged ethernet (RoCE)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1999011003A1 (en) * 1997-08-29 1999-03-04 Extreme Networks Policy based quality of service
CN103780505A (zh) * 2014-01-27 2014-05-07 中国联合网络通信集团有限公司 业务处理方法和装置
CN103795645A (zh) * 2012-10-29 2014-05-14 华为终端有限公司 一种数据传输方法、装置及无线路由器终端
CN103988543A (zh) * 2013-12-11 2014-08-13 华为技术有限公司 无线局域网中的控制设备、网络系统及业务处理方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1999011003A1 (en) * 1997-08-29 1999-03-04 Extreme Networks Policy based quality of service
CN103795645A (zh) * 2012-10-29 2014-05-14 华为终端有限公司 一种数据传输方法、装置及无线路由器终端
CN103988543A (zh) * 2013-12-11 2014-08-13 华为技术有限公司 无线局域网中的控制设备、网络系统及业务处理方法
CN103780505A (zh) * 2014-01-27 2014-05-07 中国联合网络通信集团有限公司 业务处理方法和装置

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111580993B (zh) * 2020-05-11 2024-05-17 广州虎牙信息科技有限公司 数据处理方法和装置、电子设备及存储介质
CN111580993A (zh) * 2020-05-11 2020-08-25 广州虎牙信息科技有限公司 数据处理方法和装置、电子设备及存储介质
WO2022007470A1 (zh) * 2020-07-06 2022-01-13 华为技术有限公司 一种数据传输的方法、芯片和设备
EP4160425A4 (en) * 2020-07-06 2023-11-01 Huawei Technologies Co., Ltd. DATA TRANSMISSION METHOD, CHIP AND DEVICE
CN114531399B (zh) * 2020-11-05 2023-09-19 中移(苏州)软件技术有限公司 一种内存阻塞平衡方法、装置、电子设备和存储介质
CN114531399A (zh) * 2020-11-05 2022-05-24 中移(苏州)软件技术有限公司 一种内存阻塞平衡方法、装置、电子设备和存储介质
WO2022146466A1 (en) * 2020-12-30 2022-07-07 Oracle International Corporation Class-based queueing for scalable multi-tenant rdma traffic
CN113300978A (zh) * 2021-02-05 2021-08-24 阿里巴巴集团控股有限公司 数据传输方法以及装置
CN113676416B (zh) * 2021-10-22 2021-12-28 浙江锐文科技有限公司 一种在高速网卡/dpu内提升网络服务质量的方法
CN113676416A (zh) * 2021-10-22 2021-11-19 浙江锐文科技有限公司 一种在高速网卡/dpu内提升网络服务质量的方法
CN114124830A (zh) * 2021-11-19 2022-03-01 南京大学 一种面向数据中心多应用场景的rdma服务质量保证方法及系统
CN114124830B (zh) * 2021-11-19 2024-04-30 南京大学 一种面向数据中心多应用场景的rdma服务质量保证方法及系统
CN115865831A (zh) * 2023-02-25 2023-03-28 广州翼辉信息技术有限公司 一种基于多队列加速网络性能的方法
CN116436869A (zh) * 2023-04-25 2023-07-14 清华大学 通用的rdma流级优先级调度方法、装置、设备及介质

Also Published As

Publication number Publication date
CN110022269B (zh) 2022-12-16

Similar Documents

Publication Publication Date Title
CN110022269A (zh) 通信数据处理方法、装置和设备
US11775354B2 (en) Reducing overlay network overhead across container hosts
CN106027643B (zh) 一种基于Kubernetes容器集群管理系统的资源调度方法
US9092269B2 (en) Offloading virtual machine flows to physical queues
CN104539440B (zh) 具有入口控制的业务量管理
US20230142539A1 (en) Methods and apparatus to schedule service requests in a network computing system using hardware queue managers
Wojciechowski et al. Netmarks: Network metrics-aware kubernetes scheduler powered by service mesh
CN107113290A (zh) 向数据中心应用提供服务质量
CN106506670B (zh) 一种云平台虚拟资源高速调度方法与系统
WO2019091387A1 (en) Method and system for provisioning resources in cloud computing
CN107710237A (zh) 服务器上深度神经网络划分
US20200394048A1 (en) High performance networking across docker containers
CN110022267A (zh) 网络数据包处理方法及装置
CN107533481A (zh) 在具有硬件加速平面和软件平面的系统中提供服务
Antequera et al. ADON: Application-driven overlay network-as-a-service for data-intensive science
CN109905486A (zh) 一种应用程序识别展示方法和装置
EP3816801A1 (en) Method and apparatus for orchestrating resources in multi-access edge computing (mec) network
Kumari et al. Study of Traffic Based Load Balancing Algorithm in the SDN
WO2023098557A1 (en) Network interface controller aware placement of virtualized workloads
Powell et al. The fog development kit: A development platform for SDN-based edge-fog systems
Repplinger et al. Stream processing on GPUs using distributed multimedia middleware
Kundel Accelerating Network Functions using Reconfigurable Hardware. Design and Validation of High Throughput and Low Latency Network Functions at the Access Edge
Shen et al. Rendering differential performance preference through intelligent network edge in cloud data centers
Ganghishetti et al. Quality of service design in clouds
Katebzadeh Application-centric bandwidth allocation in datacenters

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant