CN110391993A - 一种数据处理方法及系统 - Google Patents
一种数据处理方法及系统 Download PDFInfo
- Publication number
- CN110391993A CN110391993A CN201910631138.4A CN201910631138A CN110391993A CN 110391993 A CN110391993 A CN 110391993A CN 201910631138 A CN201910631138 A CN 201910631138A CN 110391993 A CN110391993 A CN 110391993A
- Authority
- CN
- China
- Prior art keywords
- network interface
- interface card
- message
- hardware
- virtual machine
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
- G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
- G06F9/505—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering the load
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/10—Flow control; Congestion control
- H04L47/12—Avoiding congestion; Recovering from congestion
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明公开了一种数据处理方法及系统，OVS网桥在预先启动的硬件卸载模式下基于与虚拟机预先建立的连接关系，将接收到的报文卸载至网卡，使网卡对报文进行处理，网卡上加载有报文处理的硬件规则。通过上述方法，对OVS网桥转发进行卸载，将连接在OVS网桥上的虚拟机的报文，通过网卡直接进行转发，本发明可以根据报文处理的软件规则，生成报文处理的硬件规则，在网卡上实现转发，使网卡对报文进行处理，从而减少OVS网桥转发占用中央处理器CPU的资源，降低中央处理器CPU的负载，并且提升网络转发性能。
Description
技术领域
本发明涉及云计算技术领域，更具体地说，涉及一种数据处理方法及系统。
背景技术
云计算(Clound Computing)是一种基于互联网的计算方式，通过这种方式将共享的软硬件资源和信息提供给计算机和其他设备。云计算中心的工作负载给中央处理器(Central ProcessingUnit，CPU)带来了多余的网络开销，CPU在对网络流量进行分类、跟踪和控制方面中会花费大量的CPU资源。
现有技术中，OVS网桥通常部署在软件定义网络SDN、网络功能虚拟化NFV等云计算环境中，在该云计算环境中对动态拓展性以及数据通信性能有着较高的要求。
尽管OVS网桥被广泛应用部署，但是OVS网桥中进行数据输入、输出的性能差，且OVS网桥在转发数据时占用CPU资源多，从而导致CPU负载较高。
发明内容
有鉴于此，本发明提供了一种数据处理方法及系统，实现减少OVS网桥转发占用中央处理器CPU的资源，降低中央处理器CPU的负载，并且提升网络转发性能的目的。
为了实现上述目的，现提出的方案如下：
本发明第一方面公开了一种数据处理方法，包括：
OVS网桥在预先启动的硬件卸载模式下基于与虚拟机预先建立的连接关系，将接收到的报文卸载至网卡，使所述网卡对所述报文进行处理，所述网卡上加载有报文处理的硬件规则，其中，所述硬件卸载模式包括所述网卡开启硬件卸载模式和所述OVS网桥开启硬件卸载模式；
所述OVS网桥与所述虚拟机预先建立连接的过程包括：
所述OVS网桥通过Rep设备与所述虚拟机连接；
所述OVS网桥基于报文处理的软件规则，生成所述报文处理的硬件规则。
优选的，所述网卡和所述OVS网桥启动硬件卸载模式的过程，包括：
所述网卡执行开启eSwitch模式操作，并生成所述eSwitch模式对应的所述网卡的eSwitch配置信息；
所述网卡执行开启eSwitch inline mode模式操作，并生成所述eSwitch inlinemode模式对应的所述网卡的eSwitch inline mode配置信息；
在所述硬件卸载模式下的所述OVS网桥基于所述报文处理的软件规则，生成所述报文处理的硬件规则，并由所述网卡加载所述报文处理的硬件规则，后续报文通过所述报文处理的硬件规则处理。
优选的，所述OVS网桥通过Rep设备与所述虚拟机连接，包括：
所述OVS网桥通过虚拟网卡功能SR-IOV对应的所述Rep设备与所述虚拟机连接。
优选的，还包括：
所述OVS网桥连接至所述网卡，并从所述网卡上执行发送报文操作和接收报文操作。
本发明第二方面公开的一种数据处理系统，包括：
OVS网桥、虚拟机、网卡和Rep设备；
所述OVS网桥，用于在预先启动的硬件卸载模式下基于与虚拟机预先建立的连接关系，将接收到的报文卸载至所述网卡；通过所述Rep设备与所述虚拟机进行连接；基于报文处理的软件规则，生成报文处理的硬件规则；
所述虚拟机，用于基于所述Rep设备与所述OVS网桥进行连接；
所述网卡，用于加载所述报文处理的硬件规则；对所述报文进行处理；
所述Rep设备，用于将所述OVS网桥与所述虚拟机进行连接。
优选的，启动硬件卸载模式的所述OVS网桥，具体用于：
当所述报文允许被卸载时，生成所述报文处理的硬件规则，并下发至所述网卡，由所述网卡根据所述报文处理的硬件规则进行转发。
优选的，通过Rep设备与所述虚拟机连接的所述OVS网桥，具体用于：
通过虚拟网卡功能SR-IOV对应的所述Rep设备与所述虚拟机连接。
优选的，还包括：
所述OVS网桥，用于连接至所述网卡，并从所述网卡上执行发送报文操作和接收报文操作。
经由上述技术方案可知，OVS网桥在预先启动的硬件卸载模式下基于与虚拟机预先建立的连接关系，将接收到的报文卸载至网卡，使网卡对报文进行处理，网卡上加载有报文处理的硬件规则。通过上述方法，对OVS网桥转发进行卸载，将连接在OVS网桥上的虚拟机的报文，通过网卡直接进行转发，本发明可以根据软件转发规则，生成硬件规则，在网卡上实现转发，使网卡对报文进行处理，从而减少OVS网桥转发占用中央处理器CPU的资源，降低中央处理器CPU的负载，并且提升网络转发性能。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为本发明实施例公开的一种数据处理方法的流程示意图；
图2为本发明实施例公开的网卡和OVS网桥启动硬件卸载模式过程的流程示意图；
图3为本发明实施例公开的一种数据处理系统的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
在本申请中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
由背景技术可知，现有技术中，OVS网桥通常部署在软件定义网络SDN、网络功能虚拟化NFV等云计算环境中，在该云计算环境中对动态拓展性以及数据通信性能有着较高的要求。
尽管OVS网桥被广泛应用部署，但是OVS网桥中进行数据输入、输出的性能差，且OVS网桥在转发数据时占用CPU资源多，从而导致CPU负载较高。
因此，本发明提供了一种数据处理方法及系统，以减少OVS网桥转发占用中央处理器CPU的资源，实现降低中央处理器CPU的负载，并且提升网络转发性能的目的。
为实现上述目的，需要先将OVS网桥上的报文处理的硬件规则下放至网卡，如图1所示，为本发明实施例公开的一种数据处理方法，具体包括如下步骤：
步骤S101：OVS网桥在预先启动的硬件卸载模式下基于与虚拟机预先建立的连接关系，将接收到的报文卸载至网卡。
在执行步骤S101的过程中，在硬件卸载模式下，OVS网桥基于与虚拟机预先建立的连接关系，将接收到的报文转发至该网卡的转发平面eSwitch中。
需要说明的是，本发明采用加速方案实现，虚拟机通过虚拟网卡功能SR-IOV的VF(virtual function)与网卡建立连接，以达到虚拟化环境中最高的网络I/O性能，同时保持控制器SDN控制平面的完整性。
虚拟交换机(OpenvSwitch，OVS)运行在中央处理器CPU中。
卸载报文采用的卸载框架为OVS-TC，OVS-TC是OVS用户空间代码的扩展，使其能够使用TC Flower和TC操作来卸载数据流。OVS-TC允许在各种预先配置的流键上进行匹配，用户可以匹配IP地址、UDP/TCP端口、元数据等。
将接收到的报文卸载至网卡就是将接收到的报文转发至网卡。
在本发明的一种应用场景中，在将接收到的报文卸载至网卡之前，在网卡固件和网卡驱动中开启虚拟网卡功能SR-IOV。
所述OVS网桥与所述虚拟机预先建立连接的过程包括：
所述OVS网桥通过Rep设备与所述虚拟机连接；
所述OVS网桥基于报文处理的软件规则，生成所述报文处理的硬件规则。
需要说明的是，Rep设备与PF设备共享PCIPF设备实例，若将该Rep设备挂接到虚拟机内核的交换组件中，来自VF的报文可接受规则的匹配和操作。
Rep设备用于将报文从中央处理器CPU转发至VF，接收转发平面eSwitch上未转发的报文进行转发，配置流表及流表统计等。
通过在用户空间中运行ovs-vswitchd，从相应的控制器SDN传送转发表和策略信息。
在网卡的转发平面eSwitch中进行转发表条目的配置。
转发表类似交换机的地址信息表，当数据包到达交换机的时候，数据包要根据“指示”前往特定的端口，交换机上存放这个“指示”的地方叫做转发表。
在本发明的另一种应用场景中，转发平面eSwitch端口的一种netdev模型Rep(VFRepresentor netdevice)设备，在驱动实现mlx5中eSwitch的管理由PF的eSwitchvport完成。
步骤S102：所述网卡基于预先加载的报文处理的硬件规则对所述报文进行处理。
在执行步骤S102的过程中，网卡基于报文处理的硬件规则对报文进行发送操作和接收操作。
本发明实施例公开了一种数据处理方法，OVS网桥在预先启动的硬件卸载模式下基于与虚拟机预先建立的连接关系，将接收到的报文卸载至网卡，使网卡对报文进行处理，网卡上加载有报文处理的硬件规则。通过上述方法，对OVS网桥转发进行卸载，将连接在OVS网桥上的虚拟机的报文，通过网卡直接进行转发，本发明可以根据报文处理的软件规则，生成报文处理的硬件规则，在网卡上实现转发，使网卡对报文进行处理，从而减少OVS网桥转发占用中央处理器CPU的资源，降低中央处理器CPU的负载，并且提升网络转发性能。
基于上述涉及到网卡和OVS网桥启动硬件卸载模式的过程，参考图2，示出了网卡和OVS网桥启动硬件卸载模式过程的流程示意图，具体包括如下步骤：
步骤S201：所述网卡执行开启eSwitch模式操作，并生成所述eSwitch模式对应的所述网卡的eSwitch配置信息。
需要说明的是，网卡的eSwitch配置信息是OVS网桥启动硬件卸载模式的前提条件之一。
步骤S202：所述网卡执行开启eSwitch inline mode模式操作，并生成所述eSwitch inline mode模式对应的所述网卡的eSwitch inline mode配置信息。
需要说明的是，网卡的eSwitch inline mode配置信息是OVS网桥启动硬件卸载模式的前提条件之一。
步骤S203：在所述硬件卸载模式下的所述OVS网桥基于所述报文处理的软件规则，生成报文处理的硬件规则，并由所述网卡加载报文处理的硬件规则，后续报文通过所述报文处理的硬件规则处理。
在执行步骤S203的过程中，网卡基于报文处理的硬件规则对报文执行发送报文操作和接收报文操作。
上述涉及到配置网卡和OVS网桥启动硬件卸载模式的过程，配置OVS网桥的过程如下：
Step-1，配置Unbind VF。
Step-2，配置eSwitch模式。
Step-3，配置eSwitch inline mode模式。
Step-4，配置OpenvSwitch开启硬件负载。
Step-5，重启OpenvSwitch。
Step-6，启用PF网卡和Rep设备。
通过执行上述Step-1至Step-6，完成网关和OVS网桥的配置操作。
需要说明的是，在配置完成后，OVS将被允许使用TC Flower，但是，这并不意味着报文就会被转发，此时non-HW-offloaded类型的TC规则也会存在，如果只允许Hw-offloaded类型的TC规则使用TC框架，其他的报文使用dpif数据转发路径，还需指定tc-policy，修改流表老化时间为30秒。
通过上述步骤S201-步骤S203所述网卡执行开启eSwitch模式操作，并生成所述eSwitch模式对应的所述网卡的eSwitch配置信息，所述网卡执行开启eSwitch inlinemode模式操作，并生成所述eSwitch inline mode模式对应的所述网卡的eSwitch inlinemode配置信息，在所述硬件卸载模式下的所述OVS网桥基于所述报文处理的软件规则，生成报文处理的硬件规则，并由所述网卡加载报文处理的硬件规则，后续报文通过所述报文处理的硬件规则处理。
本发明实施例中，通过配置网卡及OVS网桥，使得配置后的OVS网桥基于所述报文处理的软件规则，生成报文处理的硬件规则，并由所述网卡加载报文处理的硬件规则，在网卡上实现转发，使网卡对报文进行处理，从而减少OVS网桥转发占用中央处理器CPU的资源，降低中央处理器CPU的负载，并且提升网络转发性能。
在本发明的一种应用场景中，OVS网桥通过虚拟网卡功能SR-IOV对应的所述Rep设备与所述虚拟机连接。
需要说明的是，Rep设备的作用于半虚拟化环境中的网络设备一样，虚拟机可以通过Rep设备连接至网桥OpenvSwitch，作用于Rep设备上的OpenFlows规则可以被转发至转发平面eSwitch，转发的规则作用于VF设备。
本发明实施例中，通过OVS网桥通过虚拟网卡功能SR-IOV对应的Rep设备与虚拟机连接，使得OVS网桥与虚拟机预先建立的连接关系，将接收到的报文卸载至网卡并从网卡上执行发送报文操作和接收报文操作，从而减少OVS网桥转发占用中央处理器CPU的资源，降低中央处理器CPU的负载，并且提升网络转发性能。
在本发明的另一种应该场景中，所述OVS网桥连接至所述网卡，并从所述网卡上执行发送报文操作和接收报文操作。
需要说明的是，OVS网桥连接至网卡后，该OVS网桥将接收到的报文卸载至该网卡，并从该网卡上执行发送报文操作和接收报文操作。
本发明实施例中，OVS网桥在硬件卸载模式下通过连接至网卡，OVS网桥将接收到的报文卸载至网卡，并从网卡上执行发送报文操作和接收报文操作，从而减少OVS网桥转发占用中央处理器CPU的资源，降低中央处理器CPU的负载，并且提升网络转发性能。
进行网络加速性能验证测试场景中，虚拟机连接vlan网络和vxlan网络时，分别使用virtio网卡和本文提供的加速方案，虚拟机使用本文提供的加速方案时，虚拟机配置文件中的虚拟网卡配置使用SR-IOV的连接方式。
基于上述本发明实施例提供的虚拟机向网卡转移报文处理规则的方法，在该网卡可直接进行报文的收发和处理，相较于其他方式，采用本发明的方式可以减少虚拟机占用中央处理器CPU的资源，实现降低中央处理器CPU的负载，提升网络转发性能的目的。
例如，基于上述网卡对TCP报文传输带宽、UDP报文长度1024字节时的传输带宽和吞吐及文件传输带宽分别进行处理时可实现上述目的。具体对比如下：
在本发明的一种实施例场景中，使用iperf工具进行TCP报文传输性能测试，主机A上的虚拟机作为iperf server，主机B上的虚拟机作为iperf client，虚拟机分别选择virtio网卡以及连接使用本文提供的加速方案进行测试。TCP窗口设置为4000，传输时间为15分钟，传输测试5次，对提取的传输带宽取平均值。
TCP报文传输带宽对比，如表1所示。
表1：
| 网络连接方式 | 带宽Gb/s |
| Ovs vlan网络 | 3.358 |
| 本文提供的加速方案vlan网络 | 7.248 |
| Ovs vxlan网络 | 2.848 |
| 本文提供的加速方案vxlan网络 | 6.668 |
需要说明的是，根据表1对比结果显示，在vlan网络连接下，虚拟机使用本文提供的加速方案相比使用原生ovs网络，传输带宽性能提升115.8％；在vxlan网络连接下，虚拟机使用本文提供的加速方案相比使用原生ovs网络，传输带宽提升134.1％。
在本发明的另一种实施例场景中，使用iperf工具进行UDP报文传输性能测试，主机A上的虚拟机作为iperf server，主机B上的虚拟机作为iperf client，虚拟机分别选择virtio网卡以及连接使用本文提供的加速方案进行测试。带宽选择25000Mb/s，测试的UDP包长为1024byte；每种包长设置传输时间为15分钟；每种包长传输测试5次，对提取的传输带宽和网络吞吐率取平均值。
UDP报文长度1024字节时的传输带宽和吞吐对比，如表2所示。
表2：
| 网络连接方式 | 带宽Mb/s | 吞吐pps |
| Ovs vlan网络 | 981.568 | 299148.402 |
| 本文提供的加速方案vlan网络 | 2226.176 | 387392.868 |
| Ovs vxlan网络 | 1554.432 | 196031.068 |
| 本文提供的加速方案vxlan网络 | 3198.976 | 387220.1 |
需要说明的是，根据表2对比结果显示，UDP报文长度1024字节时，在vlan网络连接下，虚拟机使用本文提供的加速方案相比使用原生ovs网络，传输带宽性能提升126.8％，吞吐40.18％；在vxlan网络连接下，虚拟机使用本文提供的加速方案相比使用原生ovs网络，传输带宽提升105.8％，吞吐提升116.93％。
在本发明的另一种实施例场景中，使用nginx和wget命令进行文件传输性能测试，主机A上的1台虚拟机作为nginx服务器，主机B上的1台虚拟机作为文件传输的客户端，虚拟机分别选择virtio网卡以及连接使用本文提供的加速方案进行测试。文件放置在nginx服务器的共享内存/dev/shm中，总计20个大小为100Mb的文件，在文件传输的客户端虚拟机中，使用wget命令进行文件传输，wget命令同样在共享内存/dev/shm中执行，以消除文件系统性能的影响，同时启用20个wget客户端分别进行文件传输下载，下载成功后，立即删除文件，进行下一次文件传输，传输时间为5分钟，传输测试5次，提取传输带宽取平均值。
文件传输带宽对比，如表3所示。
表3：
| 网络连接方式 | 带宽Gb/s |
| Ovs vlan网络 | 12.24 |
| 本文提供的加速方案vlan网络 | 16.50 |
| Ovs vxlan网络 | 11.17 |
| 本文提供的加速方案vxlan网络 | 16.99 |
需要说明的是，通过表3对比结果显示，在vlan网络连接下，虚拟机使用本文提供的加速方案相比使用原生ovs网络，文件传输带宽性能提升34.8％；在vxlan网络连接下，虚拟机使用本文提供的加速方案相比使用原生ovs网络，文件传输带宽提升52.1％。
基于上述数据处理方法的过程，这里举例进行说明：
场景实施例：云计算基础平台，使用的内核版本为3.10.0-862.el7.x86_64，iproute的版本为iproute2-4.19.0，openvswitch版本为openvswitch-2.8.90，MellanoxOFED驱动版本为MLNX_OFED_LINUX-4.5-1.0.1.0-rhel7.5-x86_64，主机A和主机B上的网卡通过光纤线直连。在网卡固件和网卡驱动中开启虚拟网卡功能SR-IOV，配置UnbindVF，配置eSwitch模式，配置eSwitch inline mode模式，配置OpenvSwitch开启硬件负载，重启虚拟机OpenvSwitch，启用PF网卡和Rep设备。
本发明实施例公开了一种数据处理方法，对OVS网桥转发进行卸载，将连接在OVS网桥上的虚拟机的报文，通过网卡直接进行转发，本发明可以根据软件转发规则，生成硬件规则，在网卡上实现转发，使网卡对报文进行处理，从而减少OVS网桥转发占用中央处理器CPU的资源，降低中央处理器CPU的负载，并且提升网络转发性能。
基于上述本发明实施例公开的数据处理方法，本发明实施例还对应公开了一种数据处理系统，参考图3，示出了一种数据处理系统的结构示意图，该数据处理系统300主要包括：
OVS网桥301、虚拟机302、网卡303和Rep设备304。
所述OVS网桥301，用于在预先启动的硬件卸载模式下基于与所述虚拟机302预先建立的连接关系，将接收到的报文卸载至所述网卡303；通过所述Rep设备304与所述虚拟机302进行连接；基于报文处理的软件规则，生成报文处理的硬件规则。
所述虚拟机302，用于基于所述Rep设备304与所述OVS网桥301进行连接。
所述网卡303，用于加载报文处理的硬件规则；对所述报文进行处理。
所述Rep设备304，用于将所述OVS网桥301与所述虚拟机302进行连接。
进一步的，启动硬件卸载模式的所述OVS网桥301，具体用于，当所述报文允许被卸载时，生成报文处理的硬件规则，并下发至所述网卡303，由所述网卡303根据所述报文处理的硬件规则进行转发。
进一步的，通过Rep设备304与所述虚拟机302连接的所述OVS网桥301，具体用于，通过虚拟网卡功能SR-IOV对应的所述Rep设备304与所述虚拟机302连接。
可选的，所述OVS网桥301，用于连接至所述网卡303，并从所述网卡303上执行发送报文操作和接收报文操作。
上述本发明实施例公开的一种数据处理系统中的OVS网桥301、虚拟机302、网卡303和Rep设备304具体的原理和执行过程，与上述本发明实施例公开的一种数据处理方法相同，可参见上述本发明实施例公开的一种数据处理方法中相应的部分，这里不再进行赘述。
本发明公开了一种数据处理系统，OVS网桥在预先启动的硬件卸载模式下基于与虚拟机预先建立的连接关系，将接收到的报文卸载至网卡，使网卡对报文进行处理，网卡上加载有报文处理的硬件规则。通过上述系统，对OVS网桥转发进行卸载，将连接在OVS网桥上的虚拟机的报文，通过网卡直接进行转发，本发明可以根据报文处理的软件规则，生成报文处理的硬件规则，在网卡上实现转发，使网卡对报文进行处理，从而减少OVS网桥转发占用中央处理器CPU的资源，降低中央处理器CPU的负载，并且提升网络转发性能。
本领域技术人员应明白，本申请的实施例可提供为方法、装置或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
以上仅为本申请的实施例而已，并不用于限制本申请。对于本领域技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本申请的权利要求范围之内。
Claims (8)
1.一种数据处理方法，其特征在于，包括：
OVS网桥在预先启动的硬件卸载模式下基于与虚拟机预先建立的连接关系，将接收到的报文卸载至网卡，使所述网卡对所述报文进行处理，所述网卡上加载有报文处理的硬件规则，其中，所述硬件卸载模式包括所述网卡开启硬件卸载模式和所述OVS网桥开启硬件卸载模式；
所述OVS网桥与所述虚拟机预先建立连接的过程包括：
所述OVS网桥通过Rep设备与所述虚拟机连接；
所述OVS网桥基于报文处理的软件规则，生成所述报文处理的硬件规则。
2.根据权利要求1所述的方法，其特征在于，所述网卡和所述OVS网桥启动硬件卸载模式的过程，包括：
所述网卡执行开启eSwitch模式操作，并生成所述eSwitch模式对应的所述网卡的eSwitch配置信息；
所述网卡执行开启eSwitch inline mode模式操作，并生成所述eSwitch inline mode模式对应的所述网卡的eSwitch inline mode配置信息；
在所述硬件卸载模式下的所述OVS网桥基于所述报文处理的软件规则，生成所述报文处理的硬件规则，并由所述网卡加载所述报文处理的硬件规则，后续报文通过所述报文处理的硬件规则处理。
3.根据权利要求1所述的方法，其特征在于，所述OVS网桥通过Rep设备与所述虚拟机连接，包括：
所述OVS网桥通过虚拟网卡功能SR-IOV对应的所述Rep设备与所述虚拟机连接。
4.根据权利要求1所述的方法，其特征在于，还包括：
所述OVS网桥连接至所述网卡，并从所述网卡上执行发送报文操作和接收报文操作。
5.一种数据处理系统，其特征在于，包括：
OVS网桥、虚拟机、网卡和Rep设备；
所述OVS网桥，用于在预先启动的硬件卸载模式下基于与虚拟机预先建立的连接关系，将接收到的报文卸载至所述网卡；通过所述Rep设备与所述虚拟机进行连接；基于报文处理的软件规则，生成报文处理的硬件规则；
所述虚拟机，用于基于所述Rep设备与所述OVS网桥进行连接；
所述网卡，用于加载所述报文处理的硬件规则；对所述报文进行处理；
所述Rep设备，用于将所述OVS网桥与所述虚拟机进行连接。
6.根据权利要求5所述的系统，其特征在于，启动硬件卸载模式的所述OVS网桥，具体用于：
当所述报文允许被卸载时，生成所述报文处理的硬件规则，并下发至所述网卡，由所述网卡根据所述报文处理的硬件规则进行转发。
7.根据权利要求5所述的系统，其特征在于，通过Rep设备与所述虚拟机连接的所述OVS网桥，具体用于：
通过虚拟网卡功能SR-IOV对应的所述Rep设备与所述虚拟机连接。
8.根据权利要求5所述的系统，其特征在于，还包括：
所述OVS网桥，用于连接至所述网卡，并从所述网卡上执行发送报文操作和接收报文操作。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910631138.4A CN110391993B (zh) | 2019-07-12 | 2019-07-12 | 一种数据处理方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910631138.4A CN110391993B (zh) | 2019-07-12 | 2019-07-12 | 一种数据处理方法及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN110391993A true CN110391993A (zh) | 2019-10-29 |
| CN110391993B CN110391993B (zh) | 2022-12-30 |
Family
ID=68286505
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910631138.4A Active CN110391993B (zh) | 2019-07-12 | 2019-07-12 | 一种数据处理方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110391993B (zh) |
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111131037A (zh) * | 2019-12-27 | 2020-05-08 | 网易（杭州）网络有限公司 | 基于虚拟网关的数据传输方法、装置、介质与电子设备 |
| CN111262733A (zh) * | 2020-01-10 | 2020-06-09 | 安超云软件有限公司 | 一种软硬件结合的vpn网关实现系统及方法 |
| CN111262924A (zh) * | 2020-01-14 | 2020-06-09 | 安超云软件有限公司 | 一种软硬件结合的网络负载均衡实现系统及过程方法 |
| CN111555973A (zh) * | 2020-04-28 | 2020-08-18 | 深圳震有科技股份有限公司 | 一种基于5g数据转发平面的数据包转发方法及装置 |
| CN111800342A (zh) * | 2020-07-02 | 2020-10-20 | 中国人民解放军国防科技大学 | 一种基于ovs的nfv报文转发方法 |
| CN111865994A (zh) * | 2020-07-23 | 2020-10-30 | 江苏安超云软件有限公司 | 一种软硬件结合网关防火墙的构建方法及其网络防护方法 |
| CN112073505A (zh) * | 2020-09-04 | 2020-12-11 | 优刻得科技股份有限公司 | 在云服务器上进行卸载的方法、控制装置、存储介质 |
| CN112631726A (zh) * | 2020-12-25 | 2021-04-09 | 苏州浪潮智能科技有限公司 | 一种虚拟机数据处理方法、系统、设备以及介质 |
| WO2021128089A1 (zh) * | 2019-12-25 | 2021-07-01 | 华为技术有限公司 | 转发设备、网卡及报文转发方法 |
| CN113821310A (zh) * | 2021-11-19 | 2021-12-21 | 阿里云计算有限公司 | 数据处理方法、可编程网卡设备、物理服务器及存储介质 |
| CN114443281A (zh) * | 2021-12-28 | 2022-05-06 | 苏州浪潮智能科技有限公司 | 一种网卡负载调整方法、装置、设备及可读存储介质 |
| WO2023050663A1 (zh) * | 2021-09-29 | 2023-04-06 | 苏州浪潮智能科技有限公司 | 一种虚拟网络性能加速方法、装置、设备及存储介质 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20120250686A1 (en) * | 2011-03-30 | 2012-10-04 | Amazon Technologies, Inc. | Offload device-based stateless packet processing |
| CN105207873A (zh) * | 2015-08-31 | 2015-12-30 | 华为技术有限公司 | 一种报文处理方法和装置 |
| CN107770031A (zh) * | 2017-10-26 | 2018-03-06 | 郑州云海信息技术有限公司 | 一种可扩展虚拟局域网vxlan报文处理方法和装置 |
| CN107995129A (zh) * | 2017-11-30 | 2018-05-04 | 锐捷网络股份有限公司 | 一种nfv报文转发方法和装置 |
| CN108494607A (zh) * | 2018-04-19 | 2018-09-04 | 云家园网络技术有限公司 | 基于容器的大二层网络架构的设计方法及系统 |
| CN109962832A (zh) * | 2017-12-26 | 2019-07-02 | 华为技术有限公司 | 报文处理的方法和装置 |
-
2019
- 2019-07-12 CN CN201910631138.4A patent/CN110391993B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20120250686A1 (en) * | 2011-03-30 | 2012-10-04 | Amazon Technologies, Inc. | Offload device-based stateless packet processing |
| CN105207873A (zh) * | 2015-08-31 | 2015-12-30 | 华为技术有限公司 | 一种报文处理方法和装置 |
| CN107770031A (zh) * | 2017-10-26 | 2018-03-06 | 郑州云海信息技术有限公司 | 一种可扩展虚拟局域网vxlan报文处理方法和装置 |
| CN107995129A (zh) * | 2017-11-30 | 2018-05-04 | 锐捷网络股份有限公司 | 一种nfv报文转发方法和装置 |
| CN109962832A (zh) * | 2017-12-26 | 2019-07-02 | 华为技术有限公司 | 报文处理的方法和装置 |
| CN108494607A (zh) * | 2018-04-19 | 2018-09-04 | 云家园网络技术有限公司 | 基于容器的大二层网络架构的设计方法及系统 |
Cited By (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2021128089A1 (zh) * | 2019-12-25 | 2021-07-01 | 华为技术有限公司 | 转发设备、网卡及报文转发方法 |
| CN113383531B (zh) * | 2019-12-25 | 2022-10-11 | 华为技术有限公司 | 转发设备、网卡及报文转发方法 |
| CN113383531A (zh) * | 2019-12-25 | 2021-09-10 | 华为技术有限公司 | 转发设备、网卡及报文转发方法 |
| CN111131037A (zh) * | 2019-12-27 | 2020-05-08 | 网易（杭州）网络有限公司 | 基于虚拟网关的数据传输方法、装置、介质与电子设备 |
| CN111131037B (zh) * | 2019-12-27 | 2022-04-29 | 网易（杭州）网络有限公司 | 基于虚拟网关的数据传输方法、装置、介质与电子设备 |
| CN111262733A (zh) * | 2020-01-10 | 2020-06-09 | 安超云软件有限公司 | 一种软硬件结合的vpn网关实现系统及方法 |
| CN111262924A (zh) * | 2020-01-14 | 2020-06-09 | 安超云软件有限公司 | 一种软硬件结合的网络负载均衡实现系统及过程方法 |
| CN111555973A (zh) * | 2020-04-28 | 2020-08-18 | 深圳震有科技股份有限公司 | 一种基于5g数据转发平面的数据包转发方法及装置 |
| CN111800342A (zh) * | 2020-07-02 | 2020-10-20 | 中国人民解放军国防科技大学 | 一种基于ovs的nfv报文转发方法 |
| CN111865994A (zh) * | 2020-07-23 | 2020-10-30 | 江苏安超云软件有限公司 | 一种软硬件结合网关防火墙的构建方法及其网络防护方法 |
| CN112073505A (zh) * | 2020-09-04 | 2020-12-11 | 优刻得科技股份有限公司 | 在云服务器上进行卸载的方法、控制装置、存储介质 |
| CN112631726A (zh) * | 2020-12-25 | 2021-04-09 | 苏州浪潮智能科技有限公司 | 一种虚拟机数据处理方法、系统、设备以及介质 |
| CN112631726B (zh) * | 2020-12-25 | 2022-05-24 | 苏州浪潮智能科技有限公司 | 一种虚拟机数据处理方法、系统、设备以及介质 |
| WO2023050663A1 (zh) * | 2021-09-29 | 2023-04-06 | 苏州浪潮智能科技有限公司 | 一种虚拟网络性能加速方法、装置、设备及存储介质 |
| CN113821310A (zh) * | 2021-11-19 | 2021-12-21 | 阿里云计算有限公司 | 数据处理方法、可编程网卡设备、物理服务器及存储介质 |
| CN113821310B (zh) * | 2021-11-19 | 2022-05-06 | 阿里云计算有限公司 | 数据处理方法、可编程网卡设备、物理服务器及存储介质 |
| CN114443281A (zh) * | 2021-12-28 | 2022-05-06 | 苏州浪潮智能科技有限公司 | 一种网卡负载调整方法、装置、设备及可读存储介质 |
| CN114443281B (zh) * | 2021-12-28 | 2023-09-15 | 苏州浪潮智能科技有限公司 | 一种网卡负载调整方法、装置、设备及可读存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN110391993B (zh) | 2022-12-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110391993A (zh) | 一种数据处理方法及系统 | |
| US10979293B2 (en) | Service deployment method and network functions acceleration platform | |
| US10812366B1 (en) | System and method for deploying, scaling and managing network endpoint groups in cloud computing environments | |
| US9462084B2 (en) | Parallel processing of service functions in service function chains | |
| EP2907025B1 (en) | Methods for zero loss and nonstop packet processing during system software upgrades | |
| US9910687B2 (en) | Data flow affinity for heterogenous virtual machines | |
| CN109375933B (zh) | 一种客户端升级的方法及设备 | |
| US11936562B2 (en) | Virtual machine packet processing offload | |
| CN112166579B (zh) | 提供虚拟化网络功能的多服务器架构集群 | |
| CN110489126A (zh) | 编译任务的执行方法和装置、存储介质及电子装置 | |
| CN108702316A (zh) | 一种vnf的资源分配方法及装置 | |
| US20180293065A1 (en) | Upgrade of port firmware and driver software for a target device | |
| EP3588856A1 (en) | Technologies for hot-swapping a legacy appliance with a network functions virtualization appliance | |
| CN113472624A (zh) | 一种基于vDPA实现虚拟网络数据包转发的方法及应用 | |
| US10031742B2 (en) | Upgrade of firmware in an interface hardware of a device in association with the upgrade of driver software for the device | |
| CN109614232A (zh) | 任务处理方法、装置、存储介质和电子装置 | |
| US9612877B1 (en) | High performance computing in a virtualized environment | |
| US10353857B2 (en) | Parallel processing apparatus and method for controlling communication | |
| CN107203408A (zh) | 重定向的方法、装置和系统 | |
| CN113127144B (zh) | 一种处理方法、装置及存储介质 | |
| CN116932433A (zh) | 基于dpu的装机控制方法及相关设备 | |
| CN104184729A (zh) | 一种报文处理方法和装置 | |
| US20140211663A1 (en) | Spanning tree protocol (stp) implementation on an event driven virtual link aggregation (vlag) system | |
| EP4302191A1 (en) | Job target aliasing in disaggregated computing systems | |
| CN113316925B (zh) | 确定网络配置依赖关系的跨度 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |