CN103853617A - 提高Linux系统应用层数据处理性能的方法 - Google Patents
提高Linux系统应用层数据处理性能的方法 Download PDFInfo
- Publication number
- CN103853617A CN103853617A CN201410070157.1A CN201410070157A CN103853617A CN 103853617 A CN103853617 A CN 103853617A CN 201410070157 A CN201410070157 A CN 201410070157A CN 103853617 A CN103853617 A CN 103853617A
- Authority
- CN
- China
- Prior art keywords
- core
- cpu
- application layer
- protocol stack
- tcp protocol
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明提供了一种实现系统处理性能随核心CPU数量正比增加的提高Linux系统应用层数据处理性能的方法，包括如下步骤：(1)通过网卡接收数据包；(2)通过多核并行控制器，指定系统中的均衡CPU专门用于数据包均衡分配，多核并行控制器会根据各核心CPU的负载情况，通过均衡CPU的调度将数据包均衡的分配到各个核心CPU上；(3)将TCP协议栈移到用户空间，并改为多个并行的非共享式TCP协议栈，每一个协议栈对应一个核心CPU核心；(4)数据经过各TCP协议栈处理之后，被送入应用层相应的功能模块进行后续内容过滤处理。
Description
技术领域
本发明涉及一种数据处理方法，尤其是一种提高Linux系统应用层数据处理性能的方法。
背景技术
标准的Linux操作系统和目前市面一些经过简单优化处理的系统，在操作系统应用层可以进行多线程的并行处理，但是基于操作系统内核层的TCP协议栈存在共享锁，CPU在进行事务处理时，要等待TCP共享锁的释放，因此并行度受限于TCP协议栈共享锁，并不能达到完全的并行事务处理。因此由于系统内核的局限导致数据处理出现系统等待、并行度下降的情况，这样就会引起上层数据还原和过滤性能的大幅衰减。
发明内容
本发明提供了一种实现系统处理性能随核心CPU数量正比增加的提高Linux系统应用层数据处理性能的方法。
实现本发明目的的提高Linux系统应用层数据处理性能的方法，包括如下步骤：
(1)通过网卡接收数据包；
(2)通过多核并行控制器，指定系统中的均衡CPU专门用于数据包均衡分配，多核并行控制器会根据各核心CPU的负载情况，通过均衡CPU的调度将数据包均衡的分配到各个核心CPU上；
(3)将TCP协议栈移到用户空间，并改为多个并行的非共享式TCP协议栈，每一个协议栈对应一个核心CPU核心；
(4)数据经过各TCP协议栈处理之后，被送入应用层相应的功能模块进行后续内容过滤处理。
本发明的提高Linux系统应用层数据处理性能的方法的有益效果如下：
本发明的提高Linux系统应用层数据处理性能的方法，充分的利用现有主流X86多核硬件平台中多CPU、多处理核心的优势，使数据均衡的分配到各个核心CPU上，充分发挥各核心CPU的处理能力；同时通过协议栈的修改，实现协议栈与核心CPU的一一对应，解除共享锁的限制，从而根本上实现和数据收发和处理的完全并行，达到系统处理性能随核心CPU数量正比增加的目的。
具体实施方式
本发明的提高Linux系统应用层数据处理性能的方法，包括如下步骤：
(1)通过网卡接收数据包；
(2)通过多核并行控制器，指定系统中的均衡CPU专门用于数据包均衡分配，多核并行控制器会根据各核心CPU的负载情况，通过均衡CPU的调度将数据包均衡的分配到各个核心CPU上；
(3)将TCP协议栈移到用户空间，并改为多个并行的非共享式TCP协议栈，每一个协议栈对应一个核心CPU核心；
(4)数据经过各TCP协议栈处理之后，被送入应用层相应的功能模块进行后续内容过滤处理。
通过上述的改进可以实现从数据包接到还原处理的全路径的并行处理，从而达到提高系统处理性能的目的。
上面所述的实施例仅仅是对本发明的优选实施方式进行描述，并非对本发明的范围进行限定，在不脱离本发明设计精神前提下，本领域普通工程技术人员对本发明技术方案做出的各种变形和改进，均应落入本发明的权利要求书确定的保护范围内。
Claims (1)
1.提高Linux系统应用层数据处理性能的方法，包括如下步骤：
(1)通过网卡接收数据包；
(2)通过多核并行控制器，指定系统中的均衡CPU专门用于数据包均衡分配，多核并行控制器会根据各核心CPU的负载情况，通过均衡CPU的调度将数据包均衡的分配到各个核心CPU上；
(3)将TCP协议栈移到用户空间，并改为多个并行的非共享式TCP协议栈，每一个协议栈对应一个核心CPU核心；
(4)数据经过各TCP协议栈处理之后，被送入应用层相应的功能模块进行后续内容过滤处理。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410070157.1A CN103853617A (zh) | 2014-02-28 | 2014-02-28 | 提高Linux系统应用层数据处理性能的方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410070157.1A CN103853617A (zh) | 2014-02-28 | 2014-02-28 | 提高Linux系统应用层数据处理性能的方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN103853617A true CN103853617A (zh) | 2014-06-11 |
Family
ID=50861303
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201410070157.1A Pending CN103853617A (zh) | 2014-02-28 | 2014-02-28 | 提高Linux系统应用层数据处理性能的方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN103853617A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107135278A (zh) * | 2017-07-06 | 2017-09-05 | 深圳市视维科技股份有限公司 | 一种高效的负载均衡器及负载均衡系统 |
-
2014
- 2014-02-28 CN CN201410070157.1A patent/CN103853617A/zh active Pending
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107135278A (zh) * | 2017-07-06 | 2017-09-05 | 深圳市视维科技股份有限公司 | 一种高效的负载均衡器及负载均衡系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| WO2017178887A3 (en) | Secure transaction controller for value token exchange systems | |
| CN101159765B (zh) | 网络接口方法、装置和系统 | |
| JP6089344B2 (ja) | 通信装置のハードウェア・リソースの仮想化管理方法および関連装置 | |
| CN104636186B (zh) | 虚拟机内存管理方法、物理主机、pcie设备及其配置方法以及迁移管理设备 | |
| IN2012DN02726A (zh) | ||
| GB2517097A (en) | Peer-to-peer interrupt signaling between devices coupled via interconnects | |
| JP2014203106A5 (zh) | ||
| CN102915285A (zh) | 虚拟化环境中的应用加速 | |
| EP3109769A3 (en) | Multiprocessor system with improved secondary interconnection network | |
| CN104038444B (zh) | 一种资源分配的方法、设备及系统 | |
| CN105242954B (zh) | 一种虚拟cpu与物理cpu之间的映射方法及电子设备 | |
| CN110636139B (zh) | 一种云负载均衡的优化方法及系统 | |
| CN103853617A (zh) | 提高Linux系统应用层数据处理性能的方法 | |
| WO2007127227A3 (en) | System and method for separating multi-workload processor utilization on a metered computer system | |
| WO2011095365A3 (de) | Automatisiertes system zur auswahl und vermittlung von gelagerten allogenen biologischen zellen für transplantation, therapie und forschung | |
| CN104158764A (zh) | 报文处理方法及装置 | |
| CN103258160A (zh) | 一种虚拟化环境下的云安全监测方法 | |
| Gravito-Soares et al. | Cytomegalovirus disease of the upper gastrointestinal tract: an emerging infection in immunocompetent hosts | |
| Münch et al. | MPIOV: Scaling hardware-based I/O virtualization for mixed-criticality embedded real-time systems using non transparent bridges to (multi-core) multi-processor systems | |
| CN104462881A (zh) | 云计算环境下软件加密狗资源的“池化”方法 | |
| CN208752617U (zh) | 一种支持8盘位的l型2u存储服务器 | |
| WO2012143949A3 (en) | Secure digital host controller virtualization | |
| WO2021170054A1 (zh) | 一种虚拟化的方法、设备、板卡及计算机可读存储介质 | |
| CN108536643A (zh) | 一种高性能计算平台 | |
| CN107562510A (zh) | 一种应用实例的管理方法及管理设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| WD01 | Invention patent application deemed withdrawn after publication | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20140611 |