CN104038441A - 一种数据传输方法及系统 - Google Patents
一种数据传输方法及系统 Download PDFInfo
- Publication number
- CN104038441A CN104038441A CN201410291447.9A CN201410291447A CN104038441A CN 104038441 A CN104038441 A CN 104038441A CN 201410291447 A CN201410291447 A CN 201410291447A CN 104038441 A CN104038441 A CN 104038441A
- Authority
- CN
- China
- Prior art keywords
- message
- virtual channel
- buffer memory
- output buffer
- control chip
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Abstract
本发明公开了一种数据传输方法,应用于网络控制芯片,该方法包括:从所述网络控制芯片的数据接收接口每接收到一个报文,根据接收的报文的类型将其放入对应的虚信道;对不同虚信道内部的报文进行并行处理,处理完毕的报文送入该虚信道的输出缓存;对输出缓存非空的各虚信道进行调度选择,将选出的虚信道的处理完毕的报文从所述网络控制芯片的数据发送接口发送出去。本发明能够提高网络控制芯片对多节点网络中并发报文数据的处理能力,节省数据传输接口的耗费。本发明还公开了一种数据传输系统。
Description
技术领域
本发明涉及服务器技术领域,尤其涉及的是一种数据传输方法及系统。
背景技术
随着服务器应用领域的不断发展,高端服务器的应用需求已经进入了一个重要阶段。高端服务器系统旨在实现高性能指标、高安全性、高可用性、高可靠性等要求。
目前,网络控制芯片之间的数据传输方式有两种,一种是通过单一数据接口串行处理报文,另一种是采用多个数据接口独立并行地处理报文。
高端服务器的网络控制芯片需要支持大规模多节点网络系统对复杂报文协议的处理需求。在面对大量并发报文数据时,如果网络控制器采用单一接口串行处理报文,则在网络传输速率高于网络控制芯片处理报文速率的情况下,这种处理方式会严重影响系统性能,虽然多个数据接口独立并行的方式能够提高网络控制芯片处理大量并发报文数据的能力,但是,这种处理方式需要占用大量的网络接口资源,因此成本较高。
因此,如何提高网络控制芯片对大规模多节点网络系统中大量并发报文数据的处理能力,并且节省网络接口资源,是需要解决的问题。
发明内容
本发明所要解决的技术问题是提供一种数据传输方法及系统,能够提高网络控制芯片对多节点网络中并发报文数据的处理能力,节省数据传输接口的耗费。
为了解决上述技术问题,本发明提供了一种数据传输方法,应用于网络控制芯片,该方法包括:
从所述网络控制芯片的数据接收接口每接收到一个报文,根据接收的报文的类型将其放入对应的虚信道;
对不同虚信道内部的报文进行并行处理,处理完毕的报文送入该虚信道的输出缓存;
对输出缓存非空的各虚信道进行调度选择,将选出的虚信道的处理完毕的报文从所述网络控制芯片的数据发送接口发送出去。
进一步地,该方法还包括下述特点:
所述数据接收接口的数量为1个,所述数据发送接口的数量为1个。
进一步地,该方法还包括下述特点:
所述根据接收的报文的类型将其放入对应的虚信道,包括:根据接收的报文的长度将其放入对应的虚信道。
进一步地,该方法还包括下述特点:
还包括:
根据网络处理芯片对单个报文的处理速度v1、最大报文长度L和网络传输速度v2设定所述数据发送接口的位宽m:m=v1*L/v2。
进一步地,该方法还包括下述特点:
所述对不同虚信道内部的报文进行并行处理,处理完毕的报文送入该虚信道的输出缓存,包括:任一虚信道的处理逻辑如判断本虚信道的输入缓存非空,则从所述输入缓存中取出报文进行处理,处理完毕后送入本虚信道的输出缓存;其中,每一个虚信道设置有单独的处理逻辑和输入缓存。
进一步地,该方法还包括下述特点:
对输出缓存非空的各虚信道进行调度选择,包括:轮询输出缓存非空的各虚信道,根据调度策略选出一个虚信道;其中,所述调度策略为根据报文类型的优先级进行调度。
为了解决上述技术问题,本发明还提供了一种数据传输系统,应用于网络控制芯片,该系统包括:
接收模块,用于从所述网络控制芯片的数据接收接口每接收到一个报文,根据接收的报文的类型将其放入对应的虚信道;
报文处理模块,用于对不同虚信道内部的报文进行并行处理,处理完毕的报文送入该虚信道的输出缓存。
发送模块,用于对输出缓存非空的各虚信道进行调度选择,将选出的虚信道的处理完毕的报文从所述网络控制芯片的数据发送接口发送出去。
进一步地,该系统还包括下述特点:
所述数据接收接口的数量为1个,所述数据发送接口的数量为1个。
进一步地,该系统还包括下述特点:
接收模块,用于所述根据接收的报文的类型将其放入对应的虚信道,包括:根据接收的报文的长度将其放入对应的虚信道。
进一步地,该系统还包括下述特点:
该系统还包括:
设置模块,用于根据网络处理芯片对单个报文的处理速度v1、最大报文长度L和网络传输速度v2设定所述数据发送接口的位宽m:m=v1*L/v2。
进一步地,该系统还包括下述特点:
报文处理模块,用于对不同虚信道内部的报文进行并行处理,处理完毕的报文送入该虚信道的输出缓存,包括:任一虚信道的处理逻辑如判断本虚信道的输入缓存非空,则从所述输入缓存中取出报文进行处理,处理完毕后送入本虚信道的输出缓存;其中,每一个虚信道设置有单独的处理逻辑和输入缓存。
进一步地,该系统还包括下述特点:
发送模块,用于对输出缓存非空的各虚信道进行调度选择,包括:轮询输出缓存非空的各虚信道,根据调度策略选出一个虚信道;其中,所述调度策略为根据报文类型的优先级进行调度。
与现有技术相比,本发明提供的一种数据传输方法及系统,用虚信道的方式划分网络控制芯片内的处理逻辑,对不同长度的报文进行并行处理,用同一套数据传输接口的分时复用来实现报文的转发,能够提高网络控制芯片对多节点网络中大量并发报文数据的处理能力,提高网络控制芯片的工作效率,节省数据传输接口的耗费。
附图说明
图1为本发明实施例的一种数据传输方法的流程图。
图2为本发明实施例的一种数据传输系统的结构示意图。
图3为本发明实施例的网络控制芯片内数据转发的示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚明白,下文中将结合附图对本发明的实施例进行详细说明。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互任意组合。
如图1所示,本发明实施例提供了一种数据传输方法,应用于网络控制芯片,该方法包括:
S10,从所述网络控制芯片的数据接收接口每接收到一个报文,根据接收的报文的类型将其放入对应的虚信道;
S20,对不同虚信道内部的报文进行并行处理,处理完毕的报文送入该虚信道的输出缓存。
S30,对输出缓存非空的各虚信道进行调度选择,将选出的虚信道的处理完毕的报文从所述网络控制芯片的数据发送接口发送出去。
该方法还可以进一步包括下述特点:
优选地,所述根据接收的报文的类型将其放入对应的虚信道,包括:根据接收的报文的长度将其放入对应的虚信道。
比如,报文长度分别为40bit和80bit的两种类型的报文,分别送入两个不同的虚信道。
优选地,所述数据接收接口的数量为1个,所述数据发送接口的数量为1个。
由于网络控制芯片的数据传输接口只有一套(一个数据接收接口和一个数据发送接口),因此,各虚信道分时复用所述数据传输接口,从而节省了网络接口资源。
优选地,还包括:根据网络处理芯片对单个报文的处理速度v1、最大报文长度L和网络传输速度v2设定所述数据发送接口的位宽m:
m=v1*L/v2;
比如,假设网络传输速度为1Gbs,报文协议中定义的报文长度有40bit和80bit两种,而网络控制芯片对单个报文的处理速度为250M,则对于网络控制芯片的发送端而言,极端情况下数据发送接口需要在1秒内传输80bit*250M的数据,因此需要20个位宽的数据接口。
所述对不同虚信道内部的报文进行并行处理,处理完毕的报文送入该虚信道的输出缓存,包括:
任一虚信道的处理逻辑如判断本虚信道的输入缓存非空,则从所述输入缓存中取出报文进行处理,处理完毕后送入本虚信道的输出缓存;
其中,每一个虚信道设置有单独的处理逻辑和输入缓存;
优选地,所述虚信道的输入缓存的深度根据接收的报文的长度设置,接收的报文的长度越短,输入缓存的深度设置得越深。
比如,对于网络控制芯片的接收端,在极端情况下接收40bit长度的报文,处理速度(250M)会慢于报文的接收速度(20Gbs/40bit=500M),因此相较于80bit长度报文的虚信道,40bit长度报文的虚信道需要设置额外深度的缓存区。
优选地,对输出缓存非空的各虚信道进行调度选择,包括:轮询输出缓存非空的各虚信道,根据调度策略选出一个虚信道;其中,所述调度策略为根据报文类型的优先级进行调度或者根据报文类型之间的依赖关系进行调度;
比如,网络控制芯片同时接收到其他多个网络控制芯片发送的报文,但是不同报文类型的调度优先级不同,因此可以根据优先级决定先转发哪一种类型的报文。
本发明考虑到多节点网络中报文传输的特点,根据协议的复杂度和网络规模,网络控制芯片在处理和转发报文时用虚信道的方式根据不同类型报文的处理特点对报文进行并行处理,同时对网络间的数据传输接口进行分时复用,从而在提高了网络控制芯片的报文处理性能的同时,保证了对数据传输通路的利用效率,极大地降低了不同报文之间出现拥塞的可能。
如图2所示,本发明实施例提供了数据传输系统,应用于网络控制芯片上,该系统包括:
接收模块,用于从所述网络控制芯片的数据接收接口每接收到一个报文,根据接收的报文的类型将其放入对应的虚信道;
报文处理模块,用于对不同虚信道内部的报文进行并行处理,处理完毕的报文送入该虚信道的输出缓存。
发送模块,用于对输出缓存非空的各虚信道进行调度选择,将选出的虚信道的处理完毕的报文从所述网络控制芯片的数据发送接口发送出去。
该系统还可以包括下述特点:
优选地,所述数据接收接口的数量为1个,所述数据发送接口的数量为1个。
优选地,接收模块,用于根据接收的报文的类型将其放入对应的虚信道,包括:根据接收的报文的长度将其放入对应的虚信道。
优选地,所述系统还包括:
设置模块,用于根据网络处理芯片对单个报文的处理速度v1、最大报文长度L和网络传输速度v2设定所述数据发送接口的位宽m:
m=v1*L/v2。
优选地,报文处理模块,用于对不同虚信道内部的报文进行并行处理,处理完毕的报文送入该虚信道的输出缓存,包括:
任一虚信道的处理逻辑如判断本虚信道的输入缓存非空,则从所述输入缓存中取出报文进行处理,处理完毕后送入本虚信道的输出缓存;
其中,每一个虚信道设置有单独的处理逻辑和输入缓存。
优选地,发送模块,用于对输出缓存非空的各虚信道进行调度选择,包括:轮询输出缓存非空的各虚信道,根据调度策略选出一个虚信道;其中,所述调度策略为根据报文类型的优先级进行调度。
本发明的网络控制芯片主要考虑到高端服务器的需求导致复杂控制类芯片的性能和可靠性都需要不断提升,复杂的协议支持和系统规模的不断扩大使网络控制芯片内部需要简单和高效机制实现多种类型报文的处理和发送,从而满足高端服务器系统的高效率、高可靠性运行要求。
如图3所示,本发明用虚信道的方式划分网络控制芯片内的处理逻辑,每一个虚信道包括输入缓存、报文处理逻辑和输出缓存,多个虚信道的并行处理机制实现了在网络控制芯片内部报文流高速传输的条件下,基于完整清晰的协议设计和数据传输接口宽度定义,对于网络节点之间的报文,根据报文长度进行分类,不同长度的报文送入不同虚信道进行并行处理和缓存,处理完成的报文按分时复用的方式使用同一套数据传输接口进行发送。本发明满足了控制芯片内部对报文处理并行化处理要求的同时,保证了对数据传输通路的利用效率,极大地降低了不同报文之间出现拥塞的可能。
上述实施例提供的一种数据传输方法及系统,用虚信道的方式划分网络控制芯片内的处理逻辑,对不同长度的报文进行并行处理,用同一套数据传输接口的分时复用来实现报文的转发,能够提高网络控制芯片对多节点网络中大量并发报文数据的处理能力,提高网络控制芯片的工作效率,节省数据传输接口的耗费。
本领域普通技术人员可以理解上述方法中的全部或部分步骤可通过程序来指令相关硬件完成,所述程序可以存储于计算机可读存储介质中,如只读存储器、磁盘或光盘等。可选地,上述实施例的全部或部分步骤也可以使用一个或多个集成电路来实现,相应地,上述实施例中的各模块/单元可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。本发明不限制于任何特定形式的硬件和软件的结合。
需要说明的是,本发明还可有其他多种实施例,在不背离本发明精神及其实质的情况下,熟悉本领域的技术人员可根据本发明作出各种相应的改变和变形,但这些相应的改变和变形都应属于本发明所附的权利要求的保护范围。
Claims (12)
1.一种数据传输方法,应用于网络控制芯片,该方法包括:
从所述网络控制芯片的数据接收接口每接收到一个报文,根据接收的报文的类型将其放入对应的虚信道;
对不同虚信道内部的报文进行并行处理,处理完毕的报文送入该虚信道的输出缓存;
对输出缓存非空的各虚信道进行调度选择,将选出的虚信道的处理完毕的报文从所述网络控制芯片的数据发送接口发送出去。
2.如权利要求1所述的方法,其特征在于:
所述数据接收接口的数量为1个,所述数据发送接口的数量为1个。
3.如权利要求1所述的方法,其特征在于:
所述根据接收的报文的类型将其放入对应的虚信道,包括:根据接收的报文的长度将其放入对应的虚信道。
4.如权利要求2所述的方法,其特征在于,还包括:
根据网络处理芯片对单个报文的处理速度v1、最大报文长度L和网络传输速度v2设定所述数据发送接口的位宽m:
m=v1*L/v2。
5.如权利要求2所述的方法,其特征在于:
所述对不同虚信道内部的报文进行并行处理,处理完毕的报文送入该虚信道的输出缓存,包括:
任一虚信道的处理逻辑如判断本虚信道的输入缓存非空,则从所述输入缓存中取出报文进行处理,处理完毕后送入本虚信道的输出缓存;
其中,每一个虚信道设置有单独的处理逻辑和输入缓存。
6.如权利要求2所述的方法,其特征在于:
对输出缓存非空的各虚信道进行调度选择,包括:
轮询输出缓存非空的各虚信道,根据调度策略选出一个虚信道;
其中,所述调度策略为根据报文类型的优先级进行调度。
7.一种数据传输系统,应用于网络控制芯片,该系统包括:
接收模块,用于从所述网络控制芯片的数据接收接口每接收到一个报文,根据接收的报文的类型将其放入对应的虚信道;
报文处理模块,用于对不同虚信道内部的报文进行并行处理,处理完毕的报文送入该虚信道的输出缓存;
发送模块,用于对输出缓存非空的各虚信道进行调度选择,将选出的虚信道的处理完毕的报文从所述网络控制芯片的数据发送接口发送出去。
8.如权利要求7所述的系统,其特征在于:
所述数据接收接口的数量为1个,所述数据发送接口的数量为1个。
9.如权利要求7所述的系统,其特征在于:
接收模块,用于所述根据接收的报文的类型将其放入对应的虚信道,包括:根据接收的报文的长度将其放入对应的虚信道。
10.如权利要求8所述的系统,其特征在于,还包括:
设置模块,用于根据网络处理芯片对单个报文的处理速度v1、最大报文长度L和网络传输速度v2设定所述数据发送接口的位宽m:
m=v1*L/v2。
11.如权利要求8所述的系统,其特征在于:
报文处理模块,用于对不同虚信道内部的报文进行并行处理,处理完毕的报文送入该虚信道的输出缓存,包括:
任一虚信道的处理逻辑如判断本虚信道的输入缓存非空,则从所述输入缓存中取出报文进行处理,处理完毕后送入本虚信道的输出缓存;
其中,每一个虚信道设置有单独的处理逻辑和输入缓存。
12.如权利要求8所述的系统,其特征在于:
发送模块,用于对输出缓存非空的各虚信道进行调度选择,包括:轮询输出缓存非空的各虚信道,根据调度策略选出一个虚信道;
其中,所述调度策略为根据报文类型的优先级进行调度。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410291447.9A CN104038441A (zh) | 2014-06-25 | 2014-06-25 | 一种数据传输方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410291447.9A CN104038441A (zh) | 2014-06-25 | 2014-06-25 | 一种数据传输方法及系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN104038441A true CN104038441A (zh) | 2014-09-10 |
Family
ID=51469033
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410291447.9A Pending CN104038441A (zh) | 2014-06-25 | 2014-06-25 | 一种数据传输方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104038441A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104268121A (zh) * | 2014-09-23 | 2015-01-07 | 浪潮(北京)电子信息产业有限公司 | 超大规模芯片及其布局方法、访问寄存器的方法及系统 |
CN104618083A (zh) * | 2015-02-12 | 2015-05-13 | 浪潮电子信息产业股份有限公司 | 一种多通道报文转发的方法 |
CN110679117A (zh) * | 2018-05-23 | 2020-01-10 | 贝克霍夫自动化有限公司 | 数据传输方法和自动化通信网络 |
CN115396388A (zh) * | 2022-08-15 | 2022-11-25 | 成都北中网芯科技有限公司 | 一种高效的基于np的网络处理装置 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101039270A (zh) * | 2007-03-12 | 2007-09-19 | 杭州华为三康技术有限公司 | 支持多通道数据传输的数据传输装置及方法 |
CN101123581A (zh) * | 2007-09-18 | 2008-02-13 | 中兴通讯股份有限公司 | 一种宽带网络接入设备 |
CN102035719A (zh) * | 2009-09-29 | 2011-04-27 | 华为技术有限公司 | 一种报文处理方法和装置 |
-
2014
- 2014-06-25 CN CN201410291447.9A patent/CN104038441A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101039270A (zh) * | 2007-03-12 | 2007-09-19 | 杭州华为三康技术有限公司 | 支持多通道数据传输的数据传输装置及方法 |
CN101123581A (zh) * | 2007-09-18 | 2008-02-13 | 中兴通讯股份有限公司 | 一种宽带网络接入设备 |
CN102035719A (zh) * | 2009-09-29 | 2011-04-27 | 华为技术有限公司 | 一种报文处理方法和装置 |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104268121A (zh) * | 2014-09-23 | 2015-01-07 | 浪潮(北京)电子信息产业有限公司 | 超大规模芯片及其布局方法、访问寄存器的方法及系统 |
CN104268121B (zh) * | 2014-09-23 | 2017-08-11 | 浪潮(北京)电子信息产业有限公司 | 超大规模芯片中访问寄存器的方法及系统 |
CN104618083A (zh) * | 2015-02-12 | 2015-05-13 | 浪潮电子信息产业股份有限公司 | 一种多通道报文转发的方法 |
CN104618083B (zh) * | 2015-02-12 | 2017-09-29 | 浪潮电子信息产业股份有限公司 | 一种多通道报文转发的方法 |
CN110679117A (zh) * | 2018-05-23 | 2020-01-10 | 贝克霍夫自动化有限公司 | 数据传输方法和自动化通信网络 |
CN110679117B (zh) * | 2018-05-23 | 2021-09-17 | 贝克霍夫自动化有限公司 | 数据传输方法和自动化通信网络 |
CN115396388A (zh) * | 2022-08-15 | 2022-11-25 | 成都北中网芯科技有限公司 | 一种高效的基于np的网络处理装置 |
CN115396388B (zh) * | 2022-08-15 | 2023-07-25 | 成都北中网芯科技有限公司 | 一种高效的基于np的网络处理装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101616083B (zh) | 一种报文转发方法和装置 | |
US7924708B2 (en) | Method and apparatus for flow control initialization | |
CN108737296B (zh) | 一种数据传输方法、装置和网络设备 | |
JP2006101525A (ja) | データ・フロー・アプリケーションのためのネットワーク・オン・チップ半自動通信アーキテクチャ | |
CN104038441A (zh) | 一种数据传输方法及系统 | |
CN104717152A (zh) | 一种实现接口缓存动态分配的方法和装置 | |
EP4203368A1 (en) | Data transmission method and device, communication node, and storage medium | |
CN102340734A (zh) | 定位应用管理方法及装置 | |
EP3487132B1 (en) | Packet processing method and router | |
CN103166845A (zh) | 数据处理方法和装置 | |
CN113157465B (zh) | 基于指针链表的消息发送方法及装置 | |
CN103312614A (zh) | 一种组播报文处理方法、线卡及通信设备 | |
CN109617821B (zh) | 一种组播报文的传输方法、主控板及设备 | |
CN102117261B (zh) | 一种芯片内部处理器之间的通信方法 | |
CN113010464A (zh) | 数据处理装置及设备 | |
CN105939242B (zh) | 实现虚拟系统的方法及装置 | |
CN114499762A (zh) | 一种通信系统、5g网络下的多路转发方法及通信设备 | |
CN114500544A (zh) | 一种节点间负载均衡方法、系统、设备以及介质 | |
CN108833306B (zh) | 一种vsm系统报文传输装置及方法 | |
CN112894805A (zh) | 一种基于工业宽带总线的机器人通信方法及系统 | |
CN113572695A (zh) | 链路聚合方法、装置、计算设备及计算机存储介质 | |
CN111078619A (zh) | 一种转换装置、网络设备及数据传输方法 | |
CN112804166A (zh) | 一种报文收发方法、装置及存储介质 | |
CN109862044A (zh) | 一种转换装置、网络设备及数据传输方法 | |
CN105635003B (zh) | 一种基于dma的基带信号处理系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20140910 |
|
RJ01 | Rejection of invention patent application after publication |