CN114553801A - 实现InfiniBand网络长距离传输的设备及方法 - Google Patents

实现InfiniBand网络长距离传输的设备及方法 Download PDF

Info

Publication number
CN114553801A
CN114553801A CN202210017732.6A CN202210017732A CN114553801A CN 114553801 A CN114553801 A CN 114553801A CN 202210017732 A CN202210017732 A CN 202210017732A CN 114553801 A CN114553801 A CN 114553801A
Authority
CN
China
Prior art keywords
data
module
wide area
area network
infiniband
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210017732.6A
Other languages
English (en)
Other versions
CN114553801B (zh
Inventor
郭猛
徐奔
张建洪
潘景山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shandong Computer Science Center National Super Computing Center in Jinan
Original Assignee
Shandong Computer Science Center National Super Computing Center in Jinan
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shandong Computer Science Center National Super Computing Center in Jinan filed Critical Shandong Computer Science Center National Super Computing Center in Jinan
Priority to CN202210017732.6A priority Critical patent/CN114553801B/zh
Publication of CN114553801A publication Critical patent/CN114553801A/zh
Application granted granted Critical
Publication of CN114553801B publication Critical patent/CN114553801B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L49/00Packet switching elements
    • H04L49/25Routing or path finding in a switch fabric
    • H04L49/253Routing or path finding in a switch fabric using establishment or release of connections between ports
    • H04L49/254Centralised controller, i.e. arbitration or scheduling
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2854Wide area networks, e.g. public data networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/10Flow control; Congestion control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L2212/00Encapsulation of packets
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Abstract

本发明公开了实现InfiniBand网络长距离传输的设备及方法,广域网接口的一端与广域网连接;广域网接口的另外一端与光学子系统连接;光学子系统的另一端与成帧器连接;成帧器与去封装模块输入端连接;去封装模块输出端与第二时钟域转换容量缓冲器的输入端连接;第二时钟域转换容量缓冲器的输出端与路径选择模块的输入端连接;路径选择模块通过两条并联路径与数据选择模块连接,两条并联路径是指,路径选择模块通过第一路径与数据选择模块直接连接;同时,路径选择模块通过大容量缓冲存储器的控制器与数据选择模块连接;所述大容量缓冲存储器的控制器还与存储设备连接。可以在超出协议规定距离保持相对完整的速率传输。

Description

实现InfiniBand网络长距离传输的设备及方法
技术领域
本发明涉及计算机通信技术领域,特别是涉及实现InfiniBand网络长距离传输的设备及方法。
背景技术
本部分的陈述仅仅是提到了与本发明相关的背景技术,并不必然构成现有技术。
InfiniBand网络,是一个用于高性能计算的计算机网络通信标准,它具有极高的吞吐量和极低的延迟,用于计算机与计算机之间的数据互连。
发明人发现,现有公开专利CN101258719A-延长InfiniBand网络的实时到达的方法,存在以下技术问题:
第一,静态扩大信用值上限和设置流控发送间隔,在接收端容量过高时,不变的流控发送间隔,会占用带宽;在接收端容量过低时,过大信用值无法准确描述,造成空间浪费;
第二,数据流动必定经过大容量缓冲存储器,这种设计当遇到以下情况时,会降低响应时间、增加时延、减少有效带宽;
情况一:当网络上层持续传输数据流量不多;
情况二:数据量不足以填满时钟域转换容量缓冲器;
情况三:发送InfiniBand数据速度比接收WAN数据速度快;
情况四:数据平均传输带宽小于大容量缓冲存储器的最高速度。
发明内容
为了解决现有技术的不足,本发明提供了实现InfiniBand网络长距离传输的设备及方法;通过引入InfiniBand位区间机制和引入数据前推机制,实现了InfiniBand网络长距离传输。
第一方面,本发明提供了实现InfiniBand网络长距离传输的设备;
实现InfiniBand网络长距离传输的设备,包括:
广域网数据接收端、广域网数据发送端、无限带宽InfiniBand数据接收端以及无限带宽InfiniBand数据发送端;
所述广域网数据接收端包括:广域网接口,所述广域网接口的一端与广域网连接;所述广域网接口的另外一端与光学子系统连接;所述光学子系统的另一端与成帧器连接;
所述成帧器与去封装模块输入端连接;所述去封装模块输出端与第二时钟域转换容量缓冲器的输入端连接;所述第二时钟域转换容量缓冲器的输出端与路径选择模块的输入端连接;
其中,路径选择模块通过两条并联路径与数据选择模块连接,两条并联路径是指,路径选择模块通过第一路径与数据选择模块直接连接;同时,路径选择模块通过大容量缓冲存储器的控制器与数据选择模块连接;所述大容量缓冲存储器的控制器还与存储设备连接。
第二方面,本发明提供了实现InfiniBand网络长距离传输的方法;
实现InfiniBand网络长距离传输的方法,包括:
第一信用管理与流量控制模块,根据大容量缓冲存储器的剩余容量空间,得出广域网的信用值;将广域网的信用值送入第一仲裁选择模块,经过第一仲裁选择模块的仲裁选择后,发送给封装模块进行封装,而后,将封装后的数据经由广域网进行传输;
广域网数据接收端接收到广域网传输的数据后,去封装,送至第二信用管理与流量控制模块解析并更新得到广域网的信用值,而后将得到的广域网的信用值传送到第一信用管理与流量控制模块进行更新;
广域网数据发送端比较信用值和想要发送的数据包的长度,当广域网端的信用值大于等于想要发送的数据包的长度时,广域网数据发送端向第一仲裁选择模块发送数据,经过第一仲裁选择模块的仲裁选择后,发送给封装模块进行封装,而后,将封装后的数据经由广域网进行传输;
广域网数据接收端接收到广域网传输的数据后,将其送至去封装模块去封装,去封装后的数据随后被送入第二时钟域转换容量缓冲器,将其从广域网时钟域转化为大容量缓冲存储器所在的时钟域;
在数据进入大容量缓冲存储器容量之前,进行路径判断:当第三时钟域转换容量缓冲存储器有空间,且大容量缓冲存储器排空时,则进行数据前推,直接进入第三时钟域转换容量缓冲存储器;否则,将数据放入大容量缓冲存储器中缓存;
而后将数据从大容量缓冲存储器中读取出来的同时将所在的时钟转化为InfiniBand时钟,第二信用管理与流量控制模块比较InfiniBand数据包和InfiniBand端信用值的大小后,经由第二仲裁选择模块进行仲裁,将数据发送至InfiniBand网络;
重复上述步骤,以实现InfiniBand网络对数据的长距离传输。
与现有技术相比,本发明的有益效果是:
1、通过对信用管理与流量控制中信用值的增大以及增加接收端的大容量缓冲存储器,使发送端在由于长距离光纤的物理速度限制而无法及时到达的流控包的等待时间内可以不停的发送数据,从而增大了带宽,使其可以在超出协议规定距离保持相对完整的速率传输。
2、在对信用管理与流量控制中信用值机制的更改。本发明采用的是设置信用值位区间机制,设置位区间标志值,表示当前值所属位宽区间。这样做的好处,其一,是动态的改变信用值单位,当容量较低时,也可以相对准确的描述。其二,是动态的改变流控包的发送间隔,当容量较高时,可以增大流控包的发送间隔,增加带宽。其三,随着传输距离增加,信用值表示宽度不会明显增大,导致所需传输的流控数据量不会明显增多,进而提高传输带宽。
3、在去封装模块将WAN数据去封装后,添加时钟域转换容量缓冲器,从而后续数据路径有两个,其一为大容量缓冲存储器,其二为时钟域转换容量缓冲器,当时钟域转换容量缓冲器有剩余容量时,直接进行数据前推。本发明这样做的好处是,其一,在数据不是大量连续传送时,有更快的响应时间和更低的延时,更高的带宽;其二,在数据量不足以填满时钟域转换容量缓冲器时,或发向InfiniBand速度比接收WAN数据速度快时,有更快的响应时间和更低的延时,更高的带宽;其三,在数据平均传输带宽小于大容量缓冲存储器的最高速度时,有更快的响应时间和更低的延时,更高的带宽。只有当数据量大量连续且数据平均传输带宽大于等于大容量缓冲存储器的最高速度时,才会与直接只进行大容量缓存效果相同。
附图说明
构成本发明的一部分的说明书附图用来提供对本发明的进一步理解,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。
图1为实施例一的系统结构图。
具体实施方式
应该指出,以下详细说明都是示例性的,旨在对本发明提供进一步的说明。除非另有指明,本文使用的所有技术和科学术语具有与本发明所属技术领域的普通技术人员通常理解的相同含义。
需要注意的是,这里所使用的术语仅是为了描述具体实施方式,而非意图限制根据本发明的示例性实施方式。如在这里所使用的,除非上下文另外明确指出,否则单数形式也意图包括复数形式,此外,还应当理解的是,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
在不冲突的情况下,本发明中的实施例及实施例中的特征可以相互组合。
本实施例所有数据的获取都在符合法律法规和用户同意的基础上,对数据的合法应用。
实施例一
本实施例提供了实现InfiniBand网络长距离传输的设备;
如图1所示,实现InfiniBand网络长距离传输的设备,包括:广域网数据接收端、广域网数据发送端、无限带宽InfiniBand数据接收端以及无限带宽InfiniBand数据发送端;
所述广域网数据接收端包括:广域网接口,所述广域网接口的一端与广域网连接;所述广域网接口的另外一端与光学子系统连接;所述光学子系统的另一端与成帧器连接;
所述成帧器与去封装模块输入端连接;所述去封装模块输出端与第二时钟域转换容量缓冲器的输入端连接;所述第二时钟域转换容量缓冲器的输出端与路径选择模块的输入端连接;
其中,路径选择模块通过两条并联路径与数据选择模块连接,两条并联路径是指,路径选择模块通过第一路径与数据选择模块直接连接;同时,路径选择模块通过大容量缓冲存储器的控制器与数据选择模块连接;所述大容量缓冲存储器的控制器还与存储设备连接。
所述存储设备为:SDRAM连接,SDRAM即为大容量缓冲存储器所采用的存储设备。
同步动态随机存取内存(synchronous dynamic random-access memory,简称SDRAM)是有一个同步接口的动态随机存取内存(DRAM)。是计算机中一种存储介质。
进一步地,所述无限带宽InfiniBand数据接收端,包括:IB接口,所述IB接口的一端与InfiniBand网络连接;所述IB接口的另外一端与IB模块连接;
所述IB模块分别与第一网络管理模块的输入端、第一时钟域转换容量缓冲器的输入端、第一信用管理与流量控制模块的输入端连接;
第一网络管理模块的输出端、第一时钟域转换容量缓冲器的输出端、第一信用管理与流量控制模块的输出端,均与第一仲裁选择模块输入端连接;
第一仲裁选择模块的输出端与封装模块的输入端连接;所述封装模块的输出端与成帧器连接,成帧器与光学子系统连接;光学子系统与WAN接口的一端连接;WAN接口的另外一端与WAN网络连接。
IB模块,是指实现IB网络物理层协议的功能模块,它的功能是给上层协议在物理链路上传送和接收数据的能力。
进一步地,所述数据选择模块与第三时钟域转换容量缓冲器连接;
第三时钟域转换容量缓冲器、第二信用管理与流量控制模块和第二网络管理模块均与第二仲裁选择模块连接;第二仲裁选择模块与IB模块连接,IB模块与IB接口一侧连接;
其中,第一信用管理与流量控制模块与第二信用管理与流量控制模块连接;
其中,IB接口的另外一侧与InfiniBand网络连接,用于进行光信号和物理信号的转换。
其中,IB模块,具体是指,当接收IB接口连接的InfiniBand网络的数据的物理信号时,将物理信号转换为InfiniBand数据;当有数据需要向IB接口连接的InfiniBand网络传输时,将数据转化为物理信号。
IB模块,是指实现IB网络物理层协议的功能模块,它的功能是给上层协议在物理链路上传送和接收数据的能力。
其中,第一网络管理模块,用于进行网络子网信息交互、网络子网管理以及虚拟通道(Virtual lane,VL)分配管理。虚拟通道提供了一种实现从一个到多个通道逻辑流的方法。
其中,第一时钟域转换容量缓冲器,是指对接收到的数据分组进行缓存,同时将数据时钟域进行转换。将数据由InfiniBand时钟域转化为WAN时钟域。
其中,第一信用管理与流量控制模块,是指对接收到的InfiniBand流量控制数据包进行解析、更新信用值、同一模块内无限带宽InfiniBand接收端以及无限带宽InfiniBand发送端进行信用交互、控制数据的收发。
其中,第一仲裁选择模块,是指对不同来源的数据进行仲裁发送,采用非抢占式优先级发送,优先级从高到底为网络管理数据、流控数据以及缓存数据。
其中,封装模块,用于将接收到的数据进行封装,转化为能够在广域网上进行传输的数据;
其中,成帧器,用于将封装后的数据成帧,将光学子模块传送过来的数据帧转化为数据。
其中,光学子系统,用于将数据帧转化为光信号,将从广域网接口接收到的光信号转化为数据帧。
其中,广域网接口,用于与广域网连接,进行光信号和物理信号的转换。
广域网接口是通信硬件接口,用于对接相应的光模块,由于该处专用连接广域网网络,所以广域网接口。WAN,英文全称Wide area Network,广域网,是连接不同地区局域网或城域网计算机通信的远程网络。
进一步地,所述去封装模块,用于将广域网数据去封装。
其中,第二时钟域转换容量缓冲器,将数据由广域网时钟域转化为大容量缓冲存储器所在的时钟域。利用双端口ram(随机存取存储器(Random Access Memory,RAM),使数据由写入时钟域转化为读取时钟域。
其中,第二信用管理与流量控制模块,对接收到的InfiniBand流量控制数据包进行解析、更新信用值、同一模块内广域网数据接收端与广域网数据发送端进行信用交互、控制数据的收发。
其中,第二网络管理模块,用于进行网络子网信息交互、网络子网管理以及VL分配管理。功能与第一网络管理模块一致。
其中,路径选择模块,选择数据传送路径,当第三时钟域转换容量缓冲器未填满,并且大容量缓冲存储器为空时,将接收到的数据传输给数据选择模块;否则传输给大容量缓冲存储器。
路径选择模块,判断第三时钟域转换容量缓冲器的剩余容量是否能够容纳将要传送的数据包,并且大容量缓冲存储器是否排空,如果是,则直接传送给数据选择模块,反之,则传送给大容量缓冲存储器进行缓存,等待第三时钟域转换容量缓冲器的剩余容量可以容纳该数据包,再由大容量缓冲存储器传送给数据选择模块。
其中,第三时钟域转换容量缓冲器,将数据由大容量缓冲存储器所在时钟域转化为InfiniBand时钟域。
其中,第二仲裁选择模块,对不同来源的数据进行仲裁发送,采用非抢占式优先级发送,优先级从高到底为网络管理数据、流控数据以及缓存数据。
进一步地,所述大容量缓冲存储器,是指将接收到的数据进行先入先出队列FIFO(First Input First Output)缓存。
其中,大容量缓冲存储器的控制器,用于控制大容量缓冲存储器收发数据。
其中,数据选择模块,用于对接收到的不同来源的数据进行选择,选择接收路径选择模块的数据还是大容量缓冲存储器发送的数据。
其中,同步动态随机存取内存(synchronous dynamic random-access memory,简称SDRAM)是有一个同步接口的动态随机存取内存(DRAM)。是计算机中一种存储介质。
信用管理与流量控制模块根据大容量缓冲存储器的剩余容量空间得出信用值,将信用值经由第一仲裁选择模块仲裁后,发送至封装模块封装,而后经由WAN传输。
大容量的定义是至少能够给容纳远距离传输路径一个来回所传输的总数据量的大小。
如图1所示,仲裁选择模块有3个数据输入,当在同一个时间,有两个或三个数据输入来源想要传输数据时,根据事先确定优先级仲裁哪个来源的数据优先级最高,然后选择该来源数据进行传输。
所述信用值增设信用值位区间机制,以大容量缓冲存储器容量大小的位宽为总位宽,每次传输的信用值只取其中代表的值最大的区间。
高位区间延长缓存发送间隔,低位区间降低发送时间间隔。
设置位区间标志值,表示当前值所属位宽区间。
位区间机制,是指:以容量大小的位宽为总位宽,按固定的值的位宽数,将总位宽进行划分。例如容量大小用十进制表示是64,用2进制表示是1000000,共有7位,也就是位宽为7。以位宽值3为位区间大小,那么就分为了三个区间,分别是1,000,000。1相对于000就是高位区间,每次传输只传输其中的一个区间,也就是只传输3位,就是所有区间的部分区间。
例如信用值为4,194,304,共23位。
设位宽区间为4,则共有6个位宽区间,则置位区间标志值位宽为3。其值6代表最高4位,0代表最低4位。该值越高,流控发送时间间隔越长。
广域网数据接收端接收到广域网传输的数据后,去封装,送至第二信用管理与流量控制模块解析更新信用值。
无限带宽InfiniBand数据接收端IB模块将接收到的InfiniBand数据送至第一时钟域转换容量缓冲器,将InfiniBand数据从InfiniBand时钟转化为WAN时钟。
第一信用管理与流量控制模块比较InfiniBand数据包和信用值的大小,如果信用值大于InfiniBand数据包的长度,则会允许数据向WAN网发送。
数据经由广域网到达广域网数据接收端后,去封装,送至第二时钟域转换容量缓冲器,将其从WAN时钟转化为大容量缓冲存储器所在的时钟域。
设置数据前推机制,在数据进入大容量缓冲存储器容量之前,进行路径判断:在第三时钟域转换容量缓冲存储器有空间,且大容量缓冲存储器排空时,则进行数据前推,直接进入第三时钟域转换容量缓冲存储器。否则,将数据放入大容量缓冲存储器中缓存。
而后将数据从大容量缓冲存储器中读取出来的同时将所在的时钟转化为InfiniBand时钟,第二信用管理与流量控制模块比较InfiniBand数据包和信用值的大小后,如果InfiniBand数据包的大小大于等于信用值的大小,则经由第二仲裁模块选择,将数据发送至InfiniBand网络;否则,不发送。
之后再重复上述步骤。
优化引入信用值位区间机制,动态更新信用,使发送端可以在等待流控包的时间可以发送更多的数据。同时为了支撑提升的空间,需要添加大容量缓冲存储器。在添加大容量缓冲存储器后,为了减小延迟和提高带宽,需要引入数据前推机制。
各个模块所应用的器件均有多种类型可以替代。如大容量缓冲存储器可以为DDR也可为QDR等。各个模块的器件会有多种使用方式,如DDR可以为native接口也可以为AXI接口。
可以将一个数据流向扩大为多个数据流向,可以纵向添加容量缓冲器进而增加路径。
可以增加数据流的流向层级,可以横向添加容量缓冲存储器。
可以对与每个模块中进行一些功能的扩展,如图1所示,可以对封装和去封装添加各类网络协议。
可以对模块的位置进行改变,如图1所示,将数据选择或仲裁选择置于时钟域变换之前也可以。
实施例二
本实施例提供了实现InfiniBand网络长距离传输的方法;
实现InfiniBand网络长距离传输的方法,包括:
S201:第一信用管理与流量控制模块,根据大容量缓冲存储器的剩余容量空间,得出广域网的信用值;将广域网的信用值送入第一仲裁选择模块,经过第一仲裁选择模块的仲裁选择后,发送给封装模块进行封装,而后,将封装后的数据经由广域网进行传输;
S202:广域网数据接收端接收到广域网传输的数据后,去封装,送至第二信用管理与流量控制模块解析并更新得到广域网的信用值,而后将得到的广域网的信用值传送到第一信用管理与流量控制模块进行更新;
S203:广域网数据发送端比较信用值和想要发送的数据包的长度,当广域网端的信用值大于等于想要发送的数据包的长度时,广域网数据发送端向第一仲裁选择模块发送数据,经过第一仲裁选择模块的仲裁选择后,发送给封装模块进行封装,而后,将封装后的数据经由广域网进行传输;
S204:广域网数据接收端接收到广域网传输的数据后,将其送至去封装模块去封装,去封装后的数据随后被送入第二时钟域转换容量缓冲器,将其从广域网时钟域转化为大容量缓冲存储器所在的时钟域;
S205:在数据进入大容量缓冲存储器容量之前,进行路径判断:当第三时钟域转换容量缓冲存储器有空间,且大容量缓冲存储器排空时,则进行数据前推,直接进入第三时钟域转换容量缓冲存储器;否则,将数据放入大容量缓冲存储器中缓存;
S206:而后将数据从大容量缓冲存储器中读取出来的同时将所在的时钟转化为InfiniBand时钟,第二信用管理与流量控制模块比较InfiniBand数据包和InfiniBand端信用值的大小后,经由第二仲裁选择模块进行仲裁,将数据发送至InfiniBand网络;
S207:重复S201~S206,以实现InfiniBand网络对数据的长距离传输。
根据InfiniBand协议规定的机制,信用值就是由大容量缓冲存储器剩余空间大小加上WAN接收端接收到的数据量得出。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.实现InfiniBand网络长距离传输的设备,其特征是,包括:
广域网数据接收端、广域网数据发送端、无限带宽InfiniBand数据接收端以及无限带宽InfiniBand数据发送端;
所述广域网数据接收端包括:广域网接口,所述广域网接口的一端与广域网连接;所述广域网接口的另外一端与光学子系统连接;所述光学子系统的另一端与成帧器连接;
所述成帧器与去封装模块输入端连接;所述去封装模块输出端与第二时钟域转换容量缓冲器的输入端连接;所述第二时钟域转换容量缓冲器的输出端与路径选择模块的输入端连接;
其中,路径选择模块通过两条并联路径与数据选择模块连接,两条并联路径是指,路径选择模块通过第一路径与数据选择模块直接连接;同时,路径选择模块通过大容量缓冲存储器的控制器与数据选择模块连接;所述大容量缓冲存储器的控制器还与存储设备连接。
2.如权利要求1所述的实现InfiniBand网络长距离传输的设备,其特征是,
所述无限带宽InfiniBand数据接收端,包括:IB接口,所述IB接口的一端与InfiniBand网络连接;所述IB接口的另外一端与IB模块连接;
所述IB模块分别与第一网络管理模块的输入端、第一时钟域转换容量缓冲器的输入端、第一信用管理与流量控制模块的输入端连接;
第一网络管理模块的输出端、第一时钟域转换容量缓冲器的输出端、第一信用管理与流量控制模块的输出端,均与第一仲裁选择模块输入端连接;
第一仲裁选择模块的输出端与封装模块的输入端连接;所述封装模块的输出端与成帧器连接,成帧器与光学子系统连接;光学子系统与WAN接口的一端连接;WAN接口的另外一端与WAN网络连接。
3.如权利要求1所述的实现InfiniBand网络长距离传输的设备,其特征是,所述数据选择模块与第三时钟域转换容量缓冲器连接;
第三时钟域转换容量缓冲器、第二信用管理与流量控制模块和第二网络管理模块均与第二仲裁选择模块连接;第二仲裁选择模块与IB模块连接,IB模块与IB接口一侧连接;
其中,第一信用管理与流量控制模块与第二信用管理与流量控制模块连接;
其中,IB接口的另外一侧与InfiniBand网络连接,用于进行光信号和物理信号的转换。
4.如权利要求2或3所述的实现InfiniBand网络长距离传输的设备,其特征是,其中,IB模块,具体是指,当接收IB接口连接的InfiniBand网络的数据的物理信号时,将物理信号转换为InfiniBand数据;当有数据需要向IB接口连接的InfiniBand网络传输时,将数据转化为物理信号。
5.如权利要求2所述的实现InfiniBand网络长距离传输的设备,其特征是,其中,第一网络管理模块,用于进行网络子网信息交互、网络子网管理以及虚拟通道分配管理;
其中,第一时钟域转换容量缓冲器,是指对接收到的数据分组进行缓存,同时将数据时钟域进行转换;将数据由InfiniBand时钟域转化为WAN时钟域;
其中,第一信用管理与流量控制模块,是指对接收到的InfiniBand流量控制数据包进行解析、更新信用值、同一模块内无限带宽InfiniBand接收端以及无限带宽InfiniBand发送端进行信用交互、控制数据的收发;
其中,第一仲裁选择模块,是指对不同来源的数据进行仲裁发送,采用非抢占式优先级发送,优先级从高到底为网络管理数据、流控数据以及缓存数据;
其中,封装模块,用于将接收到的数据进行封装,转化为能够在广域网上进行传输的数据;
其中,成帧器,用于将封装后的数据成帧,将光学子模块传送过来的数据帧转化为数据;
其中,光学子系统,用于将数据帧转化为光信号,将从广域网接口接收到的光信号转化为数据帧;
其中,广域网接口,用于与广域网连接,进行光信号和物理信号的转换。
6.如权利要求1所述的实现InfiniBand网络长距离传输的设备,其特征是,其中,第二时钟域转换容量缓冲器,将数据由广域网时钟域转化为大容量缓冲存储器所在的时钟域;利用双端口RAM,使数据由写入时钟域转化为读取时钟域;
其中,第二信用管理与流量控制模块,对接收到的InfiniBand流量控制数据包进行解析、更新信用值、同一模块内广域网数据接收端与广域网数据发送端进行信用交互、控制数据的收发;
其中,第二网络管理模块,用于进行网络子网信息交互、网络子网管理以及VL分配管理。
7.如权利要求3所述的实现InfiniBand网络长距离传输的设备,其特征是,路径选择模块,判断第三时钟域转换容量缓冲器的剩余容量是否能够容纳将要传送的数据包,并且大容量缓冲存储器是否排空,如果是,则直接传送给数据选择模块,反之,则传送给大容量缓冲存储器进行缓存,等待第三时钟域转换容量缓冲器的剩余容量可以容纳该数据包,再由大容量缓冲存储器传送给数据选择模块。
8.如权利要求3所述的实现InfiniBand网络长距离传输的设备,其特征是,其中,第三时钟域转换容量缓冲器,将数据由大容量缓冲存储器所在时钟域转化为InfiniBand时钟域;
其中,第二仲裁选择模块,对不同来源的数据进行仲裁发送,采用非抢占式优先级发送,优先级从高到底为网络管理数据、流控数据以及缓存数据;
所述大容量缓冲存储器,是指将接收到的数据进行先入先出队列缓存;
其中,大容量缓冲存储器的控制器,用于控制大容量缓冲存储器收发数据;
其中,数据选择模块,用于对接收到的不同来源的数据进行选择,选择接收路径选择模块的数据还是大容量缓冲存储器发送的数据。
9.如权利要求6所述的实现InfiniBand网络长距离传输的设备,其特征是,
所述信用值增设信用值位区间机制,以大容量缓冲存储器容量大小的位宽为总位宽,每次传输的信用值只取其中代表的值最大的区间;位区间机制,是指:以容量大小的位宽为总位宽,按固定的值的位宽数,将总位宽进行划分。
10.实现InfiniBand网络长距离传输的方法,其特征是,包括:
第一信用管理与流量控制模块,根据大容量缓冲存储器的剩余容量空间,得出广域网的信用值;将广域网的信用值送入第一仲裁选择模块,经过第一仲裁选择模块的仲裁选择后,发送给封装模块进行封装,而后,将封装后的数据经由广域网进行传输;
广域网数据接收端接收到广域网传输的数据后,去封装,送至第二信用管理与流量控制模块解析并更新得到广域网的信用值,而后将得到的广域网的信用值传送到第一信用管理与流量控制模块进行更新;
广域网数据发送端比较信用值和想要发送的数据包的长度,当广域网端的信用值大于等于想要发送的数据包的长度时,广域网数据发送端向第一仲裁选择模块发送数据,经过第一仲裁选择模块的仲裁选择后,发送给封装模块进行封装,而后,将封装后的数据经由广域网进行传输;
广域网数据接收端接收到广域网传输的数据后,将其送至去封装模块去封装,去封装后的数据随后被送入第二时钟域转换容量缓冲器,将其从广域网时钟域转化为大容量缓冲存储器所在的时钟域;
在数据进入大容量缓冲存储器容量之前,进行路径判断:当第三时钟域转换容量缓冲存储器有空间,且大容量缓冲存储器排空时,则进行数据前推,直接进入第三时钟域转换容量缓冲存储器;否则,将数据放入大容量缓冲存储器中缓存;
而后将数据从大容量缓冲存储器中读取出来的同时将所在的时钟转化为InfiniBand时钟,第二信用管理与流量控制模块比较InfiniBand数据包和InfiniBand端信用值的大小后,经由第二仲裁选择模块进行仲裁,将数据发送至InfiniBand网络;
重复上述步骤,以实现InfiniBand网络对数据的长距离传输。
CN202210017732.6A 2022-01-07 2022-01-07 实现InfiniBand网络长距离传输的设备及方法 Active CN114553801B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210017732.6A CN114553801B (zh) 2022-01-07 2022-01-07 实现InfiniBand网络长距离传输的设备及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210017732.6A CN114553801B (zh) 2022-01-07 2022-01-07 实现InfiniBand网络长距离传输的设备及方法

Publications (2)

Publication Number Publication Date
CN114553801A true CN114553801A (zh) 2022-05-27
CN114553801B CN114553801B (zh) 2023-05-16

Family

ID=81669415

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210017732.6A Active CN114553801B (zh) 2022-01-07 2022-01-07 实现InfiniBand网络长距离传输的设备及方法

Country Status (1)

Country Link
CN (1) CN114553801B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070014308A1 (en) * 2005-07-17 2007-01-18 Gunthorpe Jason G Method to extend the physical reach of an infiniband network
US8964547B1 (en) * 2004-06-08 2015-02-24 Oracle America, Inc. Credit announcement
US20180059976A1 (en) * 2016-08-26 2018-03-01 Sandisk Technologies Llc Storage System with Integrated Components and Method for Use Therewith

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8964547B1 (en) * 2004-06-08 2015-02-24 Oracle America, Inc. Credit announcement
US20070014308A1 (en) * 2005-07-17 2007-01-18 Gunthorpe Jason G Method to extend the physical reach of an infiniband network
CN101258719A (zh) * 2005-07-17 2008-09-03 黑曜石研究有限公司 延长InfiniBand网络的实时到达的方法
US20180059976A1 (en) * 2016-08-26 2018-03-01 Sandisk Technologies Llc Storage System with Integrated Components and Method for Use Therewith

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
张延年: ""光纤通道协议处理模块的设计与验证"" *
李琼: ""高性能InfiniBand通信卡设计与实现"" *

Also Published As

Publication number Publication date
CN114553801B (zh) 2023-05-16

Similar Documents

Publication Publication Date Title
US6877048B2 (en) Dynamic memory allocation between inbound and outbound buffers in a protocol handler
US5448564A (en) Modular architecture for fast-packet network
CN101095308B (zh) 用于队列级联和逻辑标识的系统分组接口分组交换的通信设备
US20050265357A1 (en) Memory caching
US20040151170A1 (en) Management of received data within host device using linked lists
WO2018149102A1 (zh) 一种降低高优先级数据传输时延的方法和装置、存储介质
CN116431079A (zh) 数据读取、写入方法及装置、带宽转换装置和电子设备
EP1491995B1 (en) Dual-port functionality for a single-port cell memory device
CN104407992B (zh) 一种基于双端口寄存器阵列的四端口存储器
CN113726679B (zh) 可动态配置的数据传输方法、装置、设备和存储介质
CN103117962A (zh) 一种星载共享存储交换装置
CN100591067C (zh) 一种用逻辑实现sdh和以太网速率适配的方法
WO2018068497A1 (zh) 光通道数据单元帧的映射方法和装置、计算机存储介质
EP1508225B1 (en) Method for data storage in external and on-chip memory in a packet switch
US8103788B1 (en) Method and apparatus for dynamically reallocating buffers for use in a packet transmission
CN114553801B (zh) 实现InfiniBand网络长距离传输的设备及方法
CN101702714B (zh) 计算机系统中的基于信用的流动控制的方法、系统和设备
US20040151175A1 (en) Transparent data format within host device supporting differing transaction types
US20100138554A1 (en) Interfacing with streams of differing speeds
US6914901B1 (en) System and method for communicating using multiple memory banks
CN115834804A (zh) 多路srio转多路arinc818的视频传输系统
US20040017813A1 (en) Transmitting data from a plurality of virtual channels via a multiple processor device
US7836213B2 (en) Coupling data buffers with memory interfaces
US11558316B2 (en) Zero-copy buffering of traffic of long-haul links
CN102223285B (zh) 处理数据报文的方法及网络节点

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant