CN103916319A - Lacp堆叠组网中的链路选择方法和堆叠设备 - Google Patents

Lacp堆叠组网中的链路选择方法和堆叠设备 Download PDF

Info

Publication number
CN103916319A
CN103916319A CN201310005089.6A CN201310005089A CN103916319A CN 103916319 A CN103916319 A CN 103916319A CN 201310005089 A CN201310005089 A CN 201310005089A CN 103916319 A CN103916319 A CN 103916319A
Authority
CN
China
Prior art keywords
link
stack
lacp
flow
equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201310005089.6A
Other languages
English (en)
Other versions
CN103916319B (zh
Inventor
戴一凡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
New H3C Technologies Co Ltd
Original Assignee
Hangzhou H3C Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou H3C Technologies Co Ltd filed Critical Hangzhou H3C Technologies Co Ltd
Priority to CN201310005089.6A priority Critical patent/CN103916319B/zh
Priority to PCT/CN2013/090208 priority patent/WO2014106438A1/en
Priority to US14/646,650 priority patent/US9559989B2/en
Publication of CN103916319A publication Critical patent/CN103916319A/zh
Application granted granted Critical
Publication of CN103916319B publication Critical patent/CN103916319B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L49/00Packet switching elements
    • H04L49/55Prevention, detection or correction of errors
    • H04L49/557Error correction, e.g. fault recovery or fault tolerance
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/0001Systems modifying transmission characteristics according to link quality, e.g. power backoff
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/22Arrangements for detecting or preventing errors in the information received using redundant apparatus to increase reliability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L45/00Routing or path finding of packets in data switching networks
    • H04L45/22Alternate routing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/10Flow control; Congestion control
    • H04L47/12Avoiding congestion; Recovering from congestion
    • H04L47/122Avoiding congestion; Recovering from congestion by diverting traffic away from congested entities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L2001/0092Error control systems characterised by the topology of the transmission link

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Quality & Reliability (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明提供了一种LACP堆叠组网中的链路选择方法和设备:堆叠设备在转发LACP链路之间的单播流量时,对堆叠成员所用到的转发表项进行标记,以标记出该流量出接口所在的堆叠成员;当LACP链路中有链路故障时,堆叠设备对转发表项进行查找;当故障链路所在的堆叠成员只有一个该故障链路所在LACP链路的聚合口成员端口时,堆叠设备将通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据流量信息将相应流量从对应LACP聚合口成员端口迁移到其它的成员端口。应用本发明所述的链路选择方法和设备,在LACP链路故障时,能够有效地减轻堆叠链路的工作负荷。

Description

LACP堆叠组网中的链路选择方法和堆叠设备
技术领域
本发明涉及通信技术领域,特别涉及一种链路聚合控制协议(LACP)堆叠组网中的链路选择方法和堆叠设备。
背景技术
图1为现有LACP堆叠组网的结构示意图,如图1所示,在该LACP堆叠组网中,当LACP链路中上行链路C1出现故障时,下游设备A、B与上游设备间只能通过上行链路C2进行通信。但是,下行链路A1、B1依旧会有向上游设备C的流量,当堆叠成员A收到这些流量后,发现与上游设备C间没有直连的链路,必须通过堆叠链路将流量转发给堆叠成员B后,再经由上行链路C2才能转发给上游设备C。这样就增加了堆叠链路的工作负荷,通常来说,堆叠链路的总速率必然小于堆叠成员上业务链路(即LACP链路)的总速率,所以会导致丢包等问题的产生。
目前,通常通过在LACP链路上运行Monitor Link功能来解决链路故障问题,即当上行链路故障时,通过Monitor Link将对应的下行链路关闭,实现单链路上下行(即上行链路C1故障,堆叠设备将下行链路A1,B1关闭)。
当上行链路故障时,自动将对应的下行链路关闭虽然可以有效的保护堆叠链路,但是对应的堆叠成员则被完全空置了下来,并且对于下游设备间的LAN内的数据通讯,则也必须通过另外的下行链路经行通讯,而不能经行负载均担。另外,运行Monitor Link功能只能对上行链路的故障采取保护措施,而对于下行链路的故障,则没有效果,从上游IP网内到局域网的数据依旧会通过原有的上行链路传递到堆叠设备上,再通过堆叠链路转发到另一个堆叠成员转发,也就不能达到减轻堆叠链路的工作负荷的目的。
发明内容
有鉴于此,本发明提供了一种LACP堆叠组网中的链路选择方法,在LACP链路故障时,能够有效地减轻堆叠链路的工作负荷。
本发明还提供了一种堆叠设备,在LACP链路故障时,能够有效地减轻堆叠链路的工作负荷。
为了达到上述目的,本发明提出的技术方案为:
一种链路聚合控制协议LACP堆叠组网中的链路选择方法,应用于包括堆叠设备和上、下游设备的LACP堆叠组网中,所述堆叠设备包括通过堆叠链路相连的堆叠成员,所述堆叠成员通过LACP链路与上、下游设备相连,该方法包括:
堆叠设备在转发LACP链路之间的单播流量时,对堆叠成员所用到的转发表项进行标记,以标记出该流量出接口所在的堆叠成员;
当LACP链路中有链路故障时,堆叠设备对转发表项进行查找;
当故障链路所在的堆叠成员只有一个该故障链路所在LACP链路的聚合口成员端口时,堆叠设备将通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据流量信息将相应流量从对应LACP聚合口成员端口迁移到其它的成员端口。
所述堆叠设备通过LACP报文中的TLV字段将通过故障链路转发流量的流量信息发送给其它上、下游设备,所述故障链路转发流量的流量信息包括故障链路的出接口对应的所有MAC地址及VLAN和IP地址。
当链路故障为LACP链路down时,所述堆叠设备将通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据流量信息将相应流量从对应LACP聚合口成员端口迁移到其它的成员端口具体包括:所述堆叠设备将所有通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据每一个流量信息将每一个相应流量从对应LACP聚合口成员端口迁移到其它的成员端口。
当链路故障为堆叠链路拥塞时,所述堆叠设备将通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据流量信息将相应流量从对应LACP聚合口成员端口迁移到其它的成员端口具体包括:所述堆叠设备将部分通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据流量信息将相应流量从对应LACP聚合口成员端口迁移到其它的成员端口;
进一步地,堆叠设备判断在一个预设周期内链路是否拥塞,如果是,再次发送多于上次发送的部分通过故障链路转发流量的流量信息给与该堆叠成员直连的其它上、下游设备,直至判断为在所述预设周期内链路不拥塞。
当链路故障为LACP链路拥塞时,所述堆叠设备将通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据流量信息将相应流量从对应LACP聚合口成员端口迁移到其它的成员端口具体包括:A、所述堆叠设备将部分通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据流量信息将相应流量从对应LACP聚合口成员端口迁移到其它的成员端口;
进一步地,堆叠设备判断在一个预设周期内链路是否拥塞,如果是,返回执A;否则,判断在三个预设周期内链路是否拥塞,如果是,判断为LACP链路震荡拥塞,通过直连链路向与其直连的其它上、下游设备发送流量信息将部分从故障链路迁移到其它链路的流量迁回至所述故障链路,直至单次迁回的流量小于预设值,否则,结束迁移。
一种链路聚合控制协议LACP堆叠组网中的链路选择设备,应用于包括堆叠设备和上、下游设备的LACP堆叠组网中,所述堆叠设备包括通过堆叠链路相连的堆叠成员,所述堆叠成员通过LACP链路与上、下游设备相连,该设备为LACP堆叠组网中的堆叠设备,该设备包括标记单元、查找单元和发送单元,其中,
所述标记单元,用于在转发LACP链路之间的单播流量时,对堆叠成员所用到的转发表项进行标记,以标记出该流量出接口所在的堆叠成员;
所述查找单元,用于当LACP链路中有链路故障时,对转发表项进行查找;
所述发送单元,用于当故障链路所在的堆叠成员只有一个该故障链路所在LACP链路的聚合口成员端口时,堆叠设备将通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据流量信息将相应流量从对应LACP聚合口成员端口迁移到其它的成员端口。
所述发送单元,用于通过LACP报文中的TLV字段将通过故障链路转发流量的流量信息发送给其它上、下游设备,所述故障链路转发流量的流量信息包括故障链路的出接口对应的所有MAC地址及VLAN和IP地址。
当链路故障为LACP链路down时,所述发送单元,用于将所有通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据每一个流量信息将每一个相应流量从对应LACP聚合口成员端口迁移到其它的成员端口。
当链路故障为堆叠链路拥塞时,所述发送单元,用于将部分通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据流量信息将相应流量从对应LACP聚合口成员端口迁移到其它的成员端口;
则,该设备还包括第一判断单元,用于判断在一个预设周期内链路是否拥塞;
所述发送单元,还用于当第一判断单元判断为在一个预设周期内链路拥塞时,再次发送多于上次发送的部分通过故障链路转发流量的流量信息给与该堆叠成员直连的其它上、下游设备。
当链路故障为LACP链路拥塞时,所述发送单元,用于将部分通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据流量信息将相应流量从对应LACP聚合口成员端口迁移到其它的成员端口,其中,剩余部分流量信息通过故障链路进行转发;
则,该设备还包括第一判断单元和第二判断单元,其中,
所述第一判断单元,用于判断在一个预设周期内链路是否拥塞;
则所述发送单元,还用于当第一判断单元判断为在一个预设周期内链路拥塞时,将部分通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备;
所述第二判断单元,用于当第一判断单元判断为在一个预设周期内链路不拥塞时,判断在三个预设周期内链路是否拥塞;
则所述发送单元,还用于当第二判断单元判断为在三个预设周期内链路拥塞时,判断为LACP链路震荡拥塞,将部分从故障链路迁移到其它链路的流量信息迁回至所述故障链路,直至单次迁回的流量小于预设值。
综上所述,本发明所采用的LACP堆叠组网中的链路选择方法,是通过由堆叠设备对堆叠成员所用到的转发表项进行标记,当LACP链路中有链路故障时,堆叠设备对转发表项进行查找,当故障链路所在的堆叠成员只有一个该故障链路所在LACP链路的聚合口成员端口时,堆叠设备将通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据流量信息将相应流量从对应LACP聚合口成员端口迁移到其它的成员端口。由于本发明方法在链路故障时,将由故障链路转发的流量的成员端口进行了迁移,也就使得流量能够通过迁移后的成员端口直接发送给没有与故障链路直连的堆叠设备中的堆叠成员,由该堆叠成员直接将流量转发出去,而无需通过堆叠链路进行转发。因此,当LACP链路故障时,本发明方法能够有效地减轻堆叠链路的工作负荷。
附图说明
图1为现有LACP堆叠组网的结构示意图;
图2为本发明实施例LACP堆叠组网链路选择方法的工作流程图;
图3为本发明实施一LACP堆叠组网链路选择设备的结构示意图;
图4为本发明实施二LACP堆叠组网链路选择设备的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图及具体实施例对本发明作进一步地详细描述。
图2为本发明LACP堆叠组网链路选择方法的工作流程图,该方法应用于如图1所示的包括堆叠设备和上、下游设备的LACP堆叠组网中,所述堆叠设备包括通过堆叠链路相连的堆叠成员,所述堆叠成员通过LACP链路与上、下游设备相连。如图2所示,该流程包括:
步骤201:堆叠设备在转发LACP链路之间的单播流量时,对堆叠成员所用到的转发表项进行标记,以标记出该流量出接口所在的堆叠成员。
需要说明的是,在本步骤中,当单播流量在堆叠设备中的堆叠成员之间转发时,对堆叠成员所用到的转发表项进行标记的是该流量出堆叠接口所在的堆叠成员。
还需说明的是,在本步骤中,是通过对堆叠成员所用到的转发表项打上tag(这里的tag可以为堆叠成员的编号)来完成标记的,如果有多个堆叠成员都使用这个转发表项进行转发单播流量,则这个转发表项会被打上多个堆叠成员的tag。进一步地,还可对转发表项中每个tag设置老化时间,默认的老化时间为10个LACP报文周期。
步骤202:当LACP链路中有链路故障时,堆叠设备对转发表项进行查找。
在本步骤中,链路故障有三种情况:一是LACP链路(即业务链路)down;二是堆叠链路拥塞;三是LACP链路拥塞。
步骤203:当故障链路所在的堆叠成员只有一个该故障链路所在LACP链路的聚合口成员端口时,堆叠设备将通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备。
需要说明的是,在本步骤中,堆叠设备是通过LACP报文中额外添加的TLV字段将通过故障链路转发流量的流量信息发送给其它上、下游设备,所述故障链路转发流量的流量信息包括故障链路的出接口对应的所有MAC地址及VLAN和IP地址。在实际中,还可通过其他方式来发送流量信息,以不影响本发明实施例的实现为准。
当步骤202中链路故障为LACP链路down时,堆叠设备是将所有通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备;当步骤202中链路故障为LACP链路拥塞或堆叠链路拥塞时,堆叠设备是将部分通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,这里的部分可以为A=50%。
进一步地,在本步骤中,所述部分由堆叠链路拥塞到堆叠链路不拥塞的收敛时间确定,当收敛时间越长时,所述部分应大(即前面的A越大);否则,所述部分应小(即前面的A越小),具体可根据实际应用确定,以不影响本发明实施例的实现为准。
还需说明的是,当流量信息被发送给与堆叠成员直连的其他上下游设备后,该流量信息对应的转发表项的标记将被清除;当发送的流量信息过多时,可采用依次发送的方式进行,以避免发送流量过多而导致的接收流量信息的上下游设备处理表项缓慢的问题。
步骤204:上、下游设备根据接收到的流量信息将相应流量从对应LACP聚合口成员端口迁移到其它的成员端口。
在执行本步骤之前,上下游设备还需要对堆叠设备发送的LACP报文中的TLV字段进行解析,得到堆叠设备发送的流量信息。
由此,当堆叠设备从上、下游设备接收到流量信息时,就可以根据流量信息中的MAC和IP,将流量从迁移后的出接口进行转发。
进一步地,在本实施例中,当链路故障为堆叠链路拥塞或LACP链路拥塞时,流量迁移可能导致LACP链路或堆叠链路循环往复地出现拥塞,进而导致流量反复迁移,因此,在堆叠成员向上下游设备发送表项以实现表项迁移时可设置一个定时器。本实施例可采用如下处理方式:
对于LACP链路拥塞来说,堆叠设备判断在一个预设周期链路是否拥塞,如果是,则重复发送该流量信息,并重新设备定时器,直至判断为在一个预设周期链路不拥塞。具体为:当堆叠成员发送一部分流量信息后,定时器开始工作,在一个预设周期到达时,如果LACP链路还处于拥塞状态,则重复发送该流量信息,并重新设备定时器,直至LACP链路在一个预设周期内不再拥塞;如果在1个预设周期到达时链路不拥塞,进一步判断1到3个预设周期是否拥塞,如果在1到3个预设周期之间发生拥塞,可能是因为流量的迁移而导致的往复拥塞,此时,将部分迁移的流量迁回到故障链路,故需要对上此迁移的流量数量添加一个震荡抑制系数B(小于1)从而部分迁回之前迁移的流量到故障链路,来收敛往复震荡的流量大小,直至当次迁回流量的数量小于设定值时,结束流程。
对于堆叠链路拥塞来说,堆叠设备判断在一个预设周期链路是否拥塞,如果是,为了保护堆叠链路,进一步加大流量的迁移量,以期使堆叠链路尽快消除拥塞。具体为:相对第一次迁移的流量,添加快速收敛系数C,若是在1个预设周期内堆叠链路依旧处于拥塞状态,则下次发送流量信息时,发送的流量信息数量递增一部分(如1.2倍,即(Cn×A%)=1.2×50%=60%),并且重新设置定时器。同样的。如果发送后的一个周期内依旧拥塞,则继续递增一部分(1.22×50%=0.72)。
至此,即完成了本发明实施例所采用的LACP堆叠组网链路选择方法的整个工作流程。
下面以具体实例来说明本发明LACP堆叠组网链路选择方法的具体过程,以图1上行链路C1故障为例来说明(本实施例是以IP表项为例来说明的),其中,表1、表2、表3和表4分别为下游设备A、下游设备B、上游设备C和堆叠设备的IP表项,其中,Bri*为聚合口。
表1
目的IP 出接口
1.1.1.1到1.1.1.200(目的设备为B) Bri1
2.2.2.1到2.2.2.200(目的设备为B) Bri1
3.3.3.1到3.3.3.200(目的设备为C) Bri1
4.4.4.1到4.4.4.200(目的设备为C) Bri1
表2
目的IP 出接口
5.5.5.1到5.5.5.200(目的设备为A) Bri2
6.6.6.1到6.6.6.200(目的设备为A) Bri2
7.7.7.1到7.7.7.200(目的设备为C) Bri2
8.8.8.1到8.8.8.200(目的设备为C) Bri2
表3
目的IP 出接口
9.9.9.1到9.9.9.200(目的设备为A) Bri3
10.10.10.1到10.10.10.200(目的设备为A) Bri3
11.11.11.1到11.11.11.200(目的设备为B) Bri3
12.12.12.1到12.12.12.200(目的设备为B) Bri3
表4
目的IP 出接口
1.1.1.1到1.1.1.200(目的设备为B) Bri2
2.2.2.1到2.2.2.200(目的设备为B) Bri2
3.3.3.1到3.3.3.200(目的设备为C) Bri3
4.4.4.1到4.4.4.200(目的设备为C) Bri3
5.5.5.1到5.5.5.200(目的设备为A) Bri1
6.6.6.1到6.6.6.200(目的设备为A) Bri1
7.7.7.1到7.7.7.200(目的设备为C) Bri3
8.8.8.1到8.8.8.200(目的设备为C) Bri3
9.9.9.1到9.9.9.200(目的设备为A) Bri1
10.10.10.1到10.10.10.200(目的设备为A) Bri1
11.11.11.1到11.11.11.200(目的设备为B) Bri2
12.12.12.1到12.12.12.200(目的设备为B) Bri2
假设下游设备A收到400条流量,目的IP为1.1.1.1到1.1.1.100、2.2.2.1到2.2.2.100、3.3.3.1到3.3.3.100、4.4.4.1到4.4.4.100,聚合口Bri1会进行一个合理的负载分担,将1.1.1.1到1.1.1.100和3.3.3.1到3.3.3.100从A1发送出去,将2.2.2.1到2.2.2.100和4.4.4.1到4.4.4.100从A2发送出去;堆叠设备通过不同的LACP链路收到这400条流量,查看自身的IP表项,1.1.1.1到1.1.1.100从A1进来,从Bri2出去,Bri2下的B1和A1属于同一个堆叠成员设备A,所以这条流量从B1发出去,同理2.2.2.1~100从B2出去,3.3.3.1~100从C1出去,4.4.4.1~100从C2出去。
同样地,下游设备B也会收到400条流量,分别为5.5.5.1~100、6.6.6.1~100、7.7.7.1~100、8.8.8.1~100,也会分别从B1过A1、B2过A2、B1过C1、B2过C2转发出去;上游设备C也收到400条流量,分别为9.9.9.1~100(C1A1)、10.10.10.1~100(C2A2)、11.11.11.1~100(C1B1)、12.12.12.1~100(C2B2)。
因此,现在所有LACP链路上都有200条上行流量,200条下行流量。(A1中上行流量为A发出的1.1.1.1~100、3.3.3.1~100,下行流量为堆叠设备转发的,从B发出的5.5.5.1~100和从C发出的9.9.9.1~100)。
假设上行链路C1Down掉,则堆叠设备将原有从Bri3为出接口的从C1出去的所有流量的表项(3.3.3.1到3.3.3.100,7.7.7.1~100)中的流量信息从堆叠成员A上所有聚合口下的成员接口(Bri1的A1,Bri2的B1)分别发送给下游设备A和B;A从A1收到这条报文,查看自己的IP表项中A1下有200条表项(1.1.1.1~100和3.3.3.1~100),发现有100条相应的流量信息重合,即3.3.3.1~100,于是将这些表项的出接口从A1替换为A2,同理下游设备B设备也会将7.7.7.1~100的出接口从B1替换为B2。
在完成出接口的替换后,A1和B1的上行流量均变成了100个,下行的流量为100个(A到B的1.1.1.1-100(A1上行,B1下行),B到A的5.5.5.1-100(A1下行,B1上行)),而A2和B2的上行流量和下行流量都变为300个(A到B的2.2.2.1-100(A2上行,B2下行),B到A的6.6.6.1-100(A2下行,B2上行),A到C的3.3.3.1-100和4.4.41-100(A2上行),C到A的9.9.9.1-10010.10.10.1-100(A2下行),B到C的7.7.7.1-100和8.8.8.1-100(B2上行),C到B的11.11.11.1-10012.12.12.1-100(B2下行)),由此,可能会造成A2和B2的拥塞。
当假设确定A2和B2产生拥塞时,需要将从A2为出接口的表项发送流量迁移一部分A%出去(假设发送75%,由于A2为出接口的表项有6.6.6.1~100和9.9.9.1~100和10.10.10.1~100,9.9.9.1~100是C1故障之后从C2迁移到C1上的所以表项比较新,而6.6.6.1~100和10.10.109.9.9.1~100是老的,所以优先发送老的表项,300条的75%为225条,即发送6.6.6.1~100,10.10.10.1~100和9.9.9.1~25这225条相应的流量信息)从其他聚合口B2,C2发出去,上游设备收到之后发现9.9.9.1-25和10.10.10.1-100这125条相应的流量信息重复,但是只有一条链路C2能通往堆叠设备,无法迁移,于是不做操作,下游设备B从B2收到这些流量信息之后进行比对,发现6.6.6.1~100为重复的相应的流量信息,所以将这100条表项的出接口从B2迁移到B1。同理,如果B2产生拥塞,需要将从B2为出接口的流量的流量信息也会发送部分出去,导致下游设备A的2.2.2.1到2.2.2.100的出接口从A2迁移到A1上了,至此,A1A2B1B2上的流量负载均衡了,均为200条上行200条下行。
进一步地,当有新的流量3.3.3.101~200和4.4.4.101~200这200条新的流量到达下游设备A的时候,A自动进行Bri1的负载均担,将3.3.3.101~200的流量信息从A1发出,4.4.4.101~200的流量信息从A2发出,这时,堆叠成员A收到3.3.3.101~200的流量信息发现出接口为Bri3,但是堆叠成员A上没有Bri3的出接口(C1故障,Down掉),于是通过堆叠链路将这个报文传给堆叠成员B,从C2转发出去,而4.4.4.101~200这些流量从A2到堆叠成员B,也从C2转发出去,当有很多新流量进入,则会导致堆叠链路产生拥塞。此时,从堆叠成员设备A发送到堆叠成员设备B的流量的表项为3.3.3.101~200,会从A下所有的聚合口往外发送75%,只要下游设备A中有相同表项,下游设备A就会将3.3.3.101~175从A1替换为A2。
进一步地,当流量迁移之后,在1个预设周期内,堆叠链路仍然拥塞,则继续通过继续进行流量迁移,但发送的时候不再是原先的75%,而是75%乘以一个大于1的系数,这样可以快速的将堆叠链路的拥塞事件消除,如果再次发送之后还是繁忙,则继续乘以这个系数,以能够快速消除堆叠链路的拥塞事件。
基于上述方法,图3给出了本发明所采用的LACP堆叠组网链路选择设备的结构,该设备为图1所示LACP堆叠组网中的堆叠设备。如图3所示,该设备包括:标记单元31、查找单元32和发送单元33,其中,
所述标记单元31,用于在转发LACP链路之间的单播流量时,对堆叠成员所用到的转发表项进行标记,以标记出该流量出接口所在的堆叠成员;
所述查找单元32,用于当LACP链路中有链路故障时,对转发表项进行查找;
所述发送单元33,用于当故障链路所在的堆叠成员只有一个该故障链路所在LACP链路的聚合口成员端口时,堆叠设备将通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据流量信息将相应流量从对应LACP聚合口成员端口迁移到其它的成员端口。
具体地,所述发送单元33,用于通过LACP报文中的TLV字段将通过故障链路转发流量的流量信息发送给其它上、下游设备,所述故障链路转发流量的流量信息包括故障链路的出接口对应的所有MAC地址及VLAN和IP地址。
进一步地,当链路故障为LACP链路down时,所述发送单元33,用于将所有通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据每一个流量信息将每一个相应流量从对应LACP聚合口成员端口迁移到其它的成员端口。
当链路故障为堆叠链路拥塞时,所述发送单元33,用于将部分通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据流量信息将相应流量从对应LACP聚合口成员端口迁移到其它的成员端口;
则,该设备还包括第一判断单元34,用于判断在一个LACP报文周期内链路是否拥塞;
所述发送单元33,还用于当第一判断单元34判断为在一个预设周期内链路拥塞时,再次发送多于上次发送的部分通过故障链路转发流量的流量信息给与该堆叠成员直连的其它上、下游设备,所述部分由堆叠链路拥塞到堆叠链路不拥塞的收敛时间确定。
当链路故障为LACP链路拥塞时,所述发送单元33,用于将部分通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据流量信息将相应流量从对应LACP聚合口成员端口迁移到其它的成员端口;
则,该设备还包括第一判断单元34和第二判断单元35,其中,
所述第一判断单元34,用于判断在一个预设周期内链路是否拥塞;
则所述发送单元33,还用于当第一判断单元34判断为在一个预设周期内链路拥塞时,将部分通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备;
所述第二判断单元35,用于当第一判断单元34判断为在一个预设周期内链路不拥塞时,判断在三个预设周期内链路是否拥塞且上次迁移的流量信息是否不小于预设值;
则所述发送单元33,还用于当第二判断单元35判断为在三个预设周期内链路拥塞且上次迁移的流量信息不小于预设值时,判断为LACP链路震荡拥塞,通过直连链路向与其直连的其它上、下游设备发送流量信息将部分从故障链路迁移到其它链路的流量迁回至所述故障链路,所述流量迁回逐渐减少直至单次迁回的流量小于预设值,所述部分由LACP链路拥塞到LACP链路不拥塞的收敛时间确定。
同样地,基于上述方法,图4给出了本发明所采用的LACP堆叠组网链路选择设备的结构,该设备为图1所示LACP堆叠组网中的上游设备或下游设备。如图4所示,该设备包括接收单元41和迁移单元42,其中,
所述接收单元41,用于当LACP链路中有链路故障、且故障链路所在的堆叠成员只有一个该故障链路所在LACP链路的聚合口成员端口时,接收由堆叠设备通过直连链路发送的通过故障链路转发流量的流量信息;
所述迁移单元42,用于当接收单元41接收到由堆叠设备通过直连链路发送的通过故障链路转发流量的流量信息时,根据所述接收到的流量信息将将相应流量从对应LACP聚合口成员端口迁移到其它的成员端口。
具体地,所述接收单元41,用于通过LACP报文中的TLV字段接收由堆叠设备通过直连链路发送的通过故障链路转发流量的流量信息,所述故障链路转发流量的流量信息包括故障链路的出接口对应的所有MAC地址及VLAN和IP地址。
至此,即得到了本发明所采用的LACP堆叠组网链路选择设备。图3和图4所述设备的具体工作流程可参见图2所述方法的工作流程,这里不再赘述。
总之,本发明所采用的本发明所采用的LACP堆叠组网中的链路选择方法,通过由堆叠设备对堆叠成员所用到的转发表项进行标记,当LACP链路中有链路故障时,堆叠设备对转发表项进行查找,当故障链路所在的堆叠成员只有一个该故障链路所在LACP链路的聚合口成员端口时,堆叠设备将通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据流量信息将相应流量从对应LACP聚合口成员端口迁移到其它的成员端口。由于本发明方法在链路故障时,将由故障链路转发的流量的成员端口进行了迁移,也就使得流量能够通过迁移后的成员端口直接发送给没有与故障链路直连的堆叠设备中的堆叠成员,由该堆叠成员直接将流量转发出去,而无需通过堆叠链路进行转发。因此,当LACP链路故障时,本发明方法能够有效地减轻堆叠链路的工作负荷。
进一步地,本发明所采用的链路选择方法还能够在链路负载和堆叠链路拥塞之间进行调和,因此,本发明方法不仅能够合理地实现链路间的负载均衡,而且还能够有效地减轻堆叠链路的工作负荷。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明保护的范围之内。

Claims (10)

1.一种链路聚合控制协议LACP堆叠组网中的链路选择方法,应用于包括堆叠设备和上、下游设备的LACP堆叠组网中,所述堆叠设备包括通过堆叠链路相连的堆叠成员,所述堆叠成员通过LACP链路与上、下游设备相连,其特征在于,该方法包括:
堆叠设备在转发LACP链路之间的单播流量时,对堆叠成员所用到的转发表项进行标记,以标记出该流量出接口所在的堆叠成员;
当LACP链路中有链路故障时,堆叠设备对转发表项进行查找;
当故障链路所在的堆叠成员只有一个该故障链路所在LACP链路的聚合口成员端口时,堆叠设备将通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据流量信息将相应流量从对应LACP聚合口成员端口迁移到其它的成员端口。
2.根据权利要求1所述的方法,其特征在于,所述堆叠设备通过LACP报文中的TLV字段将通过故障链路转发流量的流量信息发送给其它上、下游设备,所述故障链路转发流量的流量信息包括故障链路的出接口对应的所有MAC地址及VLAN和IP地址。
3.根据权利要求1至2中任一项所述的方法,其特征在于,当链路故障为LACP链路down时,所述堆叠设备将通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据流量信息将相应流量从对应LACP聚合口成员端口迁移到其它的成员端口具体包括:所述堆叠设备将所有通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据每一个流量信息将每一个相应流量从对应LACP聚合口成员端口迁移到其它的成员端口。
4.根据权利要求1至2中任一项所述的方法,其特征在于,当链路故障为堆叠链路拥塞时,所述堆叠设备将通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据流量信息将相应流量从对应LACP聚合口成员端口迁移到其它的成员端口具体包括:所述堆叠设备将部分通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据流量信息将相应流量从对应LACP聚合口成员端口迁移到其它的成员端口;
进一步地,堆叠设备判断在一个预设周期内链路是否拥塞,如果是,再次发送多于上次发送的部分通过故障链路转发流量的流量信息给与该堆叠成员直连的其它上、下游设备,直至判断为在所述预设周期内链路不拥塞。
5.根据权利要求1至2中任一项所述的方法,其特征在于,当链路故障为LACP链路拥塞时,所述堆叠设备将通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据流量信息将相应流量从对应LACP聚合口成员端口迁移到其它的成员端口具体包括:A、所述堆叠设备将部分通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据流量信息将相应流量从对应LACP聚合口成员端口迁移到其它的成员端口;
进一步地,堆叠设备判断在一个预设周期内链路是否拥塞,如果是,返回执A;否则,判断在三个预设周期内链路是否拥塞如果是,判断为LACP链路震荡拥塞,通过直连链路向与其直连的其它上、下游设备发送流量信息将部分从故障链路迁移到其它链路的流量迁回至所述故障链路,所述流量迁回逐渐减少直至单次迁回的流量小于预设值,否则,结束迁移。
6.一种堆叠设备,应用于包括所述堆叠设备和上、下游设备的链路聚合控制协议LACP堆叠组网中,所述堆叠设备包括通过堆叠链路相连的堆叠成员,所述堆叠成员通过LACP链路与上、下游设备相连,其特征在于,该设备为LACP堆叠组网中的堆叠设备,该设备包括标记单元、查找单元和发送单元,其中,
所述标记单元,用于在转发LACP链路之间的单播流量时,对堆叠成员所用到的转发表项进行标记,以标记出该流量出接口所在的堆叠成员;
所述查找单元,用于当LACP链路中有链路故障时,对转发表项进行查找;
所述发送单元,用于当故障链路所在的堆叠成员只有一个该故障链路所在LACP链路的聚合口成员端口时,堆叠设备将通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据流量信息将相应流量从对应LACP聚合口成员端口迁移到其它的成员端口。
7.根据权利要求6所述的堆叠设备,其特征在于,所述发送单元,用于通过LACP报文中的TLV字段将通过故障链路转发流量的流量信息发送给其它上、下游设备,所述故障链路转发流量的流量信息包括故障链路的出接口对应的所有MAC地址及VLAN和IP地址。
8.根据权利要求6至7任一项所述的堆叠设备,其特征在于,
当链路故障为LACP链路down时,所述发送单元,用于将所有通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据每一个流量信息将每一个相应流量从对应LACP聚合口成员端口迁移到其它的成员端口。
9.根据权利要求6至7任一项所述的堆叠设备,其特征在于,当链路故障为堆叠链路拥塞时,所述发送单元,用于将部分通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据流量信息将相应流量从对应LACP聚合口成员端口迁移到其它的成员端口;
则,该设备还包括第一判断单元,用于判断在一个预设周期内链路是否拥塞;
所述发送单元,还用于当第一判断单元判断为在一个预设周期内链路拥塞时,再次发送多于上次发送的部分通过故障链路转发流量的流量信息给与该堆叠成员直连的其它上、下游设备。
10.根据权利要求6至7任一项所述的堆叠设备,其特征在于,当链路故障为LACP链路拥塞时,所述发送单元,用于将部分通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备,以使其它上、下游设备根据流量信息将相应流量从对应LACP聚合口成员端口迁移到其它的成员端口;
则,该设备还包括第一判断单元和第二判断单元,其中,
所述第一判断单元,用于判断在一个预设周期内链路是否拥塞;
则所述发送单元,还用于当第一判断单元判断为在一个预设周期内链路拥塞时,将部分通过故障链路转发流量的流量信息通过直连链路发送给与该堆叠成员直连的其它上、下游设备;
所述第二判断单元,用于当第一判断单元判断为在一个预设周期内链路不拥塞时,判断在三个预设周期内链路是否拥塞;
所述发送单元,还用于当第二判断单元判断为在三个预设周期内链路拥塞时,判断为LACP链路震荡拥塞,通过直连链路向与其直连的其它上、下游设备发送流量信息将部分从故障链路迁移到其它链路的流量迁回至所述故障链路,所述流量迁回逐渐减少直至单次迁回的流量小于预设值。
CN201310005089.6A 2013-01-06 2013-01-06 Lacp堆叠组网中的链路选择方法和堆叠设备 Active CN103916319B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201310005089.6A CN103916319B (zh) 2013-01-06 2013-01-06 Lacp堆叠组网中的链路选择方法和堆叠设备
PCT/CN2013/090208 WO2014106438A1 (en) 2013-01-06 2013-12-23 Link problem handling
US14/646,650 US9559989B2 (en) 2013-01-06 2013-12-23 Link problem handling

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310005089.6A CN103916319B (zh) 2013-01-06 2013-01-06 Lacp堆叠组网中的链路选择方法和堆叠设备

Publications (2)

Publication Number Publication Date
CN103916319A true CN103916319A (zh) 2014-07-09
CN103916319B CN103916319B (zh) 2017-03-15

Family

ID=51041733

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310005089.6A Active CN103916319B (zh) 2013-01-06 2013-01-06 Lacp堆叠组网中的链路选择方法和堆叠设备

Country Status (3)

Country Link
US (1) US9559989B2 (zh)
CN (1) CN103916319B (zh)
WO (1) WO2014106438A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104618254A (zh) * 2015-02-12 2015-05-13 杭州华三通信技术有限公司 软件定义网络中避免网络拥塞的方法和控制器
CN107547430A (zh) * 2017-08-30 2018-01-05 新华三信息安全技术有限公司 一种报文发送方法及装置
CN108933744A (zh) * 2018-06-26 2018-12-04 新华三技术有限公司 一种报文转发方法及装置
CN115883492A (zh) * 2022-11-18 2023-03-31 浪潮思科网络科技有限公司 一种MLAG环境下的RoCE-SAN无损存储网络故障收敛方法

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112838984A (zh) * 2015-11-26 2021-05-25 华为技术有限公司 一种用于实现负载分担的方法和装置
CN106789663B (zh) * 2016-02-24 2021-04-16 新华三技术有限公司 一种报文转发方法及装置
CN108306773B (zh) * 2018-03-07 2021-08-31 深圳市风云实业有限公司 网络收敛方法、装置及计算机存储介质
CN109104376B (zh) * 2018-07-16 2022-04-08 新华三技术有限公司 一种数据的转发方法、装置、堆叠设备和计算机可读介质
US11726835B2 (en) * 2019-05-12 2023-08-15 Apple Inc. Systems and methods for PCI load balancing

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070133395A1 (en) * 2005-12-14 2007-06-14 International Business Machines Corporation Avoiding deadlocks in performing failovers in communications environments
CN101605104A (zh) * 2009-07-23 2009-12-16 杭州华三通信技术有限公司 堆叠设备中的流量转发方法和设备
CN102404234A (zh) * 2011-12-26 2012-04-04 杭州华三通信技术有限公司 流量转发方法和设备
US20120320739A1 (en) * 2011-06-17 2012-12-20 International Business Machines Corporation Fault Tolerant Communication in a Trill Network

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7197044B1 (en) 1999-03-17 2007-03-27 Broadcom Corporation Method for managing congestion in a network switch
US6910149B2 (en) 2001-09-24 2005-06-21 Intel Corporation Multi-device link aggregation
US8886831B2 (en) * 2006-04-05 2014-11-11 Cisco Technology, Inc. System and methodology for fast link failover based on remote upstream failures
US8018843B2 (en) * 2006-09-19 2011-09-13 Futurewei Technologies, Inc. Faults propagation and protection for connection oriented data paths in packet networks
CN100479408C (zh) * 2007-03-12 2009-04-15 中兴通讯股份有限公司 一种堆叠系统内部转发表的实现方法
US7756029B2 (en) 2007-05-24 2010-07-13 Harris Stratex Networks Operating Corporation Dynamic load balancing for layer-2 link aggregation
US7840708B2 (en) * 2007-08-13 2010-11-23 Cisco Technology, Inc. Method and system for the assignment of security group information using a proxy
US8300523B2 (en) 2008-07-28 2012-10-30 Cisco Technology, Inc. Multi-chasis ethernet link aggregation
CN102118319B (zh) 2011-04-06 2013-09-18 杭州华三通信技术有限公司 流量负载均衡方法和装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070133395A1 (en) * 2005-12-14 2007-06-14 International Business Machines Corporation Avoiding deadlocks in performing failovers in communications environments
CN101605104A (zh) * 2009-07-23 2009-12-16 杭州华三通信技术有限公司 堆叠设备中的流量转发方法和设备
US20120320739A1 (en) * 2011-06-17 2012-12-20 International Business Machines Corporation Fault Tolerant Communication in a Trill Network
CN102404234A (zh) * 2011-12-26 2012-04-04 杭州华三通信技术有限公司 流量转发方法和设备

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104618254A (zh) * 2015-02-12 2015-05-13 杭州华三通信技术有限公司 软件定义网络中避免网络拥塞的方法和控制器
CN107547430A (zh) * 2017-08-30 2018-01-05 新华三信息安全技术有限公司 一种报文发送方法及装置
CN107547430B (zh) * 2017-08-30 2022-05-24 新华三信息安全技术有限公司 一种报文发送方法及装置
CN108933744A (zh) * 2018-06-26 2018-12-04 新华三技术有限公司 一种报文转发方法及装置
CN108933744B (zh) * 2018-06-26 2021-01-26 新华三技术有限公司 一种报文转发方法及装置
CN115883492A (zh) * 2022-11-18 2023-03-31 浪潮思科网络科技有限公司 一种MLAG环境下的RoCE-SAN无损存储网络故障收敛方法

Also Published As

Publication number Publication date
CN103916319B (zh) 2017-03-15
US20150295861A1 (en) 2015-10-15
US9559989B2 (en) 2017-01-31
WO2014106438A1 (en) 2014-07-10

Similar Documents

Publication Publication Date Title
CN103916319A (zh) Lacp堆叠组网中的链路选择方法和堆叠设备
CN102263697B (zh) 一种聚合链路流量分担方法和装置
CN103716208B (zh) 支持大象流的网络管理方法、系统、交换机和网络
CN102882719B (zh) 实现Openflow交换机系统中控制器冗余备份的方法及系统
CN102571426B (zh) 一种双归保护方法和装置
CN102739518B (zh) 一种流量负载分担方法和设备
CN104468353A (zh) 基于sdn的数据中心网络流量管理方法
Lee et al. Path layout planning and software based fast failure detection in survivable OpenFlow networks
CN104272708A (zh) 带有到服务器群组的无状态第一级分组分布和到群组内某个服务器的有状态第二级分组分布的二级分组分布
CN104756451A (zh) 用于lag接口上网络流的动态负载平衡的方法
CN101094185A (zh) 基于多链路的报文转发方法和装置
CN105743801A (zh) 一种堆叠系统的流量转发的方法及装置
CN102868645A (zh) Openflow交换机系统及其报文处理方法
CN105579989B (zh) 通过集中的端到端连接传输包的方法和系统
CN106340176A (zh) 一种智能电表的信息共享方法、智能电表及采集路由器
CN111049752B (zh) 多传输线路的负载均衡方法及装置
CN103117946B (zh) 基于隔离装置与隔离网关结合应用的流量分担方法
CN105359467B (zh) 通过集中的端到端连接传输包的方法和系统
CN106209615B (zh) 一种基于spfa算法计算转发路径的动态路由控制方法和系统
CN105594176B (zh) 通过网络接口传输包的方法和系统
CN110351286A (zh) 一种软件定义网络中链路洪泛攻击检测响应机制
CN105323170A (zh) 环形拓扑堆叠系统路径选择方法、装置及主设备
CN103023815B (zh) 聚合链路负载分担方法及装置
CN104539552A (zh) 一种基于网络芯片的动态ecmp的实现方法
CN108337179A (zh) 链路流量控制方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CP03 Change of name, title or address

Address after: 310052 Binjiang District Changhe Road, Zhejiang, China, No. 466, No.

Patentee after: Xinhua three Technology Co., Ltd.

Address before: 310053 Hangzhou hi tech Industrial Development Zone, Zhejiang province science and Technology Industrial Park, No. 310 and No. six road, HUAWEI, Hangzhou production base

Patentee before: Huasan Communication Technology Co., Ltd.

CP03 Change of name, title or address