CN110324163A - 一种数据传输的方法及相关装置 - Google Patents
一种数据传输的方法及相关装置 Download PDFInfo
- Publication number
- CN110324163A CN110324163A CN201810274242.8A CN201810274242A CN110324163A CN 110324163 A CN110324163 A CN 110324163A CN 201810274242 A CN201810274242 A CN 201810274242A CN 110324163 A CN110324163 A CN 110324163A
- Authority
- CN
- China
- Prior art keywords
- equipment
- connecting quantity
- data
- address
- analyzed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/04—Processing captured monitoring data, e.g. for logfile generation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/14—Network analysis or design
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/70—Admission control; Resource allocation
- H04L47/80—Actions related to the user profile or the type of traffic
- H04L47/805—QOS or priority aware
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/14—Session management
- H04L67/141—Setup of application sessions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L2212/00—Encapsulation of packets
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L61/00—Network arrangements, protocols or services for addressing or naming
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Data Mining & Analysis (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
- Arrangements For Transmission Of Measured Signals (AREA)
- Maintenance And Management Of Digital Transmission (AREA)
Abstract
本申请公开了一种数据传输的方法及相关装置。第一设备接收分析设备发送的连接建立请求和目标数据特征,连接建立请求包括分析设备的第一连接参数;根据目标数据特征确定采集目标数据特征对应的待分析数据的第二设备,第一设备与第二设备属于同一个分布式系统;确定第二设备的第二连接参数;将第一连接参数、第二连接参数和目标数据特征发送给第二设备,使第二设备根据第一连接参数和第二连接参数与分析设备建立连接,并通过建立的连接向分析设备传输目标数据特征对应的待分析数据。本申请能够避免第二设备采集的数据大量汇集到第一设备,使采集的数据无法及时发送给分析设备,进而导致分析设备得出的网络测量结果不够及时准确的问题。
Description
技术领域
本申请涉及通信技术领域,尤其涉及一种数据传输的方法及相关装置。
背景技术
无论是有线网络还是无线网络中,为了保证网络中业务的服务质量,通常需要进行网络测量。网络测量一般由分析设备执行,网络设备与分析设备之间建立通信连接,例如传输控制协议(Transmission Control Protocol,TCP)连接。网络设备根据分析设备的要求采集用于网络测量的数据,并将采集的数据通过通信连接传输给分析设备。分析设备通过分析网络设备采集的数据,确定出网络设备的网络时延、抖动、拥塞、丢包等情况。网络管理人员或网络管理服务器可以基于网络测量的结果及时发现网络中的问题,并对网络配置参数进行调整,进而保证网络中业务的服务质量。
分布式架构的网络设备,例如框式交换机,通常包括主控板和多个接口板。在网络测量时,分析设备与主控板建立TCP连接,多个接口板中的每个接口板采集网络测量所需的数据并将采集的数据发送给主控板,主控板将各接口板采集的数据封装后发送给分析设备。如此,各接口板采集的数据均需要通过主控板与分析设备之间的TCP连接进行传输,在接口板数量较多的情况下,各接口板将向主控板发送大量采集的数据,这些数据超出主控板与分析设备之间TCP连接的承载能力,从而导致采集的数据无法及时发送给分析设备,进而导致分析设备得出的网络测量结果不够及时准确。
发明内容
本申请提供了一种数据传输的方法及相关装置,能够避免接口板采集的数据大量汇集到主控板,使数据无法及时发送给分析设备,进而导致分析设备得出的网络测量结果不够及时准确的问题。
第一方面,本申请提供了一种数据传输的方法。第一设备接收分析设备发送的连接建立请求和目标数据特征,所述连接建立请求包括所述分析设备的第一连接参数。所述第一设备根据所述目标数据特征确定采集所述目标数据特征对应的待分析数据的第二设备,所述第一设备与所述第二设备属于同一个分布式系统。所述第一设备确定所述第二设备的第二连接参数。所述第一设备将所述第一连接参数、所述第二连接参数和所述目标数据特征发送给所述第二设备,使所述第二设备根据所述第一连接参数和所述第二连接参数与所述分析设备建立连接,并通过建立的所述连接向所述分析设备传输所述目标数据特征对应的待分析数据。
本申请实施例中,第二设备不需要将采集的待分析数据汇总到第一设备,而是直接传输给分析设备,从而即使有多个第二设备同时采集待分析数据,也可以各自将采集的待分析数据传输给分析设备,而不会使大量数据汇集到第一设备,避免第一设备成为数据传输的瓶颈,并进一步避免待分析数据无法及时发送给分析设备而导致分析设备得出的分析结果不够及时准确的问题。
结合第一方面,在第一方面的第一种可能的实施方式中,所述第一设备确定所述第二设备的第二连接参数,包括:当所述第一设备根据所述目标数据特征判定所述待分析数据为标识所述分布式系统中至少一个第二设备特征的数据或所述待分析数据的采集频率大于频率门限时,所述第一设备确定所述第二设备的第二连接参数。
本实施方式中,第一设备对目标数据特征进行分析,确定判定所述待分析数据为标识所述分布式系统中至少一个第二设备特征的数据或所述待分析数据的采集频率大于频率门限时,表示第二设备采集的待分析数据的数据量较大,对第一设备输出数据的性能要求较高,此时第一设备确定所述第二设备的第二连接参数,使第二设备与分析设备直接建立连接并传输采集的待分析数据,避免第一设备成为数据传输的瓶颈,进而避免待分析数据无法及时发送给分析设备而导致分析设备得出的分析结果不够及时准确的问题。
结合第一方面或第一方面的第一种可能的实施方式,在第一方面的第二种可能的实施方式中,所述第一设备向所述分析设备发送所述第二设备的第二连接参数与所述第二设备对应的接口之间的映射关系,所述第二设备对应的接口为所述第二设备采集所述待分析数据的接口。
结合第一方面或第一方面的任一种可能的实施方式,在第一方面的第三种可能的实施方式中,所述第一设备接收所述第二设备发送的报文,所述报文为所述第二设备根据所述第一连接参数和所述第二连接参数封装所述待分析数据得到的;所述第一设备根据所述第一连接参数将所述报文转发给所述分析设备。
结合第一方面或第一方面的任一种可能的实施方式,在第一方面的第四种可能的实施方式中,所述第二连接参数包括所述第二设备的地址,所述第二设备的地址与所述第一设备的地址不同;或者,所述第二连接参数包括所述第二设备的地址和所述第二设备的端口号,所述第二设备的地址与所述第一设备的地址不同;或者,所述第二连接参数包括所述第一设备的地址和所述第二设备的端口号,所述第二设备的端口号为所述第一设备分配的。
第二方面,本申请提供了一种数据传输的方法。第二设备接收第一设备发送的第一连接参数,第二连接参数和目标数据特征,所述第一连接参数和所述目标数据特征由分析设备发送给所述第一设备,所述第二连接参数为由第一设备确定,所述第一设备与所述第二设备属于同一个分布式系统。所述第二设备通过所述第一连接参数和所述第二连接参数与所述分析设备之间建立连接。所述第二设备采集所述目标数据特征对应的待分析数据。所述第二设备通过所述建立的连接向所述分析设备发送所述待分析数据。
本申请实施例中,第二设备不需要将采集的待分析数据汇总到第一设备,而是直接传输给分析设备,从而即使有多个第二设备同时采集待分析数据,也可以各自将采集的待分析数据传输给分析设备,而不会使大量数据汇集到第一设备,避免第一设备成为数据传输的瓶颈,并进一步避免待分析数据无法及时发送给分析设备而导致分析设备得出的分析结果不够及时准确的问题。
结合第二方面,在第二方面的第一种可能的实施方式中,所述第二设备根据所述第一连接参数和所述第二连接参数将所述待分析数据封装为报文;所述第二设备通过所述建立的连接向所述分析设备发送所述封装的报文。
结合第二方面的第一种可能的实施方式,在第二方面的第二种可能的实施方式中,第二设备将所述封装的报文发送至到所述第一设备,使所述第一设备将所述封装的报文转发至所述分析设备。
结合第二方面或第二方面的任一种可能的实施方式,在第二方面的第三种可能的实施方式中,所述第二连接参数包括所述第二设备的地址所述第二设备的地址与所述第一设备的地址不同;或者,所述第二连接参数包括所述第二设备的地址和所述第二设备的端口号,所述第二设备的地址与所述第一设备的地址不同;或者,所述第二连接参数包括所述第一设备的地址和所述第二设备的端口号,所述第二设备的端口号为所述第一设备分配的。
第三方面,本申请提供了一种数据传输的装置,包括用于实现本申请第一方面及第一方面的各实现方式中的方法的功能单元。
第四方面,本申请提供了一种数据传输的装置,包括用于实现本申请第二方面及第二方面的各实现方式中的方法的功能单元。
第五方面,本申请提供了一种数据传输的系统,包括如第三方面或第三方面的任一种实施方式所述的数据传输的装置和如第四方面或第四方面的任一种实施方式所述的数据传输的装置。
第六方面,本申请提供了一种数据传输的设备,包括:处理器和存储器;
所述存储器用于存储计算机程序代码,所述计算机程序代码包括指令;
所述处理器用于执行所述指令,以使所述数据传输的设备实现如第一方面或第一方面的任一种实施方式所述的数据传输的方法。
第七方面,本申请提供了另一种数据传输的设备,包括:处理器和存储器;
所述存储器用于存储计算机程序代码,所述计算机程序代码包括指令;
所述处理器用于执行所述指令,以使所述数据传输的设备用于执行如第二方面或第二方面的任一种实施方式所述的数据传输的方法。
第八方面,本申请提供了一种计算机可读存储介质,该计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行如第一方面或第一方面的任一种实施方式所述的数据传输的方法。
第九方面,本申请提供了另一种计算机可读存储介质,该计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行如第二方面或第二方面的任一种实施方式所述的数据传输的方法。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对本申请实施例中所需要使用的附图作简单地介绍。
图1是根据本申请实施例提供的网络架构示意图;
图2是根据本申请实施例提供的一种数据传输的方法的示意性流程图;
图3是根据本发明实施例提供的一种数据传输的装置的示意框图;
图4是根据本发明实施例提供的又一种数据传输的装置的示意框图;
图5是根据本发明实施例提供的一种数据传输的设备的示意框图。
具体实施方式
在不冲突的情况下,本申请中的各实施例及各实施例中的不同特征可以相互组合。
本申请实施例可以用于分布式系统。图1为本申请实施例提供的一种网络架构示意图。如图1所示,分布式系统具体为分布式集群100。分布式集群100可以为无线网络中的一个集群,也可以为分布式架构的网络设备,如框式交换机,框式路由器等。分布式集群100包括多个设备,图1中以包括设备101、设备102、设备103和设备104为例进行说明。分布式集群100中设备102、设备103和设备104均可以与设备101通信,设备101用于分布式集群100中各设备与分布式集群100外其他设备的数据传输,是集群的对外接口或代理。设备101还协调分布式集群100内各个设备之间的协作。分析设备200为对分布式集群100,分布式集群100中的设备或分布式集群100所处网络进行网络测量的设备,分析设备200可以与分布式集群100处于同一个网络,也可以与分布式集群100处于不同网络。分析设备200在对分布式集群100,分布式集群100中的设备或分布式集群100所处网络进行网络测量时,需要先与分布式集群100建立连接,并通知分布式集群100中的设备待分析的数据特征。分布式集群100中的设备采集数据后,通过建立的连接将采集的数据封装后传输给分析设备200。分析设备200获取并分析采集的数据,根据分析结果对网络配置参数进行调整,保证网络中业务的服务质量。
目前,由于分布式集群100中,各设备均通过设备101向集群外设备传输数据,所以分析设备200在网络测量时先与设备101建立连接,并将待分析数据的数据特征通知设备101,设备101通过待分析数据的数据特征可以确定出所要采集的待分析数据,以及采集待分析数据的设备,将所要采集的待分析数据的数据特征下发给确定的采集待分析数据的设备,例如设备102、设备103和设备104。设备102、设备103和设备104采集待分析数据后,将采集的待分析数据发送给设备101。设备101在汇集其他设备采集的待分析数据后将该待分析数据封装,并将封装后的待分析数据发送给分析设备200。分析设备200根据接收的待分析数据进行网络测量。在待分析数据的采集频率大于门限或待分析数据标识整个分布式系统特征等情况时,设备2,设备3和设备4会采集大量的待分析数据,并将采集的待分析数据发送给设备101。如果设备101数据输出的性能不能满足需求,例如采集的数据量超出设备101与分析设备200之间连接的承载能力,则会导致设备101接收的待分析数据无法及时发送给分析设备200。所以在数据输出的高性能需求场景下,设备101是与分析设备之间数据传输的瓶颈。
本申请实施例中,分析设备200通过设备101可以与分布式集群100中的其他设备之间建立连接,即分析设备200可以与每个采集数据的设备之间建立连接,并进行数据传输,从而避免多个设备采集的数据汇集到一个设备再进行传输的情况,使各设备采集的数据能够及时传输给分析设备200,进而分析设备200可以及时、准确的得出分析结果,达到指导网络配置参数优化的目的。
作为一个示例,分布式系统还可以为框式交换机,框式交换机包括一个主控板和多个接口板,主控板和接口板可以通过以太网接口进行数据传输。图1所示分布式系统中设备101相当于主控板,设备102、设备103和设备104相当于接口板。本申请实施例中,分析设备可以通过主控板与各接口板分别建立连接,从而通过建立的连接传输各接口板采集的数据。
本申请一实施例提供了一种数据传输的方法,可以用于图1所示网络架构,如图2所示,该方法包括以下步骤。
201,第一设备接收分析设备发送的连接建立请求和目标数据特征。
其中,连接建立请求用于请求与分布式系统建立连接。连接建立请求包括分析设备的第一连接参数。第一连接参数可以包括分析设备的地址、端口号、待建立连接的协议类型等等。例如,分析设备建立的连接为TCP连接,则第一连接参数可以包括分析设备的IP地址、连接的协议类型即TCP、分析设备的TCP端口号等等。
第一设备为分布式系统中与分布式系统之外设备进行数据传输的设备,具体可以为图1所示分布式系统中的设备101。目标数据特征用于指示目标数据,目标数据即待分析数据,为分析设备进行网络测量时需要分析的数据,目标数据特征可以包括目标数据的类型、采集的频率、采集的周期等等。
本申请实施例中,分析设备在对分布式系统进行网络测量时,可以与采集目标数据的设备建立连接。在建立连接时,分析设备先将用于建立连接的连接建立请求发送给第一设备,第一设备接收分析设备发送的连接建立请求后,确定分析设备为了进行网络测量而建立连接。
例如,分布式系统为框式交换机时,分析设备需要将连接建立请求发送给主控板,主控板接收到连接建立请求,可以确定出分析设备的第一连接参数。
202,第一设备根据目标数据特征确定采集所述目标数据特征对应的待分析数据的第二设备。
其中,第二设备为采集分析设备所需数据(即目标数据)的设备,所述第一设备与所述第二设备属于同一个分布式系统。所述第二设备具体可以为图1所示分布式系统中的设备102、设备103和设备104。
第一设备可以根据目标数据特征确定需要采集哪些目标数据,即待分析数据,以及在哪些第二设备或者哪些接口能够采集到待分析数据,进而可以确定采集待分析数据的第二设备。
例如,分析设备需要分析用户A的流量在分布式系统内转发的时延,则分析设备确定待分析数据的数据特征为用户A的流量进入和发出分布式系统的时间,第一设备可以确定转发用户A的流量的设备为能够采集到这些数据的第二设备。
需要说明的是,第一设备确定出的采集待分析数据的第二设备可以为一个,也可以为多个。
203,第一设备确定第二设备的第二连接参数。
其中,第一设备在接收分析设备的连接建立请求后,需要确定第二设备对应的第二连接参数,以便于第二设备与分析设备建立连接并传输数据。
第一设备的地址和第二设备的地址不同时,第二连接参数可以包括第二设备的地址(例如,IP地址),或者第二连接参数可以包括第二设备的地址和端口号。例如,在图1所示的架构中,第二设备可以具有独立的IP地址和端口,如TCP连接的端口号,或用户数据报协议(User DatagramProtocol,UDP)连接的端口号,所以第一设备可以确定出第二设备用于与分析设备建立连接的连接参数。
或者,第一设备的地址和第二设备的地址相同时,第二连接参数包括所述第一设备的地址和所述第二设备的端口号。例如,分布式系统为框式交换机,接口板和主控板的IP地址均为交换机的IP地址,所以第一设备可以确定第二设备的地址即为第一设备的地址,第一设备可以为各个第二设备分配用于传输数据的端口号,从而确定出各个第二设备的第二连接参数。
204,第一设备向第二设备发送第一连接参数、第二连接参数和所述目标数据特征。
第一设备可以通过一条消息向第二设备发送所述第一连接参数、所述第二连接参数和所述目标数据特征,也可以通过不同的消息向第二设备分别发送所述第一连接参数、所述第二连接参数和所述目标数据特征。
205,第二设备根据所述第一连接参数和所述第二连接参数与所述分析设备建立连接。
其中,第二设备在接收到第一连接参数和第二连接参数后,即可与分析设备之间建立用于数据传输的连接,所述连接例如可以是TCP连接。
206,第二设备采集所述目标数据特征对应的待分析数据。
207,第二设备通过所述建立的连接向所述分析设备发送所述待分析数据。
本申请实施例中,第一设备接收到分析设备发送的连接请求后,可以根据分析设备发送的目标数据特征确定出采集待分析数据的第二设备,以及第二设备可以用于建立连接的第二连接参数,然后将分析设备的第一连接参数、目标数据特征和第二设备的第二连接参数发送给第二设备,使第二设备可以与分析设备直接建立连接,并通过直接建立的连接向分析设备传输采集的待分析数据。如此第二设备不需要将采集的待分析数据汇总到第一设备,而是直接传输给分析设备,从而即使有多个第二设备同时采集待分析数据,也可以各自将采集的待分析数据传输给分析设备,而不会使大量数据汇集到第一设备,避免第一设备成为数据传输的瓶颈,并进一步避免待分析数据无法及时发送给分析设备而导致分析设备得出的分析结果不够及时准确的问题。
本申请实施例中,在步骤206之后,第二设备所述分析设备发送所述待分析数据时,还可以将根据第一连接参数和第二连接参数对采集的待分析数据进行封装,然后发送给到第一设备,由第一设备将封装的待分析数据转发给分析设备。
例如,在分析设备所需要的待分析数据为标识分布式系统特征的数据时,通常需要多个第二设备来采集待分析数据,此时各第二设备采集的待分析数据可以各自进行封装后汇集到第一设备,第一设备将各第二设备封装的待分析数据汇总后再传输给分析设备,以便于分析设备能够获得完整的数据。尤其是对于如框式交换机等分布式系统,其接口板并不是独立的设备,在分析设备所需要的待分析数据为标识分布式系统特征的数据时,通常将各接口板采集的数据汇总到主控板,在由主控板发送给分析设备。
另外,第一设备根据目标数据特征还可以确定待分析数据的采集频率,如果采集频率不高(如以秒为数量级),则此时对第一设备输出数据的性能要求较低,采集的待分析数据不会在第一设备处等待或等待的时间很短,第一设备即可将其传输给分析设备,不会影响分析设备的网络测量。所以在本申请的一个实施方式中,第一设备接收到分析设备发送的目标数据特征后,还可以根据该目标数据特征进行判断,来选择通过哪种方式来向分析设备传输待分析数据,进而确定是否执行步骤203。
所以本申请实施例中,步骤203还可以具体执行为:当所述第一设备根据所述目标数据特征判定所述待分析数据为标识所述分布式系统中至少一个设备特征的数据或所述待分析数据的采集频率大于频率门限时,所述第一设备确定所述第二设备对应的第二连接参数。
其中,与分布式系统中至少一个设备相关的数据可以包括与一个或多个第二设备的单板、端口、队列等相关的数据。频率门限可以根据实际场景的需求进行设置,例如可以设置以毫秒为数量级的频率。
作为本申请实施例的一种实施方式,第二设备通过第一设备与分析设备建立连接后,第二设备可以根据分析设备的需求来采集待分析数据,并在采集到待分析数据后,根据第一连接参数和第二连接参数封装采集的待分析数据,然后将封装的待分析数据发送给分析设备。所以步骤207可以具体执行为:第二设备根据第一连接参数和第二连接参数将所述待分析数据封装为报文,然后通过所述建立的连接向所述分析设备发送所述封装的报文。
每个第二设备根据分析设备的需求可以采集不同的待分析数据,各第二设备在采集待分析数据后,可以直接将采集的待分析数据封装为报文,并将封装后的报文发送给分析设备,而不需要将采集的数据汇集至第一设备后再由第一设备进行封装。
第二数据将封装的报文发送给分析设备时,第二设备可以直接向分析设备发送报文,也可以通过第一设备将封装的报文发送给分析设备。如果第二设备通过第一设备将封装的报文发送给分析设备,第一设备接收第二设备发送的报文后,可以根据报文携带的地址将其转发给分析设备而不需要再封装报文。
作为本申请实施例的又一种实施方式,由于各第二设备采集对应接口的数据,所以第一设备可以将各第二设备的第二连接参数与各接口的映射关系发送给分析设备,从而使分析设备接收到不同第二设备发送的报文后,可以根据所述映射关系,确定出接收到的报文是哪个接口的数据,从而可以分别分析各个接口的网络时延、抖动、拥塞、丢包、突发情况,也可以汇合各个接口的采样数据,得到整个设备在网络中的性能表现,依据策略调整网络流量,使各个业务按预期路径转发,业务服务质量达到预期目标。其中,一个第二设备对应的接口为该第二设备采集待分析数据的接口。
图3是根据本申请实施例提供的一种数据传输的装置300的示意性框图,该装置300为分布式系统中的第一设备,例如设备101。如图3所示,该数据传输的装置300包括:
接收单元301,用于接收分析设备发送的连接建立请求和目标数据特征,所述连接建立请求包括所述分析设备的第一连接参数;
确定单元302,用于根据所述目标数据特征确定采集所述目标数据特征对应的待分析数据的第二设备,所述第二设备属于所述分布式系统;
所述确定单元302,还用于确定所述第二设备的第二连接参数;
发送单元303,用于将所述第一连接参数、所述第二连接参数和所述目标数据特征发送给所述第二设备,使所述第二设备根据所述第一连接参数和所述第二连接参数与所述分析设备建立连接,并通过建立的所述连接向所述分析设备传输所述目标数据特征对应的待分析数据。
本申请实施例中,装置300接收到分析设备发送的连接请求后,可以根据分析设备发送的目标数据特征确定出采集待分析数据的第二设备,以及第二设备可以用于建立连接的第二连接参数,然后将分析设备的第一连接参数、目标数据特征和第二设备的第二连接参数发送给第二设备,使第二设备可以与分析设备直接建立连接,并通过直接建立的连接向分析设备传输采集的待分析数据。如此第二设备不需要将采集的待分析数据汇总到装置300,而是直接传输给分析设备,从而即使有多个第二设备同时采集待分析数据,也可以各自将采集的待分析数据传输给分析设备,而不会使大量数据汇集到装置300,避免装置300成为数据传输的瓶颈,并进一步避免待分析数据无法及时发送给分析设备而导致分析设备得出的分析结果不够及时准确的问题。
可以理解的是,所述确定单元302具体用于当所述第一设备根据所述目标数据特征判定所述待分析数据为标识所述分布式系统中至少一个第二设备特征的数据或所述待分析数据的采集频率大于频率门限时,确定所述第二设备的第二连接参数。
可以理解的是,所述发送单元302,还用于向所述分析设备发送所述第二设备的第二连接参数与所述第二设备对应的接口之间的映射关系,所述第二设备对应的接口为所述第二设备采集所述待分析数据的接口。
可以理解的是,所述第二连接参数包括所述第二设备的地址,所述第二设备的地址与所述第一设备的地址不同;或者,所述第二连接参数包括所述第二设备的地址和所述第二设备的端口号,所述第二设备的地址与所述第一设备的地址不同;或者,所述第二连接参数包括所述第一设备的地址和所述第二设备的端口号,所述第二设备的端口号为所述第一设备分配的。
根据本申请实施例的数据传输的装置300,可对应于根据本申请实施例的数据传输的方法中的执行主体,并且数据传输的装置300中的各个模块分别为了实现图2所示方法中第一设备所执行的相应流程,为了简洁,在此不再赘述。
图4是根据本申请实施例提供的一种数据传输的装置400的示意性框图。该装置400为分布式系统中的第二设备,例如设备102、设备103、和设备104中的任意一个。如图4所示,该数据传输的装置400包括:
接收单元401,用于接收第一设备发送的第一连接参数,第二连接参数和目标数据特征,所述第一连接参数和所述目标数据特征由分析设备发送给所述第一设备,所述第二连接参数为由所述第一设备确定,所述第一设备属于所述分布式系统;
建立单元402,用于通过所述第一连接参数和所述第二连接参数与所述分析设备之间建立连接;
采集单元403,用于采集所述目标数据特征对应的待分析数据;
发送单元404,用于通过所述建立的连接向所述分析设备发送所述待分析数据。
本申请实施例中,第一设备接收到分析设备发送的连接请求后,可以根据分析设备发送的目标数据特征确定出采集待分析数据的装置400,以及装置400可以用于建立连接的第二连接参数,然后将分析设备的第一连接参数、目标数据特征和装置400的第二连接参数发送给装置400,使装置400可以与分析设备直接建立连接,并通过直接建立的连接向分析设备传输采集的待分析数据。如此装置400不需要将采集的待分析数据汇总到第一设备,而是直接传输给分析设备,从而即使有多个装置400同时采集待分析数据,也可以各自将采集的待分析数据传输给分析设备,而不会使大量数据汇集到第一设备,避免第一设备成为数据传输的瓶颈,并进一步避免待分析数据无法及时发送给分析设备而导致分析设备得出的分析结果不够及时准确的问题。
可以理解的是,所述发送单元404具体用于:
根据所述第一连接参数和所述第二连接参数将所述待分析数据封装为报文;
通过所述建立的连接向所述分析设备发送所述封装的报文。
可以理解的是,所述第二连接参数包括所述第二设备的地址所述第二设备的地址与所述第一设备的地址不同;或者,
所述第二连接参数包括所述第二设备的地址和所述第二设备的端口号,所述第二设备的地址与所述第一设备的地址不同;或者,
所述第二连接参数包括所述第一设备的地址和所述第二设备的端口号,所述第二设备的端口号为所述第一设备分配的。
根据本申请实施例的数据传输的装置400,可对应于根据本申请实施例的数据传输的方法中的执行主体,并且数据传输的装置400中的各个模块分别为了实现图2所示方法中第二设备所执行的相应流程,为了简洁,在此不再赘述。
图5是根据本申请实施例的一种数据传输的设备500的示意性框图。如图5所示,设备500包括处理器501、存储器502和通信接口503,通信接口503用于与外部设备通信。
处理器501可以包括中央处理器(central processing unit,CPU),网络处理器(network processor,NP)或其组合。处理器501还可以进一步包括硬件芯片,例如专用集成电路(application-specific integrated circuit,ASIC),可编程逻辑器件(programmable logic device,PLD)或其组合。上述PLD可以是复杂可编程逻辑器件(complex programmable logic device,CPLD),现场可编程逻辑门阵列(field-programmable gate array,FPGA),通用阵列逻辑(generic array logic,GAL)或其任意组合。处理器501中的各电路可以是独立的,也可以集成在一个或多个芯片中。
存储器501可以是独立的器件也可以集成在处理器501中。存储器501可以包括易失性存储器(volatile memory),例如随机存取存储器(random-access memory,RAM)。存储器501也可以包括非易失性存储器(non-volatile memory),例如快闪存储器(flashmemory),硬盘(hard disk drive,HDD)或固态硬盘(solid-state drive,SSD)。存储器501还可以包括上述种类的存储器的任意组合。
存储器502可以用于存储故障原因与故障编码的对应关系;可选地,存储器502还用于存储计算机程序指令,处理器501执行所述存储器502存储的计算机程序指令,实现上面图2所示的方法。
通信接口503可以为可以是无线接口或有线接口。其中,无线接口可以是蜂窝移动网络接口,无线局域网(WLAN)接口等。有线接口可以是以太网接口,例如或光接口或电接口。
设备500还可以包括总线504,总线504用于连接处理器501、存储器502和通信接口503,使处理器501、存储器502和通信接口503通过总线504进行相互通信。
在一个实施方式中,所述存储器502用于存储程序代码,所述处理器501用于调用所述程序代码以实现图2中由第一设备执行的功能和步骤。
在另一个实施方式中,所述存储器502用于存储程序代码,所述处理器501用于调用所述程序代码以实现图2中由第二设备执行的功能和步骤。
本申请实施例还提供了一种数据传输的系统,包括如图3所述的数据传输的装置300和如图4所述的数据传输的装置400。
在上述实施例中,可以全部或部分地通过软件、硬件或者其组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、双绞线、光纤)或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,光盘)、或者半导体介质(例如固态硬盘)等。
Claims (15)
1.一种数据传输的方法,其特征在于,包括:
第一设备接收分析设备发送的连接建立请求和目标数据特征,所述连接建立请求包括所述分析设备的第一连接参数;
所述第一设备根据所述目标数据特征确定采集所述目标数据特征对应的待分析数据的第二设备,所述第一设备与所述第二设备属于同一个分布式系统;
所述第一设备确定所述第二设备的第二连接参数;
所述第一设备将所述第一连接参数、所述第二连接参数和所述目标数据特征发送给所述第二设备,使所述第二设备根据所述第一连接参数和所述第二连接参数与所述分析设备建立连接,并通过建立的所述连接向所述分析设备传输所述目标数据特征对应的待分析数据。
2.根据权利要求1所述的方法,其特征在于,所述第一设备确定所述第二设备的第二连接参数,包括:
当所述第一设备根据所述目标数据特征判定所述待分析数据为标识所述分布式系统中至少一个第二设备特征的数据或所述待分析数据的采集频率大于频率门限时,所述第一设备确定所述第二设备的第二连接参数。
3.根据权利要求1或2所述的方法,其特征在于,还包括:
所述第一设备向所述分析设备发送所述第二设备的第二连接参数与所述第二设备对应的接口之间的映射关系,所述第二设备对应的接口为所述第二设备采集所述待分析数据的接口。
4.根据权利要求1-3任一项所述的方法,其特征在于,所述第二连接参数包括所述第二设备的地址,所述第二设备的地址与所述第一设备的地址不同;或者,
所述第二连接参数包括所述第二设备的地址和所述第二设备的端口号,所述第二设备的地址与所述第一设备的地址不同;或者,
所述第二连接参数包括所述第一设备的地址和所述第二设备的端口号,所述第二设备的端口号为所述第一设备分配的。
5.一种数据传输的方法,其特征在于,包括:
第二设备接收第一设备发送的第一连接参数,第二连接参数和目标数据特征,所述第一连接参数和所述目标数据特征由分析设备发送给所述第一设备,所述第二连接参数由所述第一设备确定,所述第一设备与所述第二设备属于同一个分布式系统;
所述第二设备通过所述第一连接参数和所述第二连接参数与所述分析设备之间建立连接;
所述第二设备采集所述目标数据特征对应的待分析数据;
所述第二设备通过所述建立的连接向所述分析设备发送所述待分析数据。
6.根据权利要求5所述的方法,其特征在于,所述第二设备通过所述建立的连接向所述分析设备所述待分析数据,包括:
所述第二设备根据所述第一连接参数和所述第二连接参数将所述待分析数据封装为报文;
所述第二设备通过所述建立的连接向所述分析设备发送所述封装的报文。
7.根据权利要求5或6所述的方法,其特征在于,所述第二连接参数包括所述第二设备的地址,所述第二设备的地址与所述第一设备的地址不同;或者,
所述第二连接参数包括所述第二设备的地址和所述第二设备的端口号,所述第二设备的地址与所述第一设备的地址不同;或者,
所述第二连接参数包括所述第一设备的地址和所述第二设备的端口号,所述第二设备的端口号为所述第一设备分配的。
8.一种数据传输的装置,所述装置为分布式系统中的第一设备,其特征在于,包括:
接收单元,用于接收分析设备发送的连接建立请求和目标数据特征,所述连接建立请求包括所述分析设备的第一连接参数;
确定单元,用于根据所述目标数据特征确定采集所述目标数据特征对应的待分析数据的第二设备,所述第二设备属于所述分布式系统;
所述确定单元,还用于确定所述第二设备的第二连接参数;
发送单元,用于将所述第一连接参数、所述第二连接参数和所述目标数据特征发送给所述第二设备,使所述第二设备根据所述第一连接参数和所述第二连接参数与所述分析设备建立连接,并通过建立的所述连接向所述分析设备传输所述目标数据特征对应的待分析数据。
9.根据权利要求8所述的装置,其特征在于,所述确定单元具体用于当根据所述目标数据特征判定所述待分析数据为标识所述分布式系统中至少一个第二设备特征的数据或所述待分析数据的采集频率大于频率门限时,确定所述第二设备的第二连接参数。
10.根据权利要求8或9所述的装置,其特征在于,所述发送单元,还用于向所述分析设备发送所述第二设备的第二连接参数与所述第二设备对应的接口之间的映射关系,所述第二设备对应的接口为所述第二设备采集所述待分析数据的接口。
11.根据权利要求8-10任一项所述的装置,其特征在于,所述第二连接参数包括所述第二设备的地址,所述第二设备的地址与所述第一设备的地址不同;或者,
所述第二连接参数包括所述第二设备的地址和所述第二设备的端口号,所述第二设备的地址与所述第一设备的地址不同;或者,
所述第二连接参数包括所述第一设备的地址和所述第二设备的端口号,所述第二设备的端口号为所述第一设备分配的。
12.一种数据传输的装置,所述装置为分布式系统中的第二设备,其特征在于,包括:
接收单元,用于接收第一设备发送的第一连接参数,第二连接参数和目标数据特征,所述第一连接参数和所述目标数据特征由分析设备发送给所述第一设备,所述第二连接参数由所述第一设备确定,所述第一设备属于所述分布式系统;
建立单元,用于通过所述第一连接参数和所述第二连接参数与所述分析设备之间建立连接;
采集单元,用于采集所述目标数据特征对应的待分析数据;
发送单元,用于通过所述建立的连接向所述分析设备发送所述待分析数据。
13.根据权利要求12所述的装置,其特征在于,所述发送单元具体用于:
根据所述第一连接参数和所述第二连接参数将所述待分析数据封装为报文;
通过所述建立的连接向所述分析设备发送所述封装的报文。
14.根据权利要求12或13所述的装置,其特征在于,所述第二连接参数包括所述第二设备的地址,所述第二设备的地址与所述第一设备的地址不同;或者,
所述第二连接参数包括所述第二设备的地址和所述第二设备的端口号,所述第二设备的地址与所述第一设备的地址不同;或者,
所述第二连接参数包括所述第一设备的地址和所述第二设备的端口号,所述第二设备的端口号为所述第一设备分配的。
15.一种数据传输的系统,包括如权利要求8-11任一项所述的数据传输的装置和如权利要求12-14任一项所述的数据传输的装置。
Priority Applications (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810274242.8A CN110324163B (zh) | 2018-03-29 | 2018-03-29 | 一种数据传输的方法及相关装置 |
PCT/CN2019/076606 WO2019184652A1 (zh) | 2018-03-29 | 2019-03-01 | 一种数据传输的方法及相关装置 |
EP19774945.0A EP3761579A4 (en) | 2018-03-29 | 2019-03-01 | DATA TRANSMISSION PROCESS AND ASSOCIATED APPARATUS |
JP2020552242A JP7085638B2 (ja) | 2018-03-29 | 2019-03-01 | データ伝送方法および関連装置 |
MX2020010172A MX2020010172A (es) | 2018-03-29 | 2019-03-01 | Metodo de transmision de datos y aparato relacionado. |
US17/033,188 US11665070B2 (en) | 2018-03-29 | 2020-09-25 | Data transmission method and related apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810274242.8A CN110324163B (zh) | 2018-03-29 | 2018-03-29 | 一种数据传输的方法及相关装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110324163A true CN110324163A (zh) | 2019-10-11 |
CN110324163B CN110324163B (zh) | 2020-11-17 |
Family
ID=68058576
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810274242.8A Active CN110324163B (zh) | 2018-03-29 | 2018-03-29 | 一种数据传输的方法及相关装置 |
Country Status (6)
Country | Link |
---|---|
US (1) | US11665070B2 (zh) |
EP (1) | EP3761579A4 (zh) |
JP (1) | JP7085638B2 (zh) |
CN (1) | CN110324163B (zh) |
MX (1) | MX2020010172A (zh) |
WO (1) | WO2019184652A1 (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1412988A (zh) * | 2002-05-22 | 2003-04-23 | 华为技术有限公司 | 网络通信中报文的封装转发方法 |
US20060026017A1 (en) * | 2003-10-28 | 2006-02-02 | Walker Richard C | National / international management and security system for responsible global resourcing through technical management to brige cultural and economic desparity |
CN103702364A (zh) * | 2012-09-27 | 2014-04-02 | 华为技术有限公司 | 一种业务数据传输的方法、设备及系统 |
US20140258509A1 (en) * | 2013-03-05 | 2014-09-11 | Aerohive Networks, Inc. | Systems and methods for context-based network data analysis and monitoring |
CN107623631A (zh) * | 2017-07-25 | 2018-01-23 | 深圳市盛路物联通讯技术有限公司 | 物联网的转发节点及数据处理装置 |
Family Cites Families (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3829125B2 (ja) | 2003-05-16 | 2006-10-04 | 株式会社コナミデジタルエンタテインメント | ネットワークシステム、ネットワーク制御方法及びプログラム |
JP4163697B2 (ja) | 2005-03-30 | 2008-10-08 | 株式会社東芝 | 負荷分散システム、実サーバ及び負荷分散方法 |
JP2008085819A (ja) | 2006-09-28 | 2008-04-10 | Oki Electric Ind Co Ltd | ネットワーク異常検出システム、ネットワーク異常検出方法及びネットワーク異常検出プログラム |
CN102546782B (zh) | 2011-12-28 | 2015-04-29 | 北京奇虎科技有限公司 | 一种分布式系统及其数据操作方法 |
CN103247157A (zh) * | 2012-02-10 | 2013-08-14 | 北京成立科技有限公司 | 电量数据无线采集装置以及电量数据采集系统 |
US9787570B2 (en) * | 2012-10-17 | 2017-10-10 | Verizon Patent And Licensing Inc. | Dynamic feature peer network for application flows |
US9380111B2 (en) * | 2012-10-17 | 2016-06-28 | Verizon Patent And Licensing Inc. | Feature peer network with scalable state information |
US9001671B2 (en) * | 2012-10-17 | 2015-04-07 | Verizon Patent And Licensing Inc. | Feature peer network representations and scalable feature peer network management |
US10063458B2 (en) * | 2013-10-13 | 2018-08-28 | Nicira, Inc. | Asymmetric connection with external networks |
CA2867585A1 (en) | 2013-10-15 | 2015-04-15 | Coho Data Inc. | Methods, devices and systems for coordinating network-based communication in distributed server systems with sdn switching |
US9893988B2 (en) * | 2014-03-27 | 2018-02-13 | Nicira, Inc. | Address resolution using multiple designated instances of a logical router |
WO2015173957A1 (ja) * | 2014-05-16 | 2015-11-19 | 三菱電機株式会社 | 通信装置および無線メッシュネットワーク |
US9509574B2 (en) * | 2015-04-03 | 2016-11-29 | Illumio, Inc. | End-to-end policy enforcement in the presence of a traffic midpoint device |
CN104967656B (zh) * | 2015-04-29 | 2024-02-13 | 上海上咨建设工程咨询有限公司 | 无线ZigBee数据采集实时监测房屋变形的远传系统 |
CN105226959B (zh) * | 2015-09-30 | 2018-08-28 | 安徽理工大学 | 模块化多电平高压变频器的控制装置及控制方法 |
US10742746B2 (en) | 2016-12-21 | 2020-08-11 | Nicira, Inc. | Bypassing a load balancer in a return path of network traffic |
US10749945B2 (en) * | 2017-10-09 | 2020-08-18 | Level 3 Communications, Llc | Cross-cluster direct server return with anycast rendezvous in a content delivery network (CDN) |
EP3729785B8 (en) * | 2017-12-22 | 2022-08-10 | Nokia Technologies OY | Designs of an mptcp-aware load balancer and load balancer using the designs |
CN109194617B (zh) | 2018-08-01 | 2021-06-15 | 杭州电子科技大学 | Xml报文的自动解析、封装方法和装置 |
-
2018
- 2018-03-29 CN CN201810274242.8A patent/CN110324163B/zh active Active
-
2019
- 2019-03-01 JP JP2020552242A patent/JP7085638B2/ja active Active
- 2019-03-01 WO PCT/CN2019/076606 patent/WO2019184652A1/zh unknown
- 2019-03-01 EP EP19774945.0A patent/EP3761579A4/en active Pending
- 2019-03-01 MX MX2020010172A patent/MX2020010172A/es unknown
-
2020
- 2020-09-25 US US17/033,188 patent/US11665070B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1412988A (zh) * | 2002-05-22 | 2003-04-23 | 华为技术有限公司 | 网络通信中报文的封装转发方法 |
US20060026017A1 (en) * | 2003-10-28 | 2006-02-02 | Walker Richard C | National / international management and security system for responsible global resourcing through technical management to brige cultural and economic desparity |
CN103702364A (zh) * | 2012-09-27 | 2014-04-02 | 华为技术有限公司 | 一种业务数据传输的方法、设备及系统 |
US20140258509A1 (en) * | 2013-03-05 | 2014-09-11 | Aerohive Networks, Inc. | Systems and methods for context-based network data analysis and monitoring |
CN107623631A (zh) * | 2017-07-25 | 2018-01-23 | 深圳市盛路物联通讯技术有限公司 | 物联网的转发节点及数据处理装置 |
Non-Patent Citations (1)
Title |
---|
PAOLA BRESESTI: "《HVDC Connection of Offshore Wind Farms to the Transmission System》", 《IEEE TRANSACTIONS ON ENERGY CONVERSION》 * |
Also Published As
Publication number | Publication date |
---|---|
JP7085638B2 (ja) | 2022-06-16 |
US20210014138A1 (en) | 2021-01-14 |
MX2020010172A (es) | 2020-10-28 |
EP3761579A1 (en) | 2021-01-06 |
EP3761579A4 (en) | 2021-01-06 |
WO2019184652A1 (zh) | 2019-10-03 |
JP2021517417A (ja) | 2021-07-15 |
CN110324163B (zh) | 2020-11-17 |
US11665070B2 (en) | 2023-05-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11258719B1 (en) | Methods, systems and computer readable media for network congestion control tuning | |
US20140215077A1 (en) | Methods and systems for detecting, locating and remediating a congested resource or flow in a virtual infrastructure | |
CN111769998B (zh) | 一种网络时延状态的探测方法及装置 | |
US20030225549A1 (en) | Systems and methods for end-to-end quality of service measurements in a distributed network environment | |
CN105103494A (zh) | 网络交换机仿真 | |
US11671341B2 (en) | Network monitoring method and network monitoring apparatus | |
US11336545B2 (en) | Network device measurements employing white boxes | |
CN103532795A (zh) | 一种检测web业务系统可用性的监控系统及方法 | |
CN113364624B (zh) | 基于边缘计算的混合云流量采集方法和系统 | |
CN106302017B (zh) | 高并发小流量网络测速系统及方法 | |
CN101145977B (zh) | 一种IP数据网Qos监测系统及其测量方法 | |
CN109542786A (zh) | 可视化测试方法及装置 | |
CN109074280A (zh) | 网络功能虚拟化 | |
CN103109497B (zh) | 用于测量网络中性能特性的互连设备的动态配置 | |
CN111989979A (zh) | 控制通信网络的操作以减少等待时间的方法和系统 | |
WO2022164732A1 (en) | System and method for network and computation performance probing for edge computing | |
TW202147810A (zh) | 虛擬服務網路品質量測系統及其方法 | |
CN110324163A (zh) | 一种数据传输的方法及相关装置 | |
CN109981418A (zh) | 一种通信质量感知系统及方法 | |
Sreeraj et al. | Performance of IoT protocols under constrained network, a Use Case based approach | |
EP4340522A1 (en) | Packet forwarding method and apparatus, and communication network | |
CN114710424B (zh) | 基于软件定义网络的主机侧数据包处理延时测量方法 | |
KR102408248B1 (ko) | 서비스 유형에 매칭되는 진단 패킷을 통해 네트워크에 대한 진단을 수행하는 진단 시스템 | |
CN117785439A (zh) | 一种集群分布式系统的业务处理方法、装置及应用 | |
CN106686640A (zh) | 一种弱网络系统环境的搭建与配置的系统和方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |