CN110492984B - 数据传输方法、装置、数据分析处理系统及计算机设备 - Google Patents

Abstract

本发明涉及数据传输方法、装置、数据分析处理系统及计算机设备，属于网络技术领域。所述方法包括：获取连接信息和待传输数据；所述连接信息和所述待传输数据由输入端根据数据传输请求确定；根据所述连接信息，向链路代理发送传输指令；所述传输指令，用于控制所述链路代理根据所述连接信息，将所述待传输数据通过相匹配的网络接口传输给目标业务处理端。上述技术方案，解决了传输系统的开发成本高的问题。不需要针对性地定制链路接口，就能与具有不同接口的多个业务处理端进行数据传输，能有效降低传输系统的开发成本。

Description

数据传输方法、装置、数据分析处理系统及计算机设备

技术领域

本发明涉及网络技术领域，特别是涉及数据传输方法、装置、数据分析处理系统、计算机设备及存储介质。

背景技术

采集端往往需要将所采集的数据传送给业务处理端进行数据处理。在某些情况下，业务处理端的数量可能为多个，而这些业务处理端的接口可能存在差异，例如：在业务处理端双轨运行期间，新业务处理端和旧业务处理端需要同时运作，而新旧业务处理端的接口可能不同，而采集端需要分别与新业务处理端、旧业务处理端进行数据交互。

针对这种情况，传统的操作方式是在采集端定制不同的链路接口来满足多个业务处理端连接同一采集源的业务需要。但是，这样势必增加整个传输系统的开发成本。

发明内容

基于此，本发明实施例提供了数据传输方法、装置、数据分析处理系统、计算机设备及存储介质，能在保证采集端与业务处理端的数据交互的情况下，降低传输系统的开发成本。

本发明实施例的内容如下：

第一方面，本发明实施例提供一种数据传输方法，包括以下步骤：获取连接信息和待传输数据；所述连接信息和所述待传输数据由输入端根据数据传输请求确定；根据所述连接信息，向链路代理发送传输指令；所述传输指令，用于控制所述链路代理根据所述连接信息，将所述待传输数据通过相匹配的网络接口传输给目标业务处理端。

在一个实施例中，所述获取连接信息和待传输数据的步骤，包括：接收输入端发送的连接信息和待传输数据；所述连接信息和所述待传输数据由输入端通过事件驱动模型对所述数据传输请求进行分析后确定；其中，所述事件驱动模型为基于Epoll的事件驱动模型。

在一个实施例中，所述根据所述连接信息，向链路代理发送传输指令的步骤之前，还包括：向链路代理发送接口建立指令；所述接口建立指令用于控制所述链路代理建立与所连接的业务处理端相匹配的网络接口；其中，所述网络接口包括TCP/UDP接口。

在一个实施例中，还包括以下步骤：根据所述连接信息，确定采集终端的第一socket句柄；所述采集终端为发送所述数据传输请求的终端；所述采集终端与所述输入端网络连接；所述根据所述连接信息，向链路代理发送传输指令的步骤，包括：根据所述连接信息，向链路代理发送句柄绑定指令；所述句柄绑定指令用于控制所述链路代理获取目标业务处理端的第二socket句柄，建立所述第一socket句柄与所述第二socket句柄的映射关系；向所述链路代理发送传输指令；所述传输指令，用于控制所述链路代理根据所述映射关系，将所述待传输数据通过所述网络接口传输给所述目标业务处理端。

在一个实施例中，所述根据所述连接信息，向链路代理发送传输指令的步骤之后，还包括：接收所述链路代理返回的响应数据；所述响应数据为所述目标业务处理端对所述待传输数据进行业务处理后得到的数据；将所述响应数据通过所述输入端发送给所述采集终端。

在一个实施例中，所述根据所述连接信息，向链路代理发送传输指令的步骤，包括：根据所述连接信息，确定目标业务处理端的类型；若根据所述类型确定所述目标业务处理端为旧主站，向链路代理发送所述传输指令。

在一个实施例中，还包括以下步骤：若根据所述类型确定所述目标业务处理端为新主站，将所述待传输数据通过消息队列发送给所述目标业务处理端。

第二方面，本发明实施例提供一种数据传输装置，包括：信息获取模块，用于获取连接信息和待传输数据；所述连接信息和所述待传输数据由输入端根据数据传输请求确定；指令发送模块，用于根据所述连接信息，向链路代理发送传输指令；所述传输指令，用于控制所述链路代理根据所述连接信息，将所述待传输数据通过相匹配的网络接口传输给目标业务处理端。

第三方面，本发明实施例提供一种数据分析处理系统，包括：IO接入模块、数据处理模块以及链路代理模块；所述IO接入模块，用于接收数据传输请求，根据所述数据传输请求，确定连接信息和待传输数据；将所述连接信息和所述待传输数据发送给所述数据处理模块；所述数据处理模块，用于根据所述连接信息，向链路代理模块发送传输指令；所述链路代理模块，用于接收所述传输指令；根据所述连接信息，将所述待传输数据通过相匹配的网络接口传输给目标业务处理端。

第四方面，本发明实施例提供一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现以下步骤：获取连接信息和待传输数据；所述连接信息和所述待传输数据由输入端根据数据传输请求确定；根据所述连接信息，向链路代理发送传输指令；所述传输指令，用于控制所述链路代理根据所述连接信息，将所述待传输数据通过相匹配的网络接口传输给目标业务处理端。

第五方面，本发明实施例提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现以下步骤：获取连接信息和待传输数据；所述连接信息和所述待传输数据由输入端根据数据传输请求确定；根据所述连接信息，向链路代理发送传输指令；所述传输指令，用于控制所述链路代理根据所述连接信息，将所述待传输数据通过相匹配的网络接口传输给目标业务处理端。

上述技术方案中的一个技术方案具有如下优点或有益效果：接收到输入端发送的连接信息和待传输数据后，借助链路代理将待传输数据通过网络接口发送给目标业务处理端，不需要针对性地定制链路接口，就能与具有不同接口的多个业务处理端进行数据传输，能有效降低传输系统的开发成本。

附图说明

图1为一个实施例中数据传输方法的应用环境图；

图2为一个实施例中数据传输方法的流程示意图；

图3为一个实施例中采集终端与业务处理端的连接示意图；

图4为另一个实施例中数据传输方法的应用环境图；

图5为一个实施例中数据传输装置的结构框图；

图6为一个实施例中数据分析处理系统的结构框图；

图7为一个实施例中计算机设备的内部结构。

具体实施方式

为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

在本文中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本文所描述的实施例可以与其它实施例相结合。

本申请提供的数据传输方法可以应用于如图1所示的应用环境中。该应用环境包括输入端101、中心处理端102以及业务处理端103。其中，输入端101将连接信息和待传输数据发送给中心处理端102，中心处理端102根据连接信息通过链路代理向业务处理端103发送待传输数据，实现待传输数据从输入端向业务处理端的传输。进一步地，输入端101可以是各种具有数据采集和数据输出功能的设备或器件，例如：电表、测温探头、电压监测设备等；中心处理端102可以是具有数据处理和数据转发功能的各种设备，进一步地，中心处理端102可以是终端，也可以是服务器，具体的，终端可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备，服务可以用独立的服务器或者是多个服务器组成的服务器集群来实现；业务处理端103可以是具有处理专门业务功能的设备，可以是电力信息处理器、开关控制器、故障检修设备、电力设备监控器、用电信息采集设备等。

本发明实施例提供一种数据传输方法、装置、数据分析处理系统、计算机设备及存储介质。以下分别进行详细说明。

在一个实施例中，如图2所示，提供了一种数据传输方法。以该方法应用于图1中的中心处理端为例进行说明，包括以下步骤：

S201、获取连接信息和待传输数据；连接信息和待传输数据由输入端根据数据传输请求确定。

其中，数据传输请求可以指某一采集设备在需要向业务处理端传输数据时发送的请求(当然，发送数据传输请求的还可以是其他的终端，如控制设备等)。该数据传输请求中可以包括待传输数据以及相关的连接信息。进一步的，待传输数据可以包括业务数据、业务操作方法、业务请求产生时间等；连接信息可以包括发送数据传输请求的设备信息、目标业务处理端(待传输数据所要发送的对象)的设备信息、中间链路上的设备信息、接口连接方式、数据传输方式等。

另一方面，输入端可以为与中心处理端向独立的终端，例如：信号收发装置；也可以为中心处理端附属的一个功能模块。

本步骤中，输入端根据数据传输请求确定连接信息和待传输数据，将所确定的连接信息和待传输数据发送给中心处理端；中心处理端根据所接收的连接信息和待传输数据就能获知待传输数据是什么以及应该以怎样的方式将待传输数据发送给目标业务处理端。

S202、根据连接信息，向链路代理发送传输指令；传输指令，用于控制链路代理根据连接信息，将待传输数据通过相匹配的网络接口传输给目标业务处理端。

链路代理在中心处理端和业务处理端之间起沟通桥梁作用，可以通过一个具体的设备实现，也可以是附属于中心处理端的一个功能模块。在实际的数据传输过程中，链路代理既能与中心处理端通信，也能与业务处理端通信，在中心处理端和业务处理端的接口不兼容时，可以自动进行数据形式或接口的转换，有效保证中心处理端和业务处理端之间的数据传输。

中心处理端与业务处理端之间需要进行交互，如果两者链路接口相匹配，则可以直接进行数据传输；而如果链路接口不匹配，则需要定制专门的接口来实现数据传输。

本步骤中，链路代理与业务处理器预先进行网络接口的匹配，匹配得到的网络接口能够实现链路代理与业务处理器之间的数据传输。在实际的数据传输过程中，链路代理可以将待传输数据转换为与业务处理端的链路接口相匹配的数据形式，以在网络层面和物理层面都能实现数据的有效传输。

进一步地，进行网络接口匹配的具体过程可以为：根据数据传输请求的传输方式确定链路代理的网络接口，例如：数据传输请求以TCP/UDP的方式传输，则可以将链路代理与业务处理端的网络接口确定为TCP/UDP接口，即链路代理与业务处理端可以通过TCP/UDP的方式进行数据传输；这样的方式使得输入端、中心处理端、业务处理端作为一个整体，对外的传输方式是一致的。当然，网络接口的匹配也可以根据业务处理端所常用的数据传输方式来确定。

另外，链路代理的数量可以为一个、两个甚至多个。对于多个的情况，中心处理端可以根据连接信息确定对应的目标链路代理，并通过目标链路代理将待传输数据发送给目标业务处理端；也可以不对链路代理进行区分，而是向所有的链路代理发送待传输数据，由链路代理自行决定该由谁来发送待传输数据(可以根据连接信息中所对应的目标业务处理端确定)。

进一步地，业务处理端的数量也可以为多个。同时，链路代理与业务处理端可以是固定连接，也可以根据实际情况动态连接，它们之间的连接关系可以指网络连接，也可以是实体连接。

在一些实施例中，根据连接信息，向链路代理发送传输指令的步骤，包括：根据连接信息，确定目标业务处理端的类型；若根据该类型确定目标业务处理端为旧主站，向链路代理发送传输指令。进一步地，还包括以下步骤：若根据该类型确定目标业务处理端为新主站，将待传输数据通过消息队列发送给目标业务处理端。需要说明的是，在中心处理端与任何业务处理端(包括接口兼容的业务处理端)之间都可以设置链路代理。其中，消息队列可以选用可数据持久化的内存消息队列，以实现数据持久化，即使上层程序故障也不会影响底层程序的数据。

对于业务处理端双轨运行期间，中心处理端可以直接与新主站(系统在重构时采用的新主站与中心处理端是兼容的)通信连接。而由于生产厂家不同等原因，旧主站与中心处理端的通信方式、通信接口可能不同，旧主站可能无法直接中心处理端通信连接。因此，本发明实施例借助链路代理实现中心处理端与旧主站之间的通信连接，不需要定制新的链路接口。

进一步地，新主站可以通过链路代理与中心处理端通信，即中心处理端只连接链路代理，而新旧主站都连接链路代理，新主站与链路代理通过消息队列进行通信，而旧主站与链路代理通过TCP/UDP的方式进行通信。另一方面，中心处理端也可以只连接新主站，而链路代理可以作为新主站上的一个功能模块，旧主站通过新主站上的链路代理实现与中心处理端的通信。

本实施例提供的数据传输方法，不需要针对性地定制链路接口，能通过链路代理实现中心处理端与业务处理端之间的数据传输，实现与具有不同接口的多个业务处理端进行数据传输，能有效降低传输系统的开发成本。

在一个实施例中，获取连接信息和待传输数据的步骤，包括：接收输入端发送的连接信息和待传输数据；连接信息和待传输数据由输入端通过事件驱动模型对数据传输请求进行分析后确定；其中，事件驱动模型为基于Epoll的事件驱动模型。

具体的，输入端可以使用事件驱动模型实时接入连接事件(数据传输请求)，记录其中的IO核心信息数据：socket句柄、tcp/udp连接信息、收发数据(也即待传输数据)、事件时间、事件类型等。其中，socket句柄可以指采集设备的socket句柄。事件时间和事件类型可以根据业务信息确定，例如：08:00采集终端采集到电力故障数据，则08:00就可以认为是事件时间，而对应的事件类型可以为电力故障类型，进一步的，事件时间和事件类型等可以用于网络接口的匹配过程。另外，事件类型还可以包括socket通信中的connect(连接)，disconnect(断开连接)，accept(接受连接)等。

输入端将IO核心信息数据发送给中心处理端后，中心处理端可以将接收到的IO核心信息数据保存到内存中。

本实施，采用基于Epoll的通信引擎，实现事件的实时触发，面对海量连接的接入也能及时地进行响应，保证数据传输的效率并降低整个系统的负荷。

进一步地，在一个实施例中，根据连接信息，向链路代理发送传输指令的步骤之前，还包括：向链路代理发送接口建立指令；接口建立指令用于控制链路代理建立与所连接的业务处理端相匹配的网络接口；其中，网络接口包括TCP/UDP接口。此时，链路代理可以理解为tcp/udp的客户端，仿真物理客户端(中心处理端)的数据及行为。

建立相匹配的网络接口的过程可以理解为建立仿真接口的过程。链路代理可以根据输入端发送的IO核心信息数据建立模拟仿真TCP/UDP接口，并通过该仿真TCP/UDP接口发送待传输数据。对于业务处理端而言，相当于直接接收到采集终端(或中心处理端)发送的待传输数据，其所连接的IP地址变成链路代理的IP地址，而不是中心处理端或采集终端的IP地址。

本实施例建立链路代理与业务处理端之间的网络接口，使得中心处理端能通过链路代理与业务处理端进行交互；同时不需要进行链路接口的变化，对业务处理端而言就相当于直接从采集终端(或中心处理端)中接收待传输数据，能对接各种类型的业务处理端，有效提高传输系统的兼容性。

在一个实施例中，还包括以下步骤：根据连接信息，确定采集终端的第一socket句柄；采集终端为发送数据传输请求的终端；采集终端与输入端网络连接；根据连接信息，向链路代理发送传输指令的步骤，包括：根据连接信息，向链路代理发送句柄绑定指令；句柄绑定指令用于控制链路代理获取目标业务处理端的第二socket句柄，建立第一socket句柄与第二socket句柄的映射关系；向链路代理发送传输指令；传输指令，用于控制链路代理根据映射关系，将待传输数据通过网络接口传输给目标业务处理端。

本实施例提供的数据传输方法，以socket句柄作为主键缓存，直接映射目标业务处理端的socket句柄，实现源到目标的信息绑定，从而实现IO接入链路与数据处理的快速进行。

在一个实施例中，根据连接信息，向链路代理发送传输指令的步骤之后，还包括：接收链路代理返回的响应数据；响应数据为目标业务处理端对待传输数据进行业务处理后得到的数据；将响应数据通过输入端发送给采集终端。

在一些实施例中，目标业务处理端还可以通过链路代理实时向中心处理端发送交互请求，然后通过以下路径：目标业务处理端->链路代理->中心处理端->输入端->采集终端->输入端->中心处理端->链路代理->目标业务处理端，实现和采集终端的实时通讯交互。

进一步地，业务处理端可以包括多种类型。如图3所示，电表(采集终端)采集电力信息之后，可以向其连接的业务处理端发送采集数据，这个业务处理端可以为：剩余电流保护动作器、无功补偿装置、区台总表、配电自动化主站、用电信息采集主站等。进一步地，这些业务处理端可以为低压设备，也可以为高压设备。另外，图3中的温度传感器、末端监测设备、分支箱(可以借助分支箱实现与分支线路监测终端的交互)以及变压器等可以理解为是采集终端。

在一些实施例中，业务处理端为配电自动化主站、用电信息采集主站。

上述实施例提供的数据传输方法，借助输入端、中心处理端、链路代理保证采集终端与目标业务处理端之间的数据交互。

为了更好地理解上述方法，如图4所示，以中心处理端为服务器为例，以下详细阐述一个本发明数据传输方法的应用实例。

为顺应电网系统的发展，现构建了包括I/O接入端、服务器以及新主站(图4中仅示出了一个新主站，在实际应用中可以为多个)的新系统401，该新系统能够与采集终端进行交互，并由服务器将采集数据发送给新主站(它们之间的接口可以认为是内部接口)，通过新主站对采集数据进行业务处理。而旧的电网系统中的旧主站(图4中示出了旧主站1和旧主站2两个旧主站，在实际应用中旧主站的数量还可以为其他值)与服务器链路接口不兼容，服务器无法将采集数据直接发送给旧主站，本实施例在服务器与旧主站之间设置了链路代理，各个链路代理设置与所连接的旧主站的网络接口相匹配。以下详细阐述新旧系统内的数据传输实现过程：

1、采集终端通过TCP/UDP的方式将数据传输请求发送给I/O接入端。

2、I/O接入端基于Epoll的事件驱动模型，从数据传输请求中提取IO核心信息数据：采集终端socket句柄、TCP/UDP连接信息、待传输数据、事件时间以及事件类型，并通过消息队列将IO核心信息数据发送给服务器。

3、服务器在确定待传输数据中有需要发送给新主站的数据1时，直接通过消息队列将数据1发送给对应的新主站。

4、服务器在确定待传输数据中有需要发送给旧主站的数据2时，将与数据2对应的IO核心信息数据通过消息队列发送给所有的链路代理。某一链路代理在接收到IO核心信息数据后，确定数据2所发送的旧主站A并确定自己是否旧主站A连接；如果是，则根据IO核心信息数据中的采集终端socket句柄、TCP/UDP连接信息、事件时间以及事件类型建立仿真TCP/UDP接口，并向旧主站A发送交互请求，旧主站A通过交互请求后，该链路代理就可以通过仿真TCP/UDP接口将数据2发送给旧主站A；如果否，则该链路代理可以不执行任何操作。

5、新旧主站在接收到待传输数据后执行业务操作，得到响应数据，并按照原始路径将响应数据返回给服务器或者采集终端。

电网领域中，随着电力用户的增量，终端接入量大量增加，而且新形势对电能量数据需求越来越多，用户用电信息采集的数据项和密度都将随之增加，数据量将会大幅增加，现有软件架构和软件硬件平台已经不满足未来的接入需求，不能支撑大数据量的采集需求。新一代计量智能终端能实时监测并上传台区低压开关/进出线开关的停复信息、台区户变关系信息至配电自动化主站、计量自动化主站，对数据采集源实现“一收多发”。同时在新计量自动化系统建设期间，为了系统建设安全、可控，需要兼顾原系统并运行一段时间(并轨运行半年以上)，此时需要保留原系统的数据采集需求，则需要在“一收多发”的基础上实现双轨运行。双轨期限的数据传输存在以下问题：1、对于需要使用同一采集源的新旧系统，往往需要定制不同的数据接口来满足多个主站系统使用同一采集源的业务需要，这样势必增加各系统的耦合性及增加开发、协调工作量。2、计量自动化系统在双轨期间，新旧系统都需要实时地和采集终端进行双向通讯交互，而不仅仅是单向的终端采集数据并发送数据(这就需要接口能实现双向通信)。3、采集终端短期内大量采集任务，对网络层性能造成很大的影响，引发带宽占用的不公平性和网络拥塞崩溃的问题，还能减少TCP/UDP的资源占用。

本实施例提供的数据传输方法，不需要针对性地定制链路接口，实现了以下技术效果：1、解决物理终端与多个主站之间连接通信，而不需要修改业务逻辑及接口，实现系统在双轨期间的无缝过渡。2、内存化的消息队列，实现了数据持久化，即使上层程序故障也不会影响底层程序的数据。结合数据消息队列排列处理算法，保证了数据处理的稳定性。3、使用消息队列排队处理算法，减轻网络峰值性能压力，保证数据的交互速度和质量。

需要说明的是，对于前述的各方法实施例，为了简便描述，将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明并不受所描述的动作顺序的限制，因为依据本发明，某些步骤可以采用其它顺序或者同时进行。

基于与上述实施例中的数据传输方法相同的思想，本发明还提供数据传输装置，该装置可用于执行上述数据传输方法。为了便于说明，数据传输装置实施例的结构示意图中，仅仅示出了与本发明实施例相关的部分，本领域技术人员可以理解，图示结构并不构成对装置的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

如图5所示，数据传输装置包括信息获取模块501和指令发送模块502，详细说明如下：

信息获取模块501，用于获取连接信息和待传输数据；连接信息和待传输数据由输入端根据数据传输请求确定。

指令发送模块502，用于根据连接信息，向链路代理发送传输指令；传输指令，用于控制链路代理根据连接信息，将待传输数据通过相匹配的网络接口传输给目标业务处理端。

本实施例，不需要针对性地定制链路接口，就能与具有不同接口的多个业务处理端进行数据传输，能有效降低传输系统的开发成本。

在一个实施例中，信息获取模块501，还用于接收输入端发送的连接信息和待传输数据；连接信息和待传输数据由输入端通过事件驱动模型对数据传输请求进行分析后确定；其中，事件驱动模型为基于Epoll的事件驱动模型。

在一个实施例中，还包括：接口建立模块，用于向链路代理发送接口建立指令；接口建立指令用于控制链路代理建立与所连接的业务处理端相匹配的网络接口；其中，网络接口包括TCP/UDP接口。

在一个实施例中，还包括：句柄确定模块，用于根据连接信息，确定采集终端的第一socket句柄；采集终端为发送数据传输请求的终端；采集终端与输入端网络连接；指令发送模块502，包括：第一指令发送子模块，用于根据连接信息，向链路代理发送句柄绑定指令；句柄绑定指令用于控制链路代理获取目标业务处理端的第二socket句柄，建立第一socket句柄与第二socket句柄的映射关系；第二指令发送子模块，用于向链路代理发送传输指令；传输指令，用于控制链路代理根据映射关系，将待传输数据通过网络接口传输给目标业务处理端。

在一个实施例中，还包括：响应数据接收模块，用于接收链路代理返回的响应数据；响应数据为目标业务处理端对待传输数据进行业务处理后得到的数据；响应数据发送模块，用于将响应数据通过输入端发送给采集终端。

在一个实施例中，指令发送模块502，包括：类型确定子模块，用于根据连接信息，确定目标业务处理端的类型；传输指令发送子模块，用于若根据该类型确定目标业务处理端为旧主站，向链路代理发送传输指令。

在一个实施例中，指令发送模块502，还包括：数据传输子模块，用于若根据该类型确定目标业务处理端为新主站，将待传输数据通过消息队列发送给目标业务处理端。

如图6所示，本发明实施例还提供一种数据分析处理系统，包括：IO接入模块601、数据处理模块602以及链路代理模块603；IO接入模块601，用于接收数据传输请求，根据数据传输请求，确定连接信息和待传输数据；将连接信息和待传输数据发送给数据处理模块；数据处理模块602，用于根据连接信息，向链路代理模块发送传输指令；链路代理模块603，用于接收传输指令；根据连接信息，将待传输数据通过相匹配的网络接口传输给目标业务处理端。

本实施例提供的数据分析处理系统，设置链路代理模块来实现数据处理模块和业务处理端之间的通信，实现了以下技术效果：1、解决物理终端(连接)与多个主站之间连接通信，而不需要修改业务逻辑及接口，实现系统在双轨期间的无缝过渡。2、内存化的消息队列，实现了数据持久化，保证了上层程序故障，也不会影响底层程序的数据。结合数据消息队列排列处理算法，保证了数据处理的稳定性。3、使用消息队列排队处理算法，减轻网络峰值性能压力，保证数据交互速度和质量。

需要说明的是，本发明的数据传输装置、数据分析处理系统与本发明的数据传输方法一一对应，在上述数据传输方法的实施例阐述的技术特征及其有益效果均适用于数据传输装置、数据分析处理系统的实施例中，具体内容可参见本发明方法实施例中的叙述，此处不再赘述，特此声明。

此外，上述示例的数据传输装置、数据分析处理系统的实施方式中，各程序模块的逻辑划分仅是举例说明，实际应用中可以根据需要，例如出于相应硬件的配置要求或者软件的实现的便利考虑，将上述功能分配由不同的程序模块完成，即将数据传输装置、数据分析处理系统的内部结构划分成不同的程序模块，以完成以上描述的全部或者部分功能。

本申请提供的数据传输方法可以应用于如图7所示的计算机设备中。该计算机设备可以是服务器，也可以是终端设备，其内部结构图可以如图7所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口和数据库。其中，处理器用于提供计算和控制能力；存储器包括非易失性存储介质、内存储器，该非易失性存储介质存储有操作系统、计算机程序(该计算机程序被处理器执行时实现一种数据传输方法)和数据库，该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境；数据库用于存储数据传输方法执行过程中涉及的各种数据；网络接口用于与外部的终端通过网络连接通信。

本领域技术人员可以理解，图7中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。

在一个实施例中，提供了一种计算机设备，包括存储器和处理器，存储器存储有计算机程序，处理器执行计算机程序时实现以下步骤：获取连接信息和待传输数据；连接信息和待传输数据由输入端根据数据传输请求确定；根据连接信息，向链路代理发送传输指令；传输指令，用于控制链路代理根据连接信息，将待传输数据通过相匹配的网络接口传输给目标业务处理端。

在一个实施例中，处理器执行计算机程序时还实现以下步骤：接收输入端发送的连接信息和待传输数据；连接信息和待传输数据由输入端通过事件驱动模型对数据传输请求进行分析后确定；其中，事件驱动模型为基于Epoll的事件驱动模型。

在一个实施例中，处理器执行计算机程序时还实现以下步骤：向链路代理发送接口建立指令；接口建立指令用于控制链路代理建立与所连接的业务处理端相匹配的网络接口；其中，网络接口包括TCP/UDP接口。

在一个实施例中，处理器执行计算机程序时还实现以下步骤：根据连接信息，确定采集终端的第一socket句柄；采集终端为发送数据传输请求的终端；采集终端与输入端网络连接；处理器执行计算机程序时还实现以下步骤：根据连接信息，向链路代理发送句柄绑定指令；句柄绑定指令用于控制链路代理获取目标业务处理端的第二socket句柄，建立第一socket句柄与第二socket句柄的映射关系；向链路代理发送传输指令；传输指令，用于控制链路代理根据映射关系，将待传输数据通过网络接口传输给目标业务处理端。

在一个实施例中，处理器执行计算机程序时还实现以下步骤：接收链路代理返回的响应数据；响应数据为目标业务处理端对待传输数据进行业务处理后得到的数据；将响应数据通过输入端发送给采集终端。

在一个实施例中，处理器执行计算机程序时还实现以下步骤：根据连接信息，确定目标业务处理端的类型；若根据该类型确定目标业务处理端为旧主站，向链路代理发送传输指令。

在一个实施例中，处理器执行计算机程序时还实现以下步骤：若根据该类型确定目标业务处理端为新主站，将待传输数据通过消息队列发送给目标业务处理端。

在一个实施例中，提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现以下步骤：获取连接信息和待传输数据；连接信息和待传输数据由输入端根据数据传输请求确定；根据连接信息，向链路代理发送传输指令；传输指令，用于控制链路代理根据连接信息，将待传输数据通过相匹配的网络接口传输给目标业务处理端。

在一个实施例中，计算机程序被处理器执行时还实现以下步骤：接收输入端发送的连接信息和待传输数据；连接信息和待传输数据由输入端通过事件驱动模型对数据传输请求进行分析后确定；其中，事件驱动模型为基于Epoll的事件驱动模型。

在一个实施例中，计算机程序被处理器执行时还实现以下步骤：向链路代理发送接口建立指令；接口建立指令用于控制链路代理建立与所连接的业务处理端相匹配的网络接口；其中，网络接口包括TCP/UDP接口。

在一个实施例中，计算机程序被处理器执行时还实现以下步骤：根据连接信息，确定采集终端的第一socket句柄；采集终端为发送数据传输请求的终端；采集终端与输入端网络连接；计算机程序被处理器执行时还实现以下步骤：根据连接信息，向链路代理发送句柄绑定指令；句柄绑定指令用于控制链路代理获取目标业务处理端的第二socket句柄，建立第一socket句柄与第二socket句柄的映射关系；向链路代理发送传输指令；传输指令，用于控制链路代理根据映射关系，将待传输数据通过网络接口传输给目标业务处理端。

在一个实施例中，计算机程序被处理器执行时还实现以下步骤：接收链路代理返回的响应数据；响应数据为目标业务处理端对待传输数据进行业务处理后得到的数据；将响应数据通过输入端发送给采集终端。

在一个实施例中，计算机程序被处理器执行时还实现以下步骤：根据连接信息，确定目标业务处理端的类型；若根据该类型确定目标业务处理端为旧主站，向链路代理发送传输指令。

在一个实施例中，计算机程序被处理器执行时还实现以下步骤：若根据该类型确定目标业务处理端为新主站，将待传输数据通过消息队列发送给目标业务处理端。

本领域普通技术人员可以理解，实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，作为独立的产品销售或使用。计算机可读介质的更具体的示例(非穷尽性列表)包括以下：具有一个或多个布线的电连接部(电子装置)，便携式计算机盘盒(磁装置)，随机存取存储器(RAM)，只读存储器(ROM)，可擦除可编辑只读存储器(EPROM或闪速存储器)，光纤装置，以及便携式光盘只读存储器(CDROM)。另外，计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质，因为可以例如通过对纸或其他介质进行光学扫描，接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序，然后将其存储在计算机存储器中。

应当理解，本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。

本发明实施例的术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或(模块)单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。

以上所述实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。

以上所述实施例仅表达了本发明的几种实施方式，不能理解为对本发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种数据传输方法，其特征在于，包括以下步骤：

获取连接信息和待传输数据；所述连接信息和所述待传输数据由输入端根据数据传输请求确定；

根据所述连接信息，向链路代理发送传输指令；所述传输指令，用于控制所述链路代理根据所述连接信息，将所述待传输数据通过相匹配的网络接口传输给目标业务处理端；所述链路代理将待传输数据转换为与目标业务处理端的链路接口相匹配的数据形式；其中，链路代理与业务处理端预先进行网络接口的匹配，网络接口匹配的过程为：数据传输请求以TCP/UDP的方式传输，则将链路代理与业务处理端的网络接口确定为TCP/UDP接口，所述链路代理根据输入端发送的IO核心信息数据建立模拟仿真TCP/UDP接口，并通过所述仿真TCP/UDP接口发送待传输数据；IO核心信息数据由输入端使用事件驱动模型实时接入连接事件后得到；所述业务处理端的数量为多个；

所述根据所述连接信息，向链路代理发送传输指令的步骤，包括：

根据所述连接信息，确定目标业务处理端的类型；

若根据所述类型确定所述目标业务处理端为旧主站，向链路代理发送所述传输指令；

所述获取连接信息和待传输数据的步骤，包括：

接收输入端发送的连接信息和待传输数据；所述连接信息和所述待传输数据由输入端通过事件驱动模型对所述数据传输请求进行分析后确定；其中，所述事件驱动模型为基于Epoll的事件驱动模型。

2.根据权利要求1所述的方法，其特征在于，所述根据所述连接信息，向链路代理发送传输指令的步骤之前，还包括：

向链路代理发送接口建立指令；所述接口建立指令用于控制所述链路代理建立与所连接的业务处理端相匹配的网络接口；其中，所述网络接口包括TCP/UDP接口。

3.根据权利要求1所述的方法，其特征在于，

还包括以下步骤：根据所述连接信息，确定采集终端的第一socket句柄；所述采集终端为发送所述数据传输请求的终端；所述采集终端与所述输入端网络连接；

所述根据所述连接信息，向链路代理发送传输指令的步骤，包括：

根据所述连接信息，向链路代理发送句柄绑定指令；所述句柄绑定指令用于控制所述链路代理获取目标业务处理端的第二socket句柄，建立所述第一socket句柄与所述第二socket句柄的映射关系；

向所述链路代理发送传输指令；所述传输指令，用于控制所述链路代理根据所述映射关系，将所述待传输数据通过所述网络接口传输给所述目标业务处理端。

4.根据权利要求3所述的方法，其特征在于，所述根据所述连接信息，向链路代理发送传输指令的步骤之后，还包括：

接收所述链路代理返回的响应数据；所述响应数据为所述目标业务处理端对所述待传输数据进行业务处理后得到的数据；

将所述响应数据通过所述输入端发送给所述采集终端。

5.根据权利要求1所述的方法，其特征在于，还包括以下步骤：

若根据所述类型确定所述目标业务处理端为新主站，将所述待传输数据通过消息队列发送给所述目标业务处理端。

6.一种数据传输装置，其特征在于，包括：

信息获取模块，用于获取连接信息和待传输数据；所述连接信息和所述待传输数据由输入端根据数据传输请求确定；

指令发送模块，用于根据所述连接信息，向链路代理发送传输指令；所述传输指令，用于控制所述链路代理根据所述连接信息，将所述待传输数据通过相匹配的网络接口传输给目标业务处理端；所述链路代理将待传输数据转换为与目标业务处理端的链路接口相匹配的数据形式；其中，链路代理与业务处理端预先进行网络接口的匹配，网络接口匹配的过程为：数据传输请求以TCP/UDP的方式传输，则将链路代理与业务处理端的网络接口确定为TCP/UDP接口，所述链路代理根据输入端发送的IO核心信息数据建立模拟仿真TCP/UDP接口，并通过所述仿真TCP/UDP接口发送待传输数据；IO核心信息数据由输入端使用事件驱动模型实时接入连接事件后得到；所述业务处理端的数量为多个；

指令发送模块，包括：类型确定子模块，用于根据连接信息，确定目标业务处理端的类型；传输指令发送子模块，用于若根据该类型确定目标业务处理端为旧主站，向链路代理发送传输指令；

信息获取模块，还用于接收输入端发送的连接信息和待传输数据；连接信息和待传输数据由输入端通过事件驱动模型对数据传输请求进行分析后确定；其中，事件驱动模型为基于Epoll的事件驱动模型。

7.根据权利要求6所述的装置，其特征在于，还包括：接口建立模块，用于向链路代理发送接口建立指令；接口建立指令用于控制链路代理建立与所连接的业务处理端相匹配的网络接口；其中，网络接口包括TCP/UDP接口。

8.一种数据处理分析系统，其特征在于，包括：IO接入模块、数据处理模块以及链路代理模块；

所述IO接入模块，用于接收数据传输请求，根据所述数据传输请求，确定连接信息和待传输数据；将所述连接信息和所述待传输数据发送给所述数据处理模块；

所述数据处理模块，用于根据所述连接信息，向链路代理模块发送传输指令；

所述链路代理模块，用于接收所述传输指令；根据所述连接信息，将所述待传输数据通过相匹配的网络接口传输给目标业务处理端；

所述链路代理模块，还用于将待传输数据转换为与目标业务处理端的链路接口相匹配的数据形式；其中，链路代理模块与业务处理端预先进行网络接口的匹配，网络接口匹配的过程为：数据传输请求以TCP/UDP的方式传输，则将链路代理模块与业务处理端的网络接口确定为TCP/UDP接口，所述链路代理模块根据输入端发送的IO核心信息数据建立模拟仿真TCP/UDP接口，并通过所述仿真TCP/UDP接口发送待传输数据；IO核心信息数据由输入端使用事件驱动模型实时接入连接事件后得到；所述业务处理端的数量为多个；

所述数据处理模块，还用于根据所述连接信息，确定目标业务处理端的类型；若根据所述类型确定所述目标业务处理端为旧主站，向链路代理发送所述传输指令；

所述数据处理模块，还用于接收输入端发送的连接信息和待传输数据；连接信息和待传输数据由输入端通过事件驱动模型对数据传输请求进行分析后确定；其中，事件驱动模型为基于Epoll的事件驱动模型。

9.一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至5任一项所述的方法的步骤。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至5任一项所述的方法的步骤。

Images