CN110011952A - 一种数据传输的方法、服务集群及客户端 - Google Patents
一种数据传输的方法、服务集群及客户端 Download PDFInfo
- Publication number
- CN110011952A CN110011952A CN201810009980.XA CN201810009980A CN110011952A CN 110011952 A CN110011952 A CN 110011952A CN 201810009980 A CN201810009980 A CN 201810009980A CN 110011952 A CN110011952 A CN 110011952A
- Authority
- CN
- China
- Prior art keywords
- slice
- information
- transmission
- data
- file destination
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000005540 biological transmission Effects 0.000 title claims abstract description 285
- 238000000034 method Methods 0.000 title claims abstract description 61
- 238000012545 processing Methods 0.000 claims description 27
- 238000003860 storage Methods 0.000 claims description 22
- 230000005055 memory storage Effects 0.000 claims 2
- 238000012546 transfer Methods 0.000 description 19
- 238000010586 diagram Methods 0.000 description 8
- 238000004590 computer program Methods 0.000 description 7
- 230000000694 effects Effects 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000013500 data storage Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000003672 processing method Methods 0.000 description 3
- 125000004122 cyclic group Chemical group 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/104—Peer-to-peer [P2P] networks
- H04L67/1074—Peer-to-peer [P2P] networks for supporting data block transmission mechanisms
- H04L67/1078—Resource delivery mechanisms
- H04L67/108—Resource delivery mechanisms characterised by resources being split in blocks or fragments
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/14—Session management
- H04L67/146—Markers for unambiguous identification of a particular session, e.g. session cookie or URL-encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/22—Parsing or analysis of headers
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Information Transfer Between Computers (AREA)
- Computer And Data Communications (AREA)
Abstract
本发明公开了一种数据传输的方法、服务集群及客户端，用以解决现有技术中存在的在高并发条件下文件传输的稳定性和准确性较低的技术问题。包括：服务端接收来自客户端的目标文件的传输请求描述信息；并基于传输请求描述信息获得目标文件的标识信息；服务端开始循环执行以下操作，直到客户端对目标文件进行切片处理完毕：基于标识信息查询目标文件当前的传输进度信息，并生成相应的传输需求描述信息；接收客户端当前发送的切片数据，切片数据是客户端基于传输需求描述信息对目标文件进行一次切片处理后获得的；在本地的磁盘阵列上，将已组装的部分数据与当前发送的切片数据进行组装，并更新传输进度信息；所有切片数据都组装完毕后获得目标文件。
Description
技术领域
本发明涉及信息技术领域，尤其是涉及一种数据传输的方法、服务集群及客户端。
背景技术
随着信息化的快速发展，网络服务面向的客户越来越多，大文件上传、下载功能的使用频率也越来越高，而目前网络传输速度和稳定性都还有待提高，这就要求网络服务商为用户提供一种支持高并发、高可用性的大文件传输技术。
在现有技术中，已有的断点续传技术多是基于表现层+逻辑层+保存层(struts+spring+hibernate，SSH)框架或模型-视图-控制器(Model View Controller，MVC)框架实现的。它们的优点是开发难度小，但受自身框架的局限，使得它们所能支持的并发数较少。
为了让基于SSH框架或MVC框架的断点续传技术，能支持高并发的用户文件传输需求，通常的做法是基于重硬件、轻软件的处理方式。如，通过加大硬件投入、增加集群节点数量来满足高并发的用户文件传输需求。显然，若使用这种方式，随着并发用户文件传输需求的激增，对硬件的需求也会相应增大，进而使得网络服务商的使用成本也将相应增加。
因此，如何在提高在高并发条件下文件传输的稳定性和准确性，成为一个亟待解决的技术问题。
发明内容
本发明提供一种数据传输的方法、服务集群及客户端，用于解决现有技术中存在的在高并发条件下文件传输的稳定性和准确性较低的技术问题。
第一方面，为解决上述技术问题，本发明实施例提供的一种数据传输的方法的技术方案如下：
服务端接收来自客户端的目标文件的传输请求描述信息；其中，所述传输请求描述信息，是在所述客户端按第一数据格式，将所述目标文件的关键信息，进行封装后得到的数据包；
所述服务端基于所述传输请求描述信息，获得所述目标文件的标识信息；其中，所述标识信息用于唯一标识所述目标文件；
所述服务端开始循环执行以下操作，直到客户端对所述目标文件进行切片处理完毕：
基于所述标识信息查询所述目标文件当前的传输进度信息，并基于所述当前的传输进度信息生成相应的传输需求描述信息，并将所述传输需求描述信息发往客户端；
接收客户端当前发送的切片数据，所述切片数据是所述客户端基于所述传输需求描述信息对所述目标文件进行一次切片处理后获得的；
在本地的磁盘阵列上，将所述目标文件已组装的部分数据与所述当前发送的切片数据进行组装，并对所述传输进度信息进行更新；
所述服务端对获得的所有切片数据都组装完毕后，获得所述目标文件。
可选的，在服务端接收来自客户端的目标文件的传输请求描述信息之后，还包括：
所述服务端按照第一数据格式，对所述传输请求描述信息进行解析，以获得解析后的传输请求描述信息及所述标识信息；
所述服务端通过所述解析后的传输请求描述信息及所述标识信息，判断是否存在所述目标文件的传输进度信息，获得判断结果；
当所述判断结果为否时，所述服务端基于所述解析后的传输请求描述信息及所述标识信息，为所述目标文件创建所述传输进度信息。
可选的，所述基于所述当前的传输进度信息生成相应的传输需求描述信息，包括：
所述服务端基于所述当前的传输进度信息，确定所述切片数据的切片编号及在所述目标文件中的切片位置；
所述服务端基于所述切片编号和所述切片位置及预设的切片大小，确定所述切片数据的传输需求；
所述服务端将所述传输需求按照第二数据格式进行封装，生成所述传输需求描述信息。
可选的，将所述目标文件已组装的部分数据与所述当前发送的切片数据进行组装之前，还包括：
所述服务端按第三数据格式对所述当前发送的切片数据进行解析，获得切片内容及切片信息。
可选的，将所述目标文件已组装的部分数据与所述当前发送的切片数据进行组装，包括：
所述服务端基于所述切片信息中携带的切片编号，将所述切片内容存入本地的磁盘阵列上的对应位置，完成对所述切片数据的组装。
可选的，所述服务端对获得的所有切片数据都组装完毕后，获得所述目标文件，包括：
当所述服务端确定所述切片信息中包含有所述目标文件的结束标识时，确定已完成对获得的所有切片数据的组装，获得所述目标文件。
第二方面，本发明实施例提供了另一种用于数据传输的方法，包括：
客户端发送目标文件的传输请求描述信息给服务端；其中，所述传输请求描述信息至少包括所述目标文件的标识信息，所述标识信息用于唯一标识所述目标文件；之后，
所述客户端在发送所述传输请求描述信息之后，开始循环执行以下操作，直到所述客户端对所述目标文件进行切片处理完毕：
接收来自所述服务端的传输需求描述信息；其中，所述传输需求描述信息为所述服务端通过所述标识信息查询所述目标文件当前的传输进度信息生成的；
根据第二数据格式对所述传输需求描述信息进行解析，并根据解析后的传输需求描述信息对所述目标文件进行一次切片，获得所述目标文件当前的切片内容及切片信息；其中，所述切片信息至少包括所述当前切片内容的切片编号；
将所述标识信息和所述当前的切片内容及切片信息进行封装，获得切片数据；并将所述切片数据发送给所述服务端。
可选的，在根据解析后的传输需求描述信息对所述目标文件进行一次切片时，还包括：
所述客户端确定所述目标文件当前的切片内容为最后一个切片内容时，生成结束标识；
所述客户端将所述结束标识一起封装入所述切片数据。
第三方面，本发明实施例提供了一种用于数据传输的服务集群，包括：
收发单元，用于接收来自客户端的目标文件的传输请求描述信息；其中，所述传输请求描述信息，是在所述客户端按第一数据格式，将所述目标文件的关键信息，进行封装后得到的数据包；
获得单元，用于基于所述传输请求描述信息，获得所述目标文件的标识信息；其中，所述标识信息用于唯一标识所述目标文件；
处理单元，用于开始循环执行以下操作，直到客户端对所述目标文件进行切片处理完毕：
基于所述标识信息查询所述目标文件当前的传输进度信息，并基于所述当前的传输进度信息生成相应的传输需求描述信息，并将所述传输需求描述信息发往客户端；
接收客户端当前发送的切片数据，所述切片数据是所述客户端基于所述传输需求描述信息对所述目标文件进行一次切片处理后获得的；
在本地的磁盘阵列上，将所述目标文件已组装的部分数据与所述当前发送的切片数据进行组装，并对所述传输进度信息进行更新；
所述获得单元还用于，对获得的所有切片数据都组装完毕后，获得所述目标文件。
可选的，在服务端接收来自客户端的目标文件的传输请求描述信息之后，所述收发单元还用于：
所述服务端按照第一数据格式，对所述传输请求描述信息进行解析，以获得解析后的传输请求描述信息及所述标识信息；
所述服务端通过所述解析后的传输请求描述信息及所述标识信息，判断是否存在所述目标文件的传输进度信息，获得判断结果；
当所述判断结果为否时，所述服务端基于所述解析后的传输请求描述信息及所述标识信息，为所述目标文件创建所述传输进度信息。
可选的，所述基于所述当前的传输进度信息生成相应的传输需求描述信息，所述处理单元还用于：
所述服务端基于所述当前的传输进度信息，确定所述切片数据的切片编号及在所述目标文件中的切片位置；
所述服务端基于所述切片编号和所述切片位置及预设的切片大小，确定所述切片数据的传输需求；
所述服务端将所述传输需求按照第二数据格式进行封装，生成所述传输需求描述信息。
可选的，将所述目标文件已组装的部分数据与所述当前发送的切片数据进行组装之前，所述处理单元还用于：
所述服务端按第三数据格式对所述当前发送的切片数据进行解析，获得切片内容及切片信息。
可选的，将所述目标文件已组装的部分数据与所述当前发送的切片数据进行组装，所述处理单元还用于
所述服务端基于所述切片信息中携带的切片编号，将所述切片内容存入本地的磁盘阵列上的对应位置，完成对所述切片数据的组装。
可选的，所述服务端对获得的所有切片数据都组装完毕后，获得所述目标文件，所述获得单元还用于：
当所述服务端确定所述切片信息中包含有所述目标文件的结束标识时，确定已完成对获得的所有切片数据的组装，获得所述目标文件。
第四方面，本发明实施例提供了另一种用于数据传输的客户端，包括：
发送单元，用于发送目标文件的传输请求描述信息给服务端；其中，所述传输请求描述信息至少包括所述目标文件的标识信息，所述标识信息用于唯一标识所述目标文件；之后，
处理单元，用于开始按在发送所述传输请求描述信息之后，开始循环执行以下操作，直到所述客户端对所述目标文件进行切片处理完毕：
接收来自所述服务端的传输需求描述信息；其中，所述传输需求描述信息为所述服务端通过所述标识信息查询所述目标文件当前的传输进度信息生成的；
根据第二数据格式对所述传输需求描述信息进行解析，并根据解析后的传输需求描述信息对所述目标文件进行一次切片，获得所述目标文件当前的切片内容及切片信息；其中，所述切片信息至少包括所述当前切片内容的切片编号；
将所述标识信息和所述当前的切片内容及切片信息进行封装，获得切片数据；
发送单元，用于将所述切片数据发送给所述服务端。
可选的，在根据解析后的传输需求描述信息对所述目标文件进行一次切片时，所述处理单元还用于：
所述客户端确定所述目标文件当前的切片内容为最后一个切片内容时，生成结束标识；
所述客户端将所述结束标识一起封装入所述切片数据。
第五方面，本发明实施例还提供一种用于数据传输的服务集群，包括：
至少二个处理器，以及
与所述至少二个处理器连接的存储器；
其中，所述存储器存储有可被所述至少二个处理器执行的指令，所述至少二个处理器通过执行所述存储器存储的指令，执行如上述第一方面所述的方法。
第六方面，本发明实施例还提供一种用于数据传输的客户端，包括：
至少一个处理器，以及
与所述至少一个处理器连接的存储器；
其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述至少一个处理器通过执行所述存储器存储的指令，执行如上述第二方面所述的方法。
第七方面，本发明实施例还提供一种计算机可读存储介质，包括：
所述计算机可读存储介质存储有计算机指令，当所述计算机指令在计算机上运行时，使得计算机执行如上述第一方面所述的方法。
第八方面，本发明实施例还提供一种计算机可读存储介质，包括：
所述计算机可读存储介质存储有计算机指令，当所述计算机指令在计算机上运行时，使得计算机执行如上述第二方面所述的方法。
通过本发明实施例的上述一个或多个实施例中的技术方案，本发明实施例至少具有如下技术效果：
在本申请提供的实施例中，通过在服务端接收到目标文件的传输请求描述信息后，从中获得目标文件的标示信息，之后，通过在服务端循环执行以下操作，直到客户端对目标文件进行切片处理完毕：首先，基于标识信息查询目标文件当前的传输进度信息，并基于当前的传输进度信息生成相应的传输需求描述信息，同时发往客户端；然后，接收客户端当前发送的切片数据，该切片数据是客户端基于传输需求描述信息对目标文件进行一次切片处理后获得的；最后，在本地的磁盘阵列上，将目标文件已组装的部分数据与当前发送的切片数据进行组装，并对传输进度信息进行更新；通过上述循环处理方式，让客户端按照服务端发送的传输需求描述信息将目标文件进行切片，并将被切片的文件封装为mina数据包，最终在服务端将目标文件的切片数据整合为完整的文件。由于正在mina框架下使用上述数据传输过程，将目标文件进行分片传输，所以能提高集群单个节点所能支撑的用户并发数量，减少集群节点数量，从而有效的实现了提高目标文件传输的稳定性和准确性的技术效果。
附图说明
图1为本发明实施例提供的一种数据传输方法的流程图；
图2为本发明实施例提供的另一种数据传输方法的流程图；
图3为本发明实施例提供的一种服务集群的结构示意图；
图4为本发明实施例提供的一种客户端的结构示意图；
图5为本发明实施例提供的一种服务集群；
图6为本发明实施例提供的一种客户端。
具体实施方式
本发明实施列提供一种数据传输的方法及装置，用于解决现有技术中存在的在高并发条件下文件传输的稳定性和准确性较低的技术问题。
本申请实施例中的技术方案为解决上述的技术问题，总体思路如下：
提供一种数据传输的方法，包括：服务端接收来自客户端的目标文件的传输请求描述信息；其中，传输请求描述信息，是在客户端按第一数据格式，将目标文件的关键信息，进行封装后得到的数据包；服务端基于传输请求描述信息，获得目标文件的标识信息；其中，标识信息用于唯一标识目标文件；服务端开始循环执行以下操作，直到客户端对目标文件进行切片处理完毕：基于标识信息查询目标文件当前的传输进度信息，并基于当前的传输进度信息生成相应的传输需求描述信息，并将传输需求描述信息发往客户端；接收客户端当前发送的切片数据，切片数据是客户端基于传输需求描述信息对目标文件进行一次切片处理后获得的；在本地的磁盘阵列上，将目标文件已组装的部分数据与当前发送的切片数据进行组装，并对传输进度信息进行更新；服务端对获得的所有切片数据都组装完毕后，获得目标文件。
由于在上述方案中，在服务端接收到目标文件的传输请求描述信息后，从中获得目标文件的标示信息，之后，通过在服务端循环执行以下操作，直到客户端对目标文件进行切片处理完毕：首先，基于标识信息查询目标文件当前的传输进度信息，并基于当前的传输进度信息生成相应的传输需求描述信息，同时发往客户端；然后，接收客户端当前发送的切片数据，该切片数据是客户端基于传输需求描述信息对目标文件进行一次切片处理后获得的；最后，在本地的磁盘阵列上，将目标文件已组装的部分数据与当前发送的切片数据进行组装，并对传输进度信息进行更新；通过上述循环处理方式，让客户端按照服务端发送的传输需求描述信息将目标文件进行切片，并将被切片的文件封装为mina数据包，最终在服务端将目标文件的切片数据整合为完整的文件。由于正在mina框架下使用上述数据传输过程，将目标文件进行分片传输，所以能提高集群单个节点所能支撑的用户并发数量，减少集群节点数量，从而有效的实现了提高目标文件传输的稳定性和准确性的技术效果。
为了更好的理解上述技术方案，下面通过附图以及具体实施例对本发明技术方案做详细的说明，应当理解本发明实施例以及实施例中的具体特征是对本发明技术方案的详细的说明，而不是对本发明技术方案的限定，在不冲突的情况下，本发明实施例以及实施例中的技术特征可以相互组合。
实施例一、请参考图1，本发明实施例提供一种数据传输的方法，该方法的处理过程如下。
步骤101：服务端接收来自客户端的目标文件的传输请求描述信息；其中，传输请求描述信息，是在客户端按第一数据格式，将目标文件的关键信息，进行封装后得到的数据包。
需要说明的是，在本发明提供的实施例中，整个数据传输流程都是建立在网络应用程序框架(Multipurpose Infrastructure for Network Applications，MINA)之上的。
当客户端需要向服务端传输目标文件时，客户端需要主动连接服务端，并向服务端发送目标文件的传输请求描述信息。
其中，目标文件的关键信息包括但不限于以下信息：目标文件的名称、文件大小、标识信息(用于唯一标识该目标文件)、文件类型、目标地址等。第一数据格式是指在一个MINA数据包中，将上述关键信息中的每个信息放在数据包中的指定位置，如：第一数据格式要求MINA数据包的第一字节放目标文件的类型，第二字节放目标文件的名称，第三字节放目标文件的大小，第四节放目标文件的标识信息等，具体第一数据格式的是如何定义数据在MINA数据包中存放形式的，在此不做限定。
在服务端接收到传输请求描述信息之后，首先，服务端会按照第一数据格式，对传输请求描述信息进行解析，以获得解析后的传输请求描述信息及标识信息；其次，服务端通过解析后的传输请求描述信息及标识信息，判断是否存在目标文件的传输进度信息，获得判断结果；最后，当判断结果为否时，说明该目标文件从未传输到服务端中，所以需要服务端基于解析后的传输请求描述信息及标识信息，为该目标文件创建传输进度信息并在本地磁盘阵列中指定存储该目标文件的存储位置。
进一步的，当判断结果为否时，说明该目标文件之前由于一些原因造成了目标文件的传输中断，现在需要续传目标文件，此即断点续传，那么只需找出该断点即可，在本申请提供的实施例中，通过是目标文件的传输进度信息便可快速找到该断点。
不管是新创建的目标文件还是需要进行断点续传的已创建的目标文件，由于它们的数据传输进度都是由各自的传输进度信息监控的，所以在传输数据前都需要通过能唯一标识目标文件的标识信息找到对应的传输进度信息。而获得该标识信息的方式，具体的请参见步骤102。
步骤102：服务端基于传输请求描述信息，获得目标文件的标识信息；其中，标识信息用于唯一标识目标文件。
需要说明的是，该标识信息可以是目标文件的名称、特定编码、或其它能能以标识该目标文件的信息，具体是什么信息在此不做限定，只要能唯一标识该目标文件即可。
在获得目标文件的标识信息之后，便可通过执行步骤103对指导客户端对目标文件进行切片、分片传输，进而在服务端进行分片组装，直到将目标文件全部组装完整为止。
步骤103：服务端开始循环执行以下操作，直到客户端对目标文件进行切片处理完毕：
步骤103-1：基于标识信息查询目标文件当前的传输进度信息，并基于当前的传输进度信息生成相应的传输需求描述信息，并将传输需求描述信息发往客户端；
步骤103-2：接收客户端当前发送的切片数据，切片数据是客户端基于传输需求描述信息对目标文件进行一次切片处理后获得的；
步骤103-3：在本地的磁盘阵列上，将目标文件已组装的部分数据与当前发送的切片数据进行组装，并对传输进度信息进行更新。
具体的上述步骤103-1至103-3的执行过程的详细介绍如下：
步骤103-1：基于标识信息查询目标文件当前的传输进度信息，并基于当前的传输进度信息生成相应的传输需求描述信息，并将传输需求描述信息发往客户端。
其中，传输进度信息至少包括了目标文件的标示信息、文件总的大小、目标文件的单个切片文件的大小、当前已组装的切片文件信息等。传输需求描述信息至少包括了目标文件当前需要切片的位置、切片文件的大小、切片文件的切片编号，目标文件的标识信息等。
基于当前的传输进度信息，生成相应的传输需求描述信息的步骤为：
首先，服务端基于当前的传输进度信息，确定切片数据的切片编号及在目标文件中的切片位置；其次，服务端基于切片编号和切片位置及预设的切片大小，确定切片数据的传输需求；最后，服务端将传输需求按照第二数据格式进行封装，生成传输需求描述信息。
例如，假设目标文件的标识信息为A，目标文件的大小为300MB，每个切片文件的大小为1MB，目前已经将切片编号为258的切片信息组装到本地的磁盘阵列中的地址为A100的位置了。
服务端通过标示信息A查询到目标文的传输进度信息为：标识信息为A，最近一次已组装完的切片号为258，其存储位置为A100，预设的切片大小为1MB。
进而服务端可以根据上述传输进度信息确定，下一个将要传输的切片数据的切片编号为259，其在目标文件中的起始位置为258(假设目标文件按切片编号编写位置信息)，通过该切片编号259及切片起始位置258，便可确定切片数据的传输需求，为从标识信息为A的目标文件中的258位置处开始切取1MB的数据。
然后，让服务端将上述传输需求按照第二数据格式进行封装，生成对应的传输需求描述信息。例如第二是数据格式要求将目标文件的标识信息放在传输需求描述信息的第一个字节，将起始位置258放在传输需求描述信息的第二个字节，将切片编号259放在传输需求描述信息的第三个字节，将切片大小1MB放在传输需求描述信息的第四个字节。当然在实际应用中可能还需要添加其他信息，如校验标识。具体需要将生命信息封装入传输需求描述信息，在此不做限定。
需要说明的是，第二数据格式与第一数据格式类似，都是指在一个MINA数据包中，将上述传输需求中的信息按特定的数据存放格式将它们放在MINA数据包中的指定位置。
在服务端生成传输需求描述信息之后，便将传输需求描述信息发送给客户端，之后便可执行步骤103-2。
步骤103-2：接收客户端当前发送的切片数据，切片数据是客户端基于传输需求描述信息对目标文件进行一次切片处理后获得的。
在接收到客户端当前发送的切片数据之后，执行步骤103之前，还需要先将当前发送的切片数据按第三数据格式进行解析，进而才能获得切片内容和切片信息。
例如，假设客户端发送的切片数据是按照第三数据格式封装的，第三数据格式要求第一个字节存放目标文件的标识信息，第二个字节存放切片编号，第三个字节开始存放切片数据中的切片内容，其中切片数据的切片信息即为标识信息和切片编号。
服务端在接收到上述切片数据之后，便按照第三数据格式到切片数据中提取切片内容和切片编号。
其中，切片内容为客户端按照传输需求描述信息，对目标文件进行一次切片后获得文件内容；切片信息包含了目标文件的标识信息、该切片内容的切片编号、切片大小等，若该切片内容为目标文件的最后一片切片文件，那么切片信息中还会包含目标文件的结束标识，以表明该目标文件已全部传输完毕。
需要说明的是，第三数据格式与第一数据格式类似，都是指在一个MINA数据包中，将上述切片内容及切片信息按特定的数据存放格式将它们放在MINA数据包中的指定位置。
在获得切片内容及切片信息之后，便可执行步骤103-3。
步骤103-3：在本地的磁盘阵列上，将目标文件已组装的部分数据与当前发送的切片数据进行组装，并对传输进度信息进行更新。
具体的组装方式为：服务端基于切片信息中携带的切片编号，将切片内容存入本地的磁盘阵列上的对应位置，完成对切片数据的组装。
例如，服务端接收到切片编号为259的切片信息，通过在本地查询发现切片编号为259的切片内容，在本地的磁盘阵列中被分配的地址为A100，那么服务端只需将切片内容写入地址A100对应的存储单元中即可。当然，服务端也可以通过在本地为目标文件指定一个初始地址如1000，将切片编号作为偏移地址如259，那么在此例中当要将切片内容写入本地磁盘阵列时，便可利用目标文件的初始地址1000+切片内容的偏移地址259，就可以唯一确定切片内容应写入本地磁盘阵列的位置是地址为10259对应的存储单元。
在完成对客户端当前发送的切片数据的组装之后，若没有收到目标文件的结束标识，继续循环执行上述步骤103-1至103-3，直到接收到结束标志为止。
步骤104：服务端对获得的所有切片数据都组装完毕后，获得目标文件。
当服务端确定切片信息中包含有目标文件的结束标识时，确定已完成对获得的所有切片数据的组装，便可获得完整的目标文件。
通过上述数据传输方法的详细描述，可以清楚的知道服务端传输目标文件的过程，下面将详细描述客户端传输目标文件的详细过程。
实施例二、请参见图2，基于同一发明构思，本发明另一实施例中提供一种数据传输的方法，该方法的处理过程如下。
步骤201：客户端发送目标文件的传输请求描述信息给服务端；其中，传输请求描述信息至少包括目标文件的标识信息，标识信息用于唯一标识目标文件。
在客户端发送传输请求描述信息给服务端之前，还需要先与服务端建立连接。
并且，还需要将目标文件的关键信息按第一数据格式进行封后，才能得到传输请求描述信息。
其中，目标文件的关键信息包括但不限于以下信息：目标文件的名称、文件大小、标识信息(用于唯一标识该目标文件)、文件类型、目标地址等。第一数据格式是指在一个MINA数据包中，将上述关键信息中的每个信息放在数据包中的指定位置，如：第一数据格式要求MINA数据包的第一字节放目标文件的类型，第二字节放目标文件的名称，第三字节放目标文件的大小，第四节放目标文件的标识信息等，具体第一数据格式的是如何定义数据在MINA数据包中存放形式的，在此不做限定。
在发送传输请求描述信息之后，便可执行步骤202。
步骤202：客户端在发送传输请求描述信息之后，开始循环执行以下操作，直到客户端对目标文件进行切片处理完毕：
步骤202-1：接收来自服务端的传输需求描述信息；其中，传输需求描述信息为服务端通过标识信息查询目标文件当前的传输进度信息生成的；
步骤202-2：根据第二数据格式对传输需求描述信息进行解析，并根据解析后的传输需求描述信息对目标文件进行一次切片，获得目标文件当前的切片内容及切片信息；其中，切片信息至少包括当前切片内容的切片编号；
步骤202-3：将标识信息和当前的切片内容及切片信息进行封装，获得切片数据；并将切片数据发送给所述服务端。
具体的上述步骤202-1至202-3的执行过程的详细介绍如下：
步骤202-1：接收来自服务端的传输需求描述信息；其中，传输需求描述信息为服务端通过标识信息查询目标文件当前的传输进度信息生成的。
其中，传输进度信息至少包括了目标文件的标示信息、文件总的大小、目标文件的单个切片文件的大小、当前已组装的切片文件信息等。传输需求描述信息至少包括了目标文件当前需要切片的位置、切片文件的大小、切片文件的切片编号，目标文件的标识信息等。
由于客户端接收的传输需求描述信息是被服务端按第二预设格式封装后得到的，所以在客户端接收到传输需求描述信息之后，还需要对其进行解析，具体请见步骤202-2。
步骤202-2：根据第二数据格式对传输需求描述信息进行解析，并根据解析后的传输需求描述信息对目标文件进行一次切片，获得目标文件当前的切片内容及切片信息；其中，切片信息至少包括当前切片内容的切片编号。
例如，客户端接收到的传输需求描述信息是按照第二是数据格式进行如下封装的：第一个字节为目标文件的标识信息A，第二个字节为切片的起始位置258，第三个字节为切片编号259，第四个字节为将切片大小1MB。
客户端按照第二数据格式对传输需求描述信息进行解析，获得要从标识信息为A的目标文件的第258的位置开始截取大小为1MB的切片内容，该切片内容的切片编号为259，进而可以形成该切片内容的切片信息可以为标示信息A和切片编号259。
需要说明的是，第二数据格式与第一数据格式类似，都是指在一个MINA数据包中，将上述传输需求中的信息按特定的数据存放格式将它们放在MINA数据包中的指定位置。
客户端按照解析后的传输需求描述信息中的切片要求，从目标文件的指定位置出开始一次切取一片指定大小的当前的切片内容，并生成相应的切片信息。
在客户端获得切片内容和切片信息之后，便可执行步骤202-3。
步骤202-3：将标识信息和当前的切片内容及切片信息进行封装，获得切片数据；并将切片数据发送给所述服务端。
客户端在获得切片信息和切片内容之后，将它们与标识信息一起按照第三数据格式进行封装，进而获得切片数据。由于第三数据格式前面已有详细的介绍，在此不再赘述。
其中，在根据解析后的传输需求描述信息对所述目标文件进行一次切片时，客户端确定目标文件当前的切片内容为最后一个切片内容时，生成结束标识；客户端将所述结束标识一起封装入切片数据。
实施例三、基于同一发明构思，本发明一实施例中提供一种用于服务集群，该服务集群的数据传输方法的具体实施方式可参见实施例一的描述，重复之处不再赘述，请参见图3，该服务集群包括：
收发单元301，用于接收来自客户端的目标文件的传输请求描述信息；其中，所述传输请求描述信息，是在所述客户端按第一数据格式，将所述目标文件的关键信息，进行封装后得到的数据包；
获得单元302，用于基于所述传输请求描述信息，获得所述目标文件的标识信息；其中，所述标识信息用于唯一标识所述目标文件；
处理单元303，用于开始循环执行以下操作，直到客户端对所述目标文件进行切片处理完毕：
基于所述标识信息查询所述目标文件当前的传输进度信息，并基于所述当前的传输进度信息生成相应的传输需求描述信息，并将所述传输需求描述信息发往客户端；
接收客户端当前发送的切片数据，所述切片数据是所述客户端基于所述传输需求描述信息对所述目标文件进行一次切片处理后获得的；
在本地的磁盘阵列上，将所述目标文件已组装的部分数据与所述当前发送的切片数据进行组装，并对所述传输进度信息进行更新；
所述获得单元302还用于，对获得的所有切片数据都组装完毕后，获得所述目标文件。
可选的，在服务端接收来自客户端的目标文件的传输请求描述信息之后，所述收发单元301还用于：
所述服务端按照第一数据格式，对所述传输请求描述信息进行解析，以获得解析后的传输请求描述信息及所述标识信息；
所述服务端通过所述解析后的传输请求描述信息及所述标识信息，判断是否存在所述目标文件的传输进度信息，获得判断结果；
当所述判断结果为否时，所述服务端基于所述解析后的传输请求描述信息及所述标识信息，为所述目标文件创建所述传输进度信息。
可选的，所述基于所述当前的传输进度信息生成相应的传输需求描述信息，所述处理单元303还用于：
所述服务端基于所述当前的传输进度信息，确定所述切片数据的切片编号及在所述目标文件中的切片位置；
所述服务端基于所述切片编号和所述切片位置及预设的切片大小，确定所述切片数据的传输需求；
所述服务端将所述传输需求按照第二数据格式进行封装，生成所述传输需求描述信息。
可选的，将所述目标文件已组装的部分数据与所述当前发送的切片数据进行组装之前，所述处理单元303还用于：
所述服务端按第三数据格式对所述当前发送的切片数据进行解析，获得切片内容及切片信息。
可选的，将所述目标文件已组装的部分数据与所述当前发送的切片数据进行组装，所述处理单元303还用于
所述服务端基于所述切片信息中携带的切片编号，将所述切片内容存入本地的磁盘阵列上的对应位置，完成对所述切片数据的组装。
可选的，所述服务端对获得的所有切片数据都组装完毕后，获得所述目标文件，所述获得单元302还用于：
当所述服务端确定所述切片信息中包含有所述目标文件的结束标识时，确定已完成对获得的所有切片数据的组装，获得所述目标文件。
实施例四、基于同一发明构思，本发明一实施例中提供一种用于客户端，该客户端的数据传输方法的具体实施方式可参见实施例二的描述，重复之处不再赘述，请参见图4，该客户端包括：
发送单元401，用于发送目标文件的传输请求描述信息给服务端；其中，所述传输请求描述信息至少包括所述目标文件的标识信息，所述标识信息用于唯一标识所述目标文件；之后，
处理单元402，用于开始按在发送所述传输请求描述信息之后，开始循环执行以下操作，直到所述客户端对所述目标文件进行切片处理完毕：
接收来自所述服务端的传输需求描述信息；其中，所述传输需求描述信息为所述服务端通过所述标识信息查询所述目标文件当前的传输进度信息生成的；
根据第二数据格式对所述传输需求描述信息进行解析，并根据解析后的传输需求描述信息对所述目标文件进行一次切片，获得所述目标文件当前的切片内容及切片信息；其中，所述切片信息至少包括所述当前切片内容的切片编号；
将所述标识信息和所述当前的切片内容及切片信息进行封装，获得切片数据；
发送单元，用于将所述切片数据发送给所述服务端。
可选的，在根据解析后的传输需求描述信息对所述目标文件进行一次切片时，所述处理单元402还用于：
所述客户端确定所述目标文件当前的切片内容为最后一个切片内容时，生成结束标识；
所述客户端将所述结束标识一起封装入所述切片数据。
实施例五、基于同一发明构思，本发明实施例中提供了一种用于数据传输的服务集群，请参见图5，包括：至少二个处理器，以及
与所述至少二个处理器连接的存储器；
其中，所述存储器存储有可被所述至少二个处理器执行的指令，所述至少二个处理器通过执行所述存储器存储的指令，执行如上所述的实施例一中的数据传输方法。图5中的输入输出接口通过总线可以用于传输数据及上述指令。
实施例六、基于同一发明构思，本发明实施例中提供了一种用于数据传输的客户端，请参见图6，包括：至少一个处理器，以及
与所述至少一个处理器连接的存储器；
其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述至少一个处理器通过执行所述存储器存储的指令，执行如上所述的实施例二中的数据传输方法。图6中的输入输出接口通过总线可以用于传输数据及上述指令。
实施例七、基于同一发明构思，本发明实施例还提一种计算机可读存储介质，包括：
所述计算机可读存储介质存储有计算机指令，当所述计算机指令在计算机上运行时，使得计算机执行如上所述的实施例一中的数据传输方法方法。
实施例八、基于同一发明构思，本发明实施例还提一种计算机可读存储介质，包括：
所述计算机可读存储介质存储有计算机指令，当所述计算机指令在计算机上运行时，使得计算机执行如上所述的实施例二中的数据传输方法方法。
在本申请提供的实施例中，通过在服务端接收到目标文件的传输请求描述信息后，从中获得目标文件的标示信息，之后，通过在服务端循环执行以下操作，直到客户端对目标文件进行切片处理完毕：首先，基于标识信息查询目标文件当前的传输进度信息，并基于当前的传输进度信息生成相应的传输需求描述信息，同时发往客户端；然后，接收客户端当前发送的切片数据，该切片数据是客户端基于传输需求描述信息对目标文件进行一次切片处理后获得的；最后，在本地的磁盘阵列上，将目标文件已组装的部分数据与当前发送的切片数据进行组装，并对传输进度信息进行更新；通过上述循环处理方式，让客户端按照服务端发送的传输需求描述信息将目标文件进行切片，并将被切片的文件封装为mina数据包，最终在服务端将目标文件的切片数据整合为完整的文件。由于正在mina框架下使用上述数据传输过程，将目标文件进行分片传输，所以能提高集群单个节点所能支撑的用户并发数量，减少集群节点数量，从而有效的实现了提高目标文件传输的稳定性和准确性的技术效果。
本领域内的技术人员应明白，本发明实施例可提供为方法、系统、或计算机程序产品。因此，本发明实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明实施例是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。
Claims (14)
1.一种数据传输的方法，其特征在于，包括：
服务端接收来自客户端的目标文件的传输请求描述信息；其中，所述传输请求描述信息，是在所述客户端按第一数据格式，将所述目标文件的关键信息，进行封装后得到的数据包；
所述服务端基于所述传输请求描述信息，获得所述目标文件的标识信息；其中，所述标识信息用于唯一标识所述目标文件；
所述服务端开始循环执行以下操作，直到客户端对所述目标文件进行切片处理完毕：
基于所述标识信息查询所述目标文件当前的传输进度信息，并基于所述当前的传输进度信息生成相应的传输需求描述信息，并将所述传输需求描述信息发往客户端；
接收客户端当前发送的切片数据，所述切片数据是所述客户端基于所述传输需求描述信息对所述目标文件进行一次切片处理后获得的；
在本地的磁盘阵列上，将所述目标文件已组装的部分数据与所述当前发送的切片数据进行组装，并对所述传输进度信息进行更新；
所述服务端对获得的所有切片数据都组装完毕后，获得所述目标文件。
2.如权利要求1所述的方法，其特征在于，在服务端接收来自客户端的目标文件的传输请求描述信息之后，还包括：
所述服务端按照第一数据格式，对所述传输请求描述信息进行解析，以获得解析后的传输请求描述信息及所述标识信息；
所述服务端通过所述解析后的传输请求描述信息及所述标识信息，判断是否存在所述目标文件的传输进度信息，获得判断结果；
当所述判断结果为否时，所述服务端基于所述解析后的传输请求描述信息及所述标识信息，为所述目标文件创建所述传输进度信息。
3.如权利要求1或2任一权项所述的方法，其特征在于，所述基于所述当前的传输进度信息生成相应的传输需求描述信息，包括：
所述服务端基于所述当前的传输进度信息，确定所述切片数据的切片编号及在所述目标文件中的切片位置；
所述服务端基于所述切片编号和所述切片位置及预设的切片大小，确定所述切片数据的传输需求；
所述服务端将所述传输需求按照第二数据格式进行封装，生成所述传输需求描述信息。
4.如权利要求3所述的方法，其特征在于，将所述目标文件已组装的部分数据与所述当前发送的切片数据进行组装之前，还包括：
所述服务端按第三数据格式对所述当前发送的切片数据进行解析，获得切片内容及切片信息。
5.如权利要求4所述的方法，其特征在于，将所述目标文件已组装的部分数据与所述当前发送的切片数据进行组装，包括：
所述服务端基于所述切片信息中携带的切片编号，将所述切片内容存入本地的磁盘阵列上的对应位置，完成对所述切片数据的组装。
6.如权利要求5所述的方法，其特征在于，所述服务端对获得的所有切片数据都组装完毕后，获得所述目标文件，包括：
当所述服务端确定所述切片信息中包含有所述目标文件的结束标识时，确定已完成对获得的所有切片数据的组装，获得所述目标文件。
7.一种数据传输的方法，其特征在于，包括：
客户端发送目标文件的传输请求描述信息给服务端；其中，所述传输请求描述信息至少包括所述目标文件的标识信息，所述标识信息用于唯一标识所述目标文件；之后，
所述客户端在发送所述传输请求描述信息之后，开始循环执行以下操作，直到所述客户端对所述目标文件进行切片处理完毕：
接收来自所述服务端的传输需求描述信息；其中，所述传输需求描述信息为所述服务端通过所述标识信息查询所述目标文件当前的传输进度信息生成的；
根据第二数据格式对所述传输需求描述信息进行解析，并根据解析后的传输需求描述信息对所述目标文件进行一次切片，获得所述目标文件当前的切片内容及切片信息；其中，所述切片信息至少包括所述当前切片内容的切片编号；
将所述标识信息和所述当前的切片内容及切片信息进行封装，获得切片数据；并将所述切片数据发送给所述服务端。
8.如权利要求7所述的方法，其特征在于，在根据解析后的传输需求描述信息对所述目标文件进行一次切片时，还包括：
所述客户端确定所述目标文件当前的切片内容为最后一个切片内容时，生成结束标识；
所述客户端将所述结束标识一起封装入所述切片数据。
9.一种服务集群，其特征在于，包括：
收发单元，用于接收来自客户端的目标文件的传输请求描述信息；其中，所述传输请求描述信息，是在所述客户端按第一数据格式，将所述目标文件的关键信息，进行封装后得到的数据包；
获得单元，用于基于所述传输请求描述信息，获得所述目标文件的标识信息；其中，所述标识信息用于唯一标识所述目标文件；
处理单元，用于开始循环执行以下操作，直到客户端对所述目标文件进行切片处理完毕：
基于所述标识信息查询所述目标文件当前的传输进度信息，并基于所述当前的传输进度信息生成相应的传输需求描述信息，并将所述传输需求描述信息发往客户端；
接收客户端当前发送的切片数据，所述切片数据是所述客户端基于所述传输需求描述信息对所述目标文件进行一次切片处理后获得的；
在本地的磁盘阵列上，将所述目标文件已组装的部分数据与所述当前发送的切片数据进行组装，并对所述传输进度信息进行更新；
所述获得单元还用于，对获得的所有切片数据都组装完毕后，获得所述目标文件。
10.一种客户端，其特征在于，包括：
发送单元，用于发送目标文件的传输请求描述信息给服务端；其中，所述传输请求描述信息至少包括所述目标文件的标识信息，所述标识信息用于唯一标识所述目标文件；之后，
处理单元，用于开始按在发送所述传输请求描述信息之后，开始循环执行以下操作，直到所述客户端对所述目标文件进行切片处理完毕：
接收来自所述服务端的传输需求描述信息；其中，所述传输需求描述信息为所述服务端通过所述标识信息查询所述目标文件当前的传输进度信息生成的；
根据第二数据格式对所述传输需求描述信息进行解析，并根据解析后的传输需求描述信息对所述目标文件进行一次切片，获得所述目标文件当前的切片内容及切片信息；其中，所述切片信息至少包括所述当前切片内容的切片编号；
将所述标识信息和所述当前的切片内容及切片信息进行封装，获得切片数据；
发送单元，用于将所述切片数据发送给所述服务端。
11.一种服务集群，其特征在于，包括：
至少二个处理器，以及
与所述至少二个处理器连接的存储器；
其中，所述存储器存储有可被所述至少二个处理器执行的指令，所述至少二个处理器通过执行所述存储器存储的指令，执行如权利要求1-6任一项所述的方法。
12.一种客户端，其特征在于，包括：
至少一个处理器，以及
与所述至少一个处理器连接的存储器；
其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述至少一个处理器通过执行所述存储器存储的指令，执行如权利要求7-8任一项所述的方法。
13.一种计算机可读存储介质，其特征在于：
所述计算机可读存储介质存储有计算机指令，当所述计算机指令在计算机上运行时，使得计算机执行如权利要求1-6中任一项所述的方法。
14.一种计算机可读存储介质，其特征在于：
所述计算机可读存储介质存储有计算机指令，当所述计算机指令在计算机上运行时，使得计算机执行如权利要求7-8中任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810009980.XA CN110011952B (zh) | 2018-01-05 | 2018-01-05 | 一种数据传输的方法、服务集群及客户端 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810009980.XA CN110011952B (zh) | 2018-01-05 | 2018-01-05 | 一种数据传输的方法、服务集群及客户端 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN110011952A true CN110011952A (zh) | 2019-07-12 |
| CN110011952B CN110011952B (zh) | 2022-01-25 |
Family
ID=67164515
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201810009980.XA Active CN110011952B (zh) | 2018-01-05 | 2018-01-05 | 一种数据传输的方法、服务集群及客户端 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110011952B (zh) |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110611718A (zh) * | 2019-10-08 | 2019-12-24 | 深圳市九洲电器有限公司 | 文件传输方法、装置、服务器及存储介质 |
| CN111245949A (zh) * | 2020-01-19 | 2020-06-05 | 中国建设银行股份有限公司 | 文件归档传输方法、装置及设备 |
| CN111290863A (zh) * | 2020-01-21 | 2020-06-16 | 上海悦易网络信息技术有限公司 | 一种数据接收方法及设备 |
| CN112596866A (zh) * | 2020-12-28 | 2021-04-02 | 北京浪潮数据技术有限公司 | 一种并发处理请求的并发控制方法、装置、设备及介质 |
| CN113138969A (zh) * | 2021-04-30 | 2021-07-20 | 青岛盛世影云影视科技有限公司 | 数据传输方法、装置、电子设备和计算机可读存储介质 |
| CN113923211A (zh) * | 2021-11-18 | 2022-01-11 | 许昌许继软件技术有限公司 | 用于电网控制的基于消息机制的文件传输系统和方法 |
| WO2022036870A1 (zh) * | 2020-08-19 | 2022-02-24 | 华为技术有限公司 | 数据传输方法及装置 |
| CN114598697A (zh) * | 2022-03-29 | 2022-06-07 | 浪潮云信息技术股份公司 | 一种传输文件的方法、装置及计算机可读存储介质 |
| CN115033542A (zh) * | 2022-06-17 | 2022-09-09 | 中国平安人寿保险股份有限公司 | 文件传输方法、文件传输装置、电子设备及存储介质 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20070038681A1 (en) * | 2005-08-10 | 2007-02-15 | Spare Backup, Inc. | System and method of remote storage of data through connection from a server to a client |
| CN102833294A (zh) * | 2011-06-17 | 2012-12-19 | 阿里巴巴集团控股有限公司 | 基于云存储的文件处理方法、系统及服务器集群系统 |
| CN103793531A (zh) * | 2014-02-26 | 2014-05-14 | 中国银行股份有限公司 | 非结构化数据管理系统 |
| CN103957256A (zh) * | 2014-04-30 | 2014-07-30 | 梁鸿才 | 执法仪数据读取系统、数据传输方法及其相关方法 |
| CN104980399A (zh) * | 2014-04-08 | 2015-10-14 | 腾讯科技（深圳）有限公司 | 一种文件传输方法、客户端及代理服务器 |
-
2018
- 2018-01-05 CN CN201810009980.XA patent/CN110011952B/zh active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20070038681A1 (en) * | 2005-08-10 | 2007-02-15 | Spare Backup, Inc. | System and method of remote storage of data through connection from a server to a client |
| CN102833294A (zh) * | 2011-06-17 | 2012-12-19 | 阿里巴巴集团控股有限公司 | 基于云存储的文件处理方法、系统及服务器集群系统 |
| CN103793531A (zh) * | 2014-02-26 | 2014-05-14 | 中国银行股份有限公司 | 非结构化数据管理系统 |
| CN104980399A (zh) * | 2014-04-08 | 2015-10-14 | 腾讯科技（深圳）有限公司 | 一种文件传输方法、客户端及代理服务器 |
| CN103957256A (zh) * | 2014-04-30 | 2014-07-30 | 梁鸿才 | 执法仪数据读取系统、数据传输方法及其相关方法 |
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110611718A (zh) * | 2019-10-08 | 2019-12-24 | 深圳市九洲电器有限公司 | 文件传输方法、装置、服务器及存储介质 |
| CN111245949A (zh) * | 2020-01-19 | 2020-06-05 | 中国建设银行股份有限公司 | 文件归档传输方法、装置及设备 |
| CN111290863A (zh) * | 2020-01-21 | 2020-06-16 | 上海悦易网络信息技术有限公司 | 一种数据接收方法及设备 |
| WO2022036870A1 (zh) * | 2020-08-19 | 2022-02-24 | 华为技术有限公司 | 数据传输方法及装置 |
| CN112596866A (zh) * | 2020-12-28 | 2021-04-02 | 北京浪潮数据技术有限公司 | 一种并发处理请求的并发控制方法、装置、设备及介质 |
| CN112596866B (zh) * | 2020-12-28 | 2024-09-03 | 北京浪潮数据技术有限公司 | 一种并发处理请求的并发控制方法、装置、设备及介质 |
| CN113138969A (zh) * | 2021-04-30 | 2021-07-20 | 青岛盛世影云影视科技有限公司 | 数据传输方法、装置、电子设备和计算机可读存储介质 |
| CN113923211A (zh) * | 2021-11-18 | 2022-01-11 | 许昌许继软件技术有限公司 | 用于电网控制的基于消息机制的文件传输系统和方法 |
| CN114598697A (zh) * | 2022-03-29 | 2022-06-07 | 浪潮云信息技术股份公司 | 一种传输文件的方法、装置及计算机可读存储介质 |
| CN114598697B (zh) * | 2022-03-29 | 2024-06-07 | 浪潮云信息技术股份公司 | 一种传输文件的方法、装置及计算机可读存储介质 |
| CN115033542A (zh) * | 2022-06-17 | 2022-09-09 | 中国平安人寿保险股份有限公司 | 文件传输方法、文件传输装置、电子设备及存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN110011952B (zh) | 2022-01-25 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110011952A (zh) | 一种数据传输的方法、服务集群及客户端 | |
| EP2835938B1 (en) | Message publishing and subscribing method and apparatus | |
| TWI549080B (zh) | The method, system and device for sending information of category information | |
| CN102955717B (zh) | 在分布式消息处理系统中的消息管理设备和方法 | |
| CN103401934A (zh) | 获取日志数据的方法和系统 | |
| CN110674146A (zh) | 一种数据同步方法、同步端、待同步端、设备及存储介质 | |
| JP5605229B2 (ja) | アプリケーションサーバ管理システム、アプリケーションサーバ管理方法、管理装置、アプリケーションサーバ、および、コンピュータ・プログラム | |
| CN102981911B (zh) | 一种分布式消息处理系统及其中的设备和方法 | |
| CN104283723B (zh) | 网络访问日志处理方法及装置 | |
| CN103853714B (zh) | 一种数据处理方法和装置 | |
| WO2015143794A1 (zh) | 制作、升级方法及服务器、终端、升级系统和存储介质 | |
| CN108228102B (zh) | 节点间数据迁移方法、装置、计算设备及计算机存储介质 | |
| WO2019075773A1 (zh) | 数据处理方法、装置、计算机设备和存储介质 | |
| EP3172682B1 (en) | Distributing and processing streams over one or more networks for on-the-fly schema evolution | |
| CN110750335A (zh) | 资源创建方法、装置和服务器 | |
| CN108512898A (zh) | 文件推送方法、装置、计算机设备和存储介质 | |
| CN104580428B (zh) | 一种数据路由方法、数据管理装置和分布式存储系统 | |
| WO2019196225A1 (zh) | 一种反馈资源文件的方法和装置 | |
| WO2016074412A1 (zh) | 基于网络配置协议进行兼容管理的方法、存储介质及设备 | |
| WO2017000640A1 (zh) | 一种实现成员资源处理的方法及装置 | |
| CN111131373B (zh) | 呼吸机数据同步系统、方法、装置及存储介质 | |
| CN108241685A (zh) | 数据查询的方法和查询客户端 | |
| CN115210694A (zh) | 数据传输方法及装置 | |
| WO2020220272A1 (zh) | 更改资源状态的方法、系统、终端及存储介质 | |
| CN105991465B (zh) | 一种应用程序业务处理的方法、设备和系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |