CN105959298A - 数据传输方法及数据传输装置 - Google Patents
数据传输方法及数据传输装置 Download PDFInfo
- Publication number
- CN105959298A CN105959298A CN201610474349.8A CN201610474349A CN105959298A CN 105959298 A CN105959298 A CN 105959298A CN 201610474349 A CN201610474349 A CN 201610474349A CN 105959298 A CN105959298 A CN 105959298A
- Authority
- CN
- China
- Prior art keywords
- data transmission
- small documents
- file
- numbering
- waiting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000005540 biological transmission Effects 0.000 title claims abstract description 234
- 238000000034 method Methods 0.000 title claims abstract description 36
- 238000012790 confirmation Methods 0.000 claims abstract description 30
- 239000000203 mixture Substances 0.000 claims description 12
- 238000004891 communication Methods 0.000 abstract description 4
- 230000002159 abnormal effect Effects 0.000 description 9
- 238000012546 transfer Methods 0.000 description 5
- 238000005194 fractionation Methods 0.000 description 4
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000003203 everyday effect Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000032683 aging Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04B—TRANSMISSION
- H04B5/00—Near-field transmission systems, e.g. inductive or capacitive transmission systems
- H04B5/40—Near-field transmission systems, e.g. inductive or capacitive transmission systems characterised by components specially adapted for near-field transmission
- H04B5/48—Transceivers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/06—Notations for structuring of protocol data, e.g. abstract syntax notation one [ASN.1]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/16—Implementation or adaptation of Internet protocol [IP], of transmission control protocol [TCP] or of user datagram protocol [UDP]
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Information Transfer Between Computers (AREA)
- Communication Control (AREA)
Abstract
本发明属于通信及电子技术领域,公开了一种数据传输方法及数据传输系统,包括:对待传输的小文件进行顺序编号;将编号后的所述待传输的小文件按照预置协议格式进行组装;通过数据传输通道发送组装后生成的文件;根据接收的确认信息,获取未接收到的小文件编号,重新通过数据传输通道发送未接收到的小文件。本发明通过将待传输的小文件进行编号,按照预置协议格式进行组装后发送至接收方设备,接收方设备根据接收到的文件按照预置协议格式进行拆分后得到小文件,解决了现有技术在文件传输过程中频繁建立连接的问题,同时将小文件进行顺序编号后用动态拼接方式进行传输,解决了单个通道在网络不稳定环境下的问题。
Description
技术领域
本发明属于通信及电子技术领域,尤其涉及一种数据传输方法和数据传输装置。
背景技术
目前在实际应用中小文件越来越常见,通常将大小在1MB以内的文件称为小文件。例如在云相册服务中,每天都有几百万张图片上传至存储服务器,这些图片生成的缩略图都是KB级别的小文件,为了考虑异地灾备(在不同的地域,构建一套或者多套相同的应用或者数据库,起到灾难后立刻接管的作用)及用户就近访问的问题,每天要将数百万的小文件同步至各个地域的存储节点。
现有技术的解决方案是将小文件逐个进行同步传输,传输是通过TCP协议,每次同步都要建立新TCP(Transmission Control Protocol)连接通道,同步完成后就关闭。因为是大量的小文件,频繁的建立关闭TCP连接严重影响传输效率。
发明人在实现本发明的过程中,发现现有技术至少存在一下问题:现有技术普遍采用将小文件合并成一个大文件后再进行同步,来减少TCP连接建立关闭的次数,但大文件同步一旦失败,整个大文件都需要重新同步,此方案也不适用于网络不稳定的环境。
发明内容
本发明实施例提供了一种数据传输方法和数据传输装置,旨在解决现有技术将小文件合并成一个大文件后再进行同步,但大文件同步一旦失败,整个大文件都需要重新同步的问题。
本发明实施例提供了一种数据传输方法,包括:
对待传输的小文件进行顺序编号;
将编号后的所述待传输的小文件按照预置协议格式进行组装;
通过数据传输通道发送组装后生成的文件;
根据接收的确认信息,获取未接收到的小文件编号,重新通过数据传输通道发送未接收到的小文件。
进一步地,所述将编号后的所述待传输的小文件按照预置协议格式进行组装包括:
根据编号顺序将编号后待传输的小文件按照预置协议格式进行动态组装;所述预置协议格式包括协议头和协议体,所述协议头包括所述编号后的所述待传输的小文件的元信息和文件编号,所述协议体包括所述待传输的小文件的所有数据。
进一步地,所述通过数据传输通道发送组装后生成的文件包括:
通过TCP数据传输通道以流式的方式发送组装后生成的文件。
进一步地,所述对待传输的小文件进行顺序编号之前还包括:
根据待传输的小文件数量,建立若干用于数据传输的TCP数据传输通道
本发明实施例还提供了一种数据传输方法,包括:
接收通过数据传输通道发送的文件;
按照所述预置协议格式对所述文件进行拆分,以得到小文件。
进一步地,所述接收通过数据传输通道发送的文件包括:
以流式的方式接收通过TCP数据传输通道发送的文件。
进一步地,所述按照所述预置协议格式对所述文件进行拆分,以得到小文件包括:
按照预置协议格式对所述通过数据传输通道发送的文件进行动态拆分,以得到小文件并保存;所述预置协议格式包括协议头和协议体,所述协议头包括所述小文件的元信息和文件编号,所述协议体包括所述小文件的所有数据。
进一步地,所述按照所述预置协议格式对所述文件进行拆分,以得到小文件之后还包括:
向发送方设备发送确认消息,以使所述发送方设备根据所述确定消息进行小文件的续传,所述确认消息包括已拆分得到的小文件的文件编号。
本发明实施例还提供了一种数据传输装置,包括:
编号单元,用于对待传输的小文件进行顺序编号;
组装单元,用于将编号后的所述待传输的小文件,按照预置协议格式进行组装;
发送单元,用于通过数据传输通道发送组装后生成的文件;
续传单元,根据接收的确认信息,获取未接收到的小文件编号,重新通过数据传输通道发送未接收到的小文件。
进一步地,所述组装单元具体用于:
根据编号顺序将编号后待传输的小文件按照预置协议格式进行动态组装;所述预置协议格式包括协议头和协议体,所述协议头包括所述编号后的所述待传输的小文件的元信息和文件编号,所述协议体包括所述待传输的小文件的所有数据。
进一步地,所述发送单元具体用于:
通过TCP数据传输通道以流式的方式发送组装后生成的文件。
进一步地,所述数据传输装置还包括:
建立单元,用于根据待传输的小文件数量,建立若干用于数据传输的TCP数据传输通道。
本发明实施例还提供了一种数据传输装置,包括:
接收单元,用于接收通过数据传输通道发送的文件;
拆分单元,用于按照所述预置协议格式对所述文件进行拆分,以得到小文件。
进一步地,所述接收单元具体用于:
以流式的方式接收通过TCP数据传输通道发送的文件。
进一步地,所述拆分单元具体用于:
按照预置协议格式对所述通过数据传输通道发送的文件进行动态拆分,以得到小文件并保存;所述预置协议格式包括协议头和协议体,所述协议头包括所述小文件的元信息和文件编号,所述协议体包括所述小文件的所有数据。
进一步地,所述数据传输装置还包括:
反馈单元,用于向发送方设备发送确认消息,以使所述发送方设备根据所述确定消息进行小文件的续传,所述确认消息包括已拆分得到的小文件的文件编号。
从上述本发明实施例可知,通过将待传输的小文件进行编号,按照预置协议格式进行组装后发送至接收方设备,接收方设备根据接收到的文件按照预置协议格式进行拆分后得到小文件,解决了现有技术在文件传输过程中频繁建立连接的问题,同时将小文件进行顺序编号后用动态拼接方式进行传输,解决了单个通道在网络不稳定环境下的问题。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例一提供的一种数据传输方式的流程图。
图2为本发明实施例一提供的预置协议格式的结构示意图。
图3为本发明实施例二提供的一种数据传输方式的流程图。
图4为本发明实施例三提供的一种数据传输方式的流程图。
图5为本发明实施例四提供的一种数据传输方式的流程图。
图6为本发明实施例五提供的一种数据传输装置的结构示意图。
图7为本发明实施例六提供的一种数据传输装置的结构示意图。
图8为本发明实施例七提供的一种数据传输装置的结构示意图。
图9为本发明实施例八提供的一种数据传输装置的结构示意图。
具体实施方式
为使得本发明的发明目的、特征、优点能够更加的明显和易懂,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而非全部实施例。基于本发明中的实施例,本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
图1示出了本发明实施例一提供的一种数据传输方法,适用于文件传输,包括:
S11,对待传输的小文件进行顺序编号。
在本步骤中,按照编号的唯一性,对待传输的小文件进行顺序编号,每一小文件对应唯一的一个文件编号,将待传输的小文件进行唯一性的编号,是为了在后续过程中能够根据该编号确认待传输的小文件是否传输成功。
S12,将编号后的所述待传输的小文件,按照预置协议格式进行组装。
本步骤中,将步骤S11中已编号的小文件按照编号顺序进行动态组装,动态组装意为将已编号的小文件按照编号顺序不间断地进行组装,组装的格式如图2所示的预置协议格式,包括协议头和协议体,协议头为固定长度,包括所述编号后待传输的小文件的元信息和文件编号,所述协议体包括所述待传输的小文件的所有数据,以图2中的预置协议格式进行组装,是为了能够使接收方设备获取组装后生成的文件的信息,并按照预置协议格式进行拆分后获取待传输的小文件。
S13,通过数据传输通道发送组装后生成的文件。
S14,根据接收的确认信息,获取未接收到的小文件编号,重新通过数据传输通道发送未接收到的小文件.
接收方会根据接收的小文件编号反馈确认信息,本步骤中,根据接收方反馈的确认信息,所述确认信息会包含有接收方接收并保存起来的小文件的编号,在已发送的小文件编号中确认未传输成功的小文件编号,然后重新通过数据传输通道发送未接收到的小文件。
下面通过一具体使用例来对本实施例进行进一步地阐述:
现需要传输12个小文件,发送方设备将该12个小文件按照顺序,从1至12进行编号,并按照图2所示的协议格式,以3个文件为一组进行组装,将组装后的文件通过第一数据传输通道发送给接收方设备,并接受接收方设备反馈的确认消息。在传输过程中,第一数据传输通道发生异常,发送方设备通过第一数据传输通道接收到接收方设备发送的已接收到编号1-6的小文件的确认信息后,从第二数据传输通道接收到接收方设备发送的已接受到编号7-9的小文件的确认消息,则发送方设备将从第二数据传输通道开始续传编号10-12的小文件。
在本实施例中,通过将待传输的小文件进行编号并按照预置协议格式进行组装后,经数据传输通道传输给接收方设备,因为待传输小文件的编号唯一性,在数据传输通道出现异常时,能够从接收方设备反馈的确认信息获知未传输成功的小文件,并通过其他数据传输通道续传该未传输成功的小文件,本实施例不需要在数据传输通道异常时重新传输全部的小文件,只需要续传未传输成功的小文件,避免了现有技术中因为数据传输通道异常而导致大文件重新同步的问题。
图3示出了本发明提供给的第二实施例,所述对待传输的小文件进行顺序编号之前还包括:
S01,建立若干个TCP数据传输通道,每一所述TCP数据传输通道用于进行数据传输。
本步骤中,在进行数据传输之前,可以根据传输的小文件的数量,建立若干用于进行数据传输的TCP数据传输通道,每一TCP数据传输通道独立工作,可以实现多线程流式工作,同时,待传输的小文件按照预置协议格式组装拼接后,通过同一TCP数据传输通道进行传输,形成一个流式的传输通道,当其中传输的一个通道出现问题无法进行数据传输时,未传输的小文件可以通过其他TCP数据传输通道进行传输,不会影响已传输的小文件。因为建立了多个用于数据传输的TCP数据传输通道,能够保证数据在传输过程中的稳定性,在出现异常时不影响数据传输。
则第一实施例中的步骤S13具体包括:以流式的方式通过TCP数据传输通道将组装后生成的文件发送给接收方设备,以流式的方式进行数据传输,是为了保证将组装后的文件传输给接收方设备的同时,统计并保存该已传输的小文件的编号,保证在后续出现数据传输通道异常时,从保存的已传输的小文件的编号中查找未传输成功的小文件。
图4示出了本发明第三实施例提供的一种数据传输方法,适用于文件接收,包括:
S21,接收通过数据传输通道发送的文件。
本步骤中,接收方设备以流式的方式接收通过TCP数据传输通道发送的文件,所述通过数据传输发送的文件为进行编号后的小文件按照预置协议格式进行组装起来生成的文件。
S22,按照所述预置协议格式对所述文件进行拆分,以得到小文件。
本步骤中,按照预置协议格式将接收到的文件进行动态拆分,以得到小文件并保存,动态拆分意为将接收到的文件进行不间断的拆分,预置协议格式包括协议头和协议体,所述协议头包括所述小文件的元信息和文件编号,所述协议体包括所述小文件的所有数据。
通过按照预置协议格式对接收的文件进行动态拆分,不仅能够获得小文件所有的数据,同时还能够根据小文件的编号进行下一步的操作,如根据拆分得到的编号确定未传输的小文件编号等。
为了避免在数据传输过程中出现传输通道异常而导致数据传输失败,本发明还提供了如图5所示的第四实施例,所述按照所述预置协议格式对所述文件进行拆分,以得到小文件之后还包括:
S23,向发送方设备发送确认消息,以使所述发送方设备根据所述确定消息进行小文件的续传,所述确认消息包括已拆分得到的小文件的文件编号。
在本步骤中,接收方设备进行拆分得到小文件后,根据拆分得到小文件的编号发送确认消息,具体的操作过程可以是每拆分得到一个小文件,就按照该小文件的文件编号向发送方设备发送确认消息,所述确认消息用以表示接收方设备已成功接收到该编号的小文件,同时发送方设备能够按照所述确认消息,在原数据传输通道出现异常无法进行数据传输时,切换另一数据传输通道或者在原数据传输通道恢复正常时,按照该确认信息进行小文件的续传。更具体地,在实际操作中,确认消息可以包括单个或者多个小文件的编号信息,此处不做限定。
下面通过一具体使用例进行进一步地阐述:
接收方设备以流式的方式接收经第一TCP数据传输通道传输的文件,按照预置协议格式对所述文件进行动态拆分后获得小文件,假设已经拆分得到的小文件编号依次为11、12、13,则接收方设备在拆分到编号为11的小文件后,将向发送方设备发送已接收到11号小文件的确认信息,在拆分到编号为12号的小文件后将向发送方设备发送已接收到12号小文件的确认消息,在拆分得到编号为13号的小文件时,第一TCP数据传输通道异常,则接收方设备将通过第二TCP数据传输通道向发送方设备发送已接收到13号小文件的确认消息,发送方设备在接收到13号小文件的确认消息后,将通过第二TCP数据传输通道向接收方设备继续传输以14号小文件开始的按照所述预置协议格式组装后的文件。当第一TCP数据传输通道恢复正常时,发送方设备将按照接收到的确认信息继续通过第一TCP数据传输通道进行文件传输。
本发明实施例提供的上述数据传输方法中,首先建立N个TCP数据传输通道,每个数据传输通道均能够独立地按照以下策略进行数据传输:
1:发送方设备按照顺序将小文件进行编号,并按照预置协议格式进行动态组装,将组装生成的文件以流式的方式写入TCP数据传输通道;
2:接收方设备以流式进行接收,并参照预置协议格式进行动态拆分出小文件,每拆分成功一个小文件则向发送方设备回复一个确认信息,确认消息包含小文件的文件编号;
3:如果TCP数据传输通道异常中断,发送方设备根据最近一次收到的文件编号,来进行续传,影响较小。
本实施例在进行数据传输之前,首先预置了如图2所示的小文件动态拼接流式的传输格式,包括协议头和协议体,其中协议头为固定长度,包含小文件的元信息和文件编号;协议体则包括了小文件的所有数据。本实施例通过公用TCP通道,解决了频繁建立连接的问题,而使用动态拼接流式传输,解决了单个通道在网络不稳定环境下,容易终端传输的问题,同时本实施例支持同时建立多个通道进行数据传输,保证了传输的时效性。
图6示出了本发明提供的第五实施例,一种数据传输装置,包括:
编号单元11,用于对待传输的小文件进行顺序编号。具体地,按照编号的唯一性,编号单元11对待传输的小文件进行顺序编号,每一小文件对应唯一的一个文件编号。
组装单元12,用于将编号后的所述待传输的小文件,按照预置协议格式进行组装。具体地,组装单元12将已编号的小文件按照编号顺序进行动态组装,组装的格式如图2所示的预置协议格式,包括协议头和协议体,协议头为固定长度,包括所述编号后待传输的小文件的元信息和文件编号,所述协议体包括所述待传输的小文件的所有数据。
发送单元13,用于通过数据传输通道发送组装后生成的文件。具体地,发送单元13将按照预置协议格式进行动态组装后生成的文件写入TCP传数据输通道中,以流式的方式通过TCP数据传输协议传输至接收方设备。
续传单元14,用于根据接收的确认信息,获取未接收到的小文件编号,重新通过数据传输通道发送未接收到的小文件
通过将待传输的小文件进行编号并按照预置协议格式进行组装后,经TCP数据传输通道进行数据传输,因为待传输小文件的唯一性,能够保证接收方设备对所接收的小文件进行确认。
图7示出了本发明提供的第六实施例,所述数据传输装置还包括:
建立单元15,用于根据待传输的小文件数量,建立若干用于数据传输的TCP数据传输通道。
具体地,建立单元15在进行数据传输之前建立若干用于进行数据传输的TCP数据传输通道,每一TCP数据传输通道独立工作,可以实现多线程流式工作,同时,待传输的小文件按照预置协议格式组装拼接后,通过同一TCP数据传输通道进行传输,形成一个流式的传输通道,当其中传输的一个通道出现问题时,未传输的小文件可以通过其他TCP数据传输通道进行传输,不会影响已传输的小文件。因为建立了多个用于数据传输的TCP数据传输通道,能够保证数据在传输过程中的稳定性,在出现异常时不影响数据传输。
图8示出了本发明提供的第七实施例,一种数据传输装置,包括:
接收单元21,用于接收通过数据传输通道发送的文件。具体地,接收单元21以流式的方式接收通过TCP数据传输通道发送的文件,所述通过数据传输发送的文件为进行编号后的小文件按照预置协议格式进行组装起来生成的文件。
拆分单元22,用于按照所述预置协议格式对所述文件进行拆分,以得到小文件。具体地,拆分单元22按照预置协议格式将接收到的文件进行动态拆分,以得到小文件并保存,预置协议格式包括协议头和协议体,所述协议头包括所述小文件的元信息和文件编号,所述协议体包括所述小文件的所有数据。
通过按照预置协议格式对接收的文件进行动态拆分,不仅能够获得小文件所有的数据,同时还能够根据小文件的编号进行下一步的操作,如根据拆分得到的编号确定未传输的小文件编号等。
为了避免在数据传输过程中出现传输通道异常而导致数据传输失败,本发明还提供了如图9所示的第八实施例,所述数据传输装置还包括:
反馈单元23,用于向发送方设备发送确认消息,以使所述发送方设备根据所述确定消息进行小文件的续传,所述确认消息包括已拆分得到的小文件的文件编号。
在本步骤中,拆分单元22进行拆分得到小文件后,反馈单元23根据拆分得到小文件的编号发送确认消息,具体的操作过程可以是每拆分得到一个小文件,就按照该小文件的文件编号向发送方设备发送确认消息,所述确认消息用以表示接收单元21已成功接收到该编号的小文件,同时发送方设备能够按照所述确认消息,在原数据传输通道出现异常无法进行数据传输时,切换另一数据传输通道或者在原数据传输通道恢复正常时,按照该确认信息进行小文件的续传。更具体地,在实际操作中,确认消息可以包括单个或者多个小文件的编号信息,此处不做限定。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个模块或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或模块的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理模块,即可以位于一个地方,或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能模块可以集成在一个处理模块中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。
所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
需要说明的是,对于前述的各方法实施例,为了简便描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其它顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定都是本发明所必须的。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其它实施例的相关描述。
以上为对本发明所提供的数据传输方法和数据传输装置的描述,对于本领域的技术人员,依据本发明实施例的思想,在具体实施方式及应用范围上均会有改变之处,综上,本说明书内容不应理解为对本发明的限制。
Claims (16)
1.一种数据传输方法,其特征在于,所述数据传输方法包括:
对待传输的小文件进行顺序编号;
将编号后的所述待传输的小文件按照预置协议格式进行组装;
通过数据传输通道发送组装后生成的文件;
根据接收的确认信息,获取未接收到的小文件编号,重新通过数据传输通道发送未接收到的小文件。
2.如权利要求1所述的数据传输方法,其特征在于,所述将编号后的所述待传输的小文件按照预置协议格式进行组装包括:
根据编号顺序将编号后待传输的小文件按照预置协议格式进行动态组装;所述预置协议格式包括协议头和协议体,所述协议头包括所述编号后的所述待传输的小文件的元信息和文件编号,所述协议体包括所述待传输的小文件的所有数据。
3.如权利要求1所述的数据传输方法,其特征在于,所述通过数据传输通道发送组装后生成的文件包括:
通过TCP数据传输通道以流式的方式发送组装后生成的文件。
4.如权利要求1所述的数据传输方法,其特征在于,所述对待传输的小文件进行顺序编号之前还包括:
根据待传输的小文件数量,建立若干用于数据传输的TCP数据传输通道。
5.一种数据传输方法,其特征在于,所述数据传输方法包括:
接收通过数据传输通道发送的文件;
按照所述预置协议格式对所述文件进行拆分,以得到小文件。
6.如权利要求5所述的数据传输方法,其特征在于,所述接收通过数据传输通道发送的文件包括:
以流式的方式接收通过TCP数据传输通道发送的文件。
7.如权利要求5所述的数据传输方法,其特征在于,所述按照所述预置协议格式对所述文件进行拆分,以得到小文件包括:
按照预置协议格式对所述通过数据传输通道发送的文件进行动态拆分,以得到小文件并保存;所述预置协议格式包括协议头和协议体,所述协议头包括所述小文件的元信息和文件编号,所述协议体包括所述小文件的所有数据。
8.如权利要求5所述的数据传输方法,其特征在于,所述按照所述预置协议格式对所述文件进行拆分,以得到小文件之后还包括:
向发送方设备发送确认消息,以使所述发送方设备根据所述确定消息进行小文件的续传,所述确认消息包括已拆分得到的小文件的文件编号。
9.一种数据传输装置,其特征在于,所述数据传输装置包括:
编号单元,用于对待传输的小文件进行顺序编号;
组装单元,用于将编号后的所述待传输的小文件,按照预置协议格式进行组装;
发送单元,用于通过数据传输通道发送组装后生成的文件;
续传单元,用于根据接收的确认信息,获取未接收到的小文件编号,重新通过数据传输通道发送未接收到的小文件。
10.如权利要求9所述的数据传输装置,其特征在于,所述组装单元具体用于:
根据编号顺序将编号后待传输的小文件按照预置协议格式进行动态组装;所述预置协议格式包括协议头和协议体,所述协议头包括所述编号后的所述待传输的小文件的元信息和文件编号,所述协议体包括所述待传输的小文件的所有数据。
11.如权利要求9所述的数据传输装置,其特征在于,所述发送单元具体用于:
通过TCP数据传输通道以流式的方式发送组装后生成的文件。
12.如权利要求9所述的数据传输装置,其特征在于,所述数据传输装置还包括:
建立单元,用于根据待传输的小文件数量,建立若干用于数据传输的TCP数据传输通道。
13.一种数据传输装置,其特征在于,所述数据传输装置包括:
接收单元,用于接收通过数据传输通道发送的文件;
拆分单元,用于按照所述预置协议格式对所述文件进行拆分,以得到小文件。
14.如权利要求13所述的数据传输装置,其特征在于,所述接收单元具体用于:
以流式的方式接收通过TCP数据传输通道发送的文件。
15.如权利要求13所述的数据传输方法,其特征在于,所述拆分单元具体用于:
按照预置协议格式对所述通过数据传输通道发送的文件进行动态拆分,以得到小文件并保存;所述预置协议格式包括协议头和协议体,所述协议头包括所述小文件的元信息和文件编号,所述协议体包括所述小文件的所有数据。
16.如权利要求13所述的数据传输装置,其特征在于,所述数据传输装置还包括:
反馈单元,用于向发送方设备发送确认消息,以使所述发送方设备根据所述确定消息进行小文件的续传,所述确认消息包括已拆分得到的小文件的文件编号。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610474349.8A CN105959298A (zh) | 2016-06-24 | 2016-06-24 | 数据传输方法及数据传输装置 |
PCT/CN2016/102874 WO2017219557A1 (zh) | 2016-06-24 | 2016-10-21 | 数据传输方法及数据传输装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610474349.8A CN105959298A (zh) | 2016-06-24 | 2016-06-24 | 数据传输方法及数据传输装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN105959298A true CN105959298A (zh) | 2016-09-21 |
Family
ID=56904944
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610474349.8A Pending CN105959298A (zh) | 2016-06-24 | 2016-06-24 | 数据传输方法及数据传输装置 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN105959298A (zh) |
WO (1) | WO2017219557A1 (zh) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017219557A1 (zh) * | 2016-06-24 | 2017-12-28 | 乐视控股(北京)有限公司 | 数据传输方法及数据传输装置 |
CN108200201A (zh) * | 2018-02-06 | 2018-06-22 | 中国科学院西安光学精密机械研究所 | 一种水下设备密封舱数据导出方法及传输系统 |
CN108322836A (zh) * | 2018-01-24 | 2018-07-24 | 北京奇艺世纪科技有限公司 | 一种数据传输的方法及装置 |
CN108804290A (zh) * | 2018-06-13 | 2018-11-13 | 姜锋 | 一种用于移动存储设备信息传输安全的方法及系统 |
CN109167750A (zh) * | 2018-07-06 | 2019-01-08 | 北京金山安全软件有限公司 | 一种数据包传输方法、装置、电子设备及存储介质 |
CN111835712A (zh) * | 2020-06-01 | 2020-10-27 | 北京百卓网络技术有限公司 | 一种数据传输方法、装置、系统、设备及存储介质 |
CN113206852A (zh) * | 2021-05-06 | 2021-08-03 | 深信服科技股份有限公司 | 一种安全防护方法、装置、设备及存储介质 |
CN113934553A (zh) * | 2021-10-14 | 2022-01-14 | 西安万像电子科技有限公司 | 一种剪切板重定向传输方法、装置、存储介质及电子设备 |
CN114172889A (zh) * | 2021-10-18 | 2022-03-11 | 江苏赞奇科技股份有限公司 | 一种实时渲染中小文件高效传输方法及系统 |
CN114629891A (zh) * | 2021-12-17 | 2022-06-14 | 亚信科技(中国)有限公司 | 文件传输方法、装置、电子设备及计算机可读存储介质 |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110035016B (zh) * | 2019-02-26 | 2023-03-10 | 北京钰安信息科技有限公司 | 一种数据传输方法及装置 |
CN110224794B (zh) * | 2019-06-28 | 2022-04-08 | 阳光电源股份有限公司 | 通信数据传输方法及系统 |
CN111212136B (zh) * | 2019-12-31 | 2022-10-18 | 北京力控华康科技有限公司 | 一种基于Modbus协议的数据缓存方法、装置、系统及存储介质 |
CN112308824B (zh) * | 2020-10-21 | 2023-01-20 | 中国铁道科学研究院集团有限公司 | 基于轨道几何检测数据的曲线半径分类识别方法及装置 |
CN113364880B (zh) * | 2021-06-18 | 2023-04-25 | 国家电网有限公司华东分部 | 信息交换方法、系统、电子设备及存储介质 |
CN113609070B (zh) * | 2021-07-28 | 2023-01-24 | 中国国家铁路集团有限公司 | 铁路线路动态检测数据协同采集方法、装置及系统 |
CN113795015B (zh) * | 2021-08-17 | 2023-10-20 | 咪咕文化科技有限公司 | 数据传输方法、装置、设备及计算可读存储介质 |
CN113885802A (zh) * | 2021-09-30 | 2022-01-04 | 杭州贝嘟科技有限公司 | 数据传输方法、装置、电子装置和存储介质 |
CN114095492A (zh) * | 2021-11-16 | 2022-02-25 | 许昌许继软件技术有限公司 | 一种电力系统主子站数据传输方法、系统及电子设备 |
CN116405094A (zh) * | 2023-04-14 | 2023-07-07 | 北京蔚海明祥科技有限公司 | 一种基于多路天通通信设备的数据传输系统及方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101286976A (zh) * | 2008-05-08 | 2008-10-15 | 蒋一 | 一种基于数据拆分技术实现p2p流媒体系统的方法 |
US20130294299A1 (en) * | 2011-01-21 | 2013-11-07 | Pantech Co., Tld | Method and apparatus for processing a harq ack/nack signal |
CN103873155A (zh) * | 2012-12-13 | 2014-06-18 | 联想(北京)有限公司 | 数据传送方法、数据接收方法以及电子设备 |
CN103916852A (zh) * | 2012-12-28 | 2014-07-09 | 联想(北京)有限公司 | 一种数据传输方法以及一种移动终端 |
CN105245470A (zh) * | 2015-11-05 | 2016-01-13 | 深圳市网心科技有限公司 | 一种数据传输方法和装置 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104753856A (zh) * | 2013-12-26 | 2015-07-01 | 北京东方通科技股份有限公司 | 一种文件收发方法与系统 |
CN104660308A (zh) * | 2015-01-26 | 2015-05-27 | 武汉健坤科技有限公司 | 基于蓝牙低功耗技术的文件传输方法和系统 |
CN104967663A (zh) * | 2015-05-12 | 2015-10-07 | 无锡天脉聚源传媒科技有限公司 | 一种文件传输方法及系统、文件发送装置与文件接收装置 |
CN105959298A (zh) * | 2016-06-24 | 2016-09-21 | 乐视控股(北京)有限公司 | 数据传输方法及数据传输装置 |
-
2016
- 2016-06-24 CN CN201610474349.8A patent/CN105959298A/zh active Pending
- 2016-10-21 WO PCT/CN2016/102874 patent/WO2017219557A1/zh active Application Filing
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101286976A (zh) * | 2008-05-08 | 2008-10-15 | 蒋一 | 一种基于数据拆分技术实现p2p流媒体系统的方法 |
US20130294299A1 (en) * | 2011-01-21 | 2013-11-07 | Pantech Co., Tld | Method and apparatus for processing a harq ack/nack signal |
CN103873155A (zh) * | 2012-12-13 | 2014-06-18 | 联想(北京)有限公司 | 数据传送方法、数据接收方法以及电子设备 |
CN103916852A (zh) * | 2012-12-28 | 2014-07-09 | 联想(北京)有限公司 | 一种数据传输方法以及一种移动终端 |
CN105245470A (zh) * | 2015-11-05 | 2016-01-13 | 深圳市网心科技有限公司 | 一种数据传输方法和装置 |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017219557A1 (zh) * | 2016-06-24 | 2017-12-28 | 乐视控股(北京)有限公司 | 数据传输方法及数据传输装置 |
CN108322836A (zh) * | 2018-01-24 | 2018-07-24 | 北京奇艺世纪科技有限公司 | 一种数据传输的方法及装置 |
CN108200201A (zh) * | 2018-02-06 | 2018-06-22 | 中国科学院西安光学精密机械研究所 | 一种水下设备密封舱数据导出方法及传输系统 |
CN108200201B (zh) * | 2018-02-06 | 2023-10-10 | 中国科学院西安光学精密机械研究所 | 一种水下设备密封舱数据导出方法及传输系统 |
CN108804290A (zh) * | 2018-06-13 | 2018-11-13 | 姜锋 | 一种用于移动存储设备信息传输安全的方法及系统 |
CN109167750A (zh) * | 2018-07-06 | 2019-01-08 | 北京金山安全软件有限公司 | 一种数据包传输方法、装置、电子设备及存储介质 |
CN111835712A (zh) * | 2020-06-01 | 2020-10-27 | 北京百卓网络技术有限公司 | 一种数据传输方法、装置、系统、设备及存储介质 |
CN113206852A (zh) * | 2021-05-06 | 2021-08-03 | 深信服科技股份有限公司 | 一种安全防护方法、装置、设备及存储介质 |
CN113206852B (zh) * | 2021-05-06 | 2023-03-24 | 深信服科技股份有限公司 | 一种安全防护方法、装置、设备及存储介质 |
CN113934553A (zh) * | 2021-10-14 | 2022-01-14 | 西安万像电子科技有限公司 | 一种剪切板重定向传输方法、装置、存储介质及电子设备 |
CN114172889A (zh) * | 2021-10-18 | 2022-03-11 | 江苏赞奇科技股份有限公司 | 一种实时渲染中小文件高效传输方法及系统 |
CN114629891A (zh) * | 2021-12-17 | 2022-06-14 | 亚信科技(中国)有限公司 | 文件传输方法、装置、电子设备及计算机可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
WO2017219557A1 (zh) | 2017-12-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105959298A (zh) | 数据传输方法及数据传输装置 | |
CN101599909B (zh) | 一种流量转发的方法和装置 | |
US10742693B2 (en) | Method and system for writing trajectory synchronization among multiple clients | |
US10390321B2 (en) | Timing advance adjustment method and device | |
CN104063353A (zh) | 主从设备间信息同步的方法 | |
CN102035859A (zh) | 一种显示上传进度的方法、系统和装置 | |
CN111884825A (zh) | 一种故障处理方法、装置、终端设备和存储介质 | |
CN106817387B (zh) | 一种数据同步方法、装置和系统 | |
CN109525633B (zh) | 区块链网络、基于区块链网络的消息发送、消息接收方法 | |
CN101599907A (zh) | 流量转发方法和系统 | |
CN105281940A (zh) | 一种基于netconf协议的hello报文交互的方法、设备和系统 | |
CN104079663A (zh) | 分布式实时同步网络系统及其通告数据的方法 | |
CN109039675A (zh) | 基于IGMPv2协议的成员离开管理方法及系统 | |
CN101510901B (zh) | 一种分布式设备间的通信方法、通信设备和通信系统 | |
CN110474781B (zh) | 一种组播数据转发的方法及装置 | |
CN114051036A (zh) | 轨道交通信号系统数据同步方法、装置、设备及存储介质 | |
CN102082726A (zh) | 数据处理方法、装置和传输系统 | |
CN112434105A (zh) | 区块链存储的数据持续保存的方法、系统、设备及介质 | |
CN106230989A (zh) | 将实时连续产生的定位数据同步到服务器的方法和系统 | |
CN110737505A (zh) | 一种采用虚拟通道的虚拟存储访问方法 | |
CN104580512A (zh) | 数据处理方法和装置,及分布式文件系统 | |
CN105187558A (zh) | 一种数据获取方法及节点设备 | |
CN103078801A (zh) | 为网络划分域的方法、装置及交换机 | |
CN116488961B (zh) | 公用机组网关、通讯方法和通讯系统 | |
CN102420875A (zh) | 一种文件上传方法及相关设备、系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20160921 |