CN110493302A - 一种文件传输方法、设备及计算机可读存储介质 - Google Patents
一种文件传输方法、设备及计算机可读存储介质 Download PDFInfo
- Publication number
- CN110493302A CN110493302A CN201910586558.5A CN201910586558A CN110493302A CN 110493302 A CN110493302 A CN 110493302A CN 201910586558 A CN201910586558 A CN 201910586558A CN 110493302 A CN110493302 A CN 110493302A
- Authority
- CN
- China
- Prior art keywords
- file
- block file
- electronic equipment
- transmitted
- transmission
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/182—Distributed file systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L1/00—Arrangements for detecting or preventing errors in the information received
- H04L1/12—Arrangements for detecting or preventing errors in the information received by using return channel
- H04L1/16—Arrangements for detecting or preventing errors in the information received by using return channel in which the return channel carries supervisory signals, e.g. repetition request signals
- H04L1/1607—Details of the supervisory signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/104—Peer-to-peer [P2P] networks
- H04L67/1074—Peer-to-peer [P2P] networks for supporting data block transmission mechanisms
- H04L67/1078—Resource delivery mechanisms
- H04L67/108—Resource delivery mechanisms characterised by resources being split in blocks or fragments
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本发明实施例公开了一种文件传输方法,包括:接收第一电子设备发送的待传输文件,并检测待传输文件的接收状态;其中,待传输文件包括多个块文件;基于检测结果,对每个块文件进行标识得到标识信息;若标识信息指示目标块文件传输失败,删除目标块文件,并发送反馈信息至第一电子设备;其中,反馈信息用于指示第一电子设备基于反馈信息传输目标块文件;接收第一电子设备发送的目标块文件。本发明实施例还公开了一种第一电子设备、第二电子设备和计算机可读存储介质。
Description
技术领域
本发明涉及计算机技术领域中的文件传输,尤其涉及一种文件传输方法、设备及计算机可读存储介质。
背景技术
分布式文件系统(Hadoop Distributed File System,HDFS)是有着超大数据集的应用系统,能对大量数据进行分布式处理。但HDFS在传输数据时经常会出现重新传输数据的情况,而当传输的数据量巨大时,如果全部重新传输将会导致人力和时间等昂贵成本的增加。为了解决这个问题,相关技术中,在文件传输中断后会进行继续传输,在继续传输文件时将会以字节的形式重新读取已传输文件的长度位,从已传输的长度位开始继续传输文件。但是,相关技术中以字节的形式对已传输文件进行重新读取会浪费传输时间。
发明内容
有鉴于此,本发明实施例期望提供一种文件传输方法、设备及计算机可读存储介质,至少用以解决相关技术中在文件传输中断后继续传输文件时,以字节的形式对已传输文件进行重新读取会浪费传输时间的问题,从而节省了对已传输文件进行重新读取的时间,提高了文件传输的速率。
为达到上述目的,本发明的技术方案是这样实现的:
一种文件传输方法,所述方法包括:
接收第一电子设备发送的待传输文件,并检测所述待传输文件的接收状态;其中,所述待传输文件包括多个块文件;
基于检测结果,对每个所述块文件进行标识得到标识信息;
若所述标识信息指示目标块文件传输失败,删除所述目标块文件,并发送反馈信息至所述第一电子设备;其中,所述反馈信息用于指示所述第一电子设备基于所述反馈信息传输所述目标块文件;
接收所述第一电子设备发送的所述目标块文件。
可选的,所述基于检测结果,对每个所述块文件进行标识得到标识信息,包括:
若所述块文件的接收状态为传输失败的状态,对所述块文件进行标识,得到第一标识信息;
若所述块文件的接收状态为传输成功的状态,对所述块文件进行标识,得到第二标识信息。
可选的,所述若所述标识信息指示目标块文件传输失败,删除所述目标块文件,并发送反馈信息至所述第一电子设备,包括:
若所述标识信息为所述第一标识信息,获取所述目标块文件的位置信息,并删除所述目标块文件;
建立与所述第一电子设备的传输链路;
基于所述传输链路,发送携带有所述位置信息的所述反馈信息至所述第一电子设备。
一种文件传输方法,所述方法包括:
获取待传输文件,并设置第一参数;
基于所述第一参数,将所述待传输文件划分为多个块文件;
发送所述多个块文件至第二电子设备;
接收所述第二电子设备发送的反馈信息,基于所述反馈信息,发送目标块文件至所述第二电子设备;其中,所述反馈信息是基于对所述多个块文件的接收状态进行分析得到。
可选的,所述发送所述多个块文件至第二电子设备,包括:
获取每个块文件的属性信息;
基于所述每个块文件的属性信息,对所述多个块文件进行排序,生成所述多个块文件的排列次序;
按照所述排列次序,将所述多个块文件发送至所述第二电子设备。
可选的,所述接收所述第二电子设备发送的反馈信息,基于所述反馈信息,发送目标块文件至所述第二电子设备,包括:
接收所述第二电子设备发送的反馈信息,并获取所述反馈信息中携带的位置信息;
获取与所述位置信息对应的所述目标块文件,并发送所述目标块文件至所述第二电子设备。
可选的,所述设置第一参数,包括:
获取所述待传输文件的大小;
基于所述块文件的预设最大值和所述块文件的预设最小值设置所述块文件的并行数;其中,所述并行数表征并行发送所述块文件的数量;
用所述待传输文件的大小除以所述块文件的并行数,生成所述块文件的大小;其中,所述第一参数包括所述块文件的并行数和所述块文件的大小。
一种第二电子设备,所述第二电子设备包括:第一处理器、第一存储器和第一通信总线;
所述第一通信总线用于实现所述第一处理器和所述第一存储器之间的通信连接;
所述第一处理器用于执行所述第一存储器中存储的信息处理方法的程序,以实现以下步骤:
接收第一电子设备发送的待传输文件,并检测所述待传输文件的接收状态;其中,所述待传输文件包括多个块文件;
基于检测结果,对每个所述块文件进行标识得到标识信息;
若所述标识信息指示目标块文件传输失败,删除所述目标块文件,并发送反馈信息至所述第一电子设备;其中,所述反馈信息用于指示所述第一电子设备基于所述反馈信息传输所述目标块文件;
接收所述第一电子设备发送的所述目标块文件。
一种第一电子设备,所述第一电子设备包括:第二处理器、第二存储器和第二通信总线;
所述第二通信总线用于实现所述第二处理器和所述第二存储器之间的通信连接;
所述第二处理器用于执行所述第二存储器中存储的信息处理方法的程序,以实现以下步骤:
获取待传输文件,并设置第一参数;
基于所述第一参数,将所述待传输文件划分为多个块文件;
发送所述多个块文件至第二电子设备;
接收所述第二电子设备发送的反馈信息,基于所述反馈信息,发送目标块文件至所述第二电子设备;其中,所述反馈信息是基于对所述多个块文件的接收状态进行分析得到。
一种计算机可读存储介质,所述计算机可读存储介质存储有一个或者多个程序,所述一个或者多个程序可被一个或者多个处理器执行,以实现上述文件传输方法的步骤。
本发明实施例所提供的文件传输方法、设备及计算机可读存储介质,通过接收第一电子设备发送的待传输文件,并检测待传输文件的接收状态,基于检测结果,对每个块文件进行标识得到标识信息,若标识信息指示目标块文件传输失败,删除目标块文件,并发送反馈信息至第一电子设备,接收第一电子设备发送的目标块文件,这样,第一电子设备将待传输文件发送至第二电子设备是以多个块文件的形式发送的,且在文件传输中断时,第二电子设备向第一电子设备发送反馈信息可以直接重新发送传输失败的块文件,节省了对已传输文件进行重新读取的时间,提高了文件传输的速率。
附图说明
图1为本发明实施例提供的一种文件传输方法的流程示意图;
图2为本发明实施例提供的另一种文件传输方法的流程示意图;
图3为本发明实施例提供的又一种文件传输方法的流程示意图;
图4为本发明实施例提供的第二电子设备的结构示意图;
图5为本发明实施例提供的第一电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述。
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明的实施例提供一种文件传输方法,参照图1所示,该方法包括以下步骤:
步骤101、接收第一电子设备发送的待传输文件,并检测待传输文件的接收状态。
其中,待传输文件包括多个块文件。
本发明实施例中,接收第一电子设备发送的待传输文件,并检测待传输文件的接收状态可以是由第二电子设备来实现的。具体的,第一电子设备为发送端,即发送待传输文件的电子设备;第二电子设备为接收端,即接收待传输文件的电子设备。发送端具有一种编程模型MapReduce,用于大规模数据集的并行运算,它提供了一个庞大但设计精良的并行计算软件框架,能自动完成计算任务的并行化处理,自动划分计算数据和计算任务,在集群节点上自动分配和执行任务以及收集计算结果,将数据分布存储、数据通信、容错处理等并行计算涉及到的很多系统底层的复杂细节交由系统负责处理。当发送端发送待传输文件时,在MapTask中开启传输管道进行文件的传输。接收端接收待传输文件,且在接收端处检测待传输文件的接收状态。具体的,待传输文件的接收状态包括待传输文件的块文件传输成功和待传输文件的块文件传输失败的状态。
步骤102、基于检测结果,对每个块文件进行标识得到标识信息。
本发明实施例中,基于检测结果,对每个块文件进行标识得到标识信息可以是由第二电子设备来实现的。在接收端检测待传输文件的接收状态,基于待传输文件的块文件的接收状态,对每个已经从发送端传输至接收端的块文件进行标识,得到标识信息,其中,标识信息表征将接收端接收到块文件的状态以不同的标识显示在接收端的显示界面上。
步骤103、若标识信息指示目标块文件传输失败,删除目标块文件,并发送反馈信息至第一电子设备。
其中,反馈信息用于指示第一电子设备基于反馈信息传输目标块文件。
本发明实施例中,若标识信息指示目标块文件传输失败,删除目标块文件,并发送反馈信息至第一电子设备可以是由第二电子设备来实现的。若接收端的块文件的标识信息指示目标块文件传输失败,则删除传输失败的目标块文件,并发送重新传输目标块文件的反馈信息至发送端。
步骤104、接收第一电子设备发送的目标块文件。
本发明实施例中,接收第一电子设备发送的目标块文件可以是由第二电子设备来实现的。接收端重新接收发送端发送的传输失败的目标块文件。
本发明实施例所提供的文件传输方法,通过接收第一电子设备发送的待传输文件,并检测待传输文件的接收状态,基于检测结果,对每个块文件进行标识得到标识信息,若标识信息指示目标块文件传输失败,删除目标块文件,并发送反馈信息至第一电子设备,接收第一电子设备发送的目标块文件,这样,第一电子设备将待传输文件发送至第二电子设备是以多个块文件的形式发送的,且在文件传输中断时,第二电子设备向第一电子设备发送反馈信息可以直接重新发送传输失败的块文件,节省了对已传输文件进行重新读取的时间,提高了文件传输的速率。
本发明的实施例提供一种文件传输方法,参照图2所示,该方法包括以下步骤:
步骤201、第一电子设备获取待传输文件,并设置第一参数。
本发明实施例中,具体的,第一电子设备为发送端,即发送待传输文件的电子设备;第二电子设备为接收端,即接收待传输文件的电子设备。发送端获取要发送至接收端的待传输文件,并设置待传输文件的第一参数,按照待传输文件的第一参数传输待传输文件。
步骤202、第一电子设备基于第一参数,将待传输文件划分为多个块文件。
本发明实施例中,发送端根据设置完成的第一参数,由发送端的MapTask将待传输文件划分为多个数据块,并对多个数据块进行处理。示例性的,发送端将100万兆的文件传输至接收端,先将100万兆的文件分为10组,每组小文件为10万兆,再将10万兆的小文件分为数量为200个,大小为500兆的块文件。发送端将以数量为200个,大小为500兆的块文件传输至发送端。当大小为500兆,传输数量为200个的块文件在传输至接收端时,接收端对每个块文件的接收状态进行标识,每个块文件生成一个对应的标识信息。当块文件的标识信息为传输失败时,在接收端删除传输失败的块文件,并生成重新传输块文件的反馈信息至发送端继续发送传输失败的块文件。当接收端接收完成一组10万兆的小文件时,即接收端已经成功接收到传输数量为200个,大小为500兆的块文件时,发送端将传输下一个10万兆的小文件至接收端,直至传输完100万兆的文件。
步骤203、第一电子设备发送多个块文件至第二电子设备。
本发明实施例中,发送端以块文件的传输形式将多个块文件发送至接收端。在将多个块文件发送至接收端前,在发送端与接收端创建块文件存储路径的对应关系表。
步骤204、第一电子设备接收第二电子设备发送的反馈信息,基于反馈信息,发送目标块文件至第二电子设备。
其中,反馈信息是基于对多个块文件的接收状态进行分析得到。
本发明实施例中,发送端通过接收端建立的传输链路接收反馈信息,其中,反馈信息中包含了传输失败的目标块文件的位置信息。在接收端会对多个块文件的接收状态进行分析,多个块文件的接收状态具体表征块文件传输成功和块文件传输失败。根据多个块文件的接收状态,对块文件处于已经传输成功,还是正在进行传输,亦或是传输失败进行分析,对接收状态进行分析后生成反馈信息,提示发送端对传输失败的块文件进行重新传输的信息。根据反馈信息,具体是根据反馈信息的目标块文件的存储路径,在发送端检测出与目标块文件的存储路径对应的存储路径,通过发送端的存储路径获取目标块文件在待传输文件所处的目标位置信息。根据目标位置信息获取目标块文件,将目标块文件发送至接收端。
本发明实施例所提供的文件传输方法,通过接收第一电子设备发送的待传输文件,并检测待传输文件的接收状态,基于检测结果,对每个块文件进行标识得到标识信息,若标识信息指示目标块文件传输失败,删除目标块文件,并发送反馈信息至第一电子设备,接收第一电子设备发送的目标块文件,这样,第一电子设备将待传输文件发送至第二电子设备是以多个块文件的形式发送的,且在文件传输中断时,第二电子设备向第一电子设备发送反馈信息可以直接重新发送传输失败的块文件,节省了对已传输文件进行重新读取的时间,提高了文件传输的速率。
基于前述实施例,本发明的实施例提供一种文件传输方法,参照图3所示,该方法包括以下步骤:
步骤301、第一电子设备获取待传输文件,并获取待传输文件的大小。
本发明实施例中,具体的,第一电子设备为发送端,即发送待传输文件的电子设备;第二电子设备为接收端,即接收待传输文件的电子设备。发送端获取将要传输至接收端的待传输文件,并获取待传输文件的大小。
步骤302、第一电子设备基于块文件的预设最大值和块文件的预设最小值设置块文件的并行数。
其中,并行数表征并行发送块文件的数量;
本发明实施例中,在发送端预先设置块文件的预设最大值和块文件的预设最小值,根据块文件的预设最大值和预设最小值设置块文件的并行数。示例性的,块文件的预设最大值为150M,预设最小值为100M。例如发送端向接收端发送一个2G的文件,发送端获取此文件,当并行数设置为5个时,那么,一个块文件的大小约为400M,块文件的大小将远远大于预设块文件的预设最大值;当并行数设置为200个时,那么,一个块文件的大小约为10M,对块文件的划分将变得毫无意义,对提升文件的传输速度也就毫无意义。因此,对并行数的选取应该合理。通过块文件的预设最大值和预设最小值对并行数进行约束和设置。当将并行数设置为15个时,那么,一个块文件的大小为约为130M,130M将小于块文件的预设最大值150M,且小于块文件的预设最小值100M。因此,在传输2G的文件时,将并行数设置为15个,块文件的大小设置为130M是合理的。
步骤303、第一电子设备用待传输文件的大小除以块文件的并行数,生成块文件的大小。
其中,第一参数包括块文件的并行数和块文件的大小。
本发明实施例中,发送端获取到待传输文件的大小,且发送端基于待传输文件块文件的预设最大值和预设最小值获取待传输文件的并行数,利用待传输文件的大小除以待传输文件的并行数,发送端生成发送的块文件的大小。示例性的,块文件的预设最大值为150M,预设最小值为100M。文件大小为2G,并行数设置为15个,那么,块文件的大小设置为130M。其中,第一参数为发送端发送的块文件并行数和块文件的大小。
步骤304、第一电子设备基于第一参数,将待传输文件划分为多个块文件。
本发明实施例中,发送端根据块文件的并行数和块文件的大小,将待传输文件划分成多个块文件。块文件将以预设大小和预设数量发送至接收端。
步骤305、第一电子设备获取每个块文件的属性信息。
本发明实施例中,发送端获取表征每个块文件的属性信息,示例性的,每个块文件的属性信息表征唯一标识块文件的路径、块文件的起始位、块文件的长度和主机信息。
步骤306、第一电子设备基于每个块文件的属性信息,对多个块文件进行排序,生成多个块文件的排列次序。
本发明实施例中,发送端根据唯一标识块文件的路径、块文件的起始位、块文件的长度和主机信息对多个块文件进行排序,生成多个块文件的排列次序。对于大数据的传输,待传输的文件大小、待传输文件的并发数和待传输文件的块文件的大小,都比一般的待传输文件大小、并行数和块文件的大小偏大。
示例性的,发送端将100万兆的文件传输至接收端,先将100万兆的文件分为10组,每组小文件为10万兆,再将10万兆的小文件分为数量为200个,大小为500兆的块文件。对于10万兆200个大小为500兆的块文件,每个块文件都对应的唯一标识块文件的路径、块文件的起始位、块文件的长度和主机信息。因为要发送的块文件的数量巨大,对200个块文件依据存储路径进行排序,将存储于同一存储路径的块文件先进行传输,再对存储于其他不同路径的块文件进行传输。示例性的,对于大数据的传输,按照块文件的优先级对多个块文件进行排序,优先传输相对于接收端重要的块文件。
步骤307、第一电子设备按照排列次序,将多个块文件发送至第二电子设备。
步骤308、第二电子设备接收第一电子设备发送的待传输文件,并检测待传输文件的接收状态。
其中,待传输文件包括多个块文件。
步骤309、若块文件的接收状态为传输失败的状态,第二电子设备对块文件进行标识,得到第一标识信息。
本发明实施例中,具体的,第一电子设备为发送端,即发送待传输文件的电子设备;第二电子设备为接收端,即接收待传输文件的电子设备。在接收端根据每个块文件的接收状态对每个块文件进行不同的标识。当块文件在接收端的接收状态为传输失败的状态时,接收端对传输失败的块文件进行标识,得到第一标识信息。示例性的,块文件传输失败具体表征为块文件读取失败、块文件传输中断、块文件传输残缺。当块文件传输失败时,在相应传输失败的块文件后标注“失败”的文字或者在传输失败块文件后标注“X”以示传输失败,即第一标识信息为“失败”的文字或“X”标识。
步骤310、若块文件的接收状态为传输成功的状态,第二电子设备对块文件进行标识,得到第二标识信息。
本发明实施例中,当块文件在接收端的接收状态为传输成功的状态时,接收端对传输成功的块文件进行标识,得到第二标识信息。示例性的,块文件传输成功具体表征块文件已经传输完成。当块文件传输成功时,在相应传输成功的块文件后标注“成功”的文字或者在传输成功块文件后标注“√”以示传输成功,即第二标识信息为“成功”的文字或“√”标识。
步骤311、若标识信息为第一标识信息,第二电子设备获取目标块文件的位置信息,并删除目标块文件。
本发明实施例中,若标识信息为第一标识信息,即标识信息为在接收端的块文件的四周显示标识信息,标识信息为“失败”的文字或“X”标识,其中,四周可以为邻近块文件的任意位置处。接收端获取传输失败的块文件的位置信息,具体的,位置信息表征块文件在接收端的存储路径。接收端获取到目标块文件的位置信息时,并将接收失败的块文件删除。
步骤312、第二电子设备建立与第一电子设备的传输链路。
本发明实施例中,当接收端将目标块文件删除之后,需要发送端重新传输失败的目标块文件。接收端将建立与发送端的传输链路以使发送端重新发送传输失败的目标块文件。
步骤313、第二电子设备基于传输链路,发送携带有位置信息的反馈信息至第一电子设备。
本发明实施例中,接收端在建立完成与发送端的传输链路时,接收端发送携带有目标块文件存储路径的位置信息的反馈信息至接收端,将提示发送端根据反馈信息的位置信息重新发送目标块文件。
步骤314、第一电子设备接收第二电子设备发送的反馈信息,并获取反馈信息中携带的位置信息。
本发明实施例中,发送端接收接收端发送的反馈信息,从反馈信息中提取携带的目标块文件的位置信息。其中,位置信息包括表征块文件在接收端的存储路径。
步骤315、第一电子设备获取与位置信息对应的目标块文件,并发送目标块文件至第二电子设备。
本发明实施例中,发送端获取目标块文件在接收端的存储路径,根据发送端和接收端目标块文件的存储路径对应表,发送端将获取目标块文件在发送端的存储路径,并根据目标块文件在发送端的存储路径获取目标块文件,将目标块文件通过建立的传输链路重新发送至接收端。
步骤316、第二电子设备接收第一电子设备发送的目标块文件。
本发明实施例中,第二电子设备接收第一电子设备发送的目标块文件后,检测重新传输的目标块文件是否接收成功,若检测到传输失败的目标块文件在重新传输时全部传输成功时,将继续传输下一个待传输文件,或者继续传输下一个小文件;若检测到传输失败的目标块文件在重新传输时仍然传输失败,第二电子设备继续发送第二反馈信息,其中,第二反馈信息表征第一次传输失败的目标块文件在第二次接收仍然接收失败将继续进行第三次传输的信息,使第一电子设备第三次传输目标块文件。
需要说明的是,本发明实施例中与其它实施例中相同步骤或概念的解释,可以参照其它实施例中的描述,此处不再赘述。
本发明实施例所提供的文件传输方法,通过接收第一电子设备发送的待传输文件,并检测待传输文件的接收状态,基于检测结果,对每个块文件进行标识得到标识信息,若标识信息指示目标块文件传输失败,删除目标块文件,并发送反馈信息至第一电子设备,接收第一电子设备发送的目标块文件,这样,第一电子设备将待传输文件发送至第二电子设备是以多个块文件的形式发送的,且在文件传输中断时,第二电子设备向第一电子设备发送反馈信息可以直接重新发送传输失败的块文件,节省了对已传输文件进行重新读取的时间,提高了文件传输的速率。
本发明的实施例所提供一种第二电子设备,可以应用于图1和图3对应的实施例提供的一种文件传输方法中,参照图4所示,该第二电子设备4包括:处理器41、存储器42和通信总线43,其中:
处理器41用于执行存储器42中存储的文件传输方法的程序,以实现以下步骤:
接收第一电子设备发送的待传输文件,并检测待传输文件的接收状态;其中,待传输文件包括多个块文件;
基于检测结果,对每个块文件进行标识得到标识信息;
若标识信息指示目标块文件传输失败,删除目标块文件,并发送反馈信息至第一电子设备;其中,反馈信息用于指示第一电子设备基于反馈信息传输目标块文件;
接收第一电子设备发送的目标块文件。
在本发明的其他实施例中,处理器41用于执行存储器42中存储的基于检测结果,对每个块文件进行标识得到标识信息,以实现以下步骤:
若块文件的接收状态为传输失败的状态,对块文件进行标识,得到第一标识信息;
若块文件的接收状态为传输成功的状态,对块文件进行标识,得到第二标识信息。
在本发明的其他实施例中,处理器41用于执行存储器42中存储的若标识信息指示目标块文件传输失败,删除目标块文件,并发送反馈信息至第一电子设备,以实现以下步骤:
若标识信息为第一标识信息,获取目标块文件的位置信息,并删除目标块文件;
建立与第一电子设备的传输链路;
基于传输链路,发送携带有位置信息的反馈信息至第一电子设备。
需要说明的是,本实施例中第一处理器41所执行的步骤的具体实现过程,可以参照图1和图3对应的实施例提供的文件传输方法中的实现过程,此处不再赘述。
本发明的实施例所提供的第二电子设备,能够对传输失败的目标块文件进行删除,并接收第一电子设备发送的目标块文件,节省了对已传输文件进行重新读取的时间,提高了文件传输的速率。
本发明的实施例所提供一种第一电子设备,可以应用于图2~3对应的实施例提供的一种文件传输方法中,参照图5所示,该第一电子设备5包括:处理器51、存储器52和通信总线53,其中:
处理器51用于执行存储器52中存储的文件传输方法的程序,以实现以下步骤:
获取待传输文件,并设置第一参数;
基于第一参数,将待传输文件划分为多个块文件;
发送多个块文件至第二电子设备;
接收第二电子设备发送的反馈信息,基于反馈信息,发送目标块文件至第二电子设备;其中,反馈信息是基于对多个块文件的接收状态进行分析得到。
在本发明的其他实施例中,处理器51用于执行存储器52中存储的发送多个块文件至第二电子设备,以实现以下步骤:
获取每个块文件的属性信息;
基于每个块文件的属性信息,对多个块文件进行排序,生成多个块文件的排列次序;
按照排列次序,将多个块文件发送至第二电子设备。
在本发明的其他实施例中,处理器51用于执行存储器52中存储的接收第二电子设备发送的反馈信息,基于反馈信息,发送目标块文件至第二电子设备,以实现以下步骤:
接收第二电子设备发送的反馈信息,并获取反馈信息中携带的位置信息;
获取与位置信息对应的目标块文件,并发送目标块文件至第二电子设备。
在本发明的其他实施例中,处理器51用于执行存储器52中存储的设置第一参数,以实现以下步骤:
获取待传输文件的大小;
基于块文件的预设最大值和块文件的预设最小值设置块文件的并行数;其中,并行数表征并行发送块文件的数量;
用待传输文件的大小除以块文件的并行数,生成块文件的大小;其中,第一参数包括块文件的并行数和块文件的大小。
需要说明的是,本实施例中第一处理器51所执行的步骤的具体实现过程,可以参照图2~3对应的实施例提供的文件传输方法中的实现过程,此处不再赘述。
本发明的实施例所提供的第一电子设备,能够将待传输文件划分为多个块文件,发送多个块文件至第二电子设备,并接收第二电子设备发送的反馈信息,基于反馈信息,发送目标块文件至第二电子设备,缩短了待传输文件的传输时长,提高了传输待传输文件的传输效率。
基于前述实施例,本发明的实施例提供一种计算机可读存储介质,计算机可读存储介质存储有一个或者多个程序,该一个或者多个程序可被一个或者多个处理器执行,以实现如图1~3对应的文件传输方法的步骤。
需要说明的是,上述计算机可读存储介质可以是只读存储器(Read Only Memory,ROM)、可编程只读存储器(Programmable Read-Only Memory,PROM)、可擦除可编程只读存储器(Erasable Programmable Read-Only Memory,EPROM)、电可擦除可编程只读存储器(Electrically Erasable Programmable Read-Only Memory,EEPROM)、磁性随机存取存储器(Ferromagnetic Random Access Memory,FRAM)、快闪存储器(Flash Memory)、磁表面存储器、光盘、或只读光盘(Compact Disc Read-Only Memory,CD-ROM)等存储器;也可以是包括上述存储器之一或任意组合的各种电子设备,如移动电话、计算机、平板设备、个人数字助理等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所描述的方法。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (10)
1.一种文件传输方法,所述方法包括:
接收第一电子设备发送的待传输文件,并检测所述待传输文件的接收状态;其中,所述待传输文件包括多个块文件;
基于检测结果,对每个所述块文件进行标识得到标识信息;
若所述标识信息指示目标块文件传输失败,删除所述目标块文件,并发送反馈信息至所述第一电子设备;其中,所述反馈信息用于指示所述第一电子设备基于所述反馈信息传输所述目标块文件;
接收所述第一电子设备发送的所述目标块文件。
2.根据权利要求1所述的方法,其特征在于,所述基于检测结果,对每个所述块文件进行标识得到标识信息,包括:
若所述块文件的接收状态为传输失败的状态,对所述块文件进行标识,得到第一标识信息;
若所述块文件的接收状态为传输成功的状态,对所述块文件进行标识,得到第二标识信息。
3.根据权利要求2所述的方法,其特征在于,所述若所述标识信息指示目标块文件传输失败,删除所述目标块文件,并发送反馈信息至所述第一电子设备,包括:
若所述标识信息为所述第一标识信息,获取所述目标块文件的位置信息,并删除所述目标块文件;
建立与所述第一电子设备的传输链路;
基于所述传输链路,发送携带有所述位置信息的所述反馈信息至所述第一电子设备。
4.一种文件传输方法,其特征在于,所述方法包括:
获取待传输文件,并设置第一参数;
基于所述第一参数,将所述待传输文件划分为多个块文件;
发送所述多个块文件至第二电子设备;
接收所述第二电子设备发送的反馈信息,基于所述反馈信息,发送目标块文件至所述第二电子设备;其中,所述反馈信息是基于对所述多个块文件的接收状态进行分析得到。
5.根据权利要求4所述的方法,其特征在于,所述发送所述多个块文件至第二电子设备,包括:
获取每个块文件的属性信息;
基于所述每个块文件的属性信息,对所述多个块文件进行排序,生成所述多个块文件的排列次序;
按照所述排列次序,将所述多个块文件发送至所述第二电子设备。
6.根据权利要求4所述的方法,其特征在于,所述接收所述第二电子设备发送的反馈信息,基于所述反馈信息,发送目标块文件至所述第二电子设备,包括:
接收所述第二电子设备发送的反馈信息,并获取所述反馈信息中携带的位置信息;
获取与所述位置信息对应的所述目标块文件,并发送所述目标块文件至所述第二电子设备。
7.根据权利要求4所述的方法,其特征在于,所述设置第一参数,包括:
获取所述待传输文件的大小;
基于所述块文件的预设最大值和所述块文件的预设最小值设置所述块文件的并行数;其中,所述并行数表征并行发送所述块文件的数量;
用所述待传输文件的大小除以所述块文件的并行数,生成所述块文件的大小;其中,所述第一参数包括所述块文件的并行数和所述块文件的大小。
8.一种第二电子设备,其特征在于,所述第二电子设备包括:第一处理器、第一存储器和第一通信总线;
所述第一通信总线用于实现所述第一处理器和所述第一存储器之间的通信连接;
所述第一处理器用于执行所述第一存储器中存储的信息处理方法的程序,以实现以下步骤:
接收第一电子设备发送的待传输文件,并检测所述待传输文件的接收状态;其中,所述待传输文件包括多个块文件;
基于检测结果,对每个所述块文件进行标识得到标识信息;
若所述标识信息指示目标块文件传输失败,删除所述目标块文件,并发送反馈信息至所述第一电子设备;其中,所述反馈信息用于指示所述第一电子设备基于所述反馈信息传输所述目标块文件;
接收所述第一电子设备发送的所述目标块文件。
9.一种第一电子设备,其特征在于,所述第一电子设备包括:第二处理器、第二存储器和第二通信总线;
所述第二通信总线用于实现所述第二处理器和所述第二存储器之间的通信连接;
所述第二处理器用于执行所述第二存储器中存储的信息处理方法的程序,以实现以下步骤:
获取待传输文件,并设置第一参数;
基于所述第一参数,将所述待传输文件划分为多个块文件;
发送所述多个块文件至第二电子设备;
接收所述第二电子设备发送的反馈信息,基于所述反馈信息,发送目标块文件至所述第二电子设备;其中,所述反馈信息是基于对所述多个块文件的接收状态进行分析得到。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有一个或者多个程序,所述一个或者多个程序可被一个或者多个处理器执行,以实现如权利要求1至3或4至7中任一项所述的文件传输方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910586558.5A CN110493302A (zh) | 2019-07-01 | 2019-07-01 | 一种文件传输方法、设备及计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910586558.5A CN110493302A (zh) | 2019-07-01 | 2019-07-01 | 一种文件传输方法、设备及计算机可读存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110493302A true CN110493302A (zh) | 2019-11-22 |
Family
ID=68546392
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910586558.5A Pending CN110493302A (zh) | 2019-07-01 | 2019-07-01 | 一种文件传输方法、设备及计算机可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110493302A (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112417437A (zh) * | 2020-10-28 | 2021-02-26 | 北京八分量信息科技有限公司 | 一种基于可信云平台的程序白名单生成方法 |
CN112711364A (zh) * | 2020-12-31 | 2021-04-27 | 联想(北京)有限公司 | 一种切换方法、电子设备及计算机可读存储介质 |
CN113064857A (zh) * | 2021-03-17 | 2021-07-02 | 歌尔科技有限公司 | 一种文件传输控制方法、设备及介质 |
CN113364634A (zh) * | 2021-06-18 | 2021-09-07 | 广州中爆数字信息科技股份有限公司 | 内外网数据传输的状态检测方法、装置、设备及存储介质 |
CN113483827A (zh) * | 2021-07-26 | 2021-10-08 | 西安芯海微电子科技有限公司 | 可穿戴设备、可穿戴设备的数据处理方法及装置 |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060023815A1 (en) * | 2002-07-01 | 2006-02-02 | Peter Malm | Method for iterative decoder scheduling |
CN102237983A (zh) * | 2010-05-06 | 2011-11-09 | 中兴通讯股份有限公司 | 非帧结构通讯系统中文件传输方法、发送装置和接收装置 |
CN103248452A (zh) * | 2012-02-10 | 2013-08-14 | 宇龙计算机通信科技(深圳)有限公司 | 数据发送装置、数据接收装置、终端和数据传输方法 |
CN104702576A (zh) * | 2013-12-09 | 2015-06-10 | 腾讯科技(深圳)有限公司 | 语音传输方法、装置和语音服务系统 |
CN105718507A (zh) * | 2016-01-06 | 2016-06-29 | 杭州数梦工场科技有限公司 | 一种数据迁移方法和装置 |
CN106909766A (zh) * | 2015-12-18 | 2017-06-30 | 中国移动通信集团公司 | 一种信息处理方法及电子设备 |
CN107168663A (zh) * | 2017-03-30 | 2017-09-15 | 联想(北京)有限公司 | 信息处理方法及电子设备 |
CN109714130A (zh) * | 2018-11-28 | 2019-05-03 | 南通先进通信技术研究院有限公司 | 一种基于喷泉码的文件传输方法 |
CN109743135A (zh) * | 2018-12-29 | 2019-05-10 | 中国大唐集团新能源科学技术研究院有限公司 | 一种断点续传文件传输的方法 |
CN109918108A (zh) * | 2019-03-08 | 2019-06-21 | 珠海妙微科技有限公司 | 一种嵌入式装置内置程序升级方法和装置 |
CN109921843A (zh) * | 2019-03-25 | 2019-06-21 | 内蒙古大学 | 一种面向卫星远程教育系统的北斗短报文通信方法 |
-
2019
- 2019-07-01 CN CN201910586558.5A patent/CN110493302A/zh active Pending
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060023815A1 (en) * | 2002-07-01 | 2006-02-02 | Peter Malm | Method for iterative decoder scheduling |
CN102237983A (zh) * | 2010-05-06 | 2011-11-09 | 中兴通讯股份有限公司 | 非帧结构通讯系统中文件传输方法、发送装置和接收装置 |
CN103248452A (zh) * | 2012-02-10 | 2013-08-14 | 宇龙计算机通信科技(深圳)有限公司 | 数据发送装置、数据接收装置、终端和数据传输方法 |
CN104702576A (zh) * | 2013-12-09 | 2015-06-10 | 腾讯科技(深圳)有限公司 | 语音传输方法、装置和语音服务系统 |
CN106909766A (zh) * | 2015-12-18 | 2017-06-30 | 中国移动通信集团公司 | 一种信息处理方法及电子设备 |
CN105718507A (zh) * | 2016-01-06 | 2016-06-29 | 杭州数梦工场科技有限公司 | 一种数据迁移方法和装置 |
CN107168663A (zh) * | 2017-03-30 | 2017-09-15 | 联想(北京)有限公司 | 信息处理方法及电子设备 |
CN109714130A (zh) * | 2018-11-28 | 2019-05-03 | 南通先进通信技术研究院有限公司 | 一种基于喷泉码的文件传输方法 |
CN109743135A (zh) * | 2018-12-29 | 2019-05-10 | 中国大唐集团新能源科学技术研究院有限公司 | 一种断点续传文件传输的方法 |
CN109918108A (zh) * | 2019-03-08 | 2019-06-21 | 珠海妙微科技有限公司 | 一种嵌入式装置内置程序升级方法和装置 |
CN109921843A (zh) * | 2019-03-25 | 2019-06-21 | 内蒙古大学 | 一种面向卫星远程教育系统的北斗短报文通信方法 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112417437A (zh) * | 2020-10-28 | 2021-02-26 | 北京八分量信息科技有限公司 | 一种基于可信云平台的程序白名单生成方法 |
CN112711364A (zh) * | 2020-12-31 | 2021-04-27 | 联想(北京)有限公司 | 一种切换方法、电子设备及计算机可读存储介质 |
CN113064857A (zh) * | 2021-03-17 | 2021-07-02 | 歌尔科技有限公司 | 一种文件传输控制方法、设备及介质 |
CN113364634A (zh) * | 2021-06-18 | 2021-09-07 | 广州中爆数字信息科技股份有限公司 | 内外网数据传输的状态检测方法、装置、设备及存储介质 |
CN113483827A (zh) * | 2021-07-26 | 2021-10-08 | 西安芯海微电子科技有限公司 | 可穿戴设备、可穿戴设备的数据处理方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110493302A (zh) | 一种文件传输方法、设备及计算机可读存储介质 | |
CN106709069B (zh) | 高可靠性的大数据日志采集与传输方法 | |
CN104978258B (zh) | 软件自动化测试方法及系统 | |
CN110569298B (zh) | 一种数据对接、可视化方法和系统 | |
CN103731499B (zh) | 终端和文件传输方法 | |
CN109359283A (zh) | 表格数据的汇总方法、终端设备及介质 | |
CN107770229A (zh) | 云端文件分享方法、系统和云服务器 | |
CN107943572B (zh) | 数据迁移方法、装置、计算机设备和存储介质 | |
CN107784205B (zh) | 一种用户产品审核的方法、装置、服务器和存储介质 | |
CN107241305A (zh) | 一种基于多核处理器的网络协议分析系统及其分析方法 | |
CN107483573A (zh) | 云平台中镜像文件的传输方法和装置 | |
CN107707679A (zh) | 文件上传方法及装置 | |
CN112631884A (zh) | 基于数据同步的压测方法、装置、计算机设备及存储介质 | |
CN106294627A (zh) | 数据管理方法及数据服务器 | |
CN104079623A (zh) | 多级云存储同步控制方法及系统 | |
CN108170600A (zh) | 前端代码测试的覆盖率统计方法、装置及系统 | |
CN105939364A (zh) | 一种智能的消息推送方法和系统 | |
CN107193839A (zh) | 数据聚合方法及装置 | |
CN106598983A (zh) | 信息显示方法及装置 | |
CN103220327B (zh) | 用户信息存储方法及装置 | |
CN113746924B (zh) | 一种电网业务数据跨区传输方法及装置 | |
CN106648912A (zh) | 数据采集平台中数据处理的模块化方法及装置 | |
CN107193933A (zh) | 一种热泵机组移动服务器控制系统和方法 | |
CN104468569A (zh) | 分布式数据的完整性检测方法和装置 | |
CN106067865B (zh) | 数据报文的转发方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20191122 |
|
RJ01 | Rejection of invention patent application after publication |