CN108833530A - 一种传输方法和装置 - Google Patents
一种传输方法和装置 Download PDFInfo
- Publication number
- CN108833530A CN108833530A CN201810596050.9A CN201810596050A CN108833530A CN 108833530 A CN108833530 A CN 108833530A CN 201810596050 A CN201810596050 A CN 201810596050A CN 108833530 A CN108833530 A CN 108833530A
- Authority
- CN
- China
- Prior art keywords
- file
- subset
- information
- time
- closes
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/04—Protocols for data compression, e.g. ROHC
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本申请提供了一种传输方式和装置,所述方法包括:获得文件子集合信息和网络信息;至少根据所述文件子集合信息和所述网络信息获得第一时间,所述第一时间表征为通过网络传输文件子集合的估算时间;至少根据所述文件子集合信息和所述网络信息获得第二时间,所述第二时间表征为压缩所述文件子集合的估算时间及通过网络传输压缩后所述文件子集合的估算时间的和;如果所述第一时间和所述第二时间的对比结果满足第一条件,则通过网络传输所述文件子集合;如果所述第一时间和所述第二时间的对比结果不满足所述第一条件,则压缩所述文件子集合并通过网络传输压缩后的所述文件子集合。对不同文件特点选择传输方式,提高了文件传输效率,提高了用户体验。
Description
技术领域
本申请涉及数据通信领域,具体涉及传输方法和装置。
背景技术
在文件传输过程中,为了提高文件的传输速度,往往需要对文件进行压缩。
但是,有些文件的压缩比不高,例如,图片文件。这些文件的压缩时间加传输时间的总时间并没有比非压缩文件的传输时间节省,反而增加了时间。
不同文件的压缩比不一样,对于压缩比高的文件,压缩之后传输,由于压缩后文件变小很多,可以显著增加传输效率,但是对于压缩比低的文件,由于压缩需要时间,压缩之后体积缩小不明显,反而降低传输效率,因此,对全部文件进行压缩或者都不压缩,都不合适
发明内容
本申请提供一种传输方法和装置,以解决文件传输的效率问题。
为了解决上述技术问题,本申请实施例提供了如下的技术方案:
本申请提供了一种传输方法,包括:
获得文件子集合信息和网络信息;
至少根据所述文件子集合信息和所述网络信息获得第一时间,所述第一时间表征为通过网络传输文件子集合的估算时间;
至少根据所述文件子集合信息和所述网络信息获得第二时间,所述第二时间表征为压缩所述文件子集合的估算时间及通过网络传输压缩后所述文件子集合的估算时间的和;
如果所述第一时间和所述第二时间的对比结果满足第一条件,则通过网络传输所述文件子集合;
如果所述第一时间和所述第二时间的对比结果不满足所述第一条件,则压缩所述文件子集合并通过网络传输压缩后的所述文件子集合。
可选的,其中,所述文件子集合的信息,至少包括:文件子集合的大小信息和类型信息;所述网络信息包括网络的传输速度或带宽信息。
进一步的,其中,所述至少根据所述文件子集合信息和所述网络信息获得第一时间,包括:
通过所述文件子集合的大小信息及所述网络信息获得所述文件子集合的第一时间。
可选的,其中,所述至少根据所述文件子集合信息和所述网络信息获得第二时间,所述第二时间表征压缩所述文件子集合的估算时间及通过网络传输压缩后所述文件子集合的估算时间的和,包括:
至少根据所述文件子集合信息获得压缩所述文件子集合的估算时间;
至少根据所述文件子集合信息和所述网络信息获得通过网络传输压缩后所述文件子集合的估算时间;
计算压缩所述文件子集合的估算时间及通过网络传输压缩后所述文件子集合的估算时间的和,获得第二时间。
进一步的,其中,所述至少根据所述文件子集合信息获得压缩所述文件子集合的估算时间,包括:
根据所述文件子集合的类型信息获得相应类型文件子集合的压缩信息;所述相应类型的文件子集合的压缩信息,至少包括:压缩率信息和压缩速度信息;
通过所述文件子集合的大小信息及相应类型文件子集合的压缩速度信息计算获得压缩所述文件子集合的估算时间;
和/或
所述至少根据所述文件子集合信息和所述网络信息获得通过网络传输所述压缩后所述文件子集合的估算时间,包括:
通过所述文件子集合的大小信息和相应类型文件子集合的所述压缩率信息及所述网络信息获得通过网络传输所述压缩文件子集合的时间。
进一步的,其中,所述根据所述文件子集合的类型信息获取相应类型文件子集合的压缩信息,包括:
通过与所述文件子集合的类型信息的关联关系,从压缩信息的数据集合中获取相应类型文件子集合的压缩信息,所述压缩信息的数据集合至少包括:文件子集合的类型信息及相应类型文件子集合的压缩率信息和压缩速度信息。
进一步的,其中,所述相应类型文件子集合的压缩信息,至少通过以下一种方式生成:
所述信息,通过读取预存储的模板信息生成;
所述信息,依据历史上压缩同一类型文件子集合生成的相应信息生成;
所述信息,依据同一类型文件子集合的历史压缩信息关联权重后的和生成。
可选的,其中,所述第一时间和所述第二时间的对比结果满足第一条件,至少包括以下一种对比方式:
所述第一时间减去所述第二时间的差小于或等于零;
所述第一时间的资源消耗值减去所述第二时间的资源消耗值的差小于或等于零。
综上所述,其中,在所述方法前,还包括:
获得待传输的文件集合;
将待传输的文件集合按照类型分类,获得分类后的多个文件子集合。
本申请提供了一种传输装置,包括:
获取信息单元,配置为获得文件子集合信息和网络信息;
获取第一时间单元,配置为至少根据所述文件子集合信息和所述网络信息获得第一时间,所述第一时间表征通过网络传输文件子集合的估算时间;
获取第二时间单元,配置为至少根据所述文件子集合信息和所述网络信息获得第二时间,所述第二时间表征压缩所述文件的估算时间及通过网络传输压缩后所述文件的估算时间的和;
传输单元,配置为如果所述第一时间和所述第二时间的对比结果满足第一条件,则通过网络传输所述文件;如果所述第一时间和所述第二时间的对比结果不满足第一条件,则压缩所述文件并通过网络传输所述压缩文件。
基于上述实施例的公开可以获知,本申请提供了一种传输方式和装置,所述方法包括:获得文件子集合信息和网络信息;至少根据所述文件子集合信息和所述网络信息获得第一时间,所述第一时间表征为通过网络传输文件子集合的估算时间;至少根据所述文件子集合信息和所述网络信息获得第二时间,所述第二时间表征为压缩所述文件子集合的估算时间及通过网络传输压缩后所述文件子集合的估算时间的和;如果所述第一时间和所述第二时间的对比结果满足第一条件,则通过网络传输所述文件子集合;如果所述第一时间和所述第二时间的对比结果不满足所述第一条件,则压缩所述文件子集合并通过网络传输压缩后的所述文件子集合。根据不同文件的特点选择传输方式,提高了文件传输效率,提供更好的用户体验。
附图说明
图1为本申请实施例的传输方法的流程图;
图2为本申请实施例的传输方法的流程图;
图3为本申请实施例的传输装置的单元框图;
图4为本申请实施例的传输装置的单元框图。
具体实施方式
下面,结合附图对本申请的具体实施例进行详细的描述,但不作为本申请的限定。
应理解的是,可以对此处公开的实施例做出各种修改。因此,上述说明书不应该视为限制,而仅是作为实施例的范例。本领域的技术人员将想到在本公开的范围和精神内的其他修改。
包含在说明书中并构成说明书的一部分的附图示出了本公开的实施例,并且与上面给出的对本公开的大致描述以及下面给出的对实施例的详细描述一起用于解释本公开的原理。
通过下面参照附图对给定为非限制性实例的实施例的优选形式的描述,本申请的这些和其它特性将会变得显而易见。
还应当理解,尽管已经参照一些具体实例对本申请进行了描述,但本领域技术人员能够确定地实现本申请的很多其它等效形式,它们具有如权利要求所述的特征并因此都位于借此所限定的保护范围内。
当结合附图时,鉴于以下详细说明,本公开的上述和其他方面、特征和优势将变得更为显而易见。
此后参照附图描述本公开的具体实施例;然而,应当理解,所公开的实施例仅仅是本公开的实例,其可采用多种方式实施。熟知和/或重复的功能和结构并未详细描述以避免不必要或多余的细节使得本公开模糊不清。因此,本文所公开的具体的结构性和功能性细节并非意在限定,而是仅仅作为权利要求的基础和代表性基础用于教导本领域技术人员以实质上任意合适的详细结构多样地使用本公开。
本说明书可使用词组“在一种实施例中”、“在另一个实施例中”、“在又一实施例中”或“在其他实施例中”,其均可指代根据本公开的相同或不同实施例中的一个或多个。
本申请提供一种传输方法;本申请还提供一种传输方法;本申请还提供一种传输装置。在下面的实施例中逐一进行详细说明。
对本申请提供的第一实施例,即一种传输方法的实施例。
下面结合图1对本实施例进行详细说明,其中,图1为为本申请实施例的传输方法的流程图。
步骤S1,获得文件子集合信息和网络信息。
所述文件子集合的信息,至少包括:文件子集合的大小信息和类型信息。
所述文件子集合的大小信息,是指文件子集合在存储装置中所占用的空间大小。
所述文件子集合的类型信息,是指文件记录信息的方式,以及展示方式。通常以文件后缀名称的方式区分文件子集合的类型信息。例如,文件后缀名称为:jpg,docx,mp4等。
以上两种文件子集合的信息可以通过读取文件属性信息的方式获取。
所述网络信息,包括网络的传输速度信息或带宽信息。
所述网络的传输速度信息,数据传输速率是描述网络的传输速度的重要技术指标之一。数据传输速率在数值上等于每秒种传输构成数据代码的二进制比特数,单位为比特/秒(bit/second),记作bps。
获取数据传输速率的方式很多,最典型的方式是采用网络诊断工具因特网包探索器(Packet Internet Groper,简称PING)。
PING用于测试网络连接量的程序。利用网络上机器IP地址的唯一性,给目标IP地址发送一个数据包,再要求对方返回一个同样大小的数据包来确定两台网络机器是否连接相通,时延是多少。通过时延可获得数据传输速率。
带宽信息,是指在单位时间(一般指的是1秒钟)内能传输的数据量。带宽越大,传输的速度越快。
步骤S2,至少根据所述文件子集合信息和所述网络信息获得第一时间,所述第一时间表征为通过网络传输文件子集合的估算时间。
由于网络的不稳定性,常常出现T1时间网络状态良好,而紧随T1时间的T2时间,网络就出现阻塞的情况。所以第一时间表征通过网络传输文件子集合的估算时间。
在理想的状况下,默认网络状态良好,根据所述文件子集合信息和所述网络信息获得第一时间,具体是指:
所述文件子集合的第一时间,等于所述文件子集合的大小信息除以最近一次测试获得的网络的传输速度信息;或者等于所述文件子集合的大小信息除以网络的带宽信息。
但是在实际应用中,网络状态总是处于动态波动状态中。
所以,在另一个实施例中,所述文件子集合的第一时间,等于所述文件子集合的大小信息除以校正的网络的传输速度信息。所述校正的网络的传输速度信息,可以是对近期网络的传输速度信息评估后获得的值。例如,校正的网络的传输速度信息等于近10天的同一时段内获得的网络的传输速度信息的平均值;或者等于最近1小时内获得的10次网络的传输速度信息的平均值;但不限于此。
步骤S3,至少根据所述文件子集合信息和所述网络信息获得第二时间,所述第二时间表征为压缩所述文件子集合的估算时间及通过网络传输压缩后所述文件子集合的估算时间的和。
步骤S3包括以下具体步骤:
步骤S31,至少根据所述文件子集合信息获得压缩所述文件子集合的估算时间。
文件子集合的容量越大,压缩所消耗的时间越长。为了不因为压缩操作影响其他操作的进行,压缩操作往往采用多进程的方式。而多进程也就意味着进程间争夺资源的情况。因而文件子集合的容量越大,压缩操作就越有可能面临在执行过程中因进程间争夺资源而导致的执行不稳定的情况。因而,只能获得压缩所述文件子集合的估算时间。
步骤S31又包括以下具体子步骤:
步骤S311,根据所述文件子集合的类型信息获得相应类型文件子集合的压缩信息;所述相应类型的文件子集合的压缩信息,至少包括:压缩率信息和压缩速度信息。
压缩率信息,描述压缩文件的效果名,是文件压缩后的大小与压缩前的大小之比,例如:把100M的文件压缩后是90M,压缩率为90/100*100%=90%。压缩率一般是越小越好,但是压得越小,解压时间越长。
压缩速度信息,是指单位时间内压缩的大小。
文件子集合的类型不同,相应类型的文件子集合的压缩信息也不同。例如,文档的压缩率高,压缩速度快;而图片的压缩率低,压缩速度慢。
为了能够方便的获得所述相应类型的文件子集合的压缩信息,通常是建立数据集合,所述压缩信息的数据集合至少包括:文件子集合的类型信息及相应类型文件子集合的压缩率信息和压缩速度信息。所述根据所述文件子集合的类型信息获取相应类型文件子集合的压缩信息,具体是指:通过与所述文件子集合的类型信息的关联关系,从压缩信息的数据集合中获取相应类型文件子集合的压缩信息。
因为资源争夺的因素,可能导致所获得的压缩信息不能准确反映真实的需求。所述相应类型文件子集合的压缩信息,至少通过以下一种方式生成:
方式一,所述信息,通过读取预存储的模板信息生成。这种方式,可以是通过对文件类型的判断,依靠长期积累的大数据分析获得的。该方法执行时需要的资源较低。
方式二,所述信息,依据历史上压缩同一类型文件子集合生成的相应信息生成。当上次压缩同一类型文件子集合生成的相应信息的时间与当前时间间隔过长,则可能误差较大。但是,当时间间隔过很短时,在通常情况下,可以比较准确的反映当前的压缩信息。可以是最近的一次,也可以是最近多次的平均值。这种方式考虑了时间因素,因此,精度效果比方式一稍好。
方式三,所述信息,依据同一类型文件子集合的历史压缩信息关联权重后的和生成。这种方式将同一类型文件子集合的历史压缩信息作为统计数据,可以获得具有普遍性的计算结果,近似接近于真实的压缩信息。例如,分类统计历史压缩信息,将分类中的高、中、低三类数据添加不同的权重,然后求所有加权数据的和。这种方式采用多种因素加以考量,因此,效果也是较好的。
步骤S312,通过所述文件子集合的大小信息及相应类型文件子集合的压缩速度信息计算获得压缩所述文件子集合的估算时间。
例如,压缩所述文件子集合的估算时间,等于所述文件子集合的大小信息除以相应类型文件子集合的压缩速度信息。
步骤S32,至少根据所述文件子集合信息和所述网络信息获得通过网络传输压缩后所述文件子集合的估算时间。包括:
通过所述文件子集合的大小信息和相应类型文件子集合的所述压缩率信息及所述网络信息获得通过网络传输所述压缩文件子集合的时间。
例如,通过网络传输压缩后所述文件子集合的估算时间,等于所述文件子集合的大小信息乘以相应类型文件子集合的所述压缩率信息除以所述网络的传输速度信息。
步骤S33,计算压缩所述文件子集合的估算时间及通过网络传输压缩后所述文件子集合的估算时间的和,获得第二时间。
步骤S4,如果所述第一时间和所述第二时间的对比结果满足第一条件,则通过网络传输所述文件子集合。
步骤S5,如果所述第一时间和所述第二时间的对比结果不满足第一条件,则压缩所述文件子集合并通过网络传输压缩后的所述文件子集合。
所述第一时间和所述第二时间的对比结果满足第一条件,至少包括以下一种对比方式:
对比方式一,所述第一时间减去所述第二时间的差小于或等于零。
此种方式,仅仅是从时间的角度进行对比。将第一时间减去所述第二时间的差限定在小于或等于零的范围内,即第一时间小于等于第二时间。意味着直接通过网络传输文件子集合的估算时间(时长)小于压缩所述文件子集合后传输所述文件子集合的估算时间(时长)。
对比方式二,所述第一时间的资源消耗值减去所述第二时间的资源消耗值的差小于或等于零。
此种方式,不仅从时间的角度考虑问题,而且,也从资源消耗的角度考虑问题。例如,压缩会占用大量资源,比如时间,处理器资源或内存资源。如果第一时间仅仅比第二时间多几秒,而采用压缩方式传输信息,从资源角度考虑,就不划算。所述资源消耗值,是基于时间资源消耗、处理器资源消耗和内存资源消耗的基础上,对传输方法进行的综合评估值。包括第一时间的资源消耗值和第二时间的资源消耗值。
例如,当所述第一时间大于所述第二时间时,但是,第二时间的资源消耗值减去第一时间的资源消耗值的差,是一个正数,说明采用压缩方式所消耗的资源大于非压缩方式所消耗的资源,所以,采用非压缩方式。
本实施例,在文件传输前对文件进行传输方式的效率比较,提高了传输效率。特别是面对大量相同类型文件传输时,只要判别一个文件的传输类型,即可将大量同类型文件按照同一种传输方式传输,大大提高了传输效率。
进一步的,当需要传输大量不同类型的文件时,将待传输的文件集合按照类型分类,获得分类的文件子集合。再分别对每一种文件子集合进行上述操作。可以达到同样的提高传输效率的工作。
例如,待传输的文件夹中包括图像文件,如JPG文件;也包括文本文件,如word文件。则将文件夹中的文件按照文件类型分类,并将不同类型的文件组织在一起,如为每一种类型的文件建立一个专属文件类型的子文件夹;或者为每一种类型的文件分别在内存中建立专属文件类型的数据结构。分别对上述分类的子文件夹中的文件进行传输操作,或分别对上述专属文件类型的数据结构中记录的文件进行传输操作,可以大大提高文件传输的效率。
在第二实施例中,参见图2为本申请实施例的传输装置的单元框图。
在文件子集合也可以采用以下步骤传输:
步骤S6,获得文件子集合信息和网络信息;
步骤S7,至少根据所述文件子集合信息和所述网络信息获得第一时间,所述第一时间表征为通过网络传输文件子集合的估算时间;
步骤S8,至少根据所述文件子集合信息和所述网络信息获得第二时间,所述第二时间表征为利用与文件子集合的类型信息相关联的压缩方式压缩所述文件子集合的估算时间及通过网络传输压缩后所述文件子集合的估算时间的和;
步骤S9,如果所述第一时间和所述第二时间的对比结果满足第一条件,则通过网络传输所述文件子集合;
步骤S10,如果所述第一时间和所述第二时间的对比结果不满足所述第一条件,则利用与文件子集合的类型信息相关联的压缩方式压缩所述文件子集合并通过网络传输压缩后的所述文件子集合。
所述与文件子集合的类型信息相关联的压缩方式,就是建立一个数据集合,所述数据集合,至少包括文件子集合的类型信息和压缩方式信息。
以便针对不同的文件类型,采用不同的压缩方式。这样可以进一步提高传输效率。
尤其是,当需要传输大量不同类型的文件时,将待传输的文件集合按照类型分类,获得分类的文件子集合。再分别对每一种文件子集合采用上述步骤操作。可以达到更高的传输效率。
进一步,无论后续多个不同类型的文件子集合采用串行或并行的方式传输,与未处理相比都会提高效率。或者依据网络信息,如果网络信息表明支持并行传输就并行传输;如果网络信息表明不支持并行传输,则串行传输。
此外,还可以依据资源状况确定传输方式,比如
如果根据资源状况满足预设条件,则文件子集合可以采用并行传输的方式。
如果根据资源状况不满足预设条件,则文件子集合可以采用串行传输的方式。
所述资源状况至少包括:时间消耗,处理器消耗或内存消耗。
与本申请提供的第一实施例相对应,本申请还提供了第三实施例,即一种传输装置。由于第三实施例基本相似于第一实施例,所以描述得比较简单,相关的部分请参见第一实施例的对应说明即可。下述描述的装置实施例仅仅是示意性的。
图3示出了本申请提供的一种传输装置的实施例。图3为本申请实施例的传输装置的单元框图。
请参考图3,本申请提供一种传输装置,包括:
获取信息单元201,获取第一时间单元202,获取第二时间单元203,传输单元204;
获取信息单元201,配置为获得文件子集合信息和网络信息;
获取第一时间单元202,配置为至少根据所述文件子集合信息和所述网络信息获得第一时间,所述第一时间表征通过网络传输文件子集合的估算时间;
获取第二时间单元203,配置为至少根据所述文件子集合信息和所述网络信息获得第二时间,所述第二时间表征压缩所述文件的估算时间及通过网络传输压缩后所述文件的估算时间的和;
传输单元204,配置为如果所述第一时间和所述第二时间的对比结果满足第一条件,则通过网络传输所述文件;
如果所述第一时间和所述第二时间的对比结果不满足第一条件,则压缩所述文件并通过网络传输所述压缩文件。
所述文件子集合的信息,至少包括:文件子集合的大小信息和类型信息;所述网络信息包括网络的传输速度或带宽信息。
获取第一时间单元202中,包括:
计算第一时间子单元,配置为通过所述文件子集合的大小信息及所述网络信息获得所述文件子集合的第一时间;
获取第二时间单元203中,包括:
获得压缩所述文件子集合的估算时间子单元,配置为至少根据所述文件子集合信息获得压缩所述文件子集合的估算时间;
获得通过网络传输压缩后所述文件子集合的估算时间子单元,配置为至少根据所述文件子集合信息和所述网络信息获得通过网络传输压缩后所述文件子集合的估算时间;
获得第二时间子单元,配置为计算压缩所述文件子集合的估算时间及通过网络传输压缩后所述文件子集合的估算时间的和,获得第二时间。
获得压缩所述文件子集合的估算时间子单元中,包括:
获得相应类型文件子集合的压缩信息子单元,配置为根据所述文件子集合的类型信息获得相应类型文件子集合的压缩信息;所述相应类型的文件子集合的压缩信息,至少包括:压缩率信息和压缩速度信息;
计算压缩所述文件子集合的估算时间子单元,配置为通过所述文件子集合的大小信息及相应类型文件子集合的压缩速度信息计算获得压缩所述文件子集合的估算时间。
获得相应类型文件子集合的压缩信息子单元中,包括:
具体获得相应类型文件子集合的压缩信息子单元,配置为通过与所述文件子集合的类型信息的关联关系,从压缩信息的数据集合中获取相应类型文件子集合的压缩信息,所述压缩信息的数据集合至少包括:文件子集合的类型信息及相应类型文件子集合的压缩率信息和压缩速度信息。
所述相应类型文件子集合的压缩信息,至少通过以下一种方式生成:
方式一,所述信息,通过读取预存储的模板信息生成;可以是通过对文件类型的判断,依靠长期积累的大数据分析获得的。该方法执行时需要的资源较低。
方式二,所述信息,依据历史上压缩同一类型文件子集合生成的相应信息生成;可以是最近的一次,也可以是最近多次的平均值。这种方式考虑了时间因素,因此,精度效果比方式一稍好。
方式三,所述信息,依据同一类型文件子集合的历史压缩信息关联权重后的和生成。这种方式采用多种因素加以考量,因此,效果也是较好的。
获得通过网络传输压缩后所述文件子集合的估算时间子单元中,包括:
计算通过网络传输压缩后所述文件子集合的估算时间子单元,配置为通过所述文件子集合的大小信息和相应类型文件子集合的所述压缩率信息及所述网络的速度信息获得通过网络传输所述压缩文件子集合的时间。
在传输单元204中,所述第一时间和所述第二时间的对比结果满足第一条件,至少包括以下一种对比方式:
对比方式一,所述第一时间减去所述第二时间的差小于或等于零;
对比方式二,所述第一时间的资源消耗值减去所述第二时间的资源消耗值的差小于或等于零。
此种方式,不仅从时间的角度考虑问题,而且,也从资源消耗的角度考虑问题。例如,压缩会占用大量资源,比如处理器资源,内存资源。如果第一时间仅仅比第二时间多几秒,而采用压缩方式传输信息,从资源角度考虑,就不划算。
所述预设资源消耗值,是基于处理器资源消耗和内存资源消耗的基础上,对传输方法进行的评估值。包括第一时间预设资源消耗值和第二时间预设资源消耗值。
所述预设资源消耗值,等于第二时间预设资源消耗值和第一时间预设资源消耗值的差,再乘以一个转换系数。
所述转化系数,是一个综合评价的评估值。
例如,当所述第一时间大于所述第二时间时,但是,第二时间预设资源消耗值和第一时间预设资源消耗值的差,再乘以一个转换系数,结果是一个正数,说明采用压缩方式所消耗的资源和时间大于非压缩方式所消耗的资源和时间,所以,采用非压缩方式。
进一步的,在获取信息单元前,还包括:
分类单元,配置为将待传输的文件集合按照类型分类,获得分类的文件子集合。
本实施例,在文件传输前对文件进行传输方式的效率比较,提高了传输效率。特别是面对大量相同类型文件传输时,只要判别一个文件的传输类型,即可将大量同类型文件按照同一种传输方式传输,大大提高了传输效率。
进一步的,当需要传输大量不同类型的文件时,将待传输的文件集合按照类型分类,获得分类的文件子集合。再分别对每一种文件子集合进行上述操作。可以达到同样的提高传输效率的工作。
例如,待传输的文件夹中包括图像文件,如JPG文件;也包括文本文件,如word文件。则将文件夹中的文件按照文件类型分类,并将不同类型的文件组织在一起,如为每一种类型的文件建立一个专属文件类型的子文件夹;或者为每一种类型的文件分别在内存中建立专属文件类型的数据结构。分别对上述分类的子文件夹中的文件进行传输操作,或分别对上述专属文件类型的数据结构中记录的文件进行传输操作,可以大大提高文件传输的效率。
在第四实施例中,参见图4为本申请实施例的传输装置的单元框图。
还可以有另一种传输装置:
获取信息单元401,获取第一时间单元402,获取第二时间单元403,传输单元404;
获取信息单元401,配置为获得文件子集合信息和网络信息;
获取第一时间单元402,配置为至少根据所述文件子集合信息和所述网络信息获得第一时间,所述第一时间表征为通过网络传输文件子集合的估算时间;
获取第二时间单元403,配置为至少根据所述文件子集合信息和所述网络信息获得第二时间,所述第二时间表征为利用与文件子集合的类型信息相关联的压缩方式压缩所述文件子集合的估算时间及通过网络传输压缩后所述文件子集合的估算时间的和;
传输单元404,配置为如果所述第一时间和所述第二时间的对比结果满足第一条件,则通过网络传输所述文件子集合;如果所述第一时间和所述第二时间的对比结果不满足所述第一条件,则利用与文件子集合的类型信息相关联的压缩方式压缩所述文件子集合并通过网络传输压缩后的所述文件子集合。
所述与文件子集合的类型信息相关联的压缩方式,就是建立一个数据集合,所述数据集合,至少包括文件子集合的类型信息和压缩方式信息。
以便针对不同的文件类型,采用不同的压缩方式。这样可以进一步提高传输效率。
尤其是,当需要传输大量不同类型的文件时,将待传输的文件集合按照类型分类,获得分类的文件子集合。再分别对每一种文件子集合采用上述步骤操作。可以达到更高的传输效率。
进一步,无论后续多个不同类型的文件子集合采用串行或并行的方式传输,与未处理相比都会提高效率。或者依据网络信息,如果网络信息表明支持并行传输就并行传输;如果网络信息表明不支持并行传输,则串行传输。
此外,还可以依据资源状况确定传输方式,比如
如果根据资源状况满足预设条件,则文件子集合可以采用并行传输的方式。
如果根据资源状况不满足预设条件,则文件子集合可以采用串行传输的方式。
所述资源状况至少包括:时间消耗,处理器消耗或内存消耗。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的数据处理方法所应用于的电子设备,可以参考前述产品实施例中的对应描述,在此不再赘述。
以上实施例仅为本申请的示例性实施例,不用于限制本申请,本申请的保护范围由权利要求书限定。本领域技术人员可以在本申请的实质和保护范围内,对本申请做出各种修改或等同替换,这种修改或等同替换也应视为落在本申请的保护范围内。
Claims (10)
1.一种传输方法,包括:
获得文件子集合信息和网络信息;
至少根据所述文件子集合信息和所述网络信息获得第一时间,所述第一时间表征为通过网络传输文件子集合的估算时间;
至少根据所述文件子集合信息和所述网络信息获得第二时间,所述第二时间表征为压缩所述文件子集合的估算时间及通过网络传输压缩后所述文件子集合的估算时间的和;
如果所述第一时间和所述第二时间的对比结果满足第一条件,则通过网络传输所述文件子集合;
如果所述第一时间和所述第二时间的对比结果不满足所述第一条件,则压缩所述文件子集合并通过网络传输压缩后的所述文件子集合。
2.根据权利要求1所述的方法,其中,所述文件子集合的信息,至少包括:文件子集合的大小信息和类型信息;所述网络信息包括网络的传输速度或带宽信息。
3.根据权利要求2所述的方法,其中,所述至少根据所述文件子集合信息和所述网络信息获得第一时间,包括:
通过所述文件子集合的大小信息及所述网络信息获得所述文件子集合的第一时间。
4.根据权利要求2所述的方法,其中,所述至少根据所述文件子集合信息和所述网络信息获得第二时间,所述第二时间表征压缩所述文件子集合的估算时间及通过网络传输压缩后所述文件子集合的估算时间的和,包括:
至少根据所述文件子集合信息获得压缩所述文件子集合的估算时间;
至少根据所述文件子集合信息和所述网络信息获得通过网络传输压缩后所述文件子集合的估算时间;
计算压缩所述文件子集合的估算时间及通过网络传输压缩后所述文件子集合的估算时间的和,获得第二时间。
5.根据权利要求4所述的方法,其中,所述至少根据所述文件子集合信息获得压缩所述文件子集合的估算时间,包括:
根据所述文件子集合的类型信息获得相应类型文件子集合的压缩信息;所述相应类型的文件子集合的压缩信息,至少包括:压缩率信息和压缩速度信息;
通过所述文件子集合的大小信息及相应类型文件子集合的压缩速度信息计算获得压缩所述文件子集合的估算时间;
和/或
所述至少根据所述文件子集合信息和所述网络信息获得通过网络传输所述压缩后所述文件子集合的估算时间,包括:
通过所述文件子集合的大小信息和相应类型文件子集合的所述压缩率信息及所述网络信息获得通过网络传输所述压缩文件子集合的时间。
6.根据权利要求5所述的方法,其中,所述根据所述文件子集合的类型信息获取相应类型文件子集合的压缩信息,包括:
通过与所述文件子集合的类型信息的关联关系,从压缩信息的数据集合中获取相应类型文件子集合的压缩信息,所述压缩信息的数据集合至少包括:文件子集合的类型信息及相应类型文件子集合的压缩率信息和压缩速度信息。
7.根据权利要求6所述的方法,其中,所述相应类型文件子集合的压缩信息,至少通过以下一种方式生成:
所述信息,通过读取预存储的模板信息生成;
所述信息,依据历史上压缩同一类型文件子集合生成的相应信息生成;
所述信息,依据同一类型文件子集合的历史压缩信息关联权重后的和生成。
8.根据权利要求1所述的方法,其中,所述第一时间和所述第二时间的对比结果满足第一条件,至少包括以下一种对比方式:
所述第一时间减去所述第二时间的差小于或等于零;
所述第一时间的资源消耗值减去所述第二时间的资源消耗值的差小于或等于零。
9.根据权利要求1-8任一项所述的方法,其中,在所述方法前,还包括:
获得待传输的文件集合;
将待传输的文件集合按照类型分类,获得分类后的多个文件子集合。
10.一种传输装置,包括:
获取信息单元,配置为获得文件子集合信息和网络信息;
获取第一时间单元,配置为至少根据所述文件子集合信息和所述网络信息获得第一时间,所述第一时间表征通过网络传输文件子集合的估算时间;
获取第二时间单元,配置为至少根据所述文件子集合信息和所述网络信息获得第二时间,所述第二时间表征压缩所述文件的估算时间及通过网络传输压缩后所述文件的估算时间的和;
传输单元,配置为如果所述第一时间和所述第二时间的对比结果满足第一条件,则通过网络传输所述文件;如果所述第一时间和所述第二时间的对比结果不满足第一条件,则压缩所述文件并通过网络传输所述压缩文件。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810596050.9A CN108833530A (zh) | 2018-06-11 | 2018-06-11 | 一种传输方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810596050.9A CN108833530A (zh) | 2018-06-11 | 2018-06-11 | 一种传输方法和装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN108833530A true CN108833530A (zh) | 2018-11-16 |
Family
ID=64145146
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810596050.9A Pending CN108833530A (zh) | 2018-06-11 | 2018-06-11 | 一种传输方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108833530A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110266814A (zh) * | 2019-07-09 | 2019-09-20 | 联想(北京)有限公司 | 传输方法及传输装置 |
CN112291341A (zh) * | 2020-10-28 | 2021-01-29 | 维沃移动通信有限公司 | 文件传输方法、装置和设备 |
CN114979113A (zh) * | 2021-02-23 | 2022-08-30 | 华为技术有限公司 | 一种文件传输方法、装置及系统 |
Citations (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08321878A (ja) * | 1995-05-26 | 1996-12-03 | Nec Corp | 多重化網管理装置及びファイル転送方式 |
US6460044B1 (en) * | 1999-02-02 | 2002-10-01 | Jinbo Wang | Intelligent method for computer file compression |
JP2004280407A (ja) * | 2003-03-14 | 2004-10-07 | Canon Inc | 情報転送装置 |
US7069342B1 (en) * | 2001-03-01 | 2006-06-27 | Cisco Technology, Inc. | Communication system with content-based data compression |
US20080201751A1 (en) * | 2006-04-18 | 2008-08-21 | Sherjil Ahmed | Wireless Media Transmission Systems and Methods |
US20090046775A1 (en) * | 2007-08-17 | 2009-02-19 | Arvind Thiagarajan | System And Method For Delivery Of Electronic Data |
US20090100195A1 (en) * | 2007-10-11 | 2009-04-16 | Barsness Eric L | Methods and Apparatus for Autonomic Compression Level Selection for Backup Environments |
CN101552652A (zh) * | 2009-05-13 | 2009-10-07 | 北京交大思源科技有限公司 | 一种文件传输方法及传输装置 |
CN101599986A (zh) * | 2008-06-02 | 2009-12-09 | 宏碁股份有限公司 | 加速文件传输速度的方法及计算机系统 |
JP2010224996A (ja) * | 2009-03-25 | 2010-10-07 | Nec Corp | ファイル送信方法、ファイル送信装置及びコンピュータプログラム |
CN102571820A (zh) * | 2012-02-21 | 2012-07-11 | 华为技术有限公司 | 用于传输数据的方法、压缩服务器和终端 |
CN102638579A (zh) * | 2012-03-29 | 2012-08-15 | 深圳市高正软件有限公司 | 一种基于移动设备数据传输的数据处理方法及系统 |
US20130117298A1 (en) * | 2011-11-08 | 2013-05-09 | Xerox Corporation | Web service performance optimization by adaptively using compression |
CN103873860A (zh) * | 2014-03-18 | 2014-06-18 | 深信服网络科技(深圳)有限公司 | 文件传输方法及装置 |
CN105227649A (zh) * | 2015-09-21 | 2016-01-06 | 北京金山安全软件有限公司 | 一种文件传输方法及装置 |
CN106161633A (zh) * | 2016-07-20 | 2016-11-23 | 柏科数据技术(深圳)股份有限公司 | 一种基于云计算环境下打包文件的传输方法及系统 |
US20160344646A1 (en) * | 2015-05-21 | 2016-11-24 | Intel Corporation | Apparatus and methods for adaptive data compression |
CN107682452A (zh) * | 2017-10-31 | 2018-02-09 | 沈阳东软医疗系统有限公司 | 一种数据处理方法、装置及系统 |
US20180131749A1 (en) * | 2016-11-10 | 2018-05-10 | Ingram Micro Inc. | System and Method for Optimizing Data Transfer using Selective Compression |
-
2018
- 2018-06-11 CN CN201810596050.9A patent/CN108833530A/zh active Pending
Patent Citations (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08321878A (ja) * | 1995-05-26 | 1996-12-03 | Nec Corp | 多重化網管理装置及びファイル転送方式 |
US6460044B1 (en) * | 1999-02-02 | 2002-10-01 | Jinbo Wang | Intelligent method for computer file compression |
US7069342B1 (en) * | 2001-03-01 | 2006-06-27 | Cisco Technology, Inc. | Communication system with content-based data compression |
JP2004280407A (ja) * | 2003-03-14 | 2004-10-07 | Canon Inc | 情報転送装置 |
US20080201751A1 (en) * | 2006-04-18 | 2008-08-21 | Sherjil Ahmed | Wireless Media Transmission Systems and Methods |
US20090046775A1 (en) * | 2007-08-17 | 2009-02-19 | Arvind Thiagarajan | System And Method For Delivery Of Electronic Data |
US20090100195A1 (en) * | 2007-10-11 | 2009-04-16 | Barsness Eric L | Methods and Apparatus for Autonomic Compression Level Selection for Backup Environments |
CN101599986A (zh) * | 2008-06-02 | 2009-12-09 | 宏碁股份有限公司 | 加速文件传输速度的方法及计算机系统 |
JP2010224996A (ja) * | 2009-03-25 | 2010-10-07 | Nec Corp | ファイル送信方法、ファイル送信装置及びコンピュータプログラム |
CN101552652A (zh) * | 2009-05-13 | 2009-10-07 | 北京交大思源科技有限公司 | 一种文件传输方法及传输装置 |
US20130117298A1 (en) * | 2011-11-08 | 2013-05-09 | Xerox Corporation | Web service performance optimization by adaptively using compression |
CN102571820A (zh) * | 2012-02-21 | 2012-07-11 | 华为技术有限公司 | 用于传输数据的方法、压缩服务器和终端 |
CN102638579A (zh) * | 2012-03-29 | 2012-08-15 | 深圳市高正软件有限公司 | 一种基于移动设备数据传输的数据处理方法及系统 |
CN103873860A (zh) * | 2014-03-18 | 2014-06-18 | 深信服网络科技(深圳)有限公司 | 文件传输方法及装置 |
US20160344646A1 (en) * | 2015-05-21 | 2016-11-24 | Intel Corporation | Apparatus and methods for adaptive data compression |
CN107534615A (zh) * | 2015-05-21 | 2018-01-02 | 英特尔公司 | 用于自适应数据压缩的装置和方法 |
CN105227649A (zh) * | 2015-09-21 | 2016-01-06 | 北京金山安全软件有限公司 | 一种文件传输方法及装置 |
CN106161633A (zh) * | 2016-07-20 | 2016-11-23 | 柏科数据技术(深圳)股份有限公司 | 一种基于云计算环境下打包文件的传输方法及系统 |
US20180131749A1 (en) * | 2016-11-10 | 2018-05-10 | Ingram Micro Inc. | System and Method for Optimizing Data Transfer using Selective Compression |
CN107682452A (zh) * | 2017-10-31 | 2018-02-09 | 沈阳东软医疗系统有限公司 | 一种数据处理方法、装置及系统 |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110266814A (zh) * | 2019-07-09 | 2019-09-20 | 联想(北京)有限公司 | 传输方法及传输装置 |
CN110266814B (zh) * | 2019-07-09 | 2021-08-17 | 联想(北京)有限公司 | 传输方法及传输装置 |
CN112291341A (zh) * | 2020-10-28 | 2021-01-29 | 维沃移动通信有限公司 | 文件传输方法、装置和设备 |
CN114979113A (zh) * | 2021-02-23 | 2022-08-30 | 华为技术有限公司 | 一种文件传输方法、装置及系统 |
WO2022179136A1 (zh) * | 2021-02-23 | 2022-09-01 | 华为技术有限公司 | 一种文件传输方法、装置及系统 |
CN114979113B (zh) * | 2021-02-23 | 2023-12-15 | 华为技术有限公司 | 一种文件传输方法、装置及系统 |
EP4274198A4 (en) * | 2021-02-23 | 2024-05-22 | Huawei Technologies Co., Ltd. | FILE TRANSFER METHOD, APPARATUS AND SYSTEM |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9894021B2 (en) | Cloud messaging services optimization through adaptive message compression | |
CN110311987A (zh) | 微服务器的节点调度方法、装置、设备及存储介质 | |
CN109347947A (zh) | 一种负载均衡的方法、域名服务器及集群nas服务器 | |
CN108833530A (zh) | 一种传输方法和装置 | |
CN104202220A (zh) | 压力测试方法和装置 | |
CN104602227A (zh) | 网络自适应的移动应用数据加载方法 | |
EP2278502A1 (en) | Deleting data stream overload | |
CN108206788B (zh) | 一种流量的业务识别方法及相关设备 | |
CN112367384A (zh) | 基于Kafka集群的动态限速方法、装置以及计算机设备 | |
CN111147330A (zh) | 络质量评估方法、装置、存储介质和处理器 | |
CN113207146B (zh) | 无线通信网络质量监控系统及方法 | |
JP5957419B2 (ja) | QoE推定装置、QoE推定方法及びプログラム | |
US20110208854A1 (en) | Dynamic traffic control using feedback loop | |
CN111159131A (zh) | 性能优化方法、装置、设备及计算机可读存储介质 | |
Zhou et al. | Identifying QoS violations through statistical end‐to‐end analysis | |
CN101472290B (zh) | 移动数据业务平台性能测试流量控制方法及装置 | |
EP2518939B1 (en) | Data acquisition method in network resource estimation and system thereof | |
CN111723017A (zh) | 系统容量测试方法、装置、计算机设备及存储介质 | |
CN111278022A (zh) | 一种物联网WiFi模块性能测试方法及系统 | |
CN110365690A (zh) | 流量采集方法、装置及存储介质 | |
CN109547236A (zh) | 电子数据上传存储方法、可读存储介质和终端 | |
CN112631577B (zh) | 一种模型的调度方法、模型调度器以及模型安全测试平台 | |
CN114936089A (zh) | 资源调度方法、系统、设备及存储介质 | |
CN114423043A (zh) | 一种用于移动终端分配链路的方法及设备 | |
CN101651583B (zh) | 一种监控信息管理方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |