CN110740138B - 数据传输方法和装置 - Google Patents

Abstract

本申请实施例公开了数据传输方法和装置。该方法可应用于云计算领域，该方法的一具体实施方式包括：从该待传输的文件中，获取连续的零以外的数据，其中，该连续的零中零的数量大于第一预设阈值；向目标电子设备传输所获取的数据。本申请实施例提供的方法获取连续的零以外的数据进行传输，实现了仅传输有效数据，从而在避免无效传输的同时，缩短了数据的传输时间，降低了对带宽的要求。

Description

数据传输方法和装置

技术领域

本申请实施例涉及计算机技术领域，具体涉及互联网技术领域，尤其涉及数据传输方法和装置。

背景技术

随着信息技术的革新，设备之间要传输的数据量也越来越大。而随着待传输数据量的攀升，传输数据需要占用很大的带宽。因而，大量数据的传输不仅对带宽要求高，也容易造成传输速度较慢的问题。

在现有技术中，常规的数据压缩方式，会降低带宽的占用，但与此同时也会降低传输速度。

发明内容

本申请实施例提出了数据传输方法和装置。

第一方面，本申请实施例提供了一种数据传输方法，包括：从待传输的文件中，获取连续的零以外的数据，其中，连续的零中零的数量大于第一预设阈值；向目标电子设备传输所获取的数据。

在一些实施例中，在从待传输的文件中，获取连续的零以外的数据之前，方法还包括：确定待传输的文件中连续的零的位置，其中，连续的零的位置包括连续的零的起始位置和数量；以及向目标电子设备传输所获取的数据，包括：向目标电子设备传输所获取的数据，以及连续的零的位置。

在一些实施例中，从待传输的文件中，获取连续的零以外的数据，包括：响应于在待传输的文件中，存在所包含零的数量大于或等于第二预设阈值的连续的零，且本设备的内核支持用于指示连续的零的读取方式的预设配置信息，基于连续的零的位置，从本地的存储有待传输的文件的预设存储空间，跳过该连续的零读取数据到缓冲区中，将所读取的数据作为所获取的数据，其中，第二预设阈值大于第一预设阈值。

在一些实施例中，确定待传输的文件中连续的零的位置，包括：在预设存储空间中，扫描待传输的文件中该连续的零的位置的元数据，基于扫描结果确定连续的零的位置。

在一些实施例中，在从待传输的文件中，获取连续的零以外的数据之前，方法还包括：响应于在待传输的文件中，存在所包含零的数量大于或等于第二预设阈值的连续的零，且本设备的内核不支持用于指示所述连续的零的读取方式的预设配置信息，从本地的存储有待传输的文件的预设存储空间，读取包括该连续的零的数据到缓冲区中，其中，第二预设阈值大于第一预设阈值；以及从待传输的文件中，获取连续的零以外的数据，包括：在缓冲区中，查找所读取的数据中所包括的连续的零；提取查找到的连续的零以外的数据作为所获取的数据。

在一些实施例中，向目标电子设备传输所获取的数据，包括：确定该连续的零的位置，向目标电子设备传输所获取的数据，以及连续的零的位置。

在一些实施例中，从待传输的文件中，获取连续的零以外的数据，包括：响应于在待传输的文件中，存在所包含零的数量小于第二预设阈值且大于第一预设阈值的连续的零，采用顺序输入的方式，从本地存储有待传输的文件的预设存储空间，读取包括该连续的零的数据到缓冲区中，将所读取的数据作为所获取的数据。

在一些实施例中，响应于本设备中的磁盘为第一磁盘，预设存储空间为磁盘的空间；响应于本设备中的磁盘为第二磁盘，预设存储空间包括缓存空间，其中，第一磁盘的运行速度大于参考运行速度，参考运行速度大于第二磁盘的运行速度。

在一些实施例中，向目标电子设备传输所获取的数据，包括：向目标电子设备发送连续的零的位置，以使目标电子设备在目标电子设备的磁盘中创建稀疏文件，并跳过连续的零的位置向稀疏文件中写入接收到的数据中连续的零以外的数据。

在一些实施例中，在向目标电子设备传输所获取的数据之前，方法还包括：采用哈希校验的方式，生成校验值；采用多线程压缩的方式，对所获取的数据进行实时压缩，得到压缩文件；以及向目标电子设备传输所获取的数据，包括：向目标电子设备发送压缩文件以及校验值。

在一些实施例中，向目标电子设备传输所获取的数据，包括：基于指定传输协议，采用令牌桶算法向目标电子设备传输所获取的数据。

第二方面，本申请实施例提供了一种数据传输装置，包括：获取单元，被配置成从待传输的文件中，获取连续的零以外的数据，其中，连续的零中零的数量大于第一预设阈值；传输单元，被配置成向目标电子设备传输所获取的数据。

在一些实施例中，装置还包括：确定单元，被配置成在从待传输的文件中，获取连续的零以外的数据之前，确定待传输的文件中连续的零的位置，其中，连续的零的位置包括连续的零的起始位置和数量；以及传输单元，进一步被配置成按照如下方式执行向目标电子设备传输所获取的数据：向目标电子设备传输所获取的数据，以及连续的零的位置。

在一些实施例中，获取单元，进一步被配置成按照如下方式执行从待传输的文件中，获取连续的零以外的数据：响应于在待传输的文件中，存在所包含零的数量大于或等于第二预设阈值的连续的零，且本设备的内核支持用于指示所述连续的零的读取方式的预设配置信息，基于连续的零的位置，从本地的存储有待传输的文件的预设存储空间，跳过该连续的零读取数据到缓冲区中，将所读取的数据作为所获取的数据，其中，第二预设阈值大于第一预设阈值。

在一些实施例中，确定单元进一步被配置成按照如下方式执行确定待传输的文件中连续的零的位置：在预设存储空间中，扫描待传输的文件中该连续的零的位置的元数据，基于扫描结果确定连续的零的位置。

在一些实施例中，装置还包括：读取单元，被配置成在从待传输的文件中，获取连续的零以外的数据之前，响应于在待传输的文件中，存在所包含零的数量大于或等于第二预设阈值的连续的零，且本设备的内核不支持用于指示所述连续的零的读取方式的预设配置信息，从本地的存储有待传输的文件的预设存储空间，读取包括该连续的零的数据到缓冲区中，其中，第二预设阈值大于第一预设阈值；以及获取单元，被配置成按照如下方式执行从待传输的文件中，获取连续的零以外的数据：在缓冲区中，查找所读取的数据中所包括的连续的零；提取查找到的连续的零以外的数据作为所获取的数据。

在一些实施例中，传输单元，进一步被配置成按照如下方式执行向目标电子设备传输所获取的数据：确定该连续的零的位置，向目标电子设备传输所获取的数据，以及连续的零的位置。

在一些实施例中，获取单元，进一步被配置成按照如下方式执行从待传输的文件中，获取连续的零以外的数据：响应于在待传输的文件中，存在所包含零的数量小于第二预设阈值且大于第一预设阈值的连续的零，采用顺序输入的方式，从本地存储有待传输的文件的预设存储空间，读取包括该连续的零的数据到缓冲区中，将所读取的数据作为所获取的数据。

在一些实施例中，响应于本设备中的磁盘为第一磁盘，预设存储空间为磁盘的空间；响应于本设备中的磁盘为第二磁盘，预设存储空间包括缓存空间，其中，第一磁盘的运行速度大于参考运行速度，参考运行速度大于第二磁盘的运行速度。

在一些实施例中，传输单元，进一步被配置成按照如下方式执行向目标电子设备传输所获取的数据：向目标电子设备发送连续的零的位置，以使目标电子设备在目标电子设备的磁盘中创建稀疏文件，并跳过连续的零的位置向稀疏文件中写入接收到的数据中连续的零以外的数据。

在一些实施例中，装置还包括：校验值生成单元，被配置成在向目标电子设备传输所获取的数据之前，采用哈希校验的方式，生成校验值；压缩单元，被配置成采用多线程压缩的方式，对所获取的数据进行实时压缩，得到压缩文件；以及传输单元，进一步被配置成按照如下方式执行向目标电子设备传输所获取的数据：向目标电子设备发送压缩文件以及校验值。

在一些实施例中，传输单元，进一步被配置成按照如下方式执行向目标电子设备传输所获取的数据：基于指定传输协议，采用令牌桶算法向目标电子设备传输所获取的数据。

第三方面，本申请实施例提供了一种电子设备，包括：一个或多个处理器；存储装置，用于存储一个或多个程序，当一个或多个程序被一个或多个处理器执行，使得一个或多个处理器实现如数据传输方法中任一实施例的方法。

第四方面，本申请实施例提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如数据传输方法中任一实施例的方法。

本申请实施例提供的数据传输方案，首先，从待传输的文件中，获取连续的零以外的数据，其中，连续的零中零的数量大于第一预设阈值。之后，向目标电子设备传输所获取的数据。本申请实施例提供的方法获取连续的零以外的数据进行传输，实现了仅传输有效数据，从而在避免无效传输的同时，缩短了数据的传输时间，降低了对带宽的要求。

附图说明

通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本申请的其它特征、目的和优点将会变得更明显：

图1是本申请一些实施例可以应用于其中的示例性系统架构图；

图2是根据本申请的数据传输方法的一个实施例的流程图；

图3是根据本申请的数据传输方法的一个应用场景的示意图；

图4是根据本申请的数据传输方法的又一个实施例的流程图；

图5是根据本申请的数据传输装置的一个实施例的结构示意图；

图6是适于用来实现本申请一些实施例的电子设备的计算机系统的结构示意图。

具体实施方式

下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释相关发明，而非对该发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与有关发明相关的部分。

需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。

图1示出了可以应用本申请的数据传输方法或数据传输装置的实施例的示例性系统架构100。

如图1所示，系统架构100可以包括电子设备101，网络102和电子设备103。网络102用以在电子设备101和电子设备103之间提供通信链路的介质。网络102可以包括各种连接类型，例如有线、无线通信链路或者光纤电缆等等。

电子设备101可以通过网络102与电子设备103进行数据的传输。电子设备101上可以安装有各种通讯客户端应用，例如视频类应用、直播应用、即时通信工具、邮箱客户端、社交平台软件等。

电子设备103可以是提供各种服务的电子设备，例如对电子设备101提供支持的后台电子设备。后台电子设备可以对待传输的文件等数据进行分析等处理，并将处理结果(例如连续的零以外的数据)反馈给终端设备。

需要说明的是，本申请实施例所提供的数据传输方法可以由电子设备(比如服务器)执行，相应地，数据传输装置可以设置于电子设备中。

应该理解，图1中的终端设备、网络和电子设备的数目仅仅是示意性的。根据实现需要，可以具有任意数目的终端设备、网络和电子设备。

继续参考图2，示出了根据本申请的数据传输方法的一个实施例的流程200。该数据传输方法，包括以下步骤：

步骤201，从待传输的文件中，获取连续的零以外的数据，其中，连续的零中零的数量大于第一预设阈值。

在本实施例中，数据传输方法的执行主体(例如图1所示的电子设备)可以从待传输的文件中，获取连续的零以外的数据。连续的零中，零的数量较多。在本申请中，在连续的多个零中零的数量大于第一预设阈值的情况下，可以将这些零称为连续的零。在这里，所获取以及传输的数据可以采用二进制数来表示。

在实践中，上述执行主体可以采用各种方式获取连续的零以外的数据。比如，上述执行主体可以遍历待传输的文件中的数据，如果上述执行主体查找到多个连续出现的零所占的比特数大于第一预设阈值，则可以确定这些连续出现的零为连续的零，并获取这些零以外的数据。

在本实施例的一些可选的实现方式中，步骤201可以包括：响应于在待传输的文件中，存在所包含零的数量小于第二预设阈值且大于第一预设阈值的连续的零，采用顺序输入的方式，从本地存储有待传输的文件的预设存储空间，读取包括该连续的零的数据到缓冲区中，将所读取的数据作为所获取的数据。

在这些可选的实现方式中，若在待传输的文件中，存在连续的零，该连续的零所包含的零的数量小于上述第二预设阈值且大于上述第一预设阈值，则上述执行主体可以采用顺序输入(Input/Output)的方式，向缓冲区读取数据。在这里，所读取的数据中包括连续的零。

在现有技术中，采用顺序输入以外的其他输入方式，比如随机I/O的方式，在数据读取时，需要对文件中的数据进行多次读取。举例来说，在待传输的文件中，预存有表征连续的零的位置的元数据的情况下，在第1-99比特位中，第60-95比特位为连续的零。常规的读取方式会分三次读取这100个比特位，即分三次分别读取第1-59比特位、第60-95比特位和第96-99比特位。若上述执行主体采用顺序输入的方式，对这100个比特位仅进行一次读取即可读取完成，减少了数据读取的次数。

在这些实现方式中，在连续的零的长度较短(数量大于第一预设阈值但小于第二预设阈值)的情况下，对连续的零的读取不会耗费太长的时间。本实施例可以在连续的零中零的长度较短的情况下，采用顺序I/O的方式读取数据，避免了现有技术中多次读取以至于延长读取时间的问题，从而提高了数据的读取效率。

步骤202，向目标电子设备传输所获取的数据。

在本实施例中，上述执行主体可以在获取到上述数据后，向目标电子设备传输所获取的数据。这样，上述执行主体即是数据的发送端，目标电子设备则是数据的接收端。

在本实施例的一些可选的实现方式中，在步骤201之前，还可以包括：响应于在待传输的文件中，存在所包含零的数量大于或等于第二预设阈值的连续的零，且本设备的内核不支持用于指示所述连续的零的读取方式的预设配置信息，从本地的存储有待传输的文件的预设存储空间，读取包括该连续的零的数据到缓冲区中，其中，第二预设阈值大于第一预设阈值；以及步骤201可以包括：在缓冲区中，查找所读取的数据中所包括的连续的零；提取查找到的连续的零以外的数据作为所获取的数据。

在这些可选的实现方式中，若在待传输的文件中，存在连续的零，该连续的零的数量大于或等于第二预设阈值，且本设备的内核不支持预设配置信息，则上述执行主体可以读取待传输文件的全部数据到缓冲区(buffer)中，所读取的数据包括连续的零。之后，上述执行主体可以在读入缓冲区的数据中，查找并提取连续的零以外的数据。具体地，上述执行主体可以采用遍历各个读入的比特位的方式进行查找。如果上述执行主体查找到多个相邻的零的比特数大于第一预设阈值，则可以确定这些相邻的零为连续的零，并提取这些零以外的数据。

在实践中，当连续的零大于第二预设阈值，则该连续的零所占用的存储空间较大，可以称为“空洞”(hole)。上述预设配置信息可以是与连续的零相关的软件配置参数，比如预设配置信息可以是SEEK_DATA/SEEK_HOLE，上述执行主体通过该预设配置信息可以查找空洞以外的数据的起点，以及空洞的起点。若本设备支持该预设配置信息，就能够确定数据的读取方式为跳过连续的零进行读取。

这些实现方式可以在读取后，获取连续的零以外的数据，从而实现仅传输有效数据，缩短传输时间，并降低了对带宽的要求。

在这些实现方式的一些可选的应用场景中，步骤202可以包括：确定该连续的零的位置，向目标电子设备传输所获取的数据，以及连续的零的位置。

在这些可选的应用场景中，上述执行主体可以确定连续的零的位置，并向目标电子设备传输该位置。具体地，上述连续的零在缓冲区中的位置与在预设存储空间中待传输的文件中的位置可以是相同的。

连续的零的位置可以采用各种形式表示，例如，连续的零的起点(offset)和数量(size)，比如起点可以是第186个比特，数量可以是301个比特。此外，连续的零的位置还可以是连续的零的起点和终点。一般地，连续的零的位置，指连续的零在待传输文件或在存储空间中的位置。

这些应用场景可以向目标电子设备发送连续的零的位置，有助于目标电子设备的数据写入。

在本实施例的一些可选的实现方式中，步骤202可以包括：向目标电子设备发送连续的零的位置，以使目标电子设备在目标电子设备的磁盘中创建稀疏文件，并跳过连续的零的位置向稀疏文件中写入接收到的数据中连续的零以外的数据。

在这些可选的实现方式中，目标电子设备可以在本地创建稀疏文件，在连续的零的位置不做写入处理，直接跳过该位置在稀疏文件中写入连续的零以外的数据。

这些实现方式通过在原有的连续的零的位置不写入数据，从而减小数据所占用的空间，让磁盘有更快的运行速度。

在本实施例的一些可选的实现方式中，在步骤202之前，上述方法还可以包括：采用哈希校验的方式，生成校验值；采用多线程压缩的方式，对所获取的数据进行实时压缩，得到压缩文件；以及步骤202可以包括：向目标电子设备发送压缩文件以及校验值。

在这些可选的实现方式中，上述执行主体可以采用哈希校验的方式生成校验值，并在本地对所获取的数据进行多线程的实时压缩。这样，目标电子设备同样可以采用哈希校验的方式生成校验值，并利用接收到的校验值和生成的校验值进行校验。

在实践中，上述执行主体不仅可以向目标电子设备发送压缩文件和校验值，还可以发送在本地确定的连续的零的位置。

这些实现方式可以通过哈希校验，提高校验的准确度，此外，还可以通过哈希校验提高校验的效率。并且，通过实时压缩可以提高压缩比例，让压缩得到的文件占用更小的带宽，并通过多线程压缩提高压缩速度，缩短数据传输的过程。

在本实施例的一些可选的实现方式中，步骤202可以包括：基于指定传输协议，采用令牌桶算法向目标电子设备传输所获取的数据。

在这些可选的实现方式中，上述执行主体可以基于指定传输协议进行传输，此外，还可以对该传输协议采用令牌桶算法进行限速。在实践中，指定传输协议可以是光纤通道协议(Fibre Channel Protocol，FCP)

这些实现方式可以通过令牌桶算法对上述指定传输协议进行限速传输，避免数据传输过程中与其他业务争抢带宽，从而确保传输的稳定性和效率。

继续参见图3，图3是根据本实施例的数据传输方法的应用场景的一个示意图。

在图3的应用场景中，执行主体301可以从待传输的文件中，获取连续的零以外的数据302，其中，连续的零中零的数量大于第一预设阈值。之后，执行主体301向目标电子设备303传输所获取的数据302。

本申请的上述实施例提供的方法获取连续的零以外的数据进行传输，实现了仅传输有效数据，从而在避免无效传输的同时，缩短了数据的传输时间，降低了对带宽的要求。

进一步参考图4，其示出了数据传输方法的又一个实施例的流程400。该数据传输方法的流程400，包括以下步骤：

步骤401，确定待传输的文件中连续的零的位置，其中，连续的零的位置包括连续的零的起始位置和数量。

在本实施例中，数据传输方法的执行主体(例如图1所示的电子设备)可以获取连续的零的位置，以便于后续获取连续的零以外的数据。

在实践中，上述执行主体可以采用各种方式确定连续的零的位置。比如，在待传输的文件中或者本地的其他文件中，可以预存有表征连续的零的位置的元数据，这样，上述执行主体则可以将该元数据表征的连续的零的位置确定为上述连续的零的位置。再比如，上述执行主体可以遍历待传输的文件中的各个比特位，从而找到连续的零的位置。

步骤402，从待传输的文件中，获取连续的零以外的数据，其中，连续的零中零的数量大于第一预设阈值。

在本实施例中，数据传输方法的执行主体(例如图1所示的服务器)可以从待传输的文件中，获取连续的零以外的数据。连续的零中，零的数量较多。在本申请中，在连续的多个零中零的数量大于第一预设阈值的情况下，可以将这些零称为连续的零。在这里，所获取以及传输的数据可以采用二进制数来表示。

在本实施例的一些可选的实现方式中，步骤402可以包括：响应于在待传输的文件中，存在所包含零的数量大于或等于第二预设阈值的连续的零，且本设备的内核支持用于指示连续的零的读取方式的预设配置信息，基于连续的零的位置，从本地的存储有待传输的文件的预设存储空间，跳过该连续的零读取数据到缓冲区中，将所读取的数据作为所获取的数据，其中，第二预设阈值大于第一预设阈值。

在这些可选的实现方式中，响应于待传输的文件中，存在连续的零，该连续的零所包含的数量大于或等于第二预设阈值，且本设备的内核支持预设配置信息，那么上述执行主体可以基于连续的零的位置，跳过连续的零读取数据到本地的缓冲区中。具体地，上述执行主体可以从本地的预设存储空间中读取数据，这里的预设存储空间可以存储有上述待传输的文件。通过预设配置信息，就可以跳过连续的零进行读取。

这些实现方式可以跳过连续的零进行读取，从而直接读取到有效数据，避免对空洞的无效读取以及传输。

在这些实现方式的一些可选的应用场景中，这些实现方式中的从待传输的文件中确定连续的零的位置，可以包括：在预设存储空间中，扫描待传输的文件中该连续的零的位置的元数据，基于扫描结果确定连续的零的位置。

在这些可选的应用场景中，若待传输的文件中，存在连续的零，该连续的零所包含的数量大于或等于第二预设阈值，且本设备的内核支持预设配置信息，则上述执行主体可以在读取数据前，扫描上述预设存储空间中的指定位置，该指定位置包括表征连续的零的位置的元数据。

这些应用场景可以通过扫描元数据，实现扫描少量的数据就能够快速、准确地确定连续的零的位置。

步骤403，向目标电子设备传输所获取的数据，以及连续的零的位置。

在本实施例中，上述执行主体可以在获取到上述数据后，向目标电子设备传输所获取的数据和上述连续的零的位置。这样，上述执行主体即是数据的发送端，目标电子设备则是数据的接收端。

本实施例中准确地确定了连续的零的位置，有助于从待传输的文件中更准确地获取连续的零以外的数据。

在以上各个实施例的一些可选的实现方式中，响应于本设备中的磁盘为第一磁盘，预设存储空间为磁盘的空间；响应于本设备中的磁盘为第二磁盘，预设存储空间包括缓存空间，其中，第一磁盘的运行速度大于参考运行速度，参考运行速度大于第二磁盘的运行速度。

在这些可选的实现方式中，如果本设备的磁盘是运行速度快的性能优异的磁盘，上述执行主体可以跳过缓存(cache)，直接从磁盘中读取数据到缓冲区中。这里的参考运行速度是界定能否直接从磁盘读取数据的速度，如果上述执行主体采用直接从磁盘读取数据的方式进行数据读取，则该磁盘的运行速度大于参考运行速度。在磁盘的运行速度低于参考运行速度的情况下，上述执行主体可以优先从缓存中读取数据，如果缓存中没有完整的待传输的文件，则上述执行主体可以从磁盘中读取缓存中没有的数据。

这些实现方式可以在磁盘的性能优异的情况下，跳过系统的缓存，直接从磁盘中读取数据，而因为磁盘性能的优异，让从磁盘中读取数据与从缓存中读取数据之间的速度差异很小。而如果缓存中数据不完整，会造成在缓存以及磁盘中来回切换读取数据，反而降低了读取速度。而如果磁盘的运行速度较慢，则从磁盘读取数据与从缓存中读取数据之间有较大的速度差异，那么优先从缓存中读取数据则是更为适当的读取策略。所以，这些实现方式可以有效地提高各种磁盘的数据读取速度。

进一步参考图5，作为对上述各图所示方法的实现，本申请提供了一种数据传输装置的一个实施例，该装置实施例与图2所示的方法实施例相对应，除下面所记载的特征外，该装置实施例还可以包括与图2所示的方法实施例相同或相应的特征或效果。该装置具体可以应用于各种电子设备中。

如图5所示，本实施例的数据传输装置500包括：获取单元501和传输单元502。其中，获取单元501，被配置成从待传输的文件中，获取连续的零以外的数据，其中，连续的零中零的数量大于第一预设阈值；传输单元502，被配置成向目标电子设备传输所获取的数据。

在一些实施例中，数据传输装置500的获取单元501可以从待传输的文件中，获取连续的零以外的数据。连续的零中，零的数量较多。在本申请中，在连续的多个零中零的数量大于第一预设阈值的情况下，可以将这些零称为连续的零。在这里，所获取以及传输的数据可以采用二进制数来表示。

在一些实施例中，传输单元502可以在获取到上述数据后，向目标电子设备传输所获取的数据。这样，上述执行主体即是数据的发送端，目标电子设备则是数据的接收端。

在本实施例的一些可选的实现方式中，装置还包括：确定单元，被配置成在从待传输的文件中，获取连续的零以外的数据之前，确定待传输的文件中连续的零的位置，其中，连续的零的位置包括连续的零的起始位置和数量；以及传输单元，进一步被配置成按照如下方式执行向目标电子设备传输所获取的数据：向目标电子设备传输所获取的数据，以及连续的零的位置。

在本实施例的一些可选的实现方式中，获取单元，进一步被配置成按照如下方式执行从待传输的文件中，获取连续的零以外的数据：响应于在待传输的文件中，存在所包含零的数量大于或等于第二预设阈值的连续的零，且本设备的内核支持与连续的零相关的预设配置信息，基于连续的零的位置，从本地的存储有待传输的文件的预设存储空间，跳过该连续的零读取数据到缓冲区中，将所读取的数据作为所获取的数据，其中，第二预设阈值大于第一预设阈值。

在本实施例的一些可选的实现方式中，确定单元进一步被配置成按照如下方式执行确定待传输的文件中连续的零的位置：在预设存储空间中，扫描待传输的文件中该连续的零的位置的元数据，基于扫描结果确定连续的零的位置。

在本实施例的一些可选的实现方式中，装置还包括：读取单元，被配置成在从待传输的文件中，获取连续的零以外的数据之前，响应于在待传输的文件中，存在所包含零的数量大于或等于第二预设阈值的连续的零，且本设备的内核不支持与连续的零相关的预设配置信息，从本地的存储有待传输的文件的预设存储空间，读取包括该连续的零的数据到缓冲区中，其中，第二预设阈值大于第一预设阈值；以及获取单元，被配置成按照如下方式执行从待传输的文件中，获取连续的零以外的数据：在缓冲区中，查找所读取的数据中所包括的连续的零；提取查找到的连续的零以外的数据作为所获取的数据。

在本实施例的一些可选的实现方式中，传输单元，进一步被配置成按照如下方式执行向目标电子设备传输所获取的数据：确定该连续的零的位置，向目标电子设备传输所获取的数据，以及连续的零的位置。

在本实施例的一些可选的实现方式中，获取单元，进一步被配置成按照如下方式执行从待传输的文件中，获取连续的零以外的数据：响应于在待传输的文件中，存在所包含零的数量小于第二预设阈值且大于第一预设阈值的连续的零，采用顺序输入的方式，从本地存储有待传输的文件的预设存储空间，读取包括该连续的零的数据到缓冲区中，将所读取的数据作为所获取的数据。

在本实施例的一些可选的实现方式中，响应于本设备中的磁盘为第一磁盘，预设存储空间为磁盘的空间；响应于本设备中的磁盘为第二磁盘，预设存储空间包括缓存空间，其中，第一磁盘的运行速度大于参考运行速度，参考运行速度大于第二磁盘的运行速度。

在本实施例的一些可选的实现方式中，传输单元，进一步被配置成按照如下方式执行向目标电子设备传输所获取的数据：向目标电子设备发送连续的零的位置，以使目标电子设备在目标电子设备的磁盘中创建稀疏文件，并跳过连续的零的位置向稀疏文件中写入接收到的数据中连续的零以外的数据。

在本实施例的一些可选的实现方式中，装置还包括：校验值生成单元，被配置成在向目标电子设备传输所获取的数据之前，采用哈希校验的方式，生成校验值；压缩单元，被配置成采用多线程压缩的方式，对所获取的数据进行实时压缩，得到压缩文件；以及传输单元，进一步被配置成按照如下方式执行向目标电子设备传输所获取的数据：向目标电子设备发送压缩文件以及校验值。

在本实施例的一些可选的实现方式中，传输单元，进一步被配置成按照如下方式执行向目标电子设备传输所获取的数据：基于指定传输协议，采用令牌桶算法向目标电子设备传输所获取的数据。

如图6所示，电子设备600可以包括处理装置(例如中央处理器、图形处理器等)601，其可以根据存储在只读存储器(ROM)602中的程序或者从存储装置608加载到随机访问存储器(RAM)603中的程序而执行各种适当的动作和处理。在RAM 603中，还存储有电子设备600操作所需的各种程序和数据。处理装置601、ROM 602以及RAM603通过总线604彼此相连。输入/输出(I/O)接口605也连接至总线604。

通常，以下装置可以连接至I/O接口605：包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置606；包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置607；存储装置608；以及通信装置609。通信装置609可以允许电子设备600与其他设备进行无线或有线通信以交换数据。虽然图6示出了具有各种装置的电子设备600，但是应理解的是，并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。图6中示出的每个方框可以代表一个装置，也可以根据需要代表多个装置。

特别地，根据本公开的实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本公开的实施例包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信装置609从网络上被下载和安装，或者从存储装置608被安装，或者从ROM 602被安装。在该计算机程序被处理装置601执行时，执行本公开的实施例的方法中限定的上述功能。需要说明的是，本公开的实施例的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开的实施例中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开的实施例中，计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：电线、光缆、RF(射频)等等，或者上述的任意合适的组合。

附图中的流程图和框图，图示了按照本申请各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

描述于本申请实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现。所描述的单元也可以设置在处理器中，例如，可以描述为：一种处理器包括获取单元和传输单元。其中，这些单元的名称在某种情况下并不构成对该单元本身的限定，例如，传输单元还可以被描述为“向目标电子设备传输所获取的数据的单元”。

作为另一方面，本申请还提供了一种计算机可读介质，该计算机可读介质可以是上述实施例中描述的装置中所包含的；也可以是单独存在，而未装配入该装置中。上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被该装置执行时，使得该装置：从待传输的文件中，获取连续的零以外的数据，其中，连续的零中零的数量大于第一预设阈值；向目标电子设备传输所获取的数据。

以上描述仅为本申请的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解，本申请中所涉及的发明范围，并不限于上述技术特征的特定组合而成的技术方案，同时也应涵盖在不脱离上述发明构思的情况下，由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本申请中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (22)

1.一种数据传输方法，所述方法包括：

确定待传输的文件中连续的零的位置；

从所述待传输的文件中，获取连续的零以外的数据，其中，所述连续的零中零的数量大于第一预设阈值；

向目标电子设备传输所获取的数据；

其中，所述从所述待传输的文件中，获取连续的零以外的数据，包括：

响应于所述连续的零的数量大于或等于第二预设阈值，且本设备的内核支持用于指示所述连续的零的读取方式的预设配置信息，基于所述连续的零的位置，跳过该连续的零读取数据到缓冲区中，将所读取的数据作为所获取的数据，其中，所述第二预设阈值大于所述第一预设阈值。

2.根据权利要求1所述的方法，其中，所述连续的零的位置包括连续的零的起始位置和数量；以及

所述向目标电子设备传输所获取的数据，包括：

向目标电子设备传输所获取的数据，以及所述连续的零的位置。

3.根据权利要求2所述的方法，其中，所述确定所述待传输的文件中连续的零的位置，包括：

在预设存储空间中，扫描所述待传输的文件中该连续的零的位置的元数据，基于扫描结果确定所述连续的零的位置。

4.根据权利要求1所述的方法，其中，在所述从所述待传输的文件中，获取连续的零以外的数据之前，所述方法还包括：

响应于在所述待传输的文件中，存在所包含零的数量大于或等于第二预设阈值的所述连续的零，且本设备的内核不支持用于指示所述连续的零的读取方式的预设配置信息，从本地的存储有所述待传输的文件的预设存储空间，读取包括该连续的零的数据到缓冲区中，其中，所述第二预设阈值大于所述第一预设阈值；以及

所述从所述待传输的文件中，获取连续的零以外的数据，包括：

在所述缓冲区中，查找所读取的数据中所包括的连续的零；

提取查找到的连续的零以外的数据作为所获取的数据。

5.根据权利要求4所述的方法，其中，所述向目标电子设备传输所获取的数据，包括：

确定该连续的零的位置，向所述目标电子设备传输所获取的数据，以及所述连续的零的位置。

6.根据权利要求1所述的方法，其中，所述从所述待传输的文件中，获取连续的零以外的数据，包括：

响应于在所述待传输的文件中，存在所包含零的数量小于第二预设阈值且大于所述第一预设阈值的所述连续的零，采用顺序输入的方式，从本地存储有所述待传输的文件的预设存储空间，读取包括该连续的零的数据到缓冲区中，将所读取的数据作为所获取的数据。

7.根据权利要求3-6之一所述的方法，其中，

响应于本设备中的磁盘为第一磁盘，所述预设存储空间为所述磁盘的空间；

响应于本设备中的磁盘为第二磁盘，所述预设存储空间包括缓存空间，其中，第一磁盘的运行速度大于参考运行速度，所述参考运行速度大于所述第二磁盘的运行速度。

8.根据权利要求2-5之一所述的方法，其中，所述向目标电子设备传输所获取的数据，包括：

向所述目标电子设备发送所述连续的零的位置，以使所述目标电子设备在所述目标电子设备的磁盘中创建稀疏文件，并跳过所述连续的零的位置向所述稀疏文件中写入接收到的数据中所述连续的零以外的数据。

9.根据权利要求1所述的方法，其中，在向目标电子设备传输所获取的数据之前，所述方法还包括：

采用哈希校验的方式，生成校验值；

采用多线程压缩的方式，对所获取的数据进行实时压缩，得到压缩文件；以及

所述向目标电子设备传输所获取的数据，包括：

向所述目标电子设备发送所述压缩文件以及所述校验值。

10.根据权利要求1所述的方法，其中，所述向目标电子设备传输所获取的数据，包括：

基于指定传输协议，采用令牌桶算法向目标电子设备传输所获取的数据。

11.一种数据传输装置，所述装置包括：

确定单元，被配置成确定待传输的文件中连续的零的位置，

获取单元，被配置成从所述待传输的文件中，获取连续的零以外的数据，其中，所述连续的零中零的数量大于第一预设阈值；

传输单元，被配置成向目标电子设备传输所获取的数据；

其中，所述获取单元，进一步被配置成按照如下方式执行从所述待传输的文件中，获取连续的零以外的数据：

响应于所述连续的零的数量大于或等于第二预设阈值，且本设备的内核支持用于指示所述连续的零的读取方式的预设配置信息，基于所述连续的零的位置，跳过该连续的零读取数据到缓冲区中，将所读取的数据作为所获取的数据，其中，所述第二预设阈值大于所述第一预设阈值。

12.根据权利要求11所述的装置，其中，所述连续的零的位置包括连续的零的起始位置和数量；以及

所述传输单元，进一步被配置成按照如下方式执行所述向目标电子设备传输所获取的数据：

向目标电子设备传输所获取的数据，以及所述连续的零的位置。

13.根据权利要求12所述的装置，其中，所述确定单元进一步被配置成按照如下方式执行确定所述待传输的文件中连续的零的位置：

在预设存储空间中，扫描所述待传输的文件中该连续的零的位置的元数据，基于扫描结果确定所述连续的零的位置。

14.根据权利要求11所述的装置，其中，所述装置还包括：

读取单元，被配置成在所述从所述待传输的文件中，获取连续的零以外的数据之前，响应于在所述待传输的文件中，存在所包含零的数量大于或等于第二预设阈值的所述连续的零，且本设备的内核不支持用于指示所述连续的零的读取方式的预设配置信息，从本地的存储有所述待传输的文件的预设存储空间，读取包括该连续的零的数据到缓冲区中，其中，所述第二预设阈值大于所述第一预设阈值；以及

所述获取单元，被配置成按照如下方式执行从所述待传输的文件中，获取连续的零以外的数据：

在所述缓冲区中，查找所读取的数据中所包括的连续的零；

提取查找到的连续的零以外的数据作为所获取的数据。

15.根据权利要求14所述的装置，其中，所述传输单元，进一步被配置成按照如下方式执行向目标电子设备传输所获取的数据：

确定该连续的零的位置，向所述目标电子设备传输所获取的数据，以及所述连续的零的位置。

16.根据权利要求11所述的装置，其中，所述获取单元，进一步被配置成按照如下方式执行从所述待传输的文件中，获取连续的零以外的数据：

响应于在所述待传输的文件中，存在所包含零的数量小于第二预设阈值且大于所述第一预设阈值的所述连续的零，采用顺序输入的方式，从本地存储有所述待传输的文件的预设存储空间，读取包括该连续的零的数据到缓冲区中，将所读取的数据作为所获取的数据。

17.根据权利要求12-16之一所述的装置，其中，

响应于本设备中的磁盘为第一磁盘，预设存储空间为所述磁盘的空间；

响应于本设备中的磁盘为第二磁盘，所述预设存储空间包括缓存空间，其中，第一磁盘的运行速度大于参考运行速度，所述参考运行速度大于所述第二磁盘的运行速度。

18.根据权利要求12-15之一所述的装置，其中，所述传输单元，进一步被配置成按照如下方式执行向目标电子设备传输所获取的数据：

向所述目标电子设备发送所述连续的零的位置，以使所述目标电子设备在所述目标电子设备的磁盘中创建稀疏文件，并跳过所述连续的零的位置向所述稀疏文件中写入接收到的数据中所述连续的零以外的数据。

19.根据权利要求11所述的装置，其中，所述装置还包括：

校验值生成单元，被配置成在向目标电子设备传输所获取的数据之前，采用哈希校验的方式，生成校验值；

压缩单元，被配置成采用多线程压缩的方式，对所获取的数据进行实时压缩，得到压缩文件；以及

所述传输单元，进一步被配置成按照如下方式执行向目标电子设备传输所获取的数据：

向所述目标电子设备发送所述压缩文件以及所述校验值。

20.根据权利要求11所述的装置，其中，所述传输单元，进一步被配置成按照如下方式执行向目标电子设备传输所获取的数据：

基于指定传输协议，采用令牌桶算法向目标电子设备传输所获取的数据。

21.一种电子设备，包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-10中任一所述的方法。

22.一种计算机可读存储介质，其上存储有计算机程序，其中，该程序被处理器执行时实现如权利要求1-10中任一所述的方法。

Images