CN108810074A - 数据传输方法、装置及系统、终端 - Google Patents

数据传输方法、装置及系统、终端 Download PDF

Info

Publication number
CN108810074A
CN108810074A CN201810319642.6A CN201810319642A CN108810074A CN 108810074 A CN108810074 A CN 108810074A CN 201810319642 A CN201810319642 A CN 201810319642A CN 108810074 A CN108810074 A CN 108810074A
Authority
CN
China
Prior art keywords
data
data block
transmitted
data blocks
block
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810319642.6A
Other languages
English (en)
Inventor
翁正春
郭会
敖浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Agricultural Bank of China
Original Assignee
Agricultural Bank of China
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Agricultural Bank of China filed Critical Agricultural Bank of China
Priority to CN201810319642.6A priority Critical patent/CN108810074A/zh
Publication of CN108810074A publication Critical patent/CN108810074A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/06Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/104Peer-to-peer [P2P] networks
    • H04L67/1074Peer-to-peer [P2P] networks for supporting data block transmission mechanisms
    • H04L67/1078Resource delivery mechanisms
    • H04L67/108Resource delivery mechanisms characterised by resources being split in blocks or fragments

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本申请提供了一种数据传输方法、装置及系统、终端,其中方法包括:获取发送端发送待传输对象至接收端的限制条件;其中,所述限制条件包括发送所述待传输对象的时间窗口和单个文件的上限值;获取所述待传输对象拆分后生成的数据块集;其中,所述数据块集中数据块不大于所述限制条件中单个文件的上限值;在所述限制条件的时间窗口内发送所述数据块集中数据块。本申请提供了可以适用于限制条件下的数据传输过程。

Description

数据传输方法、装置及系统、终端
技术领域
本申请涉及通信技术领域,尤其涉及一种数据传输方法、装置及系统、 终端。
背景技术
在数据传输过程中,发送端可以发送数据至接收端。在一些情况下,发 送端发送数据至接收端的过程中会有一些限制条件。
例如,发送端与接收端之间,由于传输通道传输单个文件的大小限制(比 如,单个文件的上限值为2G),发送端与接收端之间传输时间窗口的限制(比 如,传输时间窗口为9:00pm-4:00am)等等。
现有技术中发送端发送数据至接收端的过程中,并无考虑到传输过程中 的限制条件。
发明内容
鉴于此,本申请提供一种数据传输方法及终端,可以适用于限制条件下 数据传输过程。
本申请提供了一种数据传输方法,包括:
获取发送端发送待传输对象至接收端的限制条件;其中,所述限制条件 包括发送所述待传输对象的时间窗口和单个文件的上限值;
获取所述待传输对象拆分后生成的数据块集;其中,所述数据块集中数 据块不大于所述限制条件中单个文件的上限值;
在所述限制条件的时间窗口内发送所述数据块集中数据块。
可选的,所述数据块集中数据块按由大至小顺序排列;
则所述在所述限制条件的时间窗口内发送所述数据块集中数据块包括:
在一时间窗口内依次发送所述数据块集中数据块;
计算该时间窗口的剩余时长可传输的剩余数据量;
若所述剩余数据量不小于下一数据块的数据量,则发送所述下一数据块, 进入计算该时间窗口的剩余时长可传输的剩余数据量的步骤;
若所述剩余数据量小于所述下一数据块的数据量,则更新所述数据块为 包含未发送数据块的数据块集,并在下一时间窗口内发送所述数据块集中数 据块,直到不包含未发送数据块。
可选的,所述计算该时间窗口的剩余时长可传输的剩余数据量,包括:
记录当前数据块的数据量以及由发送端至接收端的发送时长,并将当前 数据块的数据量与发送时长的商值,确定为当前传输速率;
在当前数据块发送结束后,确定该时间窗口的剩余时长;
将所述当前传输速率和所述剩余时长的乘积,确定为所述剩余数据量。
可选的,在更新所述数据块为包含未发送数据块的数据块集之前,还包 括:
发送所述数据块集中小于所述剩余数据量的一个或多个数据块。
可选的,所述发送所述数据块集中小于所述剩余数据量的一个或多个数 据块,包括:
在所述数据块集中小于所述下一数据块的数据块中,获得数据量小于所 述剩余数据量的一个数据块;
发送该数据量小于所述剩余数据量的数据块。
可选的,所述发送所述数据块集中小于所述剩余数据量的一个或多个数 据块,包括:
获得所述数据块集中小于所述下一数据块的多个数据块;
对所述多个数据块进行组合,并计算多个组合中数据块的数据量总和;
对多个组合的数据量总和进行排序,获得小于所述剩余数据量的组合;
发送小于所述剩余数据量的组合对应的数据块。
可选的,所述发送所述数据块集中小于所述剩余数据量的一个或多个数 据块,包括:
发送所述数据块集中仅次于所述剩余数据量的一个数据块或多个数据块 组合。
可选的,所述更新所述数据块为包含未发送数据块的数据块集,包括:
基于数据块的状态标识,获取未发送数据块;
对未发送数据块按由大至小顺序排列,获得更新后的数据块集。
可选的,在获取所述待传输对象拆分后生成的数据块集之前,还包括:
对所述待传输对象执行拆分操作获得多个数据块;其中,所述数据块不 大于所述上限值;
对多个数据块按由大至小顺序进行排序,获得数据块集。
可选的,对所述待传输对象执行拆分操作获得多个数据块,包括:
对所述待传输对象按预设数据量执行拆分操作,获得多个数据块;其中, 所述预设数据量不大于所述上限值。
本申请提供了一种数据传输装置,包括:
获取限制条件单元,用于获取发送端发送待传输对象至接收端的限制条 件;其中,所述限制条件包括发送所述待传输对象的时间窗口和单个文件的 上限值;
获取数据块集单元,用于获取所述待传输对象拆分后生成的数据块集; 其中,所述数据块集中数据块不大于所述限制条件中单个文件的上限值;
发送单元,用于在所述限制条件的时间窗口内发送所述数据块集中数据 块。
可选的,所述数据块集中数据块按由大至小顺序排列;则所述发送单元, 包括:
发送数据块单元,用于在一时间窗口内依次发送所述数据块集中数据块;
计算单元,用于计算该时间窗口的剩余时长可传输的剩余数据量;
所述发送数据块单元,还用于若所述剩余数据量不小于下一数据块的数 据量,则发送所述下一数据块,并进入计算模块;
更新单元,用于若所述剩余数据量小于所述下一数据块的数据量,则更 新所述数据块为包含未发送数据块的数据块集;
所述发送单元还用于在下一时间窗口内发送所述数据块集中数据块,直 到不包含未发送数据块。
可选的,还包括:
补充发送单元,用于在更新所述数据块为包含未发送数据块的数据块集 之前,发送所述数据块集中小于所述剩余数据量的一个或多个数据块。
本申请提供了一种终端,包括:
存储器,用于存储待传输对象和发送端发送待传输对象至接收端的限制 条件,其中,所述限制条件包括发送所述待传输对象的时间窗口和单个文件 的上限值;
处理器,用于获取所述待传输对象拆分后生成的数据块集;其中,所述 数据块集中数据块不大于所述限制条件中单个文件的上限值;在所述限制条 件的时间窗口内发送所述数据块集中数据块。
本申请提供了一种数据传输系统,包括:
发送端,用于获取发送端发送待传输对象至接收端的限制条件;其中, 所述限制条件包括发送所述待传输对象的时间窗口和单个文件的上限值;获 取所述待传输对象拆分后生成的数据块集;其中,所述数据块集中数据块不 大于所述限制条件中单个文件的上限值;在所述限制条件的时间窗口内发送 所述数据块集中数据块;
接收端,用于接收发送端发送的数据块。
通过以上技术手段,可以实现以下有益效果:
本申请提供了在限制条件下由发送端至接收端发送待传输对象的方案, 可以根据限制条件来调整待传输对象。
限制条件中的时间窗口可以基于实际情况进行调整,例如调整非忙碌时 段,则可以使得待传输对象可以最大化利用非高峰期进行文件传输,并避免 对核心系统的重要文件传输的影响。
限制条件中的单个文件的上限值,可以用来对待传输对象进行切分。单 个文件的上限值可以根据接收端的特点来调整,以便从根源上防止因待传输 对象的大小超过限制条件,而导致的待传输对象传输失败。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实 施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面 描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲, 在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1a-1b为本申请实施例公开的一种数据传输系统的结构示意图;
图2为本申请实施例公开的一种数据传输方法的流程图;
图3为本申请实施例公开的一种数据传输装置的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行 清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而 不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做 出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
参见图1a-1b,本申请提供了一种数据传输系统的实施例,数据传输系统 包括发送端100和接收端200;本申请中接收端100可以包含一个或多个,具 体结构可以根据实际情况而定,在此不做限定。
发送端100与不同接收端100之间的数据传输方法一致,所以以发送端 与一接收端100之间的数据传输方法为例,进行详细说明。本申请提供了一 种数据传输方法,适用于图1a-1b所示的数据传输系统。
参见图2,数据传输方法包括以下步骤:
步骤S201:发送端获取待传输对象,以及,获取发送端发送待传输对象 至接收端的限制条件。
本实施可以适用于多种应用场景,例如,银行系统中银行总行(发送端) 向多个省的分行(接收端)发送各省份的报表等文件(待传输对象);再如, 一个终端(发送端)向另一终端(接收端)发送视频等文件(待传输对象)。 当然本实施例还可以适用于其它应用场景,在此不再一一列举。
待传输对象可以包括一个或多个待传输文件,例如,以银行总行向省分 行发送报表为例,银行总行可以下发20个待传输文件至省分行。
为了适用于在限制条件下待传输对象,发送端会获取发送待传输对象时 的限制条件。由于不同的待传输对象其限制条件不同(例如,一待传输对象 的时间窗口为10:00-11:00,而另一个传输对象的时间窗口为17:00-23:00), 因此,发送端需要获取待传输对象的限制条件。
限制条件包括:发送待传输对象的时间窗口(例如,10:00-11:00, 17:00-23:00),以及,单个文件的上限值。
由于发送端与不同接收端之间数据传输通道不同,接收端接口也不同。 基于传输通道和接收端接口限制,接收端具有处理单个文件数据量的上限值。 例如,一个接收端可以处理单个文件的上限值为2G。
以一个实施例为例,待传输对象可以表示为flist=(f1,f2,...fi,...fn),其中,flist表示待传输对象,fi表示待传输对象中的一个待传输文件,其中,i为自 然数。
单个文件的上限值可以表示为df;时间窗口可以表示为(T1,T2)。
步骤S202:获取所述待传输对象拆分后生成的数据块集;其中,所述数 据块集中数据块不大于所述限制条件中单个文件的上限值。
本实施例中可以由发送端自身对待传输对象进行拆分操作,还可以由其 它终端对待传输对象进行拆分操作后再发送至发送端,两种方式均可。
对于待传输对象而言,通常包括多个待传输文件,通常情况下,待传输 文件的数据量较大。为了满足限制条件中单个文件上限值的要求,对待传输 对象进行拆分,使得拆分后的数据块均不大于限制条件中的上限值。
本实施例提供了拆分操作的两种实现方式:
第一种实现方式:按预设数据量对待传输对象进行拆分操作。
本实施例中为了简化数据传输,可以预先设定一个预设数据量,且,所 述预设数据量不大于所述上限值;基于预设数据量对待传输对象中的待传输 文件进行拆分,以使得拆分后大部分数据块的数据量一致,从而方便数据传 输。
为了最大程度的提高发送端与接收端的通道利用率,预设数据量可以为 限制条件中的上限值。即,以限制条件中的上限值为预设数据量,对待传输 对象中的待传输文件进行拆分。
下面以预设数据量为上限值对拆分操作进行举例说明:
在待传输对象为flist=(f1,f2,...fi,...fn),单个文件的上限值为df的情况下,分别对f1,f2,...fi,...fn进行拆分操作。以fi为例,表示fi/df下取整后得 到的整数,则fi拆分后结果为{df,...,df,fi-pi*df}。df的数量为pi
那么,对f1拆分后得到拆分结果为:{df,...,df,f1-p1*df};df的数量为p1
在对fn拆分后得到拆分结果为:{df,...,df,fn-pn*df};df的数量为pn
对各个数据块按由大至小的顺序排列,由于本实施例中按预设数据量进 行拆分,因此大部分数据块的数据量一致,所以可以仅对f1-p1*df,…… fi-pi*df……fn-pn*df,这n个数据块进行排序即可。
排序后得到的数据块集可以采用表示flist=(df,...,df,f′1[min],f′2[min],...,f′n[min])。其 中,df>f′1[min]>f′2[min]>...>f′n[min];其中,f′i[min]表示某个小于预设数据量的数据块 (即,表示f1-p1*df,……fi-pi*df……fn-pn*df中的一个数据块)。df的数 量为p1+p2+…+pi…+pn
第二种实现方式:随机对待传输对象进行拆分操作。
可以对待传输对象中的待传输文件进行随机进行拆分,以使得拆分后的 数据块均不大于限制条件的上限值。
在待传输对象为flist=(f1,f2,...fi,...fn),单个文件的上限值为df的情况下,分别对f1,f2,...fi,...fn进行拆分操作。在对f1拆分后获得{f11,f12,f13,...},在对fi拆 分为{fi1,fi2,fi3,...},在对fn拆分后获得{fn1,fn2,fn3,...};拆分后各个数据块的数 据量均小于df。每个待传输文件拆分后的数据块的数量可以根据实际情况而 定。
待传输对象拆分后得到各个数据块,对数据块按由大至小顺序排列,得 到数据块集flist=(s1,s2,s3,...si...),其中,s1>s2>...>si...;si为 {f11,f12,f13,...fi1,fi2,fi3,...fn1,fn2,fn3,...}中的一个。
步骤S203:在所述限制条件的时间窗口内发送所述数据块集中数据块。
待传输对象由发送端至接收端传输的过程中,可以限制时间窗口。以银 行系统为例,银行总行通常会在夜里传输数据,以免影响白天办公业务。
时间窗口可以表示为(T1,T2),通常情况下一天具有一个时间窗口。以时间 窗口为17:00-23:00为例,一天仅有一个为17:00-23:00的时间窗口。
通常情况下数据块集的数据总量较大,而传输窗口固定的,所以一个时 间窗口通常不足以传输完成数据块集,所以数据块集可以传输多天。下面对 在所述限制条件的时间窗口内发送所述数据块集中数据块进行详细说明。
步骤S2031:在一时间窗口内依次发送所述数据块集中数据块。
发送端查看时间窗口和当前时间,在当前时间达到时间窗口内时,可以 传输数据块集中的数据块至接收端。
数据块集中的数据块是按由大至小顺序排列的,在时间窗口内,发送端 会按照数据块集中的数据块的顺序,依次发送数据块。
步骤S2032:计算该时间窗口的剩余时长可传输的剩余数据量。
在传输过程中发送端判断是否达到触发条件后,在达到触发条件后表明 当天的时间窗口便将要结束。触发条件可以为当前时间与时间窗口的结束时 间的差值小于预设值,或者,发送端已传输预设数量的数据块至接收端,或 者,发送端与接收端之间的传输时长已经达到预设时长等等。本实施例中不 限定触发条件的具体实现方式。
发送端在判定达到触发条件后便确定当天的时间窗口即将结束。为了在 传输数据块过程中不超过时间窗口又能传输尽可能多数据块,为此本申请会 计算该时间窗口可传输的剩余数据量。
由于发送端与接收端之间传输通道的传输效率不断变化,为了计算得到 准确剩余数据量,发送端在达到触发条件的情况下会获取当前传输速率和时 间窗口的剩余时长,从而计算当前传输速率和剩余时长的乘积,从而获得该 时间窗口的剩余时长可传输的剩余数据量。
其中,发送端可以检测发送端与接收端之间的当前传输速率,例如,可 以在发送当前数据块的过程中,记录当前数据块的数据量以及由发送端至接 收端的发送时长,并将当前数据块的数据量与发送时长的商值,确定为当前 传输速率。
当前,发送端还可以采用其它方式获取发送端与接收端之间的数据当前 传输速率,在此不做限定。
步骤S2033:判断剩余数据量是否小于下一数据块的数据量,若是,则进 入步骤S2035;如否则进入步骤S2034。
发送端可以判断该时间窗口剩余时长可传输的剩余数据量是否大于下一 数据块(数据块集中已发送数据块的下一数据块,即未发送数据块),若剩 余数据量不小于下一数据块的数据量,则说明可以在该时间窗口的剩余时长 内传输下一数据块。
若剩余数据量小于下一数据块的数据量,则说明无法在该时间窗口的剩 余时长内传输下一数据块。
步骤S2034:若所述剩余数据量不小于下一数据块的数据量,则发送所述 下一数据块,进入步骤S2032。
在传输一个数据块后,重新计算该时间窗口的剩余时长可传输的剩余数 据量,并重新将剩余数据量与下一数据块的数据量进行比较。
步骤S2035:若所述剩余数据量小于所述下一数据块的数据量,则发送所 述数据块集中小于所述剩余数据量的一个或多个数据块。
若剩余数据量小于下一数据块的数据量,则该时间窗口的剩余时长内不 足以传输下一数据块。为了不浪费该时间窗口的剩余时长,可以发送数据块 集中小于所述剩余数据量的一个或多个数据块。
第一种实现方式:发送小于剩余数据量的一个数据块。
S1:将数据块集中下一数据块后的数据块依次与剩余数据量进行比较。
由于数据块集中数据块按照由大至小的顺序排列,所以在数据块集中下 一数据块后面具有小于下一数据块的数据块。因此,可以将下一数据块后的 数据块依次与剩余数据量进行比较。
S2:获得数据量小于所述剩余数据量的一个数据块。
可选情况下,可以选择数据量仅次于剩余数据量的一个数据块,这样可 以尽可能的传输较多数据量至接收端。
S3:发送该数据块至接收端。
以数据块集为flist=(df,...,df,f′1[min],f′2[min],...,f′[min])为例,在下一数据块的数据 量为df情况下,则从数据块集找到小于df的f′1[min],f′2[min],...,f′n[min],在其中选择一 个数据块发送至接收端;或者为了尽可能传输数据至接收端,可以选择仅次 于df的数据块f′1[min]发送至接收端。
第二种实现方式:发送小于剩余数据量的一个或多个数据块。
S1:获得所述数据块集中小于所述下一数据块的多个数据块。
以数据块集为flist=(df,...,df,f′1[min],f′2[min],...,f′n[min])为例,在下一数据块的数据 量为df情况下,则从数据块集找到小于df的f′1[min],f′2[min],...,f′n[min]
S2:对所述多个数据块进行组合,并计算多个组合中数据块的数据量总 和。
在n个数据的情况下,n个数据的组合方式共有种组合。将 每种组合中数据块的数据量求和,设求和结果为fleav′i;其中, i≥1且
S3:获得小于所述剩余数据量的组合。
比较剩余数据量与各个组合求和结果,从而找到求和结果小于剩余数据 量的组合。
当然,为了最大程度的传输数据量,可以找到求和结果仅次于剩余数据 量的组合。可以求和结果对小于剩余数据量的组合进行排序,从而获得求和 结果中数据量最大的组合。
当然也可以针对求和结果小于剩余数据量计算比例hi
其中,fleav表示剩余数据量,fleav′i表示求和结果。
在多个比例hi中找到最小hi,则可以找到仅次于剩余数据量的组合。
S4:发送小于所述剩余数据量的组合对应的数据块。
接着返回图2,进入步骤S2036:更新所述数据块为包含未发送数据块的 数据块集,并在下一时间窗口内发送所述数据块集中数据块,直到不包含未 发送数据块。
可以理解的是,数据块集中一个数据块发送后,可以更改该数据块的状 态标识为已发送,当然,也可以直接删除该数据块,具体情况可以根据实际 情况而定,在此不做限定。
在当天的时间窗口结束后,若数据块集具有未发送数据块,则表示数据 块集未发送完成,此后可以更新数据块集,使得数据块集为包含未发送数据 块,且,数据块按照由大至小顺序排列。
在第二天的时间窗口继续传输数据块集,可以参照在第一天的时间窗口 发送数据块集,在此不再赘述。
若第二天的时间窗口结束后,数据块集仍有未发送数据块,则再次更新 数据块集,并在第三天的时间窗口发送数据块集,以此类推,直到不具有未 发送数据块。
通过上述描述可以发现本实施例具有以下有益效果:
本申请提供了在限制条件下由发送端至接收端发送待传输对象的方案, 可以根据限制条件来调整待传输对象。
限制条件中的时间窗口可以基于实际情况进行调整,例如调整非忙碌时 段,则可以使得待传输对象可以最大化利用非高峰期进行文件传输,并避免 对核心系统的重要文件传输的影响。
限制条件中的单个文件的上限值,可以用来对待传输对象进行切分。单 个文件的上限值可以根据接收端的特点来调整,以便从根源上防止因待传输 对象的大小超过限制条件,而导致的待传输对象传输失败。
此外,本申请在传输数据块集中的数据块情况下,可以根据当前传输速 率和传输时长来调整待发送的数据块,所以可以能最大限度的发送数据。
参见图3,本申请提供了一种数据传输装置,包括:
获取限制条件单元31,用于获取发送端发送待传输对象至接收端的限制 条件;其中,所述限制条件包括发送所述待传输对象的时间窗口和单个文件 的上限值;
获取数据块集单元32,用于获取所述待传输对象拆分后生成的数据块集; 其中,所述数据块集中数据块不大于所述限制条件中单个文件的上限值;
发送单元33,用于在所述限制条件的时间窗口内发送所述数据块集中数 据块。
数据传输装置还包括拆分模块34,用于对所述待传输对象执行拆分操作 获得多个数据块;其中,所述数据块不大于所述上限值;对多个数据块按由 大至小顺序进行排序,获得数据块集。
其中,对所述待传输对象执行拆分操作获得多个数据块,可以包括对所 述待传输对象按预设数据量执行拆分操作,获得多个数据块;其中,所述预 设数据量不大于所述上限值。
所述数据块集中数据块按由大至小顺序排列;则所述发送单元33,包括:
发送数据块单元331,用于在一时间窗口内依次发送所述数据块集中数据 块;
计算单元332,用于计算该时间窗口的剩余时长可传输的剩余数据量;
所述发送数据块单元331,还用于若所述剩余数据量不小于下一数据块的 数据量,则发送所述下一数据块,并进入计算模块;
补充发送单元333,用于在更新所述数据块为包含未发送数据块的数据块 集之前,发送所述数据块集中小于所述剩余数据量的一个或多个数据块。可 选情况下,补充发送单元可以发送所述数据块集中仅次于所述剩余数据量的 一个数据块或多个数据块组合。
更新单元334,用于若所述剩余数据量小于所述下一数据块的数据量,则 更新所述数据块为包含未发送数据块的数据块集;
所述发送单元33还用于在下一时间窗口内发送所述数据块集中数据块, 直到不包含未发送数据块。
其中,关于补充发送单元333有两种实现方式:
第一种实现方式包括:在所述数据块集中小于所述下一数据块的数据块 中,获得数据量小于所述剩余数据量的一个数据块;发送该数据量小于所述 剩余数据量的数据块。
第二种实现方式:获得所述数据块集中小于所述下一数据块的多个数据 块;对所述多个数据块进行组合,并计算多个组合中数据块的数据量总和; 对多个组合的数据量总和进行排序,获得小于所述剩余数据量的组合;发送 小于所述剩余数据量的组合对应的数据块。
本实施例方法所述的功能如果以软件功能单元的形式实现并作为独立的 产品销售或使用时,可以存储在一个计算设备可读取存储介质中。基于这样 的理解,本申请实施例对现有技术做出贡献的部分或者该技术方案的部分可 以以软件产品的形式体现出来,该软件产品存储在一个存储介质中,包括若 干指令用以使得一台计算设备(可以是个人计算机,服务器,移动计算设备 或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前 述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可 以存储程序代码的介质。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都 是与其它实施例的不同之处,各个实施例之间相同或相似部分互相参见即可。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用 本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易 见的,本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下, 在其它实施例中实现。因此,本申请将不会被限制于本文所示的这些实施例, 而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (15)

1.一种数据传输方法,其特征在于,包括:
获取发送端发送待传输对象至接收端的限制条件;其中,所述限制条件包括发送所述待传输对象的时间窗口和单个文件的上限值;
获取所述待传输对象拆分后生成的数据块集;其中,所述数据块集中数据块不大于所述限制条件中单个文件的上限值;
在所述限制条件的时间窗口内发送所述数据块集中数据块。
2.如权利要求1所述的方法,其特征在于,所述数据块集中数据块按由大至小顺序排列;
则所述在所述限制条件的时间窗口内发送所述数据块集中数据块包括:
在一时间窗口内依次发送所述数据块集中数据块;
计算该时间窗口的剩余时长可传输的剩余数据量;
若所述剩余数据量不小于下一数据块的数据量,则发送所述下一数据块,进入计算该时间窗口的剩余时长可传输的剩余数据量的步骤;
若所述剩余数据量小于所述下一数据块的数据量,则更新所述数据块为包含未发送数据块的数据块集,并在下一时间窗口内发送所述数据块集中数据块,直到不包含未发送数据块。
3.如权利要求2所述的方法,其特征在于,所述计算该时间窗口的剩余时长可传输的剩余数据量,包括:
记录当前数据块的数据量以及由发送端至接收端的发送时长,并将当前数据块的数据量与发送时长的商值,确定为当前传输速率;
在当前数据块发送结束后,确定该时间窗口的剩余时长;
将所述当前传输速率和所述剩余时长的乘积,确定为所述剩余数据量。
4.如权利要求2所述的方法,其特征在于,在更新所述数据块为包含未发送数据块的数据块集之前,还包括:
发送所述数据块集中小于所述剩余数据量的一个或多个数据块。
5.如权利要求4所述的方法,其特征在于,所述发送所述数据块集中小于所述剩余数据量的一个或多个数据块,包括:
在所述数据块集中小于所述下一数据块的数据块中,获得数据量小于所述剩余数据量的一个数据块;
发送该数据量小于所述剩余数据量的数据块。
6.如权利要求4所述的方法,其特征在于,所述发送所述数据块集中小于所述剩余数据量的一个或多个数据块,包括:
获得所述数据块集中小于所述下一数据块的多个数据块;
对所述多个数据块进行组合,并计算多个组合中数据块的数据量总和;
对多个组合的数据量总和进行排序,获得小于所述剩余数据量的组合;
发送小于所述剩余数据量的组合对应的数据块。
7.如权利要求4所述的方法,其特征在于,所述发送所述数据块集中小于所述剩余数据量的一个或多个数据块,包括:
发送所述数据块集中仅次于所述剩余数据量的一个数据块或多个数据块组合。
8.如权利要求2所述的方法,其特征在于,所述更新所述数据块为包含未发送数据块的数据块集,包括:
基于数据块的状态标识,获取未发送数据块;
对未发送数据块按由大至小顺序排列,获得更新后的数据块集。
9.如权利要求1所述的方法,其特征在于,在获取所述待传输对象拆分后生成的数据块集之前,还包括:
对所述待传输对象执行拆分操作获得多个数据块;其中,所述数据块不大于所述上限值;
对多个数据块按由大至小顺序进行排序,获得数据块集。
10.如权利要求9所述的方法,其特征在于,对所述待传输对象执行拆分操作获得多个数据块,包括:
对所述待传输对象按预设数据量执行拆分操作,获得多个数据块;其中,所述预设数据量不大于所述上限值。
11.一种数据传输装置,其特征在于,包括:
获取限制条件单元,用于获取发送端发送待传输对象至接收端的限制条件;其中,所述限制条件包括发送所述待传输对象的时间窗口和单个文件的上限值;
获取数据块集单元,用于获取所述待传输对象拆分后生成的数据块集;其中,所述数据块集中数据块不大于所述限制条件中单个文件的上限值;
发送单元,用于在所述限制条件的时间窗口内发送所述数据块集中数据块。
12.如权利要求11所述的装置,其特征在于,所述数据块集中数据块按由大至小顺序排列;则所述发送单元,包括:
发送数据块单元,用于在一时间窗口内依次发送所述数据块集中数据块;
计算单元,用于计算该时间窗口的剩余时长可传输的剩余数据量;
所述发送数据块单元,还用于若所述剩余数据量不小于下一数据块的数据量,则发送所述下一数据块,并进入计算模块;
更新单元,用于若所述剩余数据量小于所述下一数据块的数据量,则更新所述数据块为包含未发送数据块的数据块集;
所述发送单元还用于在下一时间窗口内发送所述数据块集中数据块,直到不包含未发送数据块。
13.如权利要求12所述的装置,其特征在于,还包括:
补充发送单元,用于在更新所述数据块为包含未发送数据块的数据块集之前,发送所述数据块集中小于所述剩余数据量的一个或多个数据块。
14.一种终端,其特征在于,包括:
存储器,用于存储待传输对象和发送端发送待传输对象至接收端的限制条件,其中,所述限制条件包括发送所述待传输对象的时间窗口和单个文件的上限值;
处理器,用于获取所述待传输对象拆分后生成的数据块集;其中,所述数据块集中数据块不大于所述限制条件中单个文件的上限值;在所述限制条件的时间窗口内发送所述数据块集中数据块。
15.一种数据传输系统,其特征在于,包括:
发送端,用于获取发送端发送待传输对象至接收端的限制条件;其中,所述限制条件包括发送所述待传输对象的时间窗口和单个文件的上限值;获取所述待传输对象拆分后生成的数据块集;其中,所述数据块集中数据块不大于所述限制条件中单个文件的上限值;在所述限制条件的时间窗口内发送所述数据块集中数据块;
接收端,用于接收发送端发送的数据块。
CN201810319642.6A 2018-04-11 2018-04-11 数据传输方法、装置及系统、终端 Pending CN108810074A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810319642.6A CN108810074A (zh) 2018-04-11 2018-04-11 数据传输方法、装置及系统、终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810319642.6A CN108810074A (zh) 2018-04-11 2018-04-11 数据传输方法、装置及系统、终端

Publications (1)

Publication Number Publication Date
CN108810074A true CN108810074A (zh) 2018-11-13

Family

ID=64094885

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810319642.6A Pending CN108810074A (zh) 2018-04-11 2018-04-11 数据传输方法、装置及系统、终端

Country Status (1)

Country Link
CN (1) CN108810074A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109639586A (zh) * 2018-12-05 2019-04-16 量子云未来(北京)信息科技有限公司 一种数据传输方法、装置及系统
CN115395988A (zh) * 2021-05-25 2022-11-25 瑞昱半导体股份有限公司 蓝牙通信装置与数据传输方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080151776A1 (en) * 2006-12-25 2008-06-26 Yoshinobu Kure Data Communication System, Data Transmitting Apparatus, Data Transmitting Method, and Method for Determining Packet Size and Redundancy
CN102056096A (zh) * 2009-10-28 2011-05-11 中国移动通信集团公司 文件的无线传输方法、系统和设备
CN104184602A (zh) * 2013-05-23 2014-12-03 中兴通讯股份有限公司 增量数据同步方法、网元管理系统及网络管理系统
CN106603605A (zh) * 2015-10-16 2017-04-26 阿里巴巴集团控股有限公司 数据传输方法和系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080151776A1 (en) * 2006-12-25 2008-06-26 Yoshinobu Kure Data Communication System, Data Transmitting Apparatus, Data Transmitting Method, and Method for Determining Packet Size and Redundancy
CN102056096A (zh) * 2009-10-28 2011-05-11 中国移动通信集团公司 文件的无线传输方法、系统和设备
CN104184602A (zh) * 2013-05-23 2014-12-03 中兴通讯股份有限公司 增量数据同步方法、网元管理系统及网络管理系统
CN106603605A (zh) * 2015-10-16 2017-04-26 阿里巴巴集团控股有限公司 数据传输方法和系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109639586A (zh) * 2018-12-05 2019-04-16 量子云未来(北京)信息科技有限公司 一种数据传输方法、装置及系统
CN115395988A (zh) * 2021-05-25 2022-11-25 瑞昱半导体股份有限公司 蓝牙通信装置与数据传输方法

Similar Documents

Publication Publication Date Title
CN112418580A (zh) 一种风险控制方法、计算机设备及可读存储介
CN110417677B (zh) 一种基于Ceph分布式存储Osd端数据Recovery的QoS控制方法
CN108512650A (zh) 面向区块链的动态哈希计算方法、装置、节点及存储介质
US20180300750A1 (en) Method and apparatus for delivering media files
CN109727009B (zh) 红包处理方法、设备和存储介质
CN106411774A (zh) 一种控制交易数据量的方法和装置
CN111054067A (zh) 游戏存档文件存储方法、电子设备和存储介质
CN108810074A (zh) 数据传输方法、装置及系统、终端
CN106815254A (zh) 一种数据处理方法和装置
CN105721526B (zh) 一种终端、服务器文件同步的方法及装置
CN108874884A (zh) 数据同步更新方法、装置和系统、服务器设备
CN104753765A (zh) 自动回复信息的方法以及装置
CN109228954B (zh) 一种充电桩能源管理方法、系统及充电桩群系统
CN109086307A (zh) 文件处理的方法及装置
CN103049540A (zh) 一种大文件烧录的方法及相关装置
CN103888452B (zh) 用于报文压缩的保序方法和装置
CN113011886B (zh) 帐号类型的确定方法和装置及电子设备
CN104967660A (zh) 一种面向多云架构的网络性能提升方法
CN105721392B (zh) 一种推荐应用的方法、装置及系统
CN106101184A (zh) 一种文件下载方法和播放设备
CN109299043A (zh) 分布式集群系统大文件删除方法、装置、设备及存储介质
CN106453663B (zh) 改进的基于云服务的存储扩容方法及装置
CN110830603B (zh) Ipv6地址的汇总处理方法及装置
CN109587075B (zh) 一种业务处理方法、装置、设备及存储介质
CN106293996B (zh) 数据同步方法、主设备、备份设备和系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20181113