CN102118361B - 一种基于网络协议的数据传输控制方法和装置 - Google Patents

一种基于网络协议的数据传输控制方法和装置 Download PDF

Info

Publication number
CN102118361B
CN102118361B CN200910244587.XA CN200910244587A CN102118361B CN 102118361 B CN102118361 B CN 102118361B CN 200910244587 A CN200910244587 A CN 200910244587A CN 102118361 B CN102118361 B CN 102118361B
Authority
CN
China
Prior art keywords
packet
protocol
agreement
data
sent
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN200910244587.XA
Other languages
English (en)
Other versions
CN102118361A (zh
Inventor
赖永聪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Kingsoft Software Co Ltd
Chengdu Kingsoft Digital Entertainment Co Ltd
Beijing Jinshan Digital Entertainment Technology Co Ltd
Original Assignee
Beijing Kingsoft Software Co Ltd
Chengdu Kingsoft Digital Entertainment Co Ltd
Beijing Jinshan Digital Entertainment Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Kingsoft Software Co Ltd, Chengdu Kingsoft Digital Entertainment Co Ltd, Beijing Jinshan Digital Entertainment Technology Co Ltd filed Critical Beijing Kingsoft Software Co Ltd
Priority to CN200910244587.XA priority Critical patent/CN102118361B/zh
Publication of CN102118361A publication Critical patent/CN102118361A/zh
Application granted granted Critical
Publication of CN102118361B publication Critical patent/CN102118361B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明实施例公开了一种网络协议的数据传输控制方法和装置,本发明实施例所提供的方案对网络中传输的第一协议类型的数据包的发送次数进行统计,当该第一协议类型的数据包的发送次数达到预设的阈值时,就对采用第一协议类型的数据包的发送进行控制,具体为将待发送的数据包与之前发送过的第一协议类型的数据包进行比较,如果待发送的数据包的内容与之前发送过的第一协议类型的数据包的内容相同,则取消此次待发送数据包的发送。通过本发明实施例所提供的方法有效地减少了同一协议类型的相同数据的不必要的发送,节约了网络资源,从而有效地提高了对网络资源的利用率。

Description

一种基于网络协议的数据传输控制方法和装置
技术领域
本申请涉及网络技术领域,尤其涉及一种网络协议的数据传输控制方法和装置。
背景技术
协议是通信双方为了实现通信而设计的约定或通话规则。计算机通信网是由许多具有信息交换和处理能力的节点互连而成的。要使整个网络有条不紊地工作,就要求每个节点必须遵守一些事先约定好的有关数据格式及时序等的规则。这些为实现网络数据交换而建立的规则、约定或标准就称为网络协议。
现有的网络协议种类繁多,网络中的数据包通过各种协议进行传输,最终实现了网络中各种实体间的通信。网络资源是有限的,比如说一般都有固定的网络带宽,如果以某种协议传输的数据数量过大或者次数过多,就会占用大量的网络资源,极大地影响了整个网络资源的利用率。
发明内容
有鉴于此,本申请实施例的目的是提供一种基于网络协议的数据传输控制方法和装置,通过调整基于协议的数据的传输方式,提高对网络资源的利用率。
为实现上述目的,本发明实施例提供了如下技术方案:
一种基于网络协议的数据传输控制方法,包括:
在预设统计周期内截获逻辑层和网络传输层之间的数据包,并确定所述数据包采用的第一协议类型;
根据所述第一协议类型统计与所述第一协议类型对应的第一协议应用次数;
在所述预设统计周期结束时,若所述第一协议应用次数超过预设的第一协议应用次数阈值,则记录第一协议当前发送的数据包的内容;
当再次发送第一协议的数据包时,将待发送的数据包与所记录的第一协议数据包进行比较;
当数据内容有更新时执行此次数据包发送并用新的数据包替换原本所记录的数据包,否则终止此次数据发送。
该方法还包括:
在预设统计周期内,从所述数据包中获取当前数据包的数据量;
将当前数据包的数据量累加至与所述第一协议类型对应的第一协议传输数据量中;
在所述预设统计周期结束时,若所述第一协议传输数据量超过预设的第一协议传输数据量阈值,则确定第一协议的可删除位;
根据所述可删除位形成所述待发送数据包的缩减数据包和补充包;
用所述缩减数据包替代所述待发送数据包进行发送。
确定第一协议的可删除位包括:
预先将第一协议的多个数据包按位进行或运算,确定第一协议的数据包中未被使用的位;
将所述第一协议的数据包中未被使用过的位确定为所述第一协议的数据包的可删除位。
确定第一协议的可删除位包括:
预先统计第一协议数据包每个位的被使用率,所述使用率为统计周期内每个位的被使用次数与第一协议数据包被发送次数的比值;
将所述第一协议数据包被使用率低于预设被使用率阈值的位确定为所述第一协议的可删除位。
根据所述可删除位形成所述待发送数据包的缩减数据包和补充包包括:
通过将所述第一协议的数据包中的可删除位从所述待发送数据包中删除获得所述待发送数据包的缩减数据包;
记录该缩减数据包中的可删除位信息的数据包构成该缩减数据包的补充包。
根据所述可删除位形成所述待发送数据包的缩减数据包和补充包包括:
将所述第一协议的数据包中的可删除位与待发送数据包中的对应位进行比较,删除未被使用的可删除位获得所述待发送数据包的缩减数据包;
记录该缩减数据包中的可删除位信息构成该缩减数据包的补充包,在所述补充包中标记出被使用的可删除位。
一种基于网络协议的数据传输控制装置,包括:
第一获取单元,用于在预设统计周期内截获逻辑层和网络传输层之间的数据包,并确定所述数据包采用的第一协议类型;
第一统计单元,用于根据所述第一协议类型统计与所述第一协议类型对应的第一协议应用次数;
第一记录单元,用于在所述预设统计周期结束时,若所述第一协议应用次数超过预设的第一协议应用次数阈值,则记录第一协议当前发送的数据包的内容;
第一比较单元,用于当再次发送第一协议的数据包时,将待发送的数据包与所记录的第一协议数据包进行比较;
第一控制单元,用于在数据内容有更新时执行此次数据包发送并用新的数据包替换原本所记录的数据包,否则终止此次数据发送。
所述第一获取单元,还用于在预设统计周期内,从所述数据包中获取当前数据包的数据量;
所述第一统计单元,还用于将当前数据包的数据量累加至与所述第一协议类型对应的第一协议传输数据量中;
该装置还包括:
第二确定单元,用于在所述预设统计周期结束时,若所述第一协议传输数据量超过预设的第一协议传输数据量阈值,则确定第一协议的可删除位;
第二控制单元,用于根据所述可删除位形成所述待发送数据包的缩减数据包和补充包;
第二发送单元,用于用所述缩减数据包替代所述待发送数据包进行发送。
所述第二确定单元包括:
第一统计子单元,用于预先将第一协议的多个数据包按位进行或运算,确定第一协议的数据包中未被使用的位;
第一确定子单元,用于将所述第一协议的数据包中未被使用过的位确定为所述第一协议的数据包的可删除位。
所述第二确定单元包括:
第二统计子单元,用于预先统计第一协议数据包每个位的被使用率,所述使用率为统计周期内每个位的被使用次数与第一协议数据包被发送次数的比值;
第二确定子单元,用于将所述第一协议数据包被使用率低于预设被使用率阈值的位确定为所述第一协议的可删除位。
所述第二控制单元包括:
第一构成子单元,用于通过将所述第一协议的数据包中的可删除位从所述待发送数据包中删除获得所述待发送数据包的缩减数据包;
第二构成子单元,用于记录该缩减数据包中的可删除位信息的数据包构成该缩减数据包的补充包。
所述第二控制单元包括:
第三构成子单元,用于将所述第一协议的数据包中的可删除位与待发送数据包中的对应位进行比较,删除未被使用的可删除位获得缩减数据包;
第四构成子单元,用于记录该缩减数据包中的可删除位信息构成该缩减数据包的补充包,在所述补充包中标记出被使用的可删除位。
可见,在本发明实施例中,对网络中传输的第一协议类型的数据包的发送次数进行统计,当该第一协议类型的数据包的发送次数达到预设的阈值时,就对采用第一协议类型的数据包的发送进行控制,具体为将待发送的数据包与之前发送过的第一协议类型的数据包进行比较,如果待发送的数据包的内容与之前发送过的第一协议类型的数据包的内容相同,则取消此次待发送数据包的发送。通过本发明实施例所提供的方法有效地减少了同一协议类型的相同数据的不必要的发送,节约了网络资源,从而有效地提高了对网络资源的利用率。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请中记载的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本申请一实施例所提供的方法流程图;
图2为本申请另一实施例所提供的方法所应用的场景的示意图;
图3为本申请一实施例所提供的方法的流程图;
图4为本申请一实施例所提供的装置的结构示意图;
图5为本发明另一实施例所提供的装置的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本申请中的技术方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都应当属于本申请保护的范围。
参见图1,本发明实施例提高的一种基于网络协议的数据传输控制方法,包括:
S101、在预设统计周期内截获逻辑层和网络传输层之间的数据包,并确定所述数据包采用的第一协议类型;
为了描述上的方便和清楚,本发明实施例中用第一协议类型来指代该数据包所归属的协议类型。本发明实施例所提供的方法以具体的数据传输协议为基础,但是不限定特定的数据传输协议类型。
预设统计周期可以根据实际情况确定,例如半个小时或者一个小时等,本发明对此不做限定。
本发明实施例所提供的方法在游戏的逻辑层和网络传输层层中间嵌入数据包过滤层,如图2所示。在数据包过滤层实现原来逻辑层和网络传输层之间的所有通信接口,把逻辑层和网络传输层之间通讯的数据包全部截获,从而获得分析用的数据。
S102、根据所述第一协议类型统计与所述第一协议类型对应的第一协议应用次数;
在截获的数据包基础上进行简单的统计分析,由于数据包截获层所处的位置比较特殊,数据量十分庞大,一方面,必须使用简单高效的办法减少其对原系统的影响;另一方面要控制产生的数据量在一个数据库系统可接受的范围内。本发明实施例中按照协议类型对所截获的数据包进行分类统计,统计每种协议类型在一段时间内的数据包的发送次数。这样在一个统计周期内,一个协议会产生一条统计数据。所产生的统计数据需要写入数据库中。
实际应用中,为了避免所有协议类型在同一时间内产生统计结果,从而导致写数据库拥挤,本发明采用按协议类型错开统计时间的方法,使得统计数据比较均匀地产生,保证写数据库的安全。
表1为本发明一实施例所提供的数据包信息统计表。从表中可以看出,该表格记录了被发送的每个数据包的协议号,子协议号、类型、总字节数、数目等信息。通过这些信息对某个协议类型的数据包进行监控和控制。
表1
  列名   类型   是否可以为空   备注
  协议号   int   否
  子协议号   int   否   -1表示没有子协议
  类型   int   否   C2S(1)或者S2C(0)
  总字节数   int   否   统计周期内内收发的总字节数
  数目   int   否   统计周期内内收发的总条数
  ……   ……   ……   ……
本发明实施例所提供的方法,一种通信协议在所预定的统计周期内会产生一条统计数据。以10分钟为一个统计周期,假设服务器的协议类型数为500,则一台服务器一天产生的数据为6(每小时6个十分钟)*24(小时)*500=72000条,若全部服务器有50台,则一天总共产生的数据量为72000*50=360万条,以40个字节一条记录计算,则上述50台服务器每天产生的数据所要占用的存储空间约为138MB,所以本发明实施例所提供的方法产生数据量一般的服务器都可以承受。
一般情况下,如果对所有的协议的统计时间区间一致,则在系统某一个时刻产生的数据量等于系统协议种类数,在这种情况下,如果发生多台服务器都在同一时间提交统计数据,则很容易因为数据量太庞大而导致数据库写入错误。为了避免上述情况,采用错开统计时间的方法,把所有协议统计的起始时间均匀分布在一个时间区间内,如按统计周期平均分配,则统计数据将会均匀地产生,从而避免数据写入拥塞。
进行数据统计时,可以创建一个与统计表相一致的数据结构,并用该数据结构创建一个稳定的数组,该数组以协议号为下标。在接收到一个数据包后,分析其协议类型,并根据协议类型定位到相应的数据结构,把新数据包的信息统计到该数据结构中。在统计的过程中,定期遍历数组,把达到统计周期的数据提交到数据库中,并清空对应的数据结构。采用该方式所耗费的系统资源很低,对原系统的影响几乎可以忽略。
S103、在所述预设统计周期结束时,若所述第一协议应用次数超过预设的第一协议应用次数阈值,则记录第一协议当前发送的数据包的内容;
S104、当再次发送第一协议的数据包时,将待发送的数据包与所记录的第一协议数据包进行比较;
S105、当数据内容有更新时执行此次数据包发送并用新的数据包替换原本所记录的数据包,否则终止此次数据发送。
本发明实施例所提供的数据传输方法可以应用于多种网络数据传输领域,例如网络游戏的数据传输中,游戏客户端需要随时获取某一怪物的状态,包括位置、生命值等信息,游戏服务器需要实时同步该怪物状态,记录该怪物状态的数据包通常会有很高的发送频率,因为服务器只有通过不断地发送该怪物的实时的状态,才能把怪物不断变化的状态表现在游戏客户端,一般情况下,为了游戏的流畅性,数据包的发送频率大于或者等于怪物状态变化的最大速率。但是怪物的状态不一定在每次同步时都发生了变化,因此有些数据包是不必要发送的。
当利用本发明实施例所提供的方法处理这类数据包的发送时,可以在过滤层终止不必要发送的数据传输,具体为:如果本次对某个客户端发送的第一协议类型的数据包与上一次发送的第一协议类型的数据包内容完全一致,则认为是不必要的,可以截断该次数据传输,直到该协议数据包内容发生变变化时再进行传输,并记录新协议数据包的内容,用于下一次的判断,从而节省不必要的数据传输,从而节省网络带宽。
本发明实施例所提供的方法中,对网络中传输的第一协议类型的数据包的发送次数进行统计,当该第一协议类型的数据包的发送次数达到预设的阈值时,就对采用第一协议类型的数据包的发送进行控制,具体为将待发送的数据包与之前发送过的第一协议类型的数据包进行比较,如果待发送的数据包的内容与之前发送过的第一协议类型的数据包的内容相同,则取消此次待发送数据包的发送。通过本发明实施例所提供的方法有效地减少了同一协议类型的相同数据的不必要的发送,节约了网络资源,从而有效地提高了对网络资源的利用率。
本发明另一实施例中,在对第一协议类型的数据包发送次数进行统计的同时,还可以对所述第一协议类型的数据包所发送的数据量进行统计,参见图3,该方法具体包括:
S301、在预设统计周期内,从所述数据包中获取当前数据包的数据量;
S302、将当前数据包的数据量累加至与所述第一协议类型对应的第一协议传输数据量中;
S303、在所述预设统计周期结束时,若所述第一协议传输数据量超过预设的第一协议传输数据量阈值,则确定第一协议的可删除位;
S304、根据所述可删除位形成所述待发送数据包的缩减数据包和补充包;
S305、用所述缩减数据包替代所述待发送数据包进行发送。
本发明实施例所提供的方法通过减少传输过程中数据包的bit来减少整个数据包的数据量,从而达到不浪费每一个bit的目标。一个字节由8个位(bit)组成,一个bit取值为0或1,一个数据包可以看作是由0和1组成的比特数据流。为了最大限度减少网络带宽,需要减少传输过程中数据包的数据量,本发明实施例所提供的方法需要统计协议数据包的每一个bit的使用情况,具体包括确定某个协议类型的数据包中的哪些位是可以删除的,当将可删除位从数据包中删除后,需要对缩短后的数据包做一个补充说明。
在本发明一实施例中,确定第一协议的可删除位包括:
预先将第一协议的多个数据包按位进行或运算,确定第一协议的数据包中未被使用的位;
将所述第一协议的数据包中未被使用过的位确定为所述第一协议的数据包的可删除位。
假设传输的协议类型A的数据包有:A1、A2、A3、......、An,对这n个数据包按bit进行“或”操作,当n足够大时,所有曾经使用过的bit的值必然会等于1,而“或”操作结果中的若某个bit的值为零,则可认为该位利用率是极低的,甚至是多余的,在传输过程中通常可以节省。
当确定第一协议类型的数据包的可删除位后,可以通过如下方式获取待发送数据包的缩减数据包和补充包,具体为:
通过将所述第一协议的数据包中的可删除位从所述待发送数据包中删除获得所述待发送数据包的缩减数据包;
记录该缩减数据包中的可删除位信息的数据包构成该缩减数据包的补充包。
在一些实施例中,还可以在每次发送数据包之间将待发送数据包中的对应位与可删除位进行比较确定当前待发送数据包中的可删除位,并据此形成缩减数据包和对应的补充包,具体地包括:
将所述第一协议的数据包中的可删除位与待发送数据包中的对应位进行比较,删除未被使用的可删除位获得所述待发送数据包的缩减数据包;
记录该缩减数据包中的可删除位信息构成该缩减数据包的补充包,在所述补充包中标记出被使用的可删除位。
本发明实施例所提供的方法通过补充包告诉通信双方对方某种协议包哪些位是有用的(相应的位用1表示),哪些是没有用的(相应的位用0表示)。
具体地确定某一协议类型的数据包的可删除位以及该协议的补充包的方法可以是:通信双方为所有的协议建立一个位(bit)统计结构,每个bit都初始化为0,在传输过程中每发送一个数据包,都要与它对应的统计结构进行按位“或”。在统计一段时间后(如半个小时),通信双发把每种协议的统计结果通过补充包告诉对方,收到对方的确认后,发送方新发送的数据包把相应的位(bit)去掉,接收方按照补充包对接收到的数据包进行还原,就得到了真实的数据包。
实际应用中,为了达到最大的控制效果。可以对每个bit进行长时间的采样统计,得出每个bit真正利用率,按利用率得出某个协议类型的数据包的可删除位和补充包每个bit的值,如利用率低于5%的位设为0,其余的为1。具体地,该方法为:
预先统计第一协议数据包每个位的被使用率,所述使用率为统计周期内每个位的被使用次数与第一协议数据包被发送次数的比值;
将所述第一协议数据包被使用率低于预设被使用率阈值的位确定为所述第一协议的可删除位。
得到稳定补充包后,可以记在通信双方的设定中。双方接收到的数据包的长度等于与稳定补充包对应的数据包的长度时,按照稳定补充包进行还原,若双方收到的数据包若等于原数据包长度则不作还原处理。
通过本发明实施例所提供的方法,某个协议类型的数据包的可删除位和补充包一般一旦确定后是比较稳定的,所以只要通信双方预先约定好按照某个协议的补充包进行数据发生,那么就无需每次发送缩减数据包的同时还要发送对应的补充包。
当发生补充包不一致,即需要启用某个可删除位时,需要在补充包中记录新启用的可删除位。接收方需要知道此时的发送的具体情况才能正确地解析出数据包中的数据。实际应用中,一种处理方式是,将新的补充包附加到需要发送的数据包后面,组成一个较大的数据包进行发送,在接收方接收到以后,按照后面的补充包对数据包进行还原;另一种处理方式是,得到补充包后,通信双方可以约定。双方接收到的数据包长度小于协议数据结构所定义的数据包长度时,按照原来约定的补充包进行还原。当发生与稳定补充包不一致时,即需要启用某个可删除位时,按原数据包结构进行发送和解析。
当采用后一种处理方式时,通信双方直接根据数据包的长度就可以区分该数据包是否被压缩过了,不需要通过额外的位来标识,因此不会产生额外数据发送,对网络资源的占用更少。
本发明实施例所提供的方法在减少数据传输次数的基础上,进一步通过减少传输过程中数据包的bit来减少整个数据包的数据量,通过对数据包中每个位的使用情况进行统计,确定某个协议类型的数据包中的可删除位,并将可删除位从待删除数据包中删除,从而缩短了待传输数据包的长度,达到不浪费每一个bit的目标。最大限度减少数据传输过程中所占用的网络带宽,极大地提高了每个位的利用率。
参见图4,本发明一实施例还提供一种基于网络协议的数据传输控制装置,该装置包括:
第一获取单元401,用于在预设统计周期内截获逻辑层和网络传输层之间的数据包,并确定所述数据包采用的第一协议类型;
第一统计单元402,用于根据所述第一协议类型统计与所述第一协议类型对应的第一协议应用次数;
第一记录单元403,用于在所述预设统计周期结束时,若所述第一协议应用次数超过预设的第一协议应用次数阈值,则记录第一协议当前发送的数据包的内容;
第一比较单元404,用于当再次发送第一协议的数据包时,将待发送的数据包与所记录的第一协议数据包进行比较;
第一控制单元405,用于在数据内容有更新时执行此次数据包发送并用新的数据包替换原本所记录的数据包,否则终止此次数据发送。
本发明实施例所提供的装置,对网络中传输的第一协议类型的数据包的发送次数进行统计,当该第一协议类型的数据包的发送次数达到预设的阈值时,就对采用第一协议类型的数据包的发送进行控制,具体为将待发送的数据包与之前发送过的第一协议类型的数据包进行比较,如果待发送的数据包的内容与之前发送过的第一协议类型的数据包的内容相同,则取消此次待发送数据包的发送。通过本发明实施例所提供的方法有效地减少了同一协议类型的相同数据的不必要的发送,节约了网络资源,从而有效地提高了对网络资源的利用率。
本发明另一实施例中,在对第一协议类型的数据包发送次数进行统计的同时,还可以对所述第一协议类型的数据包所发送的数据量进行统计,参见图5,
第一获取单元401,还用于在预设统计周期内,从所述数据包中获取当前数据包的数据量;
第一统计单元402,还用于将当前数据包的数据量累加至与所述第一协议类型对应的第一协议传输数据量中;
该装置还包括:第二确定单元406,用于在所述预设统计周期结束时,若所述第一协议传输数据量超过预设的第一协议传输数据量阈值,则确定第一协议的可删除位;
第二控制单元407,用于根据所述可删除位形成所述待发送数据包的缩减数据包和补充包;
第二发送单元408,用于用所述缩减数据包替代所述待发送数据包进行发送。
进一步地,所述第二确定单元406包括:
第一统计子单元,用于预先将第一协议的多个数据包按位做或运算,确定第一协议的数据包中未被使用的位;
第一确定子单元,用于将所述第一协议的数据包中未被使用过的位确定为所述第一协议的数据包的可删除位。
在另一实施例中,所述第二确定单元406包括:
第二统计子单元,用于预先统计第一协议数据包每个位的被使用率,所述使用率为统计周期内每个位的被使用次数与第一协议数据包被发送次数的比值;
第二确定子单元,用于将所述第一协议数据包被使用率低于预设被使用率阈值的位确定为所述第一协议的可删除位。
可选地,所述第二控制单元407包括:
第一构成子单元,用于通过将所述第一协议的数据包中的可删除位从所述待发送数据包中删除获得所述待发送数据包的缩减数据包;
第二构成子单元,用于记录该缩减数据包中的可删除位信息的数据包构成该缩减数据包的补充包。
在本发明另一实施例中,所述第二控制单元406包括:
第三构成子单元,用于将所述第一协议的数据包中的可删除位与待发送数据包中的对应位进行比较,删除未被使用的可删除位获得缩减数据包;
第四构成子单元,用于记录该缩减数据包中的可删除位信息构成该缩减数据包的补充包,在所述补充包中标记出被使用的可删除位。
本发明实施例所提供的装置在减少数据传输次数的基础上,进一步通过减少传输过程中数据包的bit来减少整个数据包的数据量,通过对数据包中每个位的使用情况进行统计,确定某个协议类型的数据包中的可删除位,并将可删除位从待删除数据包中删除,从而缩短了待传输数据包的长度,达到不浪费每一个bit的目标。最大限度减少数据传输过程中所占用的网络带宽,极大地提高了每个位的利用率。
为了描述的方便,本发明实施例在描述装置时以功能分为各种单元分别描述。当然,在实施本申请时可以把各单元的功能在同一个或多个软件和/或硬件中实现。
通过以上的实施方式的描述可知,本领域的技术人员可以清楚地了解到本申请可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例或者实施例的某些部分所述的方法。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本申请可用于众多通用或专用的计算系统环境或配置中。例如:个人计算机、服务器计算机、手持设备或便携式设备、平板型设备、多处理器系统、基于微处理器的系统、置顶盒、可编程的消费电子设备、网络PC、小型计算机、大型计算机、包括以上任何系统或设备的分布式计算环境等等。
本申请可以在由计算机执行的计算机可执行指令的一般上下文中描述,例如程序模块。一般地,程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等等。也可以在分布式计算环境中实践本申请,在这些分布式计算环境中,由通过通信网络而被连接的远程处理设备来执行任务。在分布式计算环境中,程序模块可以位于包括存储设备在内的本地和远程计算机存储介质中。
虽然通过实施例描绘了本申请,本领域普通技术人员知道,本申请有许多变形和变化而不脱离本申请的精神,希望所附的权利要求包括这些变形和变化而不脱离本申请的精神。

Claims (12)

1.一种基于网络协议的数据传输控制方法,其特征在于,包括:
在预设统计周期内截获逻辑层和网络传输层之间的数据包,并确定所述数据包采用的第一协议类型;
根据所述第一协议类型统计与所述第一协议类型对应的第一协议应用次数;所述第一协议应用次数表示在一段时间内发送所述第一协议类型的数据包的次数;
在所述预设统计周期结束时,若所述第一协议应用次数超过预设的第一协议应用次数阈值,则记录第一协议当前发送的数据包;
当再次发送第一协议的数据包时,将待发送的数据包与所记录的第一协议数据包进行比较;
当数据包内容有更新时执行此次数据包发送并用新的数据包替换原本所记录的数据包,否则终止此次数据发送。
2.根据权利要求1所述的方法,其特征在于,还包括:
在预设统计周期内,从所述数据包中获取当前数据包的数据量;
将当前数据包的数据量累加至与所述第一协议类型对应的第一协议传输数据量中;
在所述预设统计周期结束时,若所述第一协议传输数据量超过预设的第一协议传输数据量阈值,则确定第一协议的可删除位;
根据所述可删除位形成所述待发送数据包的缩减数据包和补充包;
用所述缩减数据包替代所述待发送数据包进行发送。
3.根据权利要求2所述的方法,其特征在于,确定第一协议的可删除位包括:
预先将第一协议的多个数据包按位进行或运算,确定第一协议的数据包中未被使用的位;
将所述第一协议的数据包中未被使用的位确定为所述第一协议的数据包的可删除位。
4.根据权利要求2所述的方法,其特征在于,确定第一协议的可删除位包括:
预先统计第一协议数据包每个位的被使用率,所述被使用率为统计周期内每个位的被使用次数与第一协议数据包被发送次数的比值;
将所述第一协议数据包被使用率低于预设被使用率阈值的位确定为所述第一协议的可删除位。
5.根据权利要求2~4任意一项所述的方法,其特征在于,根据所述可删除位形成所述待发送数据包的缩减数据包和补充包包括:
通过将所述第一协议的数据包中的可删除位从所述待发送数据包中删除获得所述待发送数据包的缩减数据包;
记录该缩减数据包中的可删除位信息的数据包构成该缩减数据包的补充包。
6.根据权利要求5所述的方法,其特征在于,根据所述可删除位形成所述待发送数据包的缩减数据包和补充包包括:
将所述第一协议的数据包中的可删除位与待发送数据包中的对应位进行比较,删除未被使用的可删除位获得所述待发送数据包的缩减数据包;
记录该缩减数据包中的可删除位信息构成该缩减数据包的补充包,在所述补充包中标记出被使用的可删除位。
7.一种基于网络协议的数据传输控制装置,其特征在于,包括:
第一获取单元,用于在预设统计周期内截获逻辑层和网络传输层之间的数据包,并确定所述数据包采用的第一协议类型;
第一统计单元,用于根据所述第一协议类型统计与所述第一协议类型对应的第一协议应用次数;所述第一协议应用次数表示在一段时间内发送所述第一协议类型的数据包的次数;
第一记录单元,用于在所述预设统计周期结束时,若所述第一协议应用次数超过预设的第一协议应用次数阈值,则记录第一协议当前发送的数据包;
第一比较单元,用于当再次发送第一协议的数据包时,将待发送的数据包与所记录的第一协议数据包进行比较;
第一控制单元,用于在数据包内容有更新时执行此次数据包发送并用新的数据包替换原本所记录的数据包,否则终止此次数据发送。
8.根据权利要求7所述的装置,其特征在于,
所述第一获取单元,还用于在预设统计周期内,从所述数据包中获取当前数据包的数据量;
所述第一统计单元,还用于将当前数据包的数据量累加至与所述第一协议类型对应的第一协议传输数据量中;
该装置还包括:
第二确定单元,用于在所述预设统计周期结束时,若所述第一协议传输数据量超过预设的第一协议传输数据量阈值,则确定第一协议的可删除位;
第二控制单元,用于根据所述可删除位形成所述待发送数据包的缩减数据包和补充包;
第二发送单元,用于用所述缩减数据包替代所述待发送数据包进行发送。
9.根据权利要求8所述的装置,其特征在于,所述第二确定单元包括:
第一统计子单元,用于预先将第一协议的多个数据包按位进行或运算,确定第一协议的数据包中未被使用的位;
第一确定子单元,用于将所述第一协议的数据包中未被使用的位确定为所述第一协议的数据包的可删除位。
10.根据权利要求8所述的装置,其特征在于,所述第二确定单元包括:
第二统计子单元,用于预先统计第一协议数据包每个位的被使用率,所述被使用率为统计周期内每个位的被使用次数与第一协议数据包被发送次数的比值;
第二确定子单元,用于将所述第一协议数据包被使用率低于预设被使用率阈值的位确定为所述第一协议的可删除位。
11.根据权利要求8~10任意一项所述的装置,其特征在于,所述第二控制单元包括:
第一构成子单元,用于通过将所述第一协议的数据包中的可删除位从所述待发送数据包中删除获得所述待发送数据包的缩减数据包;
第二构成子单元,用于记录该缩减数据包中的可删除位信息的数据包构成该缩减数据包的补充包。
12.根据权利要求8~10任意一项所述的装置,其特征在于,所述第二控制单元包括:
第三构成子单元,用于将所述第一协议的数据包中的可删除位与待发送数据包中的对应位进行比较,删除未被使用的可删除位获得缩减数据包;
第四构成子单元,用于记录该缩减数据包中的可删除位信息构成该缩减数据包的补充包,在所述补充包中标记出被使用的可删除位。
CN200910244587.XA 2009-12-31 2009-12-31 一种基于网络协议的数据传输控制方法和装置 Active CN102118361B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN200910244587.XA CN102118361B (zh) 2009-12-31 2009-12-31 一种基于网络协议的数据传输控制方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN200910244587.XA CN102118361B (zh) 2009-12-31 2009-12-31 一种基于网络协议的数据传输控制方法和装置

Publications (2)

Publication Number Publication Date
CN102118361A CN102118361A (zh) 2011-07-06
CN102118361B true CN102118361B (zh) 2014-07-23

Family

ID=44216955

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200910244587.XA Active CN102118361B (zh) 2009-12-31 2009-12-31 一种基于网络协议的数据传输控制方法和装置

Country Status (1)

Country Link
CN (1) CN102118361B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102291468A (zh) * 2011-09-19 2011-12-21 郑州单点科技软件有限公司 一种实现数据交换的方法和系统
CN102340428B (zh) * 2011-09-29 2014-01-15 哈尔滨安天科技股份有限公司 基于网络丢包的url检测与拦截方法和系统
CN104469427B (zh) * 2014-12-09 2017-11-14 北京国双科技有限公司 数据传输方法和终端及服务器
CN106845263B (zh) * 2015-12-04 2020-06-26 阿里巴巴集团控股有限公司 一种访问数据库的方法、装置及电子设备
CN107846471A (zh) * 2017-11-17 2018-03-27 杭州电魂网络科技股份有限公司 数据下发方法及装置
CN113542268B (zh) * 2021-07-14 2023-07-28 中能融合智慧科技有限公司 基于网络链路获取单个工控协议流量的方法
CN115150174B (zh) * 2022-07-06 2023-05-05 北京神州慧安科技有限公司 一种工业安全隔离交换方法和系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1197358C (zh) * 2000-11-09 2005-04-13 皇家菲利浦电子有限公司 基于内容过滤以限制重复出现的方法和系统
CN1992582A (zh) * 2005-12-31 2007-07-04 中兴通讯股份有限公司 宽带信令链路自适应可变滑动接收窗口的实现方法
CN100501746C (zh) * 2007-12-11 2009-06-17 腾讯科技(深圳)有限公司 网页抓取方法和网页抓取服务器

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1197358C (zh) * 2000-11-09 2005-04-13 皇家菲利浦电子有限公司 基于内容过滤以限制重复出现的方法和系统
CN1992582A (zh) * 2005-12-31 2007-07-04 中兴通讯股份有限公司 宽带信令链路自适应可变滑动接收窗口的实现方法
CN100501746C (zh) * 2007-12-11 2009-06-17 腾讯科技(深圳)有限公司 网页抓取方法和网页抓取服务器

Also Published As

Publication number Publication date
CN102118361A (zh) 2011-07-06

Similar Documents

Publication Publication Date Title
CN102118361B (zh) 一种基于网络协议的数据传输控制方法和装置
CN102916854B (zh) 流量统计方法、装置及代理服务器
CN107623646A (zh) 数据流传输方法、发送设备及接收设备
CN103399546A (zh) 三冗余控制方法及系统
CN112039722B (zh) 一种mqtt协议仿真方法及仿真设备
CN105023185A (zh) 一种基于fpga的期货交易盘口数据实时解析系统
CN108566369B (zh) 基于工业大数据的数据采集系统及方法
CN106487896A (zh) 用于处理远程直接内存访问请求的方法和装置
CN105763297B (zh) 一种基于云计算系统的远程数据优化传输方法和装置
CN107395521B (zh) 一种基于物联网的大数据信息处理方法及系统
CN108777812A (zh) 一种录屏直播方法、装置、电子设备及存储介质
CN103198001A (zh) 能够自测pcie接口的存储系统及测试方法
CN103544098B (zh) 一种压力测试的方法和装置
CN104866402A (zh) 一种测试服务器的方法及装置
CN108255659A (zh) 一种应用程序性能监控方法及其系统
CN104038314B (zh) 一种新型的安监联网动态数据实时传输系统及方法
CN104601358B (zh) 一种实现采集系统与分析系统间的匹配方法及装置
CN112416557A (zh) 调用关系的确定方法和装置、存储介质及电子装置
CN104052778A (zh) 分布式的话单统计方法、装置以及系统
CN102427405A (zh) 话单关联方法、系统以及相关设备
CN106909528B (zh) 一种数据传输的调度方法及装置
CN113949417B (zh) 一种基于混合通信的电网数据传输方法及装置
CN115801925A (zh) 基于列车自动监控ats系统的数据处理方法及装置
CN101834876B (zh) 基于蓝牙、数据库与udp协议的分布式半物理仿真系统及其数据汇总和分发的方法
CN103905147B (zh) 数据处理方法、发送设备、接收设备和通信系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant