CN107689846A - 一种数据差错的检测方法及系统 - Google Patents
一种数据差错的检测方法及系统 Download PDFInfo
- Publication number
- CN107689846A CN107689846A CN201710852316.7A CN201710852316A CN107689846A CN 107689846 A CN107689846 A CN 107689846A CN 201710852316 A CN201710852316 A CN 201710852316A CN 107689846 A CN107689846 A CN 107689846A
- Authority
- CN
- China
- Prior art keywords
- data
- classification information
- chunk
- data block
- block
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L1/00—Arrangements for detecting or preventing errors in the information received
- H04L1/004—Arrangements for detecting or preventing errors in the information received by using forward error control
- H04L1/0056—Systems characterized by the type of code used
- H04L1/0061—Error detection codes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/10—Flow control; Congestion control
- H04L47/32—Flow control; Congestion control by discarding or delaying data units, e.g. packets or frames
Abstract
本发明公开了一种数据差错的检测方法及系统,其中方法的执行步骤为:根据接收的分类信息请求,获取分类信息请求对应的第一数据块组;获取第一数据块组中每个数据块对应的数据标签的数组长度;将第一数据块组中每个数据块对应的数据标签的数组长度与预存储的标准数组长度进行比对,丢弃第一数据块组中数组长度与标准数据长度不匹配的数据块,得到第二数据块组;解析第二数据块组,得到第二数据块组中每个数据块对应的第一分类信息;将第二数据块组中每个数据块对应的第一分类信息与分类信息请求对应的第二分类信息进行比对;丢弃第二数据块组中第一分类信息与第二分类信息不匹配的数据块,得到第三数据块组。上述方法及系统能够有效的丢弃有差错的数据,提高网络数据传输的效率。
Description
技术领域
本发明涉及物联网技术领域,尤其涉及一种数据差错的检测方法及系统。
背景技术
物联网数据传输过程中需要对传输的数据完整性进行检测,但是,传统的物联网数据传输的过程中缺少对传输数据的差错进行检测的机制或只对单一属性进行检测,这就会导致大量错误或故障数据在网络中传输,大量错误或故障数据的累积会在一定程度上影响传输及相应的速度,还会导致响应装置的当机。
发明内容
为解决上述技术问题,本发明提供了一种能有效对传输数据进行差错检测的数据差错的检测方法及系统。
第一方面,本发明提供了一种数据差错的检测方法,所述方法包括:
根据接收的分类信息请求,获取所述分类信息请求对应的第一数据块组;
获取所述第一数据块组中每个数据块对应的数据标签的数组长度;
将所述第一数据块组中每个数据块对应的数据标签的数组长度与预存储的标准数组长度进行比对,丢弃所述第一数据块组中数组长度与所述标准数据长度不匹配的数据块,得到第二数据块组;
解析所述第二数据块组,得到所述第二数据块组中每个数据块对应的第一分类信息;
将所述第二数据块组中每个数据块对应的第一分类信息与所述分类信息请求对应的第二分类信息进行比对;丢弃所述第二数据块组中第一分类信息与所述第二分类信息不匹配的数据块,得到第三数据块组。
本发明实施例提供的数据差错的检测方法会根据接收的分类信息请求,获取分类信息请求对应的第一数据块组;获取第一数据块组对应的数据标签的数组长度;将数组长度与预存储的标准数组长度进行比对,丢弃第一数据块组中数组长度与标准数据长度不匹配的数据块,得到第二数据块组;解析第二数据块组,得到第一分类信息;将第一分类信息与分类信息请求对应的第二分类信息进行比对;丢弃第二数据块组中第一分类信息与第二分类信息不匹配的数据块,得到第三数据块组。上述数据差错的检测方法能够对网络传输数据进行多层的差错检测,能够有效的丢弃有差错的数据,降低网络传输数据的压力,提高网络数据传输的效率,具有很高的实用性。
进一步的,所述方法还包括:
提取所述第三数据块组内每个数据块的数据差错检错码,将提取到的数据差错检错码与预存储的数据差错检错码进行比对,当提取到的数据差错检错码与预存储的数据差错检错码不匹配时,则丢弃所述第三数据块组内提取到的数据差错检错码与预存储的数据差错检错码不匹配的数据块。
上述实施例中,针对的是已通过数据标签验证和分类信息验证的第三数据块组,为深层次的差错验证,为的是对接收到的数据块进行进一步的验证,通过对数据差错检错码的验证,能够最大程度上丢弃或删除出现错误的数据块,保证数据块的传输效率,也确保了网络传输及运行的稳定。
进一步的,所述方法,还包括:
判断所述第二数据块组内每个数据块的数据标签的数据组成,若包含除0和1以外的其他数据,则丢弃包含其他数据的数据标签对应的数据块。
上述实施例中,对第二数据块组内的数据标签的数据组成进行判断,正常情况下,数据标签的数据组成只包含0和1组成的数组序列,若包含除0和1以外的数据,则丢弃包含0和1以外数据的数据标签对应的数据块。能够更进一步的对数据标签的数组长度与标准数组长度相同的数据块进行判断,进一步丢弃包含特殊数据的数据块。
第二方面,本发明实施例提供了一种数据差错的检测系统,所述系统包括数据获取装置、标签校验装置以及分类信息校验装置;
所述数据获取装置,用于根据接收的分类信息请求,获取所述分类信息请求对应的第一数据块组;
所述标签校验装置,用于获取所述第一数据块组中每个数据块对应的数据标签的数组长度;
将所述第一数据块组中每个数据块对应的数据标签的数组长度与预存储的标准数组长度进行比对,丢弃所述第一数据块组中数组长度与所述标准数据长度不匹配的数据块,得到第二数据块组;
所述分类信息校验装置,用于解析所述第二数据块组,得到所述第二数据块组中每个数据块对应的第一分类信息;
将所述第二数据块组中每个数据块对应的第一分类信息与所述分类信息请求对应的第二分类信息进行比对;丢弃所述第二数据块组中第一分类信息与所述第二分类信息不匹配的数据块,得到第三数据块组。
本发明实施例提供的数据差错的检测系统会根据接收的分类信息请求,获取分类信息请求对应的第一数据块组;获取第一数据块组对应的数据标签的数组长度;将数组长度与预存储的标准数组长度进行比对,丢弃第一数据块组中数组长度与标准数据长度不匹配的数据块,得到第二数据块组;解析第二数据块组,得到第一分类信息;将第一分类信息与分类信息请求对应的第二分类信息进行比对;丢弃第二数据块组中第一分类信息与第二分类信息不匹配的数据块,得到第三数据块组。上述数据差错的检测方法能够对网络传输数据进行多层的差错检测,能够有效的丢弃有差错的数据,降低网络传输数据的压力,提高网络数据传输的效率,具有很高的实用性。
进一步的,所述系统还包括差错检验装置;
所述差错检验装置,用于提取所述第三数据块组内每个数据块的数据差错检错码,将提取到的数据差错检错码与预存储的数据差错检错码进行比对,当提取到的数据差错检错码与预存储的数据差错检错码不匹配时,则丢弃所述第三数据块组内提取到的数据差错检错码与预存储的数据差错检错码不匹配的数据块。
上述实施例中,针对的是已通过数据标签验证和分类信息验证的第三数据块组,为深层次的差错验证,为的是对接收到的数据块进行进一步的验证,通过对数据差错检错码的验证,能够最大程度上丢弃或删除出现错误的数据块,保证数据块的传输效率,也确保了网络传输及运行的稳定。
进一步的,所述标签校验装置,还用于判断所述第二数据块组内每个数据块的数据标签的数据组成,若包含除0和1以外的其他数据,则丢弃包含其他数据的数据标签对应的数据块。
上述实施例中,对第二数据块组内的数据标签的数据组成进行判断,正常情况下,数据标签的数据组成只包含0和1组成的数组序列,若包含除0和1以外的数据,则丢弃包含0和1以外数据的数据标签对应的数据块。能够更进一步的对数据标签的数组长度与标准数组长度相同的数据块进行判断,进一步丢弃包含特殊数据的数据块。
附图说明
图1为本发明实施例提供的一种数据差错的检测方法的示意性信令交互图;
图2是本发明实施例提供的另一种数据差错的检测方法的示意性信令交互图;
图3为本发明实施例提供的另一种数据差错的检测方法的示意性信令交互图;
图4为本发明实施例提供的另一种数据差错的检测方法的示意性信令交互图;
图5为本发明实施例提供的另一种数据差错的检测方法的示意性逻辑运行图;
图6为本发明实施例提供的另一种数据差错的检测方法的示意性逻辑运行图;
图7为本发明实施例提供的另一种数据差错的检测方法的示意性逻辑运行图;
图8为本发明实施例提供的数据差错的检测系统的示意性结构示意图。
具体实施方式
以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、接口、技术之类的具体细节,以便透切理解本发明。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本发明。在其它情况中,省略对众所周知的系统、电路以及方法的详细说明,以免不必要的细节妨碍本发明的描述。
图1为本发明实施例提供的数据差错的检测方法的示意性信令交互图。如图1所示,本发明提供的水资源管控方法的具体执行步骤如下:
步骤S100:根据接收的分类信息请求,获取分类信息请求对应的第一数据块组;
其中:分类信息请求是由数据块提交的,会根据提交的分类信息请求,获取提交分类信息请求的对应的数据块,数据块汇集后会成为第一数据块组;
步骤S200:获取第一数据块组中每个数据块对应的数据标签的数组长度;
其中:数据标签是每个数据块都具备的,适用于区分不同数据块的标识;
步骤S300:将第一数据块组中每个数据块对应的数据标签的数组长度与预存储的标准数组长度进行比对,丢弃第一数据块组中数组长度与标准数据长度不匹配的数据块,得到第二数据块组;
其中:数据块在传输的过程中会产生差错,有可能会对数据标签的数组长度产生影响,导致数据块的数据标签的数组长度变长或缩短,通过对数组长度的检测,会丢弃第一数据块组中数据块对应的数据标签的数组长度与标准数据长度不匹配的数据块,得到第二数据块组;
步骤S400:解析第二数据块组,得到第二数据块组中每个数据块对应的第一分类信息;
其中:第一分类信息是数据块内包含的信息,保存的是数据块自身对应的分类信息;
步骤S500:将第二数据块组中每个数据块对应的第一分类信息与分类信息请求对应的第二分类信息进行比对;丢弃第二数据块组中第一分类信息与第二分类信息不匹配的数据块,得到第三数据块组;
其中:将自身包含的分类信息与提交的分类信息请求对应的分类信息进行比对,能够判断提交的分类信息是否与自身包含的分类信息是否匹配,通过匹配结果判断需要丢弃的数据块。
本发明实施例提供的数据差错的检测方法会根据接收的分类信息请求,获取分类信息请求对应的第一数据块组;获取第一数据块组对应的数据标签的数组长度;将数组长度与预存储的标准数组长度进行比对,丢弃第一数据块组中数组长度与标准数据长度不匹配的数据块,得到第二数据块组;解析第二数据块组,得到第一分类信息;将第一分类信息与分类信息请求对应的第二分类信息进行比对;丢弃第二数据块组中第一分类信息与第二分类信息不匹配的数据块,得到第三数据块组。上述数据差错的检测方法能够对网络传输数据进行多层的差错检测,能够有效的丢弃有差错的数据,降低网络传输数据的压力,提高网络数据传输的效率,具有很高的实用性。
在图1对应实施例的基础上,还进行了改进,详见图2。图2为本发明实施例提供的另一种数据差错的检测方法的示意性信令交互图。如图2所示的数据差错的检测方法的执行步骤如下:
步骤S100:根据接收的分类信息请求,获取分类信息请求对应的第一数据块组;
其中:分类信息请求是由数据块提交的,会根据提交的分类信息请求,获取提交分类信息请求的对应的数据块,数据块汇集后会成为第一数据块组;
步骤S200:获取第一数据块组中每个数据块对应的数据标签的数组长度;
其中:数据标签是每个数据块都具备的,适用于区分不同数据块的标识;
步骤S300:将第一数据块组中每个数据块对应的数据标签的数组长度与预存储的标准数组长度进行比对,丢弃第一数据块组中数组长度与标准数据长度不匹配的数据块,得到第二数据块组;
其中:数据块在传输的过程中会产生差错,有可能会对数据标签的数组长度产生影响,导致数据块的数据标签的数组长度边长或缩短,通过对数组长度的检测,能够丢弃数据长度不匹配的数据块;
步骤S400:解析第二数据块组,得到第二数据块组中每个数据块对应的第一分类信息;
其中:第一分类信息是数据块内包含的信息,保存的是数据块自身对应的分类信息;
步骤S410:获取第二数据块组中每个数据块对应的公共分类信息;
步骤S420:解析公共分类信息,得到第一数组序列;
步骤S430:根据第一数组序列中数据的组成以及组成数据的顺序确定第一分类信息;
其中:公共分类信息是每个正常数据块都含有的字段,用于存储当前数据块对应的与分类信息相关的数据以及其他一些相关的数据,而分类信息即为第一分类信息,是数据块内包含的信息,保存的是数据块自身对应的分类信息;
步骤S500:将第二数据块组中每个数据块对应的第一分类信息与分类信息请求对应的第二分类信息进行比对;丢弃第二数据块组中第一分类信息与第二分类信息不匹配的数据块,得到第三数据块组;
其中:将自身包含的分类信息与提交的分类信息请求对应的分类信息进行比对,能够判断提交的分类信息请求对应的第二分类信息是否与每个数据块对应的第一分类信息匹配,通过匹配结果判断需要丢弃的数据块。
在上述实施例中,公共分类信息是每个数据块都具备的,通过解析公共分类信息内与分类信息相关的数据可以获取第一数组序列,再通过第一数组序列中数据的组成以及组成数据的顺序,就可以确定第一分类信息,通过公共分类信息内的数据能够更准确的确定当前数据块的分类信息。
在图1对应实施例的基础上,还进行了改进,详见图3。图3为本发明实施例提供的另一种数据差错的检测方法的示意性信令交互图。如图3所示的数据差错的检测方法的执行步骤如下:
步骤S100:根据接收的分类信息请求,获取分类信息请求对应的第一数据块组;
其中:分类信息请求是由数据块提交的,会根据提交的分类信息请求,获取提交分类信息请求的对应的数据块,数据块汇集后会成为第一数据块组;
步骤S200:获取第一数据块组中每个数据块对应的数据标签的数组长度;
其中:数据标签是每个数据块都具备的,适用于区分不同数据块的标识;
步骤S300:将第一数据块组中每个数据块对应的数据标签的数组长度与预存储的标准数组长度进行比对,丢弃第一数据块组中数组长度与标准数据长度不匹配的数据块,得到第二数据块组;
其中:数据块在传输的过程中会产生差错,有可能会对数据标签的数组长度产生影响,导致数据块的数据标签的数组长度边长或缩短,通过对数组长度的检测,能够丢弃数据长度不匹配的数据块;
步骤S400:解析第二数据块组,得到第二数据块组中每个数据块对应的第一分类信息;
其中:第一分类信息是数据块内包含的信息,保存的是数据块自身对应的分类信息;
步骤S500:将第二数据块组中每个数据块对应的第一分类信息与分类信息请求对应的第二分类信息进行比对;丢弃第二数据块组中第一分类信息与第二分类信息不匹配的数据块,得到第三数据块组;
其中:将自身包含的分类信息与提交的分类信息请求对应的分类信息进行比对,能够判断提交的分类信息是否与自身包含的分类信息是否匹配,通过匹配结果判断需要丢弃的数据块。
步骤S600:解析第三分类信息,得到第二数组序列,其中,第三分类信息为与第三数据块组中每个数据块对应的分类信息;
其中:分类信息序列对于数据块是唯一确定的;
步骤S700:将第三数据块组中每个数据块对应的第二数组序列与标准分类信息序列进行比对,丢弃第三数据块组中第二数组序列与标准分类信息序列不匹配的数据块,得到第四数据块。
在上述实施例中,通过对第三数据块组的分类信息进行解析,得到第一数组序列,将第二数组序列与标准分类信息序列进行比对,能够判断第二数组序列与标准分类信息序列是否匹配,若不匹配,就会丢弃不匹配的第二数组序列对应的数据块。
在图1至图3对应实施例的基础上,还进行了改进,详见图4。图4为本发明实施例提供的另一种数据差错的检测方法的示意性信令交互图。如图4所示的数据差错的检测方法的执行步骤如下:
步骤S100:根据接收的分类信息请求,获取分类信息请求对应的第一数据块组;
其中:分类信息请求是由数据块提交的,会根据提交的分类信息请求,获取提交分类信息请求的对应的数据块,数据块汇集后会成为第一数据块组;
步骤S200:获取第一数据块组中每个数据块对应的数据标签的数组长度;
其中:数据标签是每个数据块都具备的,适用于区分不同数据块的标识;
步骤S300:将第一数据块组中每个数据块对应的数据标签的数组长度与预存储的标准数组长度进行比对,丢弃第一数据块组中数组长度与标准数据长度不匹配的数据块,得到第二数据块组;
其中:数据块在传输的过程中会产生差错,有可能会对数据标签的数组长度产生影响,导致数据块的数据标签的数组长度边长或缩短,通过对数组长度的检测,能够丢弃数据长度不匹配的数据块;
步骤S400:解析第二数据块组,得到第二数据块组中每个数据块对应的第一分类信息;
其中:第一分类信息是数据块内包含的信息,保存的是数据块自身对应的分类信息;
步骤S500:将第二数据块组中每个数据块对应的第一分类信息与分类信息请求对应的第二分类信息进行比对;丢弃第二数据块组中第一分类信息与第二分类信息不匹配的数据块,得到第三数据块组;
其中:将自身包含的分类信息与提交的分类信息请求对应的分类信息进行比对,能够判断提交的分类信息是否与自身包含的分类信息是否匹配,通过匹配结果判断需要丢弃的数据块;
步骤S800:解析第三数据块组中每个数据块的数据标签,得到第三数组序列;
其中:数据标签的数组序列对于不同数据块来说是不相同的;
步骤S900:将每个数据块对应的第三数组序列与标准数组标签序列进行比对,丢弃第三数据块组中第三数组序列与标准数组标签序列不匹配的数据块。
在上述实施例中,通过对第三数据块组的数据标签进行解析,得到第二数组序列,将第三数组序列与标准数组标签序列进行比对,能够判断第三数组序列与标准数组标签序列是否匹配,若不匹配,就会丢弃不匹配的第三数组序列对应的数据块。
在图1对应实施例的基础上,还进行了改进,详见图5。图5为本发明实施例提供的另一种数据差错的检测方法的示意性信令交互图。如图5所示的数据差错的检测方法的执行步骤如下:
步骤S100:根据接收的分类信息请求,获取分类信息请求对应的第一数据块组;
其中:分类信息请求是由数据块提交的,会根据提交的分类信息请求,获取提交分类信息请求的对应的数据块,数据块汇集后会成为第一数据块组;
步骤S105:将第一数据块组中每个数据块按照公共分类信息字段、数据传输参数字段以及数据标签字段的组成形式进行分割,判断第一数据块组的数据块分割后是否包含公共分类信息字段、数据传输参数字段以及数据标签字段的所有字段,丢弃第一数据块组中缺失部分字段的数据块;
其中:公共分类信息字段、数据传输参数字段以及数据标签字段是数据块都具有的字段,而对数据块进行的分割并非实际的分割,目的是判断数据块中是否包含公共分类信息字段、数据传输参数字段以及数据标签字段中的全部字段;
步骤S200:获取第一数据块组中每个数据块对应的数据标签的数组长度;
其中:数据标签是每个数据块都具备的,适用于区分不同数据块的标识;
步骤S300:将第一数据块组中每个数据块对应的数据标签的数组长度与预存储的标准数组长度进行比对,丢弃第一数据块组中数组长度与标准数据长度不匹配的数据块,得到第二数据块组;
其中:数据块在传输的过程中会产生差错,有可能会对数据标签的数组长度产生影响,导致数据块的数据标签的数组长度边长或缩短,通过对数组长度的检测,能够丢弃数据长度不匹配的数据块;
步骤S400:解析第二数据块组,得到第二数据块组中每个数据块对应的第一分类信息;
其中:第一分类信息是数据块内包含的信息,保存的是数据块自身对应的分类信息;
步骤S500:将第二数据块组中每个数据块对应的第一分类信息与分类信息请求对应的第二分类信息进行比对;丢弃第二数据块组中第一分类信息与第二分类信息不匹配的数据块,得到第三数据块组。
在上述实施例中,在对数据标签的数组长度进行比对前,对第一数据块组按照数据块的组成进行分割,判断第一数据块组分割后是否包含公共分类信息字段、数据传输参数字段和数据标签字段,丢弃第一数据块组中有字段缺失的数据块,通过对第一数据块组的组成进行判断,能够清楚的丢弃缺失部分字段的数据块,对数据块进行了初级的筛选,在一定程度上减轻了后续差错检测的压力,提高了差错检测的效率。
在图1对应实施例的基础上,还进行了改进,详见图6。图6为本发明实施例提供的另一种数据差错的检测方法的示意性信令交互图。如图6所示的数据差错的检测方法的执行步骤如下:
步骤S100:根据接收的分类信息请求,获取分类信息请求对应的第一数据块组;
其中:分类信息请求是由数据块提交的,会根据提交的分类信息请求,获取提交分类信息请求的对应的数据块,数据块汇集后会成为第一数据块组;
步骤S200:获取第一数据块组中每个数据块对应的数据标签的数组长度;
其中:数据标签是每个数据块都具备的,适用于区分不同数据块的标识;
步骤S300:将第一数据块组中每个数据块对应的数据标签的数组长度与预存储的标准数组长度进行比对,丢弃第一数据块组中数组长度与标准数据长度不匹配的数据块,得到第二数据块组;
其中:数据块在传输的过程中会产生差错,有可能会对数据标签的数组长度产生影响,导致数据块的数据标签的数组长度边长或缩短,通过对数组长度的检测,能够丢弃数据长度不匹配的数据块;
步骤S400:解析第二数据块组,得到第二数据块组中每个数据块对应的第一分类信息;
其中:第一分类信息是数据块内包含的信息,保存的是数据块自身对应的分类信息;
步骤S500:将第二数据块组中每个数据块对应的第一分类信息与分类信息请求对应的第二分类信息进行比对;丢弃第二数据块组中第一分类信息与第二分类信息不匹配的数据块,得到第三数据块组。
其中:将自身包含的分类信息与提交的分类信息请求对应的分类信息进行比对,能够判断提交的分类信息是否与自身包含的分类信息是否匹配,通过匹配结果判断需要丢弃的数据块;
步骤S1000:提取第三数据块组内每个数据块的数据差错检错码,将提取到的数据差错检错码与预存储的数据差错检错码进行比对,当提取到的数据差错检错码与预存储的数据差错检错码不匹配时,则丢弃第三数据块组内提取到的数据差错检错码与预存储的数据差错检错码不匹配的数据块。
在上述实施例中,针对的是已通过数据标签验证和分类信息验证的第三数据块组,为深层次的差错验证,为的是对接收到的数据块进行进一步的验证,通过对数据差错检错码的验证,能够最大程度上丢弃或删除出现错误的数据块,保证数据块的传输效率,也确保了网络传输及运行的稳定。
在图1对应实施例的基础上,还进行了改进,详见图7。图7为本发明实施例提供的另一种数据差错的检测方法的示意性信令交互图。如图7所示的数据差错的检测方法的执行步骤如下:
步骤S100:根据接收的分类信息请求,获取分类信息请求对应的第一数据块组;
其中:分类信息请求是由数据块提交的,会根据提交的分类信息请求,获取提交分类信息请求的对应的数据块,数据块汇集后会成为第一数据块组;
步骤S200:获取第一数据块组中每个数据块对应的数据标签的数组长度;
其中:数据标签是每个数据块都具备的,适用于区分不同数据块的标识;
步骤S300:将第一数据块组中每个数据块对应的数据标签的数组长度与预存储的标准数组长度进行比对,丢弃第一数据块组中数组长度与标准数据长度不匹配的数据块,得到第二数据块组;
其中:数据块在传输的过程中会产生差错,有可能会对数据标签的数组长度产生影响,导致数据块的数据标签的数组长度边长或缩短,通过对数组长度的检测,能够丢弃数据长度不匹配的数据块;
步骤S305:判断第二数据块组内每个数据块的数据标签的数据组成,若包含除0和1以外的其他数据,则丢弃包含其他数据的数据标签对应的数据块;
其中:0和1是通用的数据组成,当数据出现错误时,难免会产生错误,添加入0和1以外的数据,通过对每个数据块的数据标签的数据组成进行判断,能够很好的丢弃包含额外数据的数据块;
步骤S400:解析第二数据块组,得到第二数据块组中每个数据块对应的第一分类信息;
其中:第一分类信息是数据块内包含的信息,保存的是数据块自身对应的分类信息;
步骤S500:将第二数据块组中每个数据块对应的第一分类信息与分类信息请求对应的第二分类信息进行比对;丢弃第二数据块组中第一分类信息与第二分类信息不匹配的数据块,得到第三数据块组;
其中:将自身包含的分类信息与提交的分类信息请求对应的分类信息进行比对,能够判断提交的分类信息是否与自身包含的分类信息是否匹配,通过匹配结果判断需要丢弃的数据块。
上述实施例中,对每个数据块的数据标签的数据组成进行的判断,针对的第二数据块组内的数据块进行的判断,而第二数据块组内的数据块是数据标签的数组长度与标准数组长度相同的数据块,正常情况下,数据标签的数据组成只包含0和1组成的数组序列,通过对第二数据块组内的数据标签的数据组成进行判断,能够进一步丢弃第二数据块组内含除0和1以外数据的数据标签对应的数据块。
在图1至图7提供的数据差错的监测方法的基础上,还提供了一种数据差错的监测系统,详见图8。图8为本发明实施例提供的数据差错的监测系统的示意性框架图。
如图8所示,本发明提供的数据差错的监测系统,包括数据获取装置、标签校验装置以及分类信息校验装置;
数据获取装置,用于根据接收的分类信息请求,获取分类信息请求对应的第一数据块组;
标签校验装置,用于获取第一数据块组中每个数据块对应的数据标签的数组长度;
将每个数据块对应的数组长度与预存储的标准数组长度进行比对,丢弃第一数据块组中数组长度与标准数据长度不匹配的数据块,得到第二数据块组;
分类信息校验装置,用于解析第二数据块组,得到第二数据块组中每个数据块对应的第一分类信息;
将每个数据块对应的第一分类信息与分类信息请求对应的第二分类信息进行比对;丢弃第二数据块组中第一分类信息与第二分类信息不匹配的数据块,得到第三数据块组。
本发明实施例提供的数据差错的检测方法会根据接收的分类信息请求,获取分类信息请求对应的第一数据块组;获取第一数据块组对应的数据标签的数组长度;将数组长度与预存储的标准数组长度进行比对,丢弃第一数据块组中数组长度与标准数据长度不匹配的数据块,得到第二数据块组;解析第二数据块组,得到第一分类信息;将第一分类信息与分类信息请求对应的第二分类信息进行比对;丢弃第二数据块组中第一分类信息与第二分类信息不匹配的数据块,得到第三数据块组。上述数据差错的检测方法能够对网络传输数据进行多层的差错检测,能够有效的丢弃有差错的数据,降低网络传输数据的压力,提高网络数据传输的效率,具有很高的实用性。
在上述实施例的基础上,还进行了以下改进:
数据获取装置,用于根据接收的分类信息请求,获取分类信息请求对应的第一数据块组;
数据获取装置,还用于将第一数据块组中每个数据块按照公共分类信息字段、数据传输参数字段以及数据标签字段的组成形式进行分割,判断第一数据块组的数据块分割后是否包含公共分类信息字段、数据传输参数字段以及数据标签字段的所有字段,丢弃第一数据块组中有字段缺失的数据块;
标签校验装置,用于获取第一数据块组中每个数据块对应的数据标签的数组长度;
将每个数据块对应的数组长度与预存储的标准数组长度进行比对,丢弃第一数据块组中数组长度与标准数据长度不匹配的数据块,得到第二数据块组;
分类信息校验装置,用于解析第二数据块组,得到第二数据块组中每个数据块对应的第一分类信息;
将每个数据块对应的第一分类信息与分类信息请求对应的第二分类信息进行比对;丢弃第二数据块组中第一分类信息与第二分类信息不匹配的数据块,得到第三数据块组。
在上述实施例中,在对数据标签的数组长度进行比对前,对第一数据块组按照数据块的组成进行分割,判断第一数据块组分割后是否包含公共分类信息字段、数据传输参数字段和数据标签字段,丢弃第一数据块组中有字段缺失的数据块,通过对第一数据块组的组成进行判断,能够清楚的丢弃缺失部分字段的数据块,对数据块进行了初级的筛选,在一定程度上减轻了后续差错检测的压力,提高了差错检测的效率。
在上述实施例的基础上,还进行了以下改进:
数据获取装置,用于根据接收的分类信息请求,获取分类信息请求对应的第一数据块组;
标签校验装置,用于获取第一数据块组中每个数据块对应的数据标签的数组长度;
将每个数据块对应的数组长度与预存储的标准数组长度进行比对,丢弃第一数据块组中数组长度与标准数据长度不匹配的数据块,得到第二数据块组;
分类信息校验装置,用于解析第二数据块组,得到第二数据块组中每个数据块对应的第一分类信息;
将每个数据块对应的第一分类信息与分类信息请求对应的第二分类信息进行比对;丢弃第二数据块组中第一分类信息与第二分类信息不匹配的数据块,得到第三数据块组;
综合校验装置,用于解析第三分类信息,得到第二数组序列,其中,第三分类信息为与第三数据块组中每个数据块对应的分类信息;
将第三数据块组中每个数据块对应的第二数组序列与标准分类信息序列进行比对,丢弃第三数据块组中第二数组序列与标准分类信息序列不匹配的数据块,得到第四数据块。
在上述实施例中,通过对第三数据块组的分类信息进行解析,得到第一数组序列,将第二数组序列与标准分类信息序列进行比对,能够判断第二数组序列与标准分类信息序列是匹配,若不匹配,就会丢弃不匹配的第二数组序列对应的数据块。
在上述实施例的基础上,还进行了一下改进:
数据获取装置,用于根据接收的分类信息请求,获取分类信息请求对应的第一数据块组;
标签校验装置,用于获取第一数据块组中每个数据块对应的数据标签的数组长度;
将每个数据块对应的数组长度与预存储的标准数组长度进行比对,丢弃第一数据块组中数组长度与标准数据长度不匹配的数据块,得到第二数据块组;
分类信息校验装置,用于解析第二数据块组,得到第二数据块组中每个数据块对应的第一分类信息;
将每个数据块对应的第一分类信息与分类信息请求对应的第二分类信息进行比对;丢弃第二数据块组中第一分类信息与第二分类信息不匹配的数据块,得到第三数据块组;
标签校验装置,还用于解析第三数据块组中每个数据块的数据标签,得到第三数组序列;
将每个数据块对应的第三数组序列与标准数组标签序列进行比对,丢弃第三数据块组中第三数组序列与标准数组标签序列不匹配的数据块。
在上述实施例中,通过对第三数据块组的数据标签进行解析,得到第二数组序列,将第三数组序列与标准数组标签序列进行比对,能够判断第三数组序列与标准数组标签序列是匹配,若不匹配,就会丢弃不匹配的第三数组序列对应的数据块。
在上述实施例的基础上,还进行了以下改进:
数据获取装置,用于根据接收的分类信息请求,获取分类信息请求对应的第一数据块组;
标签校验装置,用于获取第一数据块组中每个数据块对应的数据标签的数组长度;
将每个数据块对应的数组长度与预存储的标准数组长度进行比对,丢弃第一数据块组中数组长度与标准数据长度不匹配的数据块,得到第二数据块组;
分类信息校验装置,还用于获取第二数据块组中每个数据块对应的公共分类信息;
解析公共分类信息,得到第三数组序列;
根据第一数组序列中数据的组成以及组成数据的顺序确定第一分类信息。
在上述实施例中,公共分类信息是每个数据块都具备的,通过解析公共分类信息可以获取第三数组序列,在通过第一数组序列可以确定第一分类信息,通过公共分类信息确定分类信息准确度更高。
在上述实施例的基础上,还进行了一下改进:
数据获取装置,用于根据接收的分类信息请求,获取分类信息请求对应的第一数据块组;
标签校验装置,用于获取第一数据块组中每个数据块对应的数据标签的数组长度;
将每个数据块对应的数组长度与预存储的标准数组长度进行比对,丢弃第一数据块组中数组长度与标准数据长度不匹配的数据块,得到第二数据块组;
分类信息校验装置,用于解析第二数据块组,得到第二数据块组中每个数据块对应的第一分类信息;
将每个数据块对应的第一分类信息与分类信息请求对应的第二分类信息进行比对;丢弃第二数据块组中第一分类信息与第二分类信息不匹配的数据块,得到第三数据块组;
差错检验装置,用于提取第三数据块组内每个数据块的数据差错检错码,将提取到的数据差错检错码与预存储的数据差错检错码进行比对,当提取到的数据差错检错码与预存储的数据差错检错码不匹配时,则丢弃第三数据块组内提取到的数据差错检错码与预存储的数据差错检错码不匹配的数据块。
在上述实施例中,针对的是已通过数据标签验证和分类信息验证的第三数据块组,为深层次的差错验证,为的是对接收到的数据块进行进一步的验证,通过对数据差错检错码的验证,能够最大程度上丢弃或删除出现错误的数据块,保证数据块的传输效率,也确保了网络传输及运行的稳定。
在上述实施例的基础上,还进行了以下改进:
本发明提供的数据差错的监测系统,包括数据获取装置、标签校验装置以及分类信息校验装置;
数据获取装置,用于根据接收的分类信息请求,获取分类信息请求对应的第一数据块组;
标签校验装置,用于获取第一数据块组中每个数据块对应的数据标签的数组长度;
将每个数据块对应的数组长度与预存储的标准数组长度进行比对,丢弃第一数据块组中数组长度与标准数据长度不匹配的数据块,得到第二数据块组;
标签校验装置,还用于判断第二数据块组内每个数据块的数据标签的数据组成,若包含除0和1以外的其他数据,则丢弃包含其他数据的数据标签对应的数据块
分类信息校验装置,用于解析第二数据块组,得到第二数据块组中每个数据块对应的第一分类信息;
将每个数据块对应的第一分类信息与分类信息请求对应的第二分类信息进行比对;丢弃第二数据块组中第一分类信息与第二分类信息不匹配的数据块,得到第三数据块组。
上述实施例中,对第二数据块组内的数据标签的数据组成进行判断,正常情况下,数据标签的数据组成只包含0和1组成的数组序列,若包含除0和1以外的数据,则丢弃包含0和1以外数据的数据标签对应的数据块。能够更进一步的对数据标签的数组长度与标准数组长度相同的数据块进行判断,进一步丢弃包含特殊数据的数据块。
在上述实施例中,在对数据标签的数组长度进行比对前,对第一数据块组按照数据块的组成进行分割,判断第一数据块组分割后是否包含公共分类信息字段、数据传输参数字段和数据标签字段,丢弃第一数据块组中有字段缺失的数据块,通过对第一数据块组的组成进行判断,能够清楚的丢弃缺失部分字段的数据块,对数据块进行了初级的筛选,在一定程度上减轻了后续差错检测的压力,提高了差错检测的效率。
读者应理解,在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不必针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,上述描述的装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。
作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本发明实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分,或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以权利要求的保护范围为准。
Claims (10)
1.一种数据差错的检测方法,其特征在于,所述方法包括:
根据接收的分类信息请求,获取所述分类信息请求对应的第一数据块组;
获取所述第一数据块组中每个数据块对应的数据标签的数组长度;
将所述第一数据块组中每个数据块对应的数据标签的数组长度与预存储的标准数组长度进行比对,丢弃所述第一数据块组中数组长度与所述标准数据长度不匹配的数据块,得到第二数据块组;
解析所述第二数据块组,得到所述第二数据块组中每个数据块对应的第一分类信息;
将所述第二数据块组中每个数据块对应的第一分类信息与所述分类信息请求对应的第二分类信息进行比对;丢弃所述第二数据块组中第一分类信息与所述第二分类信息不匹配的数据块,得到第三数据块组。
2.根据权利要求1所述的数据差错的检测方法,其特征在于,所述解析所述第二数据块组,得到第一分类信息的具体步骤如下:
获取所述第二数据块组中每个数据块对应的公共分类信息;
解析所述公共分类信息,得到第一数组序列;
根据所述第一数组序列中数据的组成以及组成数据的顺序确定所述第一分类信息。
3.根据权利要求2所述的数据差错的检测方法,其特征在于,所述方法还包括:
解析第三分类信息,得到第二数组序列,其中,所述第三分类信息为与所述第三数据块组中每个数据块对应的分类信息;
将所述第三数据块组中每个数据块对应的第二数组序列与标准分类信息序列进行比对,丢弃所述第三数据块组中第二数组序列与所述标准分类信息序列不匹配的数据块,得到第四数据块组。
4.根据权利要求3所述的数据差错的检测方法,其特征在于,所述方法还包括:
解析所述第三数据块组中每个数据块的数据标签,得到第三数组序列;
将所述第三数据块组中每个数据块对应的第三数组序列与标准数组标签序列进行比对,丢弃所述第三数据块组中第三数组序列与所述标准数组标签序列不匹配的数据块。
5.根据权利要求1-4任一项所述的数据差错的检测方法,其特征在于,在所述获取所述第一数据块组对应的数据标签的数组长度之前,所述方法还包括:
将所述第一数据块组中每个数据块按照公共分类信息字段、数据传输参数字段以及数据标签字段的组成形式进行分割,判断所述第一数据块组的数据块分割后是否包含公共分类信息字段、数据传输参数字段以及数据标签字段的所有字段,丢弃所述第一数据块组中缺失部分字段的数据块。
6.一种数据差错的检测系统,其特征在于,所述系统包括数据获取装置、标签校验装置以及分类信息校验装置;
所述数据获取装置,用于根据接收的分类信息请求,获取所述分类信息请求对应的第一数据块组;
所述标签校验装置,用于获取所述第一数据块组中每个数据块对应的数据标签的数组长度;
将所述第一数据块组中每个数据块对应的数据标签的数组长度与预存储的标准数组长度进行比对,丢弃所述第一数据块组中数组长度与所述标准数据长度不匹配的数据块,得到第二数据块组;
所述分类信息校验装置,用于解析所述第二数据块组,得到所述第二数据块组中每个数据块对应的第一分类信息;
将所述第二数据块组中每个数据块对应的第一分类信息与所述分类信息请求对应的第二分类信息进行比对;丢弃所述第二数据块组中第一分类信息与所述第二分类信息不匹配的数据块,得到第三数据块组。
7.根据权利要求6所述的数据差错的检测系统,其特征在于,所述分类信息校验装置,还用于获取所述第二数据块组中每个数据块对应的公共分类信息;
解析所述公共分类信息,得到第一数组序列;
根据所述第一数组序列中数据的组成以及组成数据的顺序确定所述第一分类信息。
8.根据权利要求7所述的数据差错的检测系统,其特征在于,所述系统还包括综合校验装置;
所述综合校验装置,用于解析第三分类信息,得到第二数组序列,其中,所述第三分类信息为与所述第三数据块组中每个数据块对应的分类信息;
将所述第三数据块组中每个数据块对应的第二数组序列与标准分类信息序列进行比对,丢弃所述第三数据块组中第二数组序列与所述标准分类信息序列不匹配的数据块,得到第四数据块。
9.根据权利要求8所述的数据差错的检测系统,其特征在于,所述标签校验装置,还用于解析所述第三数据块组中每个数据块的数据标签,得到第三数组序列;
将所述第三数据块组中每个数据块对应的第三数组序列与标准数组标签序列进行比对,丢弃所述第三数据块组中第三数组序列与所述标准数组标签序列不匹配的数据块。
10.根据权利要求6至9任一项所述的数据差错的检测系统,其特征在于,所述数据获取装置,还用于将所述第一数据块组中每个数据块按照公共分类信息字段、数据传输参数字段以及数据标签字段的组成形式进行分割,判断所述第一数据块组的数据块分割后是否包含公共分类信息字段、数据传输参数字段以及数据标签字段的所有字段,丢弃所述第一数据块组中有字段缺失的数据块。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710852316.7A CN107689846B (zh) | 2017-09-20 | 2017-09-20 | 一种数据差错的检测方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710852316.7A CN107689846B (zh) | 2017-09-20 | 2017-09-20 | 一种数据差错的检测方法及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107689846A true CN107689846A (zh) | 2018-02-13 |
CN107689846B CN107689846B (zh) | 2021-01-26 |
Family
ID=61156439
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710852316.7A Active CN107689846B (zh) | 2017-09-20 | 2017-09-20 | 一种数据差错的检测方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107689846B (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6434165B1 (en) * | 1998-08-19 | 2002-08-13 | 3Com Corporation | Method and system to abort data communication traffic in a communication network |
CN1784057A (zh) * | 2004-11-30 | 2006-06-07 | LG-Nortel株式会社 | 用于检测移动通信系统中的系统信息的差错的方法 |
CN102347819A (zh) * | 2011-08-22 | 2012-02-08 | 广东电网公司电力科学研究院 | 一种门禁系统中的可变长度数据传输方法 |
CN103957080A (zh) * | 2014-04-30 | 2014-07-30 | 浙江中控技术股份有限公司 | 一种数据完整性校验方法及系统 |
CN106656435A (zh) * | 2016-11-01 | 2017-05-10 | 深圳职业技术学院 | 一种数据首传、重传方法 |
CN107181737A (zh) * | 2017-04-24 | 2017-09-19 | 深圳市中远达智能科技有限公司 | 一种数据处理方法、读写器及服务器 |
-
2017
- 2017-09-20 CN CN201710852316.7A patent/CN107689846B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6434165B1 (en) * | 1998-08-19 | 2002-08-13 | 3Com Corporation | Method and system to abort data communication traffic in a communication network |
CN1784057A (zh) * | 2004-11-30 | 2006-06-07 | LG-Nortel株式会社 | 用于检测移动通信系统中的系统信息的差错的方法 |
CN102347819A (zh) * | 2011-08-22 | 2012-02-08 | 广东电网公司电力科学研究院 | 一种门禁系统中的可变长度数据传输方法 |
CN103957080A (zh) * | 2014-04-30 | 2014-07-30 | 浙江中控技术股份有限公司 | 一种数据完整性校验方法及系统 |
CN106656435A (zh) * | 2016-11-01 | 2017-05-10 | 深圳职业技术学院 | 一种数据首传、重传方法 |
CN107181737A (zh) * | 2017-04-24 | 2017-09-19 | 深圳市中远达智能科技有限公司 | 一种数据处理方法、读写器及服务器 |
Also Published As
Publication number | Publication date |
---|---|
CN107689846B (zh) | 2021-01-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106708909A (zh) | 数据质量的检测方法和装置 | |
CN110046196A (zh) | 标识关联方法及装置、电子设备 | |
CN115470788B (zh) | 一种用于数据中台的数据分析方法及系统 | |
CN113098887A (zh) | 一种基于网站联合特征的钓鱼网站检测方法 | |
CN111740977B (zh) | 投票检测方法及装置、电子设备、计算机可读存储介质 | |
CN107545043A (zh) | 一种基于数据质量检测的数据应用方法及装置 | |
CN106874165A (zh) | 网页检测方法和装置 | |
CN104756113A (zh) | 用于检测数据源中的偏差的方法、设备和计算机程序 | |
CN113051500A (zh) | 一种融合多源数据的钓鱼网站识别方法及系统 | |
CN105100023B (zh) | 数据包特征提取方法及装置 | |
CN109543408A (zh) | 一种恶意软件识别方法和系统 | |
CN111262854A (zh) | 互联网反作弊行为方法、装置、设备和可读存储介质 | |
CN112162977A (zh) | 一种面向mes的海量数据去冗余方法和系统 | |
CN109697267A (zh) | Cms识别方法及装置 | |
JPWO2018069950A1 (ja) | ログ分析方法、システムおよびプログラム | |
CN110162973A (zh) | 一种Webshell文件检测方法及装置 | |
CN106790025B (zh) | 一种对链接进行恶意性检测的方法及装置 | |
CN107689846A (zh) | 一种数据差错的检测方法及系统 | |
CN112953948A (zh) | 一种实时网络横向蠕虫攻击流量检测方法及装置 | |
CN112529629A (zh) | 恶意用户评论刷量行为识别方法及系统 | |
CN107733875A (zh) | 一种数据传输方法及系统 | |
CN109409091B (zh) | 检测Web页面的方法、装置、设备以及计算机存储介质 | |
CN109308264A (zh) | 数据脱敏效果的评价方法及相应设备和存储介质 | |
CN115801538A (zh) | 场站服务器应用资产深度识别方法、系统及设备 | |
CN112272184B (zh) | 一种工业流量检测的方法、装置、设备及介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |