CN101826950A - 一种高效的流数据解包及处理方法 - Google Patents

一种高效的流数据解包及处理方法 Download PDF

Info

Publication number
CN101826950A
CN101826950A CN201010153572A CN201010153572A CN101826950A CN 101826950 A CN101826950 A CN 101826950A CN 201010153572 A CN201010153572 A CN 201010153572A CN 201010153572 A CN201010153572 A CN 201010153572A CN 101826950 A CN101826950 A CN 101826950A
Authority
CN
China
Prior art keywords
flow data
receiving terminal
data
streaming data
transmitting terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201010153572A
Other languages
English (en)
Other versions
CN101826950B (zh
Inventor
张士强
张红旗
周旭
刘翔
董江涛
酒乐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
CETC 54 Research Institute
Original Assignee
CETC 54 Research Institute
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by CETC 54 Research Institute filed Critical CETC 54 Research Institute
Priority to CN2010101535725A priority Critical patent/CN101826950B/zh
Publication of CN101826950A publication Critical patent/CN101826950A/zh
Application granted granted Critical
Publication of CN101826950B publication Critical patent/CN101826950B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

一种高效的流数据解包及处理方法，解决需要寻找更合理的方法来解决流数据的解包及处理过程中的数据丢失问题，采用的技术方案是，以上方法是在发送端将一组流数据压缩打包后发送给接收端的过程中实现的，以上方法的具体步骤是：发送端将所说的一组流数据进行编码生成序列标识码；发送端借助配套压缩工具包将一组流数据打包生成压缩包后、发送给接收端；接收端收到压缩包进行解压，并验证流数据的完整性，接收端将验证后的未收到的流数据序列标识码发送请求信号至相应的发送端；发送端将接收端未收到的流数据再次发送给接收端，直至接收端接收到完整的流数据后，进行整体存储。本发明的优点是保证数据完整性同时又提高了解包效率。

Description

一种高效的流数据解包及处理方法
技术领域
本发明涉及通信、定位流数据的快速解包处理技术方法，特别适合于卫星通信、遥控遥测、卫星定位及无线通信等应用领域。
背景技术
流数据是一种具有实时、快速和连续到达特点的动态数据。流数据解包的特点是对接收到的流数据进行动态存储，保证动态数据无错误接收，保持数据的完整性。在卫星通信、遥控遥测、卫星定位及无线通信领域中，对流数据解包处理的实现方法不足之处在于：由于通信信号不稳定等原因，一般的方法进行解包处理时可能造成流数据信息的丢失，使得流数据不再完整，从而造成重要信息的缺失。为了解决这一问题，现有技术一般采取接收端向发送端发出重发请求信号，由于接收端不清楚压缩包中的哪一个文件未收到，发送端只好将压缩包中的所有文件进行重新发送，影响工作效率，还浪费了大量的资源。因此需要寻找更合理的方法来解决流数据的解包及处理过程中的数据丢失问题，以保证接收到流数据的完整性。
发明内容
本发明的目的是为了解决需要寻找更合理的方法来解决流数据的解包及处理过程中的数据丢失问题，设计了一种高效的流数据解包及处理方法，对流数据包中的每一个文件进行编码，生成序列标识码，在发送时将完整的序列向量表同时发送给接收端，接收端通过比对得知未接收到的文件。
本发明为实现发明目的采用的技术方案是，一种高效的流数据解包及处理方法，以上方法是在发送端将一组流数据压缩打包后发送给接收端的过程中实现的，上述的方法的具体步骤是：
①、发送端将所说的一组流数据进行编码生成序列标识码；
②、发送端借助配套压缩工具包将自己的ID与一组流数据打包生成压缩包后、发送给接收端；
③、接收端收到压缩包进行解压，并验证流数据的完整性，如果数据完整，则进行存储，否则进入步骤④；
④、接收端依照压缩包中解压出的发送端ID将验证后的未收到的流数据序列标识码发送请求信号至相应ID的发送端；
⑤、发送端将接收端未收到的流数据再次发送给接收端，返回步骤③，直至接收端接收到完整的流数据后，进行整体存储。
本发明的工作原理是：接收端接收到流数据，经过解压与解析后判断是否有丢包数据，若发现丢包数据，发送丢包数据信息至发送端，发送端只需要将接收端未接收到的文件重新发送即可，无需将所有文件发送，直至没有丢包数据，接收到一组或一条完整的流数据并进行业务处理。
本发明的有益效果是：采用对每包流数据中的文件进行编码生成序列标识码，同时发送端将完整的序列向量表在压缩包中一起发送给接收端，便于接收端解压出的文件进行判断比对，从而达到保证数据完整性的目的；本发明采用记录流数据错误信息的方法，有选择的进行数据重传，从而提高解包的效率。
下面结合附图对本发明进行详细说明。
附图说明
图1是本发明的方法流程图。
具体实施方式
参看附图，一种高效的流数据解包及处理方法，以上方法是在发送端将一组流数据压缩打包后发送给接收端的过程中实现的，上述的方法的具体步骤是：
①、发送端将所说的一组流数据进行编码生成序列标识码；
②、发送端借助配套压缩工具包将自己的ID与一组流数据打包生成压缩包后、发送给接收端；
③、接收端收到压缩包进行解压，并验证流数据的完整性，如果数据完整，则进行存储，否则进入步骤④；
④、接收端依照压缩包中解压出的发送端ID将验证后的未收到的流数据序列标识码发送请求信号至相应ID的发送端；
⑤、发送端将接收端未收到的流数据再次发送给接收端，返回步骤③，直至接收端接收到完整的流数据后，进行整体存储。
为了便于接收端判定流数据的完整性，上述的步骤②中，发送端在生成的压缩包中添加有用于接收端比对的数据序列向量表，接收端通过接收到的数据序列标识码与数据序列向量表比对判别流数据的完整性。
上述的步骤⑤中，发送端将接收端未收到的流数据再次发送给接收端的方式也是借助配套压缩工具包压缩后发送至接收端。
本发明的方法在具体实施时，如图1所示，原理过程由接收流数据、流数据解析、记录丢包信息、流数据处理、发送丢包信息、存储完整数据组成。其包括步骤如下：
1)、借助ReadData函数接收到有固定格式(格式包括：帧头、帧尾、数据区、发送目的用户名等信息)的流数据(如文件数据)，读取文件流数据的指令，根据数据区获取文件的存放位置并把文件记录下来；
2)、读取文件，通过Parse函数对数据进行解析，以获取发送通讯方式、发送数据中发送方的用户名、目的地址的IP和端口号；设定每包数据的长度为1100byte，将文件按固定的格式(帧头10byte、帧尾10byte、数据区1000byte、发送目的用户名20byte等)依次发送；
3)、通过Lose函数进行丢失数据的信息记录，对每包数据中的sign参数进行比较，将比较结果(丢包信息)临时记录下来，接收到发送流数据结束信号后，根据丢包信息以步骤1)中的格式发送丢包数据请求，等待接收所丢失的流数据；
4)、通过收到的丢包的数据信息，重新接收数据，然后调用ReadData函数解析丢包的信息，通过步骤1)中记录下的文件路径再次读取文件，获取到发送丢失的文件数据，通过ReadData函数重新发送所丢的流数据信息；
5)、接收到流数据以及丢包信息后，Data函数对每包data数据区中流数据进行依次拼帧处理或依次写入文件，存储一组或一条完整的流数据或文件。

Claims (3)

1.一种高效的流数据解包及处理方法，以上方法是在发送端将一组流数据压缩打包后发送给接收端的过程中实现的，其特征在于：所述的方法的具体步骤是：
①、发送端将所说的一组流数据进行编码生成序列标识码；
②、发送端借助配套压缩工具包将自己的ID与一组流数据打包生成压缩包后、发送给接收端；
③、接收端收到压缩包进行解压，并验证流数据的完整性，如果数据完整，则进行存储，否则进入步骤④；
④、接收端依照压缩包中解压出的发送端ID将验证后的未收到的流数据序列标识码发送请求信号至相应ID的发送端；
⑤、发送端将接收端未收到的流数据再次发送给接收端，返回步骤③，直至接收端接收到完整的流数据后，进行整体存储。
2.根据权利要求1所述的一种高效的流数据解包及处理方法，其特征在于：所述的步骤②中，发送端在生成的压缩包中添加有用于接收端比对的数据序列向量表，接收端通过接收到的数据序列标识码与数据序列向量表比对判别流数据的完整性。
3.根据权利要求1所述的一种高效的流数据解包及处理方法，其特征在于：所述的步骤⑤中，发送端将接收端未收到的流数据再次发送给接收端的方式也是借助配套压缩工具包压缩后发送至接收端。
CN2010101535725A 2010-04-23 2010-04-23 一种高效的流数据解包及处理方法 Active CN101826950B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2010101535725A CN101826950B (zh) 2010-04-23 2010-04-23 一种高效的流数据解包及处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2010101535725A CN101826950B (zh) 2010-04-23 2010-04-23 一种高效的流数据解包及处理方法

Publications (2)

Publication Number Publication Date
CN101826950A true CN101826950A (zh) 2010-09-08
CN101826950B CN101826950B (zh) 2012-08-22

Family

ID=42690674

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2010101535725A Active CN101826950B (zh) 2010-04-23 2010-04-23 一种高效的流数据解包及处理方法

Country Status (1)

Country Link
CN (1) CN101826950B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102654531A (zh) * 2011-03-04 2012-09-05 河南电力试验研究所 一种缺失电能质量数据追补方法和装置
CN103024401A (zh) * 2012-11-23 2013-04-03 中国电影科学技术研究所 一种用于视频文件补发数据的方法及系统
CN106650473A (zh) * 2016-12-01 2017-05-10 中国工商银行股份有限公司 校验多文件封装包的方法及系统、发送装置、接收装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004248322A (ja) * 2000-08-17 2004-09-02 Matsushita Electric Ind Co Ltd データ伝送装置およびデータ伝送方法
CN1852265A (zh) * 2006-05-30 2006-10-25 杭州华为三康技术有限公司 一种同步帧在ip网络上传输的方法及用于传输的网络设备
CN101193284A (zh) * 2007-12-27 2008-06-04 北京中星微电子有限公司 压缩文件传输完整性验证方法、系统与装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004248322A (ja) * 2000-08-17 2004-09-02 Matsushita Electric Ind Co Ltd データ伝送装置およびデータ伝送方法
CN1852265A (zh) * 2006-05-30 2006-10-25 杭州华为三康技术有限公司 一种同步帧在ip网络上传输的方法及用于传输的网络设备
CN101193284A (zh) * 2007-12-27 2008-06-04 北京中星微电子有限公司 压缩文件传输完整性验证方法、系统与装置

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102654531A (zh) * 2011-03-04 2012-09-05 河南电力试验研究所 一种缺失电能质量数据追补方法和装置
CN102654531B (zh) * 2011-03-04 2015-05-20 国网河南省电力公司电力科学研究院 一种缺失电能质量数据追补方法和装置
CN103024401A (zh) * 2012-11-23 2013-04-03 中国电影科学技术研究所 一种用于视频文件补发数据的方法及系统
CN103024401B (zh) * 2012-11-23 2015-04-01 中国电影科学技术研究所 一种用于视频文件补发数据的方法及系统
CN106650473A (zh) * 2016-12-01 2017-05-10 中国工商银行股份有限公司 校验多文件封装包的方法及系统、发送装置、接收装置

Also Published As

Publication number Publication date
CN101826950B (zh) 2012-08-22

Similar Documents

Publication Publication Date Title
KR100795445B1 (ko) 모바일 환경에서 패킷화된 데이터 저장 기능을 지니는 무선주파수 식별 시스템
CN100425034C (zh) 分组发送装置、分组接收装置和分组传输方法
CN101707616B (zh) 一种用户数据报协议数据包压缩、解压缩的方法及装置
ES2259296T3 (es) Aparato para transmision/recepcion de un tren de bits en una red y procedimiento correspondiente.
US9166931B2 (en) Method and device for improving robustness of context update message in robust header compression
ES2389388T3 (es) Método y dispositivo para transmitir y recibir paquetes de datos
US8855090B2 (en) Packet transmission system based on wireless personal area network and method thereof
CN105743616A (zh) 基于北斗短报文通信的长报文分割和可靠通信方法
JP2001298369A5 (zh)
EP3573366B1 (en) Data transmission method and related device
CN101453463B (zh) 一种移动多媒体广播系统的数据包封装、发送和接收方法
KR20160074530A (ko) 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
CN101826950B (zh) 一种高效的流数据解包及处理方法
JP7235149B2 (ja) 情報処理装置、通信システム、情報処理方法およびプログラム
WO2016112837A1 (zh) 一种数据信息传输的方法、装置及系统
CN104753856A (zh) 一种文件收发方法与系统
CN110535812A (zh) 报文传输方法、通信装置和系统
CN104811265A (zh) 基带帧的封装方法及解封装方法
CN109902055A (zh) 一种适用窄带数据网络的slip编码数据流传输方法
US7788211B2 (en) Robust and efficient compression of list of items
CN113364508A (zh) 一种语音数据的传输控制方法、系统及设备
CN102300258A (zh) 上下文重用的方法及系统
CN112637703B (zh) 一种web端实时对讲系统及对讲方法
CN102469011B (zh) 一种数据发送方法和装置
WO2001067715A1 (en) Pre-verification of checksums used with checksum-based header compression

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant