CN105635182B - 一种数据压缩传输方法及系统 - Google Patents

一种数据压缩传输方法及系统 Download PDF

Info

Publication number
CN105635182B
CN105635182B CN201610142053.6A CN201610142053A CN105635182B CN 105635182 B CN105635182 B CN 105635182B CN 201610142053 A CN201610142053 A CN 201610142053A CN 105635182 B CN105635182 B CN 105635182B
Authority
CN
China
Prior art keywords
data
server
client
message
addition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610142053.6A
Other languages
English (en)
Other versions
CN105635182A (zh
Inventor
王卓
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Icoli Information Technology Shanghai Co ltd
Original Assignee
Sichuan Shengshi Fish Sky Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sichuan Shengshi Fish Sky Technology Co Ltd filed Critical Sichuan Shengshi Fish Sky Technology Co Ltd
Priority to CN201610142053.6A priority Critical patent/CN105635182B/zh
Publication of CN105635182A publication Critical patent/CN105635182A/zh
Application granted granted Critical
Publication of CN105635182B publication Critical patent/CN105635182B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/55—Push-based network services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/565—Conversion or adaptation of application format or content
    • H04L67/5651—Reducing the amount or size of exchanged application data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality

Abstract

本发明公开了一种数据压缩传输方法及系统，方法包括：提取待传输数据报文的头尾数据，将所述头尾数据分别预先定义在客户端和服务器上；客户端将所述数据报文中除头尾数据外的其他所有数据进行压缩编码，并通过网络传输到服务器；服务器接收压缩编码后的所述数据报文中除头尾数据外的其他所有数据，并对其进行解析获取所述数据报文中除头尾数据外的其他所有数据。本发明节省了网络数据传输的数据量。

Description

一种数据压缩传输方法及系统
技术领域
本发明涉及数据压缩传输技术领域，特别是一种数据压缩传输方法及系统。
背景技术
目前互联网网络数据传输时一般都遵循TCP/IP协议实现，数据传输的过程都使用报文数据的形式，把数据分隔定义一定长度报文，再加上报文头尾加入的目的地址、数据验证等数据，达到数据推送传输稳定性和安全性。
但是在一些需要节省网络传输的数据量的应用情况下，目前的技术会增加网络传输的数据量。
发明内容
本发明的目的是提供一种节省网络数据传输的数据量的数据压缩传输方法及系统。
为了解决上述技术问题，本发明提供一种数据压缩传输方法，包括：
步骤一、提取待传输数据报文的头尾数据，将所述头尾数据分别预先定义在客户端和服务器上；
步骤二、客户端将所述数据报文中除头尾数据外的其他所有数据进行压缩编码，并通过网络传输到服务器；
步骤三、服务器接收压缩编码后的所述数据报文中除头尾数据外的其他所有数据，并对其进行解析获取所述数据报文中除头尾数据外的其他所有数据。
所述客户端和服务器处于网络的长连接状态。
所述待传输数据报文为IP数据报。
该方法还包括：
服务器对接收到的压缩编码后的所述数据报文中除头尾数据外的其他所有数据不解析，利用压缩编码技术标准，给压缩编码后的所述其他所有数据赋值压缩技术标准的外壳代码序列号Cd，并把Cd返回到客户端；
客户端根据所述头尾数据定义值和Cd将服务器解析出的数据原文形成镜像展示在客户端上。
本发明实施例还提供一种数据压缩传输系统，包括客户端和服务器；所述客户端和服务器上分别预先定义了提取的待传输数据报文的头尾数据；
所述客户端，用于将所述数据报文中除头尾数据外的其他所有数据进行压缩编码，并通过网络传输到所述服务器；
所述服务器，用于接收压缩编码后的所述数据报文中除头尾数据外的其他所有数据，并对其进行解析获取所述数据报文中除头尾数据外的其他所有数据。
在一个实施例中，所述客户端和服务器处于网络的长连接状态。
在一个实施例中，所述待传输数据报文为IP数据报。
在一个实施例中，所述服务器，还用于对接收到的压缩编码后的所述数据报文中除头尾数据外的其他所有数据不解析，利用压缩编码技术标准，给压缩编码后的所述其他所有数据赋值压缩技术标准的外壳代码序列号Cd，并把Cd返回到所述客户端；所述客户端，还用于根据所述头尾数据定义值和Cd将服务器解析出的数据原文形成镜像展示在所述客户端上。
本发明中流量压缩的原理是基于传统的数据压缩技术，在原有的数据压缩技术的基础上，结合移动端数据请求响应的特性(移动端数据推送技术)。把传统压缩技术实现的压缩了的数据，经过推送原理(简单数据报)经过数据报的头尾值分别定义在客户端和服务器上约定定义，把原本需要推送的报文头尾数据定义在客户端和服务器，不再随推送的数据一同推送，达到流量压缩的目的，推送的内容是必要的压缩数据，而报文头尾的数据被定义在客户端和服务器。由客户端和服务器两端已经定义了的报文头尾值，嵌入必要的压缩数据经过解析获取原文，以此节省了网络传输的数据量。
本发明的有益效果是：取出待传输数据报文的头尾数据，分别定义在客户端和服务器，把原本需要推送的报文头尾数据定义在客户端和服务器，不再随推送的数据一同推送，达到流量压缩的目的，推送的内容是必要的压缩数据，而报文头尾的数据被定义在客户端和服务器。由客户端和服务器两端已经定义了的报文头尾值，嵌入必要的压缩数据经过解析获取原文，以此节省了网络传输的数据量。优选实施例中使用长连接状态，以此达到数据流量被压缩传输，进一步节省了网络传输的数据量。
附图说明
图1是本发明数据压缩传输方法流程图；
图2是本发明数据压缩传输系统示意图。
具体实施方式
下面结合附图和实施方式对本发明作进一步的说明。
本发明的主要原理为：取出待传输数据报文的头尾数据，分别定义在客户端和服务器，把原本需要推送的报文头尾数据定义在客户端和服务器，不再随推送的数据一同推送，达到流量压缩的目的，推送的内容是必要的压缩数据，而报文头尾的数据被定义在客户端和服务器。由客户端和服务器两端已经定义了的报文头尾值，嵌入必要的压缩数据经过解析获取原文，以此节省了网络传输的数据量。
如图1所示，为本发明实施例示出的一种数据压缩传输方法流程图，包括步骤S1-S3：
步骤一(S1)、提取待传输数据报文的头尾数据，将所述头尾数据分别预先定义在客户端和服务器上；
步骤二(S2)、客户端将所述数据报文中除头尾数据外的其他所有数据进行压缩编码，并通过网络传输到服务器；
步骤三(S3)、服务器接收压缩编码后的所述数据报文中除头尾数据外的其他所有数据，并对其进行解析获取所述数据报文中除头尾数据外的其他所有数据。
在一个示例中，所述客户端和服务器处于网络的长连接状态。所述待传输数据报文为IP数据报。该方法还包括：服务器对接收到的压缩编码后的所述数据报文中除头尾数据外的其他所有数据不解析，利用压缩编码技术标准，给压缩编码后的所述其他所有数据赋值压缩技术标准的外壳代码序列号Cd，并把Cd返回到客户端；客户端根据所述头尾数据定义值和Cd将服务器解析出的数据原文形成镜像展示在客户端上。
本发明方案中，取出待传输数据报文的头尾数据，分别定义在客户端和服务器，把原本需要推送的报文头尾数据定义在客户端和服务器，不再随推送的数据一同推送，达到流量压缩的目的，推送的内容是必要的压缩数据，而报文头尾的数据被定义在客户端和服务器。由客户端和服务器两端已经定义了的报文头尾值，嵌入必要的压缩数据经过解析获取原文，以此节省了网络传输的数据量。优选实施例中使用长连接状态，以此达到数据流量被压缩传输，进一步节省了网络传输的数据量。
下面结合一个具体示例说明本发明。
本发明中数据压缩技术只是利用现有优秀的压缩技术，结合数据传输过程，以实现数据流量压缩。以APP应用系统为例，在本发明示出的APP应用系统里面，耦合的第三方应用产品，需要对第三方应用的行为数据实现消息推送。第三方应用系统的耦合，是基于第三方应用产品及用户在该产品上注册的ID，两者相互结合一起耦合于本发明APP应用系统，本发明中的客户端实现表单提交，服务器端获取表单请求，向第三方应用的服务端发送登录(或者注册)状态请求，实现用户经过本发明APP对第三方应用的登录(或者注册)的"签到"行为。为了节省移动端(即客户端)应用的流量，本发明APP应用系统自主研发了该数据压缩传输技术。
根据TCP/IP原理，数据传输的过程都使用报文数据的形式，把数据分隔定义一定长度加上报文头尾加入的目的地址数据验证数据等，达到数据推送目的稳定性和安全性。
本发明示例中的数据推送过程是：取出报文的头尾数据，分别定义在客户端和服务器，使用长连接状态，以此达到数据流量被压缩传输。
流量压缩的原理是基于传统的数据压缩技术，在原有的数据压缩技术的基础上，结合移动端数据请求响应的特性(移动端数据推送技术)。把传统压缩技术实现的压缩了的数据，经过推送原理(简单数据报)经过数据报的头尾值分别定义在客户端和服务器约定定义，把原本需要推送的报文头尾数据定义在客户端和服务器，不再随推送的数据一同推送，达到流量压缩的目的，推送的内容是必要的压缩数据，而报文头尾的数据被定义在客户端和服务器。由客户端和服务器两端已经定义了的报文头尾值，嵌入必要的压缩数据经过解析获取原文，以此节省了网络传输的数据量。
①客户端第一次向服务器提交请求：
客户端向服务器第一次提交请求数据，该请求数据值是结合现有传统技术的基础上，去掉冗余部分的表单内容，提交关键的HTTPRequestReadyState值，且该值不再分隔成片，而是采取压缩(压缩数据包A)提交。该过程没有能实现节省数据流量。
客户端与服务器因为都实现定义了IP数据报的报文头尾定义值(IP报文头尾值h/r)，当客户端把A第一次向服务器提交(提交的实现基础基于客户端与服务器端的长连接状态C行为)，服务器API把A嵌入在h/r之间，服务器端获取并可解析接收到的压缩后的密文。但也可以不解析，而是利用压缩编码技术标准，给密文赋值压缩技术标准的外壳(代码序列号Cd)。把该外壳(Cd)Response客户端。
②、客户端接收到Cd值：
根据h/r定义，以及网络的长连接属性(不做数据交换而是一种持久性的网络状态值在服务端和客户端的存在)。客户端由h/r定义值、代码序列号Cd与服务器TCP/IP解析出的数据原文形成镜像展示在客户端模板上。该过程推送的不再是数据，而是压缩数据的外壳值(代码序列号Cd)充分节省了数据流量的同时还提升了网络响应速度。
经过验证，本发明客户端到服务器的提交及响应完成的整个过程结束，这个过程可以体现出：在数据传输整个过程，数据流量压缩技术实现了至少45％的流量值的节省，网络速度的提升可以达到60％。
基于同一构思，参看图2，本发明实施例还提供一种数据压缩传输系统，包括客户10和服务器20；所述客户端10和服务器20上分别预先定义了提取的待传输数据报文的头尾数据；
所述客户端10，用于将所述数据报文中除头尾数据外的其他所有数据进行压缩编码，并通过网络传输到所述服务器20；
所述服务器20，用于接收压缩编码后的所述数据报文中除头尾数据外的其他所有数据，并对其进行解析获取所述数据报文中除头尾数据外的其他所有数据。
在一个实施例中，所述客户端10和服务器20处于网络的长连接状态。所述待传输数据报文为IP数据报。所述服务器20，还用于对接收到的压缩编码后的所述数据报文中除头尾数据外的其他所有数据不解析，利用压缩编码技术标准，给压缩编码后的所述其他所有数据赋值压缩技术标准的外壳代码序列号Cd，并把Cd返回到所述客户端10；所述客户端10，还用于根据所述头尾数据定义值和Cd将服务器解析出的数据原文形成镜像展示在所述客户端10上。提升了网络响应速度。
本发明中流量压缩的原理是基于传统的数据压缩技术，在原有的数据压缩技术的基础上，结合移动端数据请求响应的特性(移动端数据推送技术)。把传统压缩技术实现的压缩了的数据，经过推送原理(简单数据报)经过数据报的头尾值分别定义在客户端和服务器上约定定义，把原本需要推送的报文头尾数据定义在客户端和服务器，不再随推送的数据一同推送，达到流量压缩的目的，推送的内容是必要的压缩数据，而报文头尾的数据被定义在客户端和服务器。由客户端和服务器两端已经定义了的报文头尾值，嵌入必要的压缩数据经过解析获取原文，以此节省了网络传输的数据量。
以上对本发明进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述。以上实施例的说明只是用于帮助理解本发明的核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (6)

1.一种数据压缩传输方法，其特征在于，包括：
步骤一、提取待传输数据报文的头尾数据，将所述头尾数据分别预先定义在客户端和服务器上；
步骤二、客户端将所述数据报文中除头尾数据外的其他所有数据进行压缩编码，并通过网络传输到服务器；
步骤三、服务器接收压缩编码后的所述数据报文中除头尾数据外的其他所有数据，并对其进行解析获取所述数据报文中除头尾数据外的其他所有数据；
还包括：
服务器对接收到的压缩编码后的所述数据报文中除头尾数据外的其他所有数据不解析，利用压缩编码技术标准，给压缩编码后的所述其他所有数据赋值压缩技术标准的外壳代码序列号Cd，并把Cd返回到客户端；
客户端根据所述头尾数据定义值和Cd将服务器解析出的数据原文形成镜像展示在客户端上。
2.根据权利要求1所述的数据压缩传输方法，其特征在于，所述客户端和服务器处于网络的长连接状态。
3.根据权利要求1所述的数据压缩传输方法，其特征在于，所述待传输数据报文为I P数据报。
4.一种数据压缩传输系统，其特征在于，包括客户端和服务器；所述客户端和服务器上分别预先定义了提取的待传输数据报文的头尾数据；
所述客户端，用于将所述数据报文中除头尾数据外的其他所有数据进行压缩编码，并通过网络传输到所述服务器；
所述服务器，用于接收压缩编码后的所述数据报文中除头尾数据外的其他所有数据，并对其进行解析获取所述数据报文中除头尾数据外的其他所有数据；
所述服务器，还用于对接收到的压缩编码后的所述数据报文中除头尾数据外的其他所有数据不解析，利用压缩编码技术标准，给压缩编码后的所述其他所有数据赋值压缩技术标准的外壳代码序列号Cd，并把Cd返回到所述客户端；
所述客户端，还用于根据所述头尾数据定义值和Cd将服务器解析出的数据原文形成镜像展示在所述客户端上。
5.根据权利要求4所述的数据压缩传输系统，其特征在于，所述客户端和服务器处于网络的长连接状态。
6.根据权利要求4所述的数据压缩传输系统，其特征在于，所述待传输数据报文为I P数据报。
CN201610142053.6A 2016-03-11 2016-03-11 一种数据压缩传输方法及系统 Active CN105635182B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610142053.6A CN105635182B (zh) 2016-03-11 2016-03-11 一种数据压缩传输方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610142053.6A CN105635182B (zh) 2016-03-11 2016-03-11 一种数据压缩传输方法及系统

Publications (2)

Publication Number Publication Date
CN105635182A CN105635182A (zh) 2016-06-01
CN105635182B true CN105635182B (zh) 2019-01-18

Family

ID=56049670

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610142053.6A Active CN105635182B (zh) 2016-03-11 2016-03-11 一种数据压缩传输方法及系统

Country Status (1)

Country Link
CN (1) CN105635182B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106375466A (zh) * 2016-09-14 2017-02-01 金蝶软件（中国）有限公司 一种数据文件传输方法及装置
CN109218214A (zh) * 2018-10-31 2019-01-15 中盈优创资讯科技有限公司 运营商级通用流量压缩方法及装置
CN116260891A (zh) * 2022-01-10 2023-06-13 深圳智慧林网络科技有限公司 基于联合编码的数据传输方法及装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6751209B1 (en) * 1999-02-17 2004-06-15 Nokia Mobile Phones, Ltd. Header compression in real time service
CN101453465A (zh) * 2007-11-29 2009-06-10 中兴通讯股份有限公司 一种移动多媒体广播系统的ip包压缩、解压缩方法
CN102546547A (zh) * 2010-12-22 2012-07-04 中兴通讯股份有限公司 Ip报文发送方法、网络测设备及终端

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6751209B1 (en) * 1999-02-17 2004-06-15 Nokia Mobile Phones, Ltd. Header compression in real time service
CN101453465A (zh) * 2007-11-29 2009-06-10 中兴通讯股份有限公司 一种移动多媒体广播系统的ip包压缩、解压缩方法
CN102546547A (zh) * 2010-12-22 2012-07-04 中兴通讯股份有限公司 Ip报文发送方法、网络测设备及终端

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
基于kHTTPd的HTTP压缩实现;潘登等;《计算机工程》;20020228;第28卷(第2期);全文
支持Gzip 压缩和编码转换的网络爬虫设计;陈鹤年等;《电脑知识与技术》;20101015;第6卷(第30期);全文

Also Published As

Publication number Publication date
CN105635182A (zh) 2016-06-01

Similar Documents

Publication Publication Date Title
WO2022088779A1 (zh) 深度报文处理方法、装置、电子设备及存储介质
CN105635182B (zh) 一种数据压缩传输方法及系统
JP2011512730A5 (zh)
CN103581130B (zh) 数据压缩处理方法、系统及装置
CN103825869A (zh) 以太网报文头的压缩及解压缩方法、压缩及解压缩设备
EP2869533A1 (en) Data distribution method and device
CN103401850A (zh) 一种报文过滤方法及装置
CN105530686A (zh) 一种基于udp协议实现智能车载终端的接入方法
CN111130937B (zh) 协议解析方法、装置、电子设备及存储介质
CN102752320B (zh) 一种代理服务器主动压缩方法及代理服务器
CN1997030A (zh) 用于http数据还原的方法
CN105872090B (zh) 基于扩展状态码的http通信方法
CN104702596B (zh) 一种基于数据包长度的信息隐藏与传输的方法及系统
CN104079580B (zh) 教务教学图像语音识别系统及方法
CN109327435B (zh) 媒体资源获取方法、装置及网关设备
CN106209942B (zh) 一种数据压缩传输方法和系统、及其终端和服务器
CN109922081A (zh) 一种tcp流长连接数据分析方法
CN104767710B (zh) 基于dfa的http分块传输编码的传输载荷提取方法
CN108040041A (zh) 一种基于业务驱动的图像差异传输协议设计系统及方法
CN104735151A (zh) 进度条的控制方法、装置和系统
CN103533001A (zh) 基于http多重代理的通信方法和系统、中间代理服务器
WO2022063058A1 (zh) 基于netconf协议的传输方法、设备及存储介质
CN102469011B (zh) 一种数据发送方法和装置
WO2004036360A2 (en) Client-side ssl connection completion through secure proxy server
CN103873355B (zh) 一种信息配对方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20190227

Address after: 610000 No. 11203, No. 99 Jinlong Street, Chengdu High-tech Zone, Sichuan Province

Patentee after: Wang Zhuo

Address before: 610000 No. 3, No. 13, Building 888, Yizhou Avenue Middle Section, Chengdu High-tech Zone, Sichuan Province

Patentee before: SICHUAN SHENGSHI FISH SKY TECHNOLOGY Co.,Ltd.

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20220329

Address after: 201203 unit 05, floor 6, No. 1, Lane 2889, Jinke Road, Zhangjiang High Tech Park, Pudong New Area, Shanghai

Patentee after: Icoli information technology (Shanghai) Co.,Ltd.

Address before: 610000 No. 11203, No. 99 Jinlong Street, Chengdu High-tech Zone, Sichuan Province

Patentee before: Wang Zhuo

PE01 Entry into force of the registration of the contract for pledge of patent right
PE01 Entry into force of the registration of the contract for pledge of patent right

Denomination of invention: A Data Compression Transmission Method and System

Effective date of registration: 20230703

Granted publication date: 20190118

Pledgee: Wuding Road Sub branch of Bank of Shanghai Co.,Ltd.

Pledgor: Icoli information technology (Shanghai) Co.,Ltd.

Registration number: Y2023310000335