CN108134804A - 一种数据压缩算法及装置 - Google Patents
一种数据压缩算法及装置 Download PDFInfo
- Publication number
- CN108134804A CN108134804A CN201810094798.9A CN201810094798A CN108134804A CN 108134804 A CN108134804 A CN 108134804A CN 201810094798 A CN201810094798 A CN 201810094798A CN 108134804 A CN108134804 A CN 108134804A
- Authority
- CN
- China
- Prior art keywords
- data
- compressed
- bits
- value
- group
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
本发明提供一种数据压缩算法及装置,将要压缩的数据进行分组,每组包含n个数据,n为正整数;找出该组数据中绝对值最大的值,取其绝对值Mt,设定将数据压缩为j位比特位,将j位比特位的满量程值Mf除以Mt,相除的商作为压缩因子k;将该组中的数据分别与k相乘,相乘的结果截取前j比特位的数据,得到的数据即为压缩数据;将数据Mt及n个压缩后的数据组成一个数据块送入传输通道,传输通道将数据块传输给接收方;使得数据压缩得更小,并且在还原过程中信号的误差向量幅度变得更小。
Description
本发明专利申请是发明创造名称为“一种IQ数据同步压缩还原算法及装置”的发明专利的分案申请,原申请的申请日为2014年8月8日,原申请的申请号为201410387719.5。
技术领域
本发明涉及数据处理领域,尤其涉及一种数据压缩算法及装置。
背景技术
在无线通讯分布式系统中,近端设备和远端设备通过有线或者无线的方式进行大量的双向I、Q(实部、虚部)数据传输,数据都是用二进制表示。
随着单台设备支持的制式越来越大、支持的频段原来越宽、载波数量越来越多,需要传输大数据量要求不断增加。近端设备和远端设备通常使用光纤、线缆、微波等进行数据传输,例如,在远近端之间传送两个20M带宽的LTE信号,如果传输的I、Q(实部、虚部)数据位宽为14bit,需要一个2.5G的光口承载;在满足性能的情况下,对数据进行一定的压缩,可减少传输数据的数据量从而提高设备的系统容量,进而降低设备成本。
目前已知的IQ数据压缩方案有线性压缩和非线性压缩;其中非线性压缩,如JZW压缩算法、A律压缩算法等相对线性压缩来说实现比较复杂,目前已有的一些大多为计算数据的绝对值或者功率值的最大值,将最大值和压缩目标位宽的满量程最大值进行比较得到数据压缩因子,然后对数据进行逐个截位得到压缩后的数据,将压缩因子和压缩后的数据一起传送到接收端,接收端根据压缩因子在数据得到移位因子,将被压缩的数据根据移位因子进行移位恢复数据,这种类似的压缩方案都是直接将数据进行截位处理,对信号造成较大的失真,实现上表现出来对信号的EVM(误差向量幅度)恶化严重。
发明内容
本发明所要解决的技术问题是:提供一种数据压缩算法及装置,使得数据压缩得更小,并且在还原过程中信号的误差向量幅度变得更小。
为了解决上述技术问题,本发明采用的一种技术方案为:
一种数据压缩算法,包括如下步骤:
步骤1、将要压缩的IQ数据进行分组,每组包含n个数据,n为正整数;
步骤2、找出该组数据中绝对值最大的值,取其绝对值Mt,设定将数据压缩为j位比特位,j为正整数,将j位比特位的满量程值Mf除以Mt,相除的商作为压缩因子k;
步骤3、将该组中的数据分别与k相乘,相乘的结果截取前j比特位的数据,得到的数据即为压缩数据;
步骤4、将数据Mt及n个压缩后的数据组成一个数据块送入传输通道,传输通道将数据块传输给接收方。
进一步地,还包括步骤:
步骤5、接收方接收数据块,取出数据Mt,并将被压缩的数据分别与Mt进行相乘,相乘后得到恢复的数据。
进一步地,所述步骤4进一步具体为:
将Mt放在压缩后的所有数据的第一位,将n+1个数据组成一个数据块送入传输通道,传输通道将数据传输给接收方。
进一步地,所述满量程值Mf为j-1比特位上每一个比特位上的数都为1时候代表的无符号数值。
为了解决上述技术问题,本发明提供的另一种技术方案为:
一种数据压缩装置,包括如下模块:
分组模块,将要压缩的IQ数据进行分组,每组包含n个数据,n为正整数;
压缩因子模块,找出该组数据中绝对值最大的值,取其绝对值Mt,设定将数据压缩为j位比特位,j为正整数,将j位比特位的满量程值Mf除以Mt,相除的商作为压缩因子k;
压缩模块,将该组中的数据分别与k相乘,相乘的结果截取前j比特位的数据,得到的数据即为压缩数据;
发送接收模块,将数据Mt及n个压缩后的数据组成一个数据块送入传输通道,传输通道将数据块传输给接收方。
进一步地,还包括:
还原模块,接收方接收数据块,取出数据Mt,并将被压缩的数据分别与Mt进行相乘,相乘后得到恢复的数据。
进一步地,所述发送接收模块进一步具体为:
将Mt放在压缩后的所有数据的第一位,将n+1个数据组成一个数据块送入传输通道,传输通道将数据传输给接收方。
进一步地,所述满量程值Mf为j-1比特位上每一个比特位上的数都为1时候代表的无符号数值。
本发明的有益效果在于:本发明一种数据压缩算法及装置,使得压缩后的数据更小了,进一步减少了传输数据的数量,增加了系统容量,降低了设备成本。
附图说明
图1为本发明方法执行流程图。
具体实施方式
为详细说明本发明的技术内容、所实现目的及效果,以下结合实施方式并配合附图予以说明。
如图1所示,本发明一种数据压缩算法,包括如下步骤:
步骤1、将要压缩的IQ数据进行分组,每组包含n个数据,n为正整数;
步骤2、找出该组数据中绝对值最大的值,取其绝对值Mt,设定将数据压缩为j位比特位,j为正整数,将j位比特位的满量程值Mf除以Mt,相除的商作为压缩因子k,所述满量程值Mf为j-1比特位上每一个比特位上的数都为1时候代表的无符号数值;
步骤3、将该组中的数据分别与k相乘,相乘的结果截取前j比特位的数据,得到的数据即为压缩数据;
步骤4、将数据Mt及n个压缩后的数据组成一个数据块送入传输通道,传输通道将数据块传输给接收方:将Mt放在压缩后的所有数据的第一位,将n+1个数据组成一个数据块送入传输通道,传输通道将数据传输给接收方;
步骤5、接收方接收数据块,取出数据Mt,并将被压缩的数据分别与Mt进行相乘,相乘后得到恢复的数据。
本发明一种数据压缩装置,包括如下模块:
分组模块,将要压缩的IQ数据进行分组,每组包含n个数据,n为正整数;
压缩因子模块,找出该组数据中绝对值最大的值,取其绝对值Mt,设定将数据压缩为j位比特位,j为正整数,将j位比特位的满量程值Mf除以Mt,相除的商作为压缩因子k,所述满量程值Mf为j-1比特位上每一个比特位上的数都为1时候代表的无符号数值;
压缩模块,将该组中的数据分别与k相乘,相乘的结果截取前j比特位的数据,得到的数据即为压缩数据;
发送接收模块,将数据Mt及n个压缩后的数据组成一个数据块送入传输通道,传输通道将数据块传输给接收方:将Mt放在压缩后的所有数据的第一位,将n+1个数据组成一个数据块送入传输通道,传输通道将数据传输给接收方;
还原模块,接收方接收数据块,取出数据Mt,并将被压缩的数据分别与Mt进行相乘,相乘后得到恢复的数据。
具体实施例如下:
将要压缩的数据进行分组,分组后每组数据数量为N个,N的取值可以根据实际情况选择,可以传输信号制式的、要求的时延来进行选择,其中N为正整数。
求一个数据分组中数据最大绝对值:定义一个临时变量TMP,在开始统计每个数据块时候对TMP进行清零,逐个计算数据的绝对值并以TMP进行比较,如果该数据绝对值大于TMP值,则将该数据绝对值替代TMP当前值,否者TMP保持原值,整个数据块对比结束时,TMP的值即为该分组数据的绝对值最大的值Tmax。
求压缩因子:将定义压缩后传输位宽的数据的最大值除以上一步骤计算出的Tmax,得到压缩因子K,其中定义压缩后传输位宽的数据的最大值传输数据位宽扣除符号位后所有比特都为1时候代表的无符号数值,例如压缩后的传输比特为7比特,这压缩后传输位宽的数据的最大值为二进制的111111,即十进制的63。
压缩数据:将分组中的数据依次逐个乘以压缩因子,将相乘后的结果从左向右截取设定位宽的数据,得到压缩后的数据;
组帧传输:将Tmax绝对值放在第一个数据,然后依次放置压缩后的N个数据,组成N+1个数据的数据块,将N+1个数据组成的数据块传输给接收模块;
接收解压缩数据:将接收到的N+1长度的数据块第一个数据取出,分别与之后的N个数据进行相乘,对相乘的数据进行截位,得到解压缩后的N个数据。
本发明具有如下优点:本发明一种数据压缩算法及装置,使得压缩后的数据更小了,进一步减少了传输数据的数量,增加了系统容量,降低了设备成本。
以上所述仅为本发明的实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等同变换,或直接或间接运用在相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (8)
1.一种数据压缩算法,其特征在于,包括如下步骤:
步骤1、将要压缩的IQ数据进行分组,每组包含n个数据,n为正整数;
步骤2、对于每组数据,找出该组数据中绝对值最大的值,取其绝对值Mt,设定将数据压缩为j位比特位,j为正整数,将j位比特位的满量程值Mf除以Mt,相除的商作为压缩因子k;
步骤3、将该组中的数据分别与k相乘,相乘的结果截取前j比特位的数据,得到的数据即为压缩数据;
步骤4、将数据Mt及n个压缩后的数据组成一个数据块送入传输通道,传输通道将数据块传输给接收方。
2.根据权利要求1所述的一种数据压缩算法,其特征在于,还包括步骤:
步骤5、接收方接收数据块,取出数据Mt,并将被压缩的数据分别与Mt进行相乘,相乘后得到恢复的数据。
3.根据权利要求1所述的一种数据压缩算法,其特征在于,所述步骤4进一步具体为:
将Mt放在压缩后的所有数据的第一位,将n+1个数据组成一个数据块送入传输通道,传输通道将数据传输给接收方。
4.根据权利要求1所述的一种数据压缩算法,其特征在于,所述满量程值Mf为j-1比特位上每一个比特位上的数都为1时候代表的无符号数值。
5.一种数据压缩装置,其特征在于,包括如下模块:
分组模块,将要压缩的IQ数据进行分组,每组包含n个数据,n为正整数;
压缩因子模块,对于每组数据,找出该组数据中绝对值最大的值,取其绝对值Mt,设定将数据压缩为j位比特位,j为正整数,将j位比特位的满量程值Mf除以Mt,相除的商作为压缩因子k;
压缩模块,将该组中的数据分别与k相乘,相乘的结果截取前j比特位的数据,得到的数据即为压缩数据;
发送接收模块,将数据Mt及n个压缩后的数据组成一个数据块送入传输通道,传输通道将数据传输给接收方。
6.根据权利要求5所述的一种数据压缩装置,其特征在于,还包括:
还原模块,接收方接收数据块,取出数据Mt,并将被压缩的数据分别与Mt进行相乘,相乘后得到恢复的数据。
7.根据权利要求5所述的一种数据压缩装置,其特征在于,所述发送接收模块进一步具体为:
将Mt放在压缩后的所有数据的第一位,将n+1个数据组成一个数据块送入传输通道,传输通道将数据传输给接收方。
8.根据权利要求5所述的一种数据压缩装置,其特征在于,所述满量程值Mf为j-1比特位上每一个比特位上的数都为1时候代表的无符号数值。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810094798.9A CN108134804B (zh) | 2014-08-08 | 2014-08-08 | 一种数据压缩算法及装置 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410387719.5A CN104135452B (zh) | 2014-08-08 | 2014-08-08 | 一种iq数据同步压缩还原算法及装置 |
CN201810094798.9A CN108134804B (zh) | 2014-08-08 | 2014-08-08 | 一种数据压缩算法及装置 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410387719.5A Division CN104135452B (zh) | 2014-08-08 | 2014-08-08 | 一种iq数据同步压缩还原算法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108134804A true CN108134804A (zh) | 2018-06-08 |
CN108134804B CN108134804B (zh) | 2021-03-09 |
Family
ID=51807976
Family Applications (4)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810094800.2A Active CN108155912B (zh) | 2014-08-08 | 2014-08-08 | 一种iq数据压缩还原算法及装置 |
CN201810094798.9A Active CN108134804B (zh) | 2014-08-08 | 2014-08-08 | 一种数据压缩算法及装置 |
CN201810095577.3A Active CN108134805B (zh) | 2014-08-08 | 2014-08-08 | 一种数据同步压缩还原算法及装置 |
CN201410387719.5A Active CN104135452B (zh) | 2014-08-08 | 2014-08-08 | 一种iq数据同步压缩还原算法及装置 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810094800.2A Active CN108155912B (zh) | 2014-08-08 | 2014-08-08 | 一种iq数据压缩还原算法及装置 |
Family Applications After (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810095577.3A Active CN108134805B (zh) | 2014-08-08 | 2014-08-08 | 一种数据同步压缩还原算法及装置 |
CN201410387719.5A Active CN104135452B (zh) | 2014-08-08 | 2014-08-08 | 一种iq数据同步压缩还原算法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (4) | CN108155912B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020125527A1 (zh) * | 2018-12-21 | 2020-06-25 | 京信通信系统(中国)有限公司 | 数据压缩方法、装置、计算机设备和存储介质 |
CN118101091A (zh) * | 2024-04-28 | 2024-05-28 | 杭州捷孚电子技术有限公司 | 自适应信号处理方法及系统 |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105763287B (zh) * | 2014-12-16 | 2019-12-03 | 中兴通讯股份有限公司 | 数据传输方法及装置 |
EP3294000B1 (en) | 2015-05-29 | 2020-05-06 | Huawei Technologies Co., Ltd. | Method, apparatus and system for transmitting i/q signal |
CN105846828A (zh) * | 2016-03-23 | 2016-08-10 | 北京裕源大通科技股份有限公司 | Iq数据的压缩和解压缩方法、装置和iq数据的传输方法、系统 |
CN106304190A (zh) * | 2016-07-28 | 2017-01-04 | 武汉虹信通信技术有限责任公司 | 一种cpri接口数据压缩传输方法及系统 |
CN107961034A (zh) * | 2016-10-19 | 2018-04-27 | 北京东软医疗设备有限公司 | 处理通道数据的方法及装置 |
CN108965333B (zh) * | 2018-08-30 | 2021-02-19 | 北京锐安科技有限公司 | 一种数据压缩、解压缩方法、系统及电子设备 |
CN109512425A (zh) * | 2019-01-09 | 2019-03-26 | 大悦创新(苏州)医疗科技股份有限公司 | 压缩、解压肌电数据的方法和装置 |
CN112134568A (zh) * | 2020-09-15 | 2020-12-25 | 广州市埃信电信有限公司 | 一种有损的数据压缩、解压缩方法及其系统 |
CN114629502B (zh) * | 2022-03-21 | 2022-11-22 | 和睿沐康(成都)医疗科技有限公司 | 一种采样数据压缩上传和解压方法、设备、系统及介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0429306A2 (en) * | 1989-11-22 | 1991-05-29 | International Business Machines Corporation | Data compaction system |
CN102790656A (zh) * | 2012-05-30 | 2012-11-21 | 新邮通信设备有限公司 | 一种iq数据压缩方法和系统 |
CN102790999A (zh) * | 2011-05-19 | 2012-11-21 | 中兴通讯股份有限公司 | 一种数据压缩、传输、接收及解压缩方法及相应装置 |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7490166B2 (en) * | 2000-05-26 | 2009-02-10 | Citrix Systems, Inc. | Remote control of a client's off-screen surface |
US8290782B2 (en) * | 2008-07-24 | 2012-10-16 | Dts, Inc. | Compression of audio scale-factors by two-dimensional transformation |
CN102215199A (zh) * | 2010-04-09 | 2011-10-12 | 电信科学技术研究院 | 一种iq数据传输方法及装置 |
CN102244552A (zh) * | 2010-05-13 | 2011-11-16 | 中兴通讯股份有限公司 | 一种数据发送、接收方法及装置 |
CN102055974B (zh) * | 2010-10-14 | 2013-04-17 | 华为技术有限公司 | 数据压缩、解压缩方法、装置及系统 |
CN102075467B (zh) * | 2010-12-17 | 2014-10-22 | 中兴通讯股份有限公司 | 同相正交信号iq数据压缩方法及装置 |
CN102821072B (zh) * | 2011-06-08 | 2017-02-08 | 中兴通讯股份有限公司 | 一种同相正交信号iq数据发送、接收方法、系统及装置 |
CN102843720B (zh) * | 2011-06-24 | 2017-03-22 | 中兴通讯股份有限公司 | 分布式基站系统中数据的压缩、解压缩方法、装置及系统 |
CN103458460B (zh) * | 2012-05-31 | 2017-04-12 | 国际商业机器公司 | 对信号数据进行压缩和解压缩的方法和装置 |
CN103634273A (zh) * | 2012-08-21 | 2014-03-12 | 电信科学技术研究院 | 数据压缩发送及解压缩方法和设备 |
CN103312336A (zh) * | 2013-06-28 | 2013-09-18 | 京信通信系统(中国)有限公司 | 一种数据压缩的方法及装置 |
CN103812608B (zh) * | 2013-12-26 | 2017-04-26 | 西安交通大学 | 一种iq数据压缩方法和系统 |
-
2014
- 2014-08-08 CN CN201810094800.2A patent/CN108155912B/zh active Active
- 2014-08-08 CN CN201810094798.9A patent/CN108134804B/zh active Active
- 2014-08-08 CN CN201810095577.3A patent/CN108134805B/zh active Active
- 2014-08-08 CN CN201410387719.5A patent/CN104135452B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0429306A2 (en) * | 1989-11-22 | 1991-05-29 | International Business Machines Corporation | Data compaction system |
CN102790999A (zh) * | 2011-05-19 | 2012-11-21 | 中兴通讯股份有限公司 | 一种数据压缩、传输、接收及解压缩方法及相应装置 |
CN102790656A (zh) * | 2012-05-30 | 2012-11-21 | 新邮通信设备有限公司 | 一种iq数据压缩方法和系统 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020125527A1 (zh) * | 2018-12-21 | 2020-06-25 | 京信通信系统(中国)有限公司 | 数据压缩方法、装置、计算机设备和存储介质 |
CN118101091A (zh) * | 2024-04-28 | 2024-05-28 | 杭州捷孚电子技术有限公司 | 自适应信号处理方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN108134805B (zh) | 2021-04-30 |
CN104135452A (zh) | 2014-11-05 |
CN108155912A (zh) | 2018-06-12 |
CN108134805A (zh) | 2018-06-08 |
CN104135452B (zh) | 2018-05-01 |
CN108134804B (zh) | 2021-03-09 |
CN108155912B (zh) | 2021-04-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104135452B (zh) | 一种iq数据同步压缩还原算法及装置 | |
CN103458460B (zh) | 对信号数据进行压缩和解压缩的方法和装置 | |
CN102790656B (zh) | 一种iq数据压缩方法和系统 | |
WO2014029260A1 (zh) | 数据压缩发送及解压缩方法和设备 | |
CN105763287B (zh) | 数据传输方法及装置 | |
CN103312336A (zh) | 一种数据压缩的方法及装置 | |
CN103888317A (zh) | 一种协议无关的网络冗余流量消除方法 | |
CN105846828A (zh) | Iq数据的压缩和解压缩方法、装置和iq数据的传输方法、系统 | |
US9831894B2 (en) | Data compression apparatus | |
US8489665B2 (en) | Communication apparatus, method of checking received data size, multiple determining circuit, and multiple determination method | |
CN108599891A (zh) | 编码方法、编码装置和通信装置 | |
WO2014136193A1 (ja) | 基地局装置、基地局システムおよびiqデータの圧縮方法 | |
WO2021072953A1 (zh) | 数据压缩方法、装置、计算机设备和计算机可读存储介质 | |
CA2984940C (en) | Wireless traffic optimization for ism radios | |
CN103888146A (zh) | 一种数据压缩的方法、装置和通信设备 | |
CN103812608B (zh) | 一种iq数据压缩方法和系统 | |
CN104320810B (zh) | 一种头压缩方法、装置及解压缩方法、装置 | |
US20170272095A1 (en) | Improved compression and encryption of a file | |
CN104038307A (zh) | 数据流传输系统及方法 | |
EP3284174A1 (en) | Improved compression and/or encryption of a file | |
CN106788886A (zh) | 一种lt码编解码方法 | |
CN109257145A (zh) | 面向rlnc辅助的d2d协作传输过程优化方法和装置 | |
CN104754644B (zh) | 一种多天线数据压缩方法和设备 | |
CN111417920A (zh) | 数据处理方法及装置 | |
EP3664357A1 (en) | Device and method for implementing a cryptographic hash function |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information |
Address after: No.28 building C, Fuzhou Software Park, Fuzhou, No.28 Applicant after: Ankexun (Fujian) Technology Co.,Ltd. Address before: 350400 building 28, Zone C, software park industrial base, 89 software Avenue, Tongpan Road, Gulou District, Fuzhou City, Fujian Province Applicant before: FUJIAN SUNNADA NETWORK TECHNOLOGY Co.,Ltd. |
|
CB02 | Change of applicant information | ||
GR01 | Patent grant | ||
GR01 | Patent grant |