CN110187327B - 全波形激光雷达波形数据压缩和解压方法 - Google Patents
全波形激光雷达波形数据压缩和解压方法 Download PDFInfo
- Publication number
- CN110187327B CN110187327B CN201910358174.8A CN201910358174A CN110187327B CN 110187327 B CN110187327 B CN 110187327B CN 201910358174 A CN201910358174 A CN 201910358174A CN 110187327 B CN110187327 B CN 110187327B
- Authority
- CN
- China
- Prior art keywords
- data
- compressed
- threshold
- value
- values
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000006837 decompression Effects 0.000 title claims abstract description 21
- 238000000034 method Methods 0.000 title claims abstract description 21
- 238000013144 data compression Methods 0.000 title description 10
- 238000005070 sampling Methods 0.000 claims abstract description 44
- 238000007906 compression Methods 0.000 claims abstract description 23
- 230000006835 compression Effects 0.000 claims abstract description 20
- 230000005540 biological transmission Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- 238000003860 storage Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000011065 in-situ storage Methods 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 238000012805 post-processing Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/483—Details of pulse systems
- G01S7/486—Receivers
- G01S7/487—Extracting wanted echo signals, e.g. pulse detection
- G01S7/4873—Extracting wanted echo signals, e.g. pulse detection by deriving and controlling a threshold value
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/483—Details of pulse systems
- G01S7/486—Receivers
- G01S7/487—Extracting wanted echo signals, e.g. pulse detection
- G01S7/4876—Extracting wanted echo signals, e.g. pulse detection by removing unwanted signals
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02A—TECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
- Y02A90/00—Technologies having an indirect contribution to adaptation to climate change
- Y02A90/10—Information and communication technologies [ICT] supporting adaptation to climate change, e.g. for weather forecasting or climate simulation
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
- Radar Systems Or Details Thereof (AREA)
Abstract
本发明公开了一种全波形激光雷达波形数据无损压缩与解压方法,压缩过程中:根据分类阈值,对原始波形数据的采样点数值进行压缩,获得阈值类型和压缩数值组成的采样点压缩数据;采样点压缩数据采用首尾相连的方式组成数据区;模数转换器分辨率、采样点总个数和分类阈值组成数据头;数据头和数据区组成最终的压缩数据;解压过程中:提取压缩数据的数据头,获取模数转换器分辨率、采样点总个数和分类阈值;提取压缩数据的数据区,根据阈值类型提取指定长度的采样点压缩数据,并结合模数转换器分辨率和分类阈值,依次恢复得到解压缩数值;解压缩数值依次相连恢复得到原始波形数据。
Description
技术领域
本发明涉及一种全波形激光雷达波形数据压缩和解压方法。
背景技术
全波形激光雷达(Waveform-Digitizing LiDAR)将发射脉冲信号和回波脉冲信号均以很小的采样间隔进行采样并记录,用户根据实际应用需求,对记录的波形数据进行处理和分析,相比传统激光雷达,可以得到更丰富的激光回波次数和目标特征信息。
假设全波形激光雷达仅记录目标回波波形,则每秒钟需要记录的数据量D为:
D=2RmaxSsmpNbitFemt/c (1)
其中,Rmax为最大探测距离,单位为米;c为光速c=30000000米/秒;Ssmp为模数转换器采样速度,单位为Sa/秒;Nbit为模数转换器的分辨率;Femt为脉冲激光器发射频率,单位为Hz。
目前全波形激光雷达的发射频率一般为百KHz,这里取500KHz;一般发射脉冲的脉宽为ns级,模数转换器采样速度需要达到GSa/秒,这里取1GSa/秒(相邻两个数据采样点的间隔为1ns);模数转换器的分辨率取8-bit;最大探测距离取200米。将这些设定的参数代入公式(1)中,每秒钟会产出500Mbit的回波波形数据量。
在如此巨量的回波波形数据中,回波信号中目标有用信号的比例较小,例如发射脉冲脉宽为10ns,模数转换器采样率为1GSa/秒,最大探测距离取200米,每次回波需要采集约1300个点,如果回波中仅包含一个目标,有用信号的比例仅为10/1300=0.77%。因此设定阈值,仅输出和保存高于阈值的数据点,将有效降低波形数据量,实现数据压缩的目的。但这种压缩方式属于有损压缩,丢失了大量微弱信号数据,没有很好发挥全波形激光雷达数据后处理优势。
发明内容
发明目的:本发明的目的是提供一种全波形激光雷达波形数据压缩和解压方法,该方法将高于分类阈值的有效采样点保留原位数数值,低于分类阈值的噪声截取保留低位数值,可有效压缩数据传输量,降低了对系统带宽和存储器存储空间的要求。
技术方案:本发明所述的全波形激光雷达波形数据无损压缩与解压方法,包括以下步骤:
步骤1,根据分类阈值,对原始波形数据的采样点数值进行压缩,获得阈值类型和压缩数值组成的采样点压缩数据;采样点压缩数据采用首尾相连的方式组成数据区;模数转换器分辨率、采样点总个数和分类阈值组成数据头;数据头和数据区组成最终的压缩数据;
步骤2,提取压缩数据的数据头,获取模数转换器分辨率、采样点总个数和分类阈值;提取压缩数据的数据区,根据阈值类型提取指定长度的采样点压缩数据,并结合模数转换器分辨率和分类阈值,依次恢复得到解压缩数值。解压缩数值依次相连恢复得到原始波形数据。
通过采用上述技术方案,在压缩过程中采用使用阈值分类的处理步骤,根据阈值截取指定位长的原始数据并降低了计算量以取得较高的数据压缩比,同时通过降低压缩量以压缩数据传输量;待使用者接收到数据压缩包之后,并且对压缩数据进行反向解压,恢复数据的原始状态,得到无损的数据。
有益效果:在保证回波波形不失真的条件下,可有效压缩数据传输量,降低了对系统带宽和存储器存储空间的要求。
附图说明
图1是原始回波波形数据的结构;
图2是回波波形压缩数据的结构;
图3是回波波形压缩过程流程图;
图4是回波波形图;
图5是压缩输出的数据;
图6是回波波形解压过程流程图;
图7是解压后的波形图。
具体实施方式
一种全波形激光雷达波形数据压缩和解压方法,原始回波波形数据的格式如图1所示,数据排列方式为大端模式:地址由小向大增加,而数据从高位往低位放。原始波形数据为长度N*M的一维数组。其中,N表示模数转换器分辨率,M表示回波中包含的采样点总个数。
压缩编码过程:
根据分类阈值,对原始波形数据的采样点数值进行压缩,获得阈值类型和压缩数值组成的采样点压缩数据;采样点压缩数据采用首尾相连的方式组成数据区;模数转换器分辨率、采样点总个数和分类阈值组成数据头;数据头和数据区组成最终的压缩数据。
(1)确定分类阈值
根据回波的噪声大小,确定分类阈值。分类阈值一般选取为2倍的背景噪声均方根值。分类阈值占N个bit,其二进制的最高位位数为l。例如,模数转换器分辨率为8位,分类阈值的二进制值为00000101,则l=3。
(2)数据压缩
根据分类阈值,对原始回波波形的每个采样点进行压缩,参考图2,采样点压缩数据由阈值类型和压缩数值两部分组成。
其中,阈值类型占据1bit,其值为0或1。当采样点数值大于分类阈值时,阈值类型为1,否则为0。
其中,压缩数值占据l个bit或N个bit。当阈值类型为1时,压缩数值占据N个bit。当阈值类型为0时,压缩数值选取采样点低l位的数据,占l个bit。
(3)数据输出
如图2所示,输出的压缩数据由数据头和数据区构成。其中数据头包含模数转换器分辨率占γ个bit、采样点总个数占η个bit和分类阈值占N个bit;数据区包含M个首尾相连的采样点压缩数据。
具体的压缩过程可参考图3所示的压缩流程图。
例如,图4所示的回波波形构成的原始波形数据,模数转换器的分辨率量化为8bit,共采集到40个采样点。如果不采用数据压缩方法,需要输出8*40=320bit数据。
采用本发明提出的压缩方法,数据头中分辨率占3bit,采样点总个数占6bit,其二进制值设置为0001000,那么该分类阈值占8bit,则压缩输出的数据如图5所示,共有165bit,压缩比320/165=1.94。由此可见,本发明提出的压缩方法,有效的降低了压缩数据传输量,降低了对系统带宽和存储器存储空间的要求。
解压缩过程:
提取压缩数据的数据头,获取模数转换器分辨率、采样点总个数和分类阈值;提取压缩数据的数据区,根据阈值类型提取指定长度的采样点压缩数据,并结合模数转换器分辨率和分类阈值,依次恢复得到解压缩数值。解压缩数值依次相连恢复得到原始波形数据。
(1)数据头提取
提取波形压缩数据的数据头,得到模数转换器分辨率N、原始波形采样点总个数M和分类阈值(其二进制值的最高位位数为l)。
(2)数据解压缩
根据采样点压缩数据的构成方式,依次提取1bit的阈值类型和N或l个bit的压缩数值:当阈值类型为1时,取N个bit的压缩数值;当阈值类型为0时,取l个bit的压缩数值。
初始化一个初始值全部为0的解压缩数组,该数组可以存放M个解压缩数值。当阈值类型为1时,将N个bit的压缩数值直接赋给解压缩数值;当阈值类型为0时,将l个 bit的压缩数值赋给解压缩数值的低l位。
具体的解压缩过程可参考图6所示的压缩流程图。
采用本发明提出的解压缩方法,可以无损解压缩图5中的压缩数据,解压后的波形如图7所示。
Claims (3)
1.一种全波形激光雷达波形数据无损压缩与解压方法,其特征在于包括以下步骤:
步骤1,根据分类阈值,对原始波形数据的采样点数值进行压缩,获得阈值类型和压缩数值组成的采样点压缩数据;采样点压缩数据采用首尾相连的方式组成数据区;模数转换器分辨率、采样点总个数和分类阈值组成数据头;数据头和数据区组成最终的压缩数据;当采样点数值大于分类阈值时,阈值类型为1,否则为0;
步骤2,提取压缩数据的数据头,获取模数转换器分辨率、采样点总个数和分类阈值;提取压缩数据的数据区,根据阈值类型提取指定长度的采样点压缩数据,并结合模数转换器分辨率和分类阈值,依次恢复得到解压缩数值;解压缩数值依次相连恢复得到原始波形数据;
步骤1中,采样点压缩数据中的压缩数值占据N个bit或l个bit;N表示模数转换器的分辨率,l表示分类阈值的二进制最高位位数;当阈值类型为1时,压缩数值占据N个bit;当阈值类型为0时,压缩数值选取采样点低l位的数据,占l个bit;
步骤2中,解压缩过程中,当阈值类型为1时,取N个bit的压缩数值赋给解压缩数值;当阈值类型为0时,取l个bit的压缩数值赋给解压缩数值的低l位。
2.根据权利要求1所述的全波形激光雷达波形数据无损压缩与解压方法,其特征在于在步骤1中,阈值类型占据1bit。
3.根据权利要求1所述的全波形激光雷达波形数据无损压缩与解压方法,其特征在于在步骤1中,分类阈值选取为2倍的背景噪声均方根值。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910358174.8A CN110187327B (zh) | 2019-04-30 | 2019-04-30 | 全波形激光雷达波形数据压缩和解压方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910358174.8A CN110187327B (zh) | 2019-04-30 | 2019-04-30 | 全波形激光雷达波形数据压缩和解压方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110187327A CN110187327A (zh) | 2019-08-30 |
CN110187327B true CN110187327B (zh) | 2023-07-21 |
Family
ID=67715317
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910358174.8A Active CN110187327B (zh) | 2019-04-30 | 2019-04-30 | 全波形激光雷达波形数据压缩和解压方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110187327B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113075624B (zh) * | 2021-03-31 | 2024-03-19 | 华中科技大学 | 一种雷达回波序列的无损压缩方法、装置和雷达系统 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002258894A (ja) * | 2001-03-02 | 2002-09-11 | Fujitsu Ltd | 音声データ圧縮・解凍装置及び方法 |
CN102062855A (zh) * | 2010-11-03 | 2011-05-18 | 安徽四创电子股份有限公司 | 基于游程差值编码的雷达回波压缩/解压算法 |
CN102904580A (zh) * | 2012-10-23 | 2013-01-30 | 湖南大唐先一科技有限公司 | X-bit压缩编码算法 |
CN103475376A (zh) * | 2013-09-24 | 2013-12-25 | 上海无线电设备研究所 | 一种雷达多普勒回波信号数据压缩方法 |
CN104378117A (zh) * | 2013-08-15 | 2015-02-25 | 京信通信系统(中国)有限公司 | 数据压缩方法及装置、数据传输方法及系统 |
CN108254724A (zh) * | 2018-01-26 | 2018-07-06 | 西安电子科技大学 | 改进压缩质量baq的sar数据压缩系统及方法 |
CN109239679A (zh) * | 2018-09-17 | 2019-01-18 | 西安空间无线电技术研究所 | 一种可智能压缩的雷达信号处理系统及验证方法 |
-
2019
- 2019-04-30 CN CN201910358174.8A patent/CN110187327B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002258894A (ja) * | 2001-03-02 | 2002-09-11 | Fujitsu Ltd | 音声データ圧縮・解凍装置及び方法 |
CN102062855A (zh) * | 2010-11-03 | 2011-05-18 | 安徽四创电子股份有限公司 | 基于游程差值编码的雷达回波压缩/解压算法 |
CN102904580A (zh) * | 2012-10-23 | 2013-01-30 | 湖南大唐先一科技有限公司 | X-bit压缩编码算法 |
CN104378117A (zh) * | 2013-08-15 | 2015-02-25 | 京信通信系统(中国)有限公司 | 数据压缩方法及装置、数据传输方法及系统 |
CN103475376A (zh) * | 2013-09-24 | 2013-12-25 | 上海无线电设备研究所 | 一种雷达多普勒回波信号数据压缩方法 |
CN108254724A (zh) * | 2018-01-26 | 2018-07-06 | 西安电子科技大学 | 改进压缩质量baq的sar数据压缩系统及方法 |
CN109239679A (zh) * | 2018-09-17 | 2019-01-18 | 西安空间无线电技术研究所 | 一种可智能压缩的雷达信号处理系统及验证方法 |
Also Published As
Publication number | Publication date |
---|---|
CN110187327A (zh) | 2019-08-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108616280B (zh) | 非稳态数据实时采集数据压缩方法 | |
CN101504431A (zh) | 随机脉冲时间序列的纳秒级在线检测系统 | |
CN1157080A (zh) | 用于编码视频图像的装置和方法 | |
CN110187327B (zh) | 全波形激光雷达波形数据压缩和解压方法 | |
CN109239679B (zh) | 一种可智能压缩的雷达信号处理系统及验证方法 | |
WO2019196371A1 (zh) | 一种基于单频时变阈值的一比特回波数据采集方法及系统 | |
CN108023597B (zh) | 一种数控系统可靠性数据压缩方法 | |
Tun et al. | Analysis on ECG data compression using wavelet transform technique | |
CN115801902B (zh) | 一种网络访问请求数据的压缩方法 | |
CN116170027B (zh) | 一种毒检设备数据管理系统及处理方法 | |
CN113960535A (zh) | 航空雷达对抗侦察信号并行采集处理存储方法 | |
CN114442108A (zh) | 应用于激光测距的多步直方图峰值提取方法及系统 | |
CN110146867B (zh) | 全波形激光雷达波形数据压缩和解压方法 | |
CN115695564B (zh) | 一种物联网数据的高效传输方法 | |
CN109194667A (zh) | 基于频域检测的实现iq数据信号数据压缩与传输功能的装置 | |
CN108254724B (zh) | 改进压缩质量baq的sar数据压缩系统及方法 | |
US9728385B2 (en) | Data record size reduction at fixed information content | |
KR102087269B1 (ko) | 수신 동적 빔 집속을 위한 시간 지연 장치 및 방법 | |
CN109412718B (zh) | 宽带频谱信号检测方法 | |
US5708429A (en) | Method of compressing electroencephalographic signals | |
US20110317759A1 (en) | System, method, and computer program product for parameter estimation for lossless video compression | |
CN111684804A (zh) | 一种数据编码、数据解码方法、设备及存储介质 | |
Ma et al. | A new hybrid data compression algorithm for weather radar | |
CN110688083A (zh) | 一种基于ddr3的高速数据流长延时储频转发方法 | |
CN106772567A (zh) | 一种用于地震勘探仪的数据传输无损压缩算法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
TR01 | Transfer of patent right |
Effective date of registration: 20231102 Address after: Room 406, Building 2, No. 37 Jiuhuan Road, Shangcheng District, Hangzhou City, Zhejiang Province, 310000 Patentee after: HANGZHOU OLE-SYSTEMS Co.,Ltd. Address before: 223005 A12-2, high tech Industrial Park, three East seven street, Hongze District, Huaian, Jiangsu (Hongze technology transfer center Hongze sub center) Patentee before: HUAIYIN INSTITUTE OF TECHNOLOGY |
|
TR01 | Transfer of patent right |