CN115686377B - 一种天气雷达数据格式存储及读取方法 - Google Patents

一种天气雷达数据格式存储及读取方法 Download PDF

Info

Publication number
CN115686377B
CN115686377B CN202211441105.1A CN202211441105A CN115686377B CN 115686377 B CN115686377 B CN 115686377B CN 202211441105 A CN202211441105 A CN 202211441105A CN 115686377 B CN115686377 B CN 115686377B
Authority
CN
China
Prior art keywords
data
echo
radial
weather radar
storage
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202211441105.1A
Other languages
English (en)
Other versions
CN115686377A (zh
Inventor
张深寿
官晓军
赖绍钧
刘光普
彭发强
张远飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujian Provincial Meteorological Bureau
Original Assignee
Fujian Provincial Meteorological Bureau
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujian Provincial Meteorological Bureau filed Critical Fujian Provincial Meteorological Bureau
Priority to CN202211441105.1A priority Critical patent/CN115686377B/zh
Publication of CN115686377A publication Critical patent/CN115686377A/zh
Application granted granted Critical
Publication of CN115686377B publication Critical patent/CN115686377B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02ATECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
    • Y02A90/00Technologies having an indirect contribution to adaptation to climate change
    • Y02A90/10Information and communication technologies [ICT] supporting adaptation to climate change, e.g. for weather forecasting or climate simulation

Landscapes

  • Radar Systems Or Details Thereof (AREA)

Abstract

本发明公开了一种天气雷达数据格式存储及读取方法,其中存储方法包括:获取天气雷达基数据;天气雷达基数据由多个PPI数据构成;每个PPI数据由多个径向数据构成;将径向数据中的反射率因子参数数据进行回波确定二值化操作,生成回波确定字节;回波确定字节带有是否存在回波的标识;将回波确定字节作为位置掩码,控制径向数据中各个探测参数数据的存储。该存储方法利用反射率因子的回波数据生成位置掩码,显著提高了天气雷达数据的存储效率。

Description

一种天气雷达数据格式存储及读取方法
技术领域
本发明涉及数据格式存储及读取技术领域,特别涉及一种天气雷达数据格式存储及读取方法。
背景技术
多普勒天气雷达能探测到原始反射率因子、反射率因子、多普勒速度、谱宽数据;双偏振天气雷达除了可以探测到上述数据外还能探测到相关系数、差分发射率、差分相移、差分相移率等数据。中国气象局的标准天气雷达数据格式和各天气雷达厂家自定义雷达数据格式,在数据存储时无优化、无压缩,存储效率低。
双偏振天气雷达的9层仰角的单个数据文件可达30M,相控阵雷达的36层仰角的数据文件超过600M,存储效率低。此基数据太大不利于数据的传输存储以及后续的分析处理。例如,新一代天气雷达CINRAD/SAD以VCP21D扫描模式采集的基数据为9个仰角,11个PPI的数据;其中每个PPI有366个径向,探测距离为230km,距离分辨率为250米,且每个径向有920个数据,共有8个探测参数,每个数据用1个字节存储数据,那么不算公共数据块和径向数据头,数据大小就为366×11×920×8=29631360bytes,约30M大小。S波段双偏振相控阵天气雷达,36层,每层366个径向,探测距离为230km,距离分辨率为62.5米,每个径向有3680个数据,存储7种探测参数,每个探测参数用短整形存储占2个字节,数据大小就为366×36×4000×7×2=678827520bytes,约663M大小。
由此可见,现有天气雷达探测数据的实时传输(流传输)的时候需要很大的带宽来传输数据,效率极低。历史资料数据的存储的现有办法为用第三方压缩软件或算法压缩数据文件,压缩率在8%到20%之间,每次使用数据的时候需要先解压,数据分析处理效率低。根据数据分析,其主要原因在于各雷达探测数据的无回波数据在天气雷达探测中的占比非常高,在各参数的数据中都要存储。根据天气雷达探测原理,天气雷达探测的数据是以反射率因子为基础的,只有有反射率因子回波数据才会有多普勒速度、谱宽、相关系数、差分发射率、差分相移、差分相移率等回波数据,所以每个探测参数都存储无回波数据是大量的重复存储。而在雷达探测的时候大气中无回波的数据占绝大多数,尤其是无降水的晴空天气,无回波数据可占比97%。
因此,在现有天气雷达探测数据存储的基础上,如何在记录有回波数据存储的前提下,去除无回波数据存储,成为本领域技术人员亟需解决的问题。
发明内容
鉴于上述问题,本发明提出了一种至少解决上述部分技术问题的天气雷达数据格式存储及读取方法,该方法利用反射率因子的回波数据生成位置掩码,显著提高了天气雷达数据的存储及读取效率。
本发明实施例提供一种天气雷达数据格式存储方法,包括:
获取天气雷达基数据;所述天气雷达基数据由多个PPI数据构成;每个所述PPI数据由多个径向数据构成;
将所述径向数据中的反射率因子参数数据进行回波确定二值化操作,生成回波确定字节;所述回波确定字节带有是否存在回波的标识;
将所述回波确定字节作为位置掩码,控制所述径向数据中各个探测参数数据的存储;所述探测参数为同时间探测到的同径向其他探测参数。
进一步地,将所述径向数据中的反射率因子参数数据进行回波确定二值化操作,生成回波确定字节,包括:
将所述径向数据中的反射率因子参数数据进行有无回波二值化;
将二值化的数据通过第一标记标识为存在回波;将二值化的数据通过第二标记标识为不存在回波;
根据所述第一标记和第二标记,生成回波确定字节。
进一步地,将所述回波确定字节作为位置掩码,控制所述径向数据中各个探测参数数据的存储,包括:
将所述回波确定字节作为位置掩码,控制所述径向数据中各个探测参数数据只存储有回波的数据,去除无回波的数据。
本发明实施例还提供一种天气雷达数据格式读取方法,适用于如上述任一项所述的天气雷达数据格式存储方法,该读取方法包括:
读取径向数据中反射率因子参数数据的位置掩码;所述位置掩码为回波确定字节;多个所述径向数据构成PPI数据;多个所述PPI数据构成所述天气雷达基数据;
根据所述回波确定字节,对各个探测参数数据按顺序检索标识存在回波的字节,确定回波数据的位置;
根据所述回波数据的位置,从所述径向数据中读取各个探测参数的回波数据,并将所述回波数据按照所述位置掩码的位置放置,完成天气雷达基数据的读取。
本发明实施例提供的上述技术方案的有益效果至少包括:
本发明实施例提供的一种天气雷达数据格式存储方法,包括:获取天气雷达基数据;天气雷达基数据由多个PPI数据构成;每个PPI数据由多个径向数据构成;将径向数据中的反射率因子参数数据进行回波确定二值化操作,生成回波确定字节;回波确定字节带有是否存在回波的标识;将回波确定字节作为位置掩码,控制径向数据中各个探测参数数据的存储。该方法利用反射率因子的回波数据生成位置掩码,显著提高了天气雷达数据的存储效率。
本发明的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例,对本发明的技术方案做进一步的详细描述。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制。在附图中:
图1为本发明实施例提供的天气雷达数据格式存储方法流程图;
图2为本发明实施例提供的天气雷达基数据文件存储示意图一;
图3为本发明实施例提供的天气雷达基数据文件存储示意图二;
图4为本发明实施例提供的单根径向数据根据位置掩码存储编码示意图一;
图5为本发明实施例提供的单根径向数据根据位置掩码存储编码示意图二。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
本发明实施例提供一种天气雷达数据格式存储方法,参照图1所示,包括:
获取天气雷达基数据;天气雷达基数据由多个PPI数据构成;每个PPI数据由多个径向数据构成;
将径向数据中的反射率因子参数数据进行回波确定二值化操作,生成回波确定字节;回波确定字节带有是否存在回波的标识;
将回波确定字节作为位置掩码,控制径向数据中各个探测参数数据的存储;探测参数为同时间探测到的同径向其他探测参数。
本实施例提供的天气雷达数据格式存储方法,利用反射率因子的回波数据,生成位置掩码,提高了天气雷达数据的存储效率。
下面对该方法进行具体阐述:
参照图2和图3所示,天气雷达基数据的存储是以径向数据存储为核心的,解决单根径向数据的存储,就能解决整个基数据中所有径向的存储。本方法把径向数据的反射率因子有无回波二值化,然后把二值化数据用1比特(bit)的0、1表示,那么一个字节(byte)有8比特(bit)可以表示8个位置的数据有无,以920个径向数据为例,920个数据的径向可以用115字节表示完成回波的有无。将这115个字节作为位置掩码,之后的同时间探测到的同径向其他探测参数的径向数据只存储有回波的数据,去除无回波数据,参照图4所示。
参照图5所示,假如单根径向中只有13个回波数据,用此方法存储单根径向的存储空间由7,360字节锐减为219字节,存储空间只约为原来的3%,效果非常显著,根据有回波数据的多少这个比例会有所波动。天气雷达基数据中有回波数据率一般不超过10%,以10%的有回波数据计算,整个基数据在编码前后的存储空间比为不超过14%。
其余径向照此方法循环编码即可完成数据的高效存储。在读取数据的时候先读取反射率因子的115字节的位置掩码,按顺序检索知道有回波数据的位置,再读取有回波的数据按掩码位置放置,其余设置为无回波数据,即可还原920个径向数据。其余探测参数可以以反射率因子的115个字节作为自己的位置掩码,做类似操作,也可以还原920个这个探测参数的径向数据。
本发明实施例还提供了一种天气雷达数据格式读取方法,包括:
读取径向数据中反射率因子参数数据的位置掩码;位置掩码为回波确定字节;多个径向数据构成PPI数据;多个PPI数据构成天气雷达基数据;
根据回波确定字节,对各个探测参数数据按顺序检索标识存在回波的字节,确定回波数据的位置;
根据回波数据的位置,从径向数据中读取各个探测参数的回波数据,并将回波数据按照位置掩码的位置放置,完成天气雷达基数据的读取。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (3)

1.一种天气雷达数据格式存储方法,其特征在于,包括:
获取天气雷达基数据;所述天气雷达基数据由多个PPI数据构成;每个所述PPI数据由多个径向数据构成;
将所述径向数据中的反射率因子参数数据进行回波确定二值化操作,生成回波确定字节;所述回波确定字节带有是否存在回波的标识;
将所述回波确定字节作为位置掩码,控制所述径向数据中各个探测参数数据的存储;所述探测参数为同时间探测到的同径向其他探测参数;
将所述回波确定字节作为位置掩码,控制所述径向数据中各个探测参数数据的存储,包括:将所述回波确定字节作为位置掩码,控制所述径向数据中各个探测参数数据只存储有回波的数据,去除无回波的数据。
2.如权利要求1所述的一种天气雷达数据格式存储方法,其特征在于,将所述径向数据中的反射率因子参数数据进行回波确定二值化操作,生成回波确定字节,包括:
将所述径向数据中的反射率因子参数数据进行有无回波二值化;
将二值化的数据通过第一标记标识为存在回波;将二值化的数据通过第二标记标识为不存在回波;
根据所述第一标记和第二标记,生成回波确定字节。
3.一种天气雷达数据格式读取方法,其特征在于,适用于如权利要求1~2任一项所述的天气雷达数据格式存储方法,该读取方法包括:
读取径向数据中反射率因子参数数据的位置掩码;所述位置掩码为回波确定字节;多个所述径向数据构成PPI数据;多个所述PPI数据构成所述天气雷达基数据;
根据所述回波确定字节,对各个探测参数数据按顺序检索标识存在回波的字节,确定回波数据的位置;
根据所述回波数据的位置,从所述径向数据中读取各个探测参数的回波数据,并将所述回波数据按照所述位置掩码的位置放置,完成天气雷达基数据的读取。
CN202211441105.1A 2022-11-17 2022-11-17 一种天气雷达数据格式存储及读取方法 Active CN115686377B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211441105.1A CN115686377B (zh) 2022-11-17 2022-11-17 一种天气雷达数据格式存储及读取方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211441105.1A CN115686377B (zh) 2022-11-17 2022-11-17 一种天气雷达数据格式存储及读取方法

Publications (2)

Publication Number Publication Date
CN115686377A CN115686377A (zh) 2023-02-03
CN115686377B true CN115686377B (zh) 2023-06-09

Family

ID=85053642

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211441105.1A Active CN115686377B (zh) 2022-11-17 2022-11-17 一种天气雷达数据格式存储及读取方法

Country Status (1)

Country Link
CN (1) CN115686377B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102007058345A1 (de) * 2007-12-03 2009-06-04 Selex Sistemi Integrati Gmbh Verfahren zum Ermitteln von Verbunddaten von Wetterradaren in einem Überlappungsbereich der Beobachtungsbereiche mindestens zweier Wetterradare
CN103984773A (zh) * 2014-06-05 2014-08-13 南京信息工程大学 一种多格式天气雷达基数据文件转NetCDF文件方法
KR102387059B1 (ko) * 2021-09-24 2022-04-15 대한민국 기상 레이더를 위한 노이즈 제거 장치 및 방법

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012008021A (ja) * 2010-06-25 2012-01-12 Japan Weather Association 監視装置、方法及びプログラム並びに監視システム
US8289202B1 (en) * 2011-04-04 2012-10-16 Honeywell International Inc. Method and system for generating weather and ground reflectivity information
CN105849582B (zh) * 2013-12-06 2018-01-12 Hrl实验室有限责任公司 用于减小编码孔径雷达中的噪声的方法及设备
CN105548984A (zh) * 2015-12-10 2016-05-04 中国人民解放军理工大学 一种基于模糊逻辑的双偏振多普勒天气雷达地物杂波抑制方法
CN111638496A (zh) * 2020-06-08 2020-09-08 上海眼控科技股份有限公司 雷达回波数据处理方法、计算机设备和介质
CN111856472B (zh) * 2020-06-08 2023-08-01 福建省气象信息中心(福建省气象档案馆) 一种消除毫米波云雷达旁瓣回波的方法及装置
CN112671412A (zh) * 2020-12-24 2021-04-16 北京海兰信数据科技股份有限公司 一种雷达回波数据压缩方法及装置
CN113960552A (zh) * 2021-10-12 2022-01-21 湖北省气象信息与技术保障中心 一种基于晴空回波的天气雷达遮挡角识别方法及系统
CN114236475A (zh) * 2021-11-16 2022-03-25 中国航空工业集团公司雷华电子技术研究所 一种基于图像熵判断气象杂波抑制算法效果的方法
CN114200413A (zh) * 2021-12-10 2022-03-18 华风气象传媒集团有限责任公司 一种多普勒天气雷达电磁干扰数据质量控制方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102007058345A1 (de) * 2007-12-03 2009-06-04 Selex Sistemi Integrati Gmbh Verfahren zum Ermitteln von Verbunddaten von Wetterradaren in einem Überlappungsbereich der Beobachtungsbereiche mindestens zweier Wetterradare
CN103984773A (zh) * 2014-06-05 2014-08-13 南京信息工程大学 一种多格式天气雷达基数据文件转NetCDF文件方法
KR102387059B1 (ko) * 2021-09-24 2022-04-15 대한민국 기상 레이더를 위한 노이즈 제거 장치 및 방법

Also Published As

Publication number Publication date
CN115686377A (zh) 2023-02-03

Similar Documents

Publication Publication Date Title
CN110766011B (zh) 一种基于深度多级优化的接触网螺母异常识别方法
CN103761229B (zh) 数据处理方法及装置
CN109214422A (zh) 基于dcgan的停车数据修补方法、装置、设备及存储介质
CN110265065A (zh) 一种构建语音检测模型的方法及语音端点检测系统
CN115686377B (zh) 一种天气雷达数据格式存储及读取方法
CN115456868A (zh) 一种消防演练系统数据管理方法
CN109345177B (zh) 一种基于云视频信息处理的冷链食品物流可视化方法
CN107656298A (zh) 一种获取方位信息的方法及相关设备
CN114860709A (zh) 一种基于Bi-GAN的电力系统缺失值填补方法
CN103886045B (zh) 一种包含局部有效栅格数据的存取方法及装置
CN112734732A (zh) 基于改进ssd算法的铁路隧道漏缆卡具检测方法
CN115471711A (zh) 一种基于特征曲线匹配低应变曲线的桩基缺陷识别方法
CN107948458A (zh) 一种视觉检测控制方法及系统
CN104778212B (zh) 地图数据生成方法和装置、地图数据读取方法和装置
Wiman et al. Fast compression and access of lidar point clouds using wavelets
CN110517218B (zh) 自适应数据处理平台
CN110751695B (zh) 自适应数据处理方法
CN107979711B (zh) 基于最优化失真修改阻止隐蔽传输的方法
CN112688692A (zh) 抄表数据压缩方法、数据格式、设备及存储介质
EP1567987B1 (en) Method for compression and transport of active graphical images
JP2002024828A (ja) 遠隔検針装置及び遠隔検針システム
CN117707743B (zh) 一种智慧车站能源管控系统任务执行方法、装置及设备
CN116011262B (zh) 一种图像整合提取方法及系统
CN114584202B (zh) 一种北斗卫星短报文远程通信的数据采集系统
CN1437340A (zh) 从传输格式组合的计算值到传输格式组合指示的映射方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant