CN215420317U - 一种射电终端高速基带数据处理装置 - Google Patents
一种射电终端高速基带数据处理装置 Download PDFInfo
- Publication number
- CN215420317U CN215420317U CN202121555481.4U CN202121555481U CN215420317U CN 215420317 U CN215420317 U CN 215420317U CN 202121555481 U CN202121555481 U CN 202121555481U CN 215420317 U CN215420317 U CN 215420317U
- Authority
- CN
- China
- Prior art keywords
- data
- analysis module
- module
- unit
- data analysis
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Mobile Radio Communication Systems (AREA)
Abstract
本实用新型涉及射电天文技术领域,具体公开了一种射电终端高速基带数据处理装置,包括数据传输模块、数据解析模块、数据分析模块,所述数据传输模块、数据解析模块、数据分析模块相互连接;所述数据传输模块用于传输每个台站的原始数据,所述数据解析模块用于数据的原始数据的初步预处理,所述数据分析模块用于数据的初步相关处理以及接口部分并用于最终数据的分析;所述数据解析模块包括数据聚合单元、数据解压单元以及数据重组单元;本实用新型整体的数据预处理速率在5Gbps‑14Gbps之间浮动,平均速率约10Gbps;整体提升了高速基带数据预处理的处理效率,确保了可以参加更高灵敏度的宽带观测,保证了系统的稳定性。
Description
技术领域
本实用新型涉及射电天文技术领域,具体为一种射电终端高速基带数据处理装置。
背景技术
当前常规的射电天文观测,受限于记录设备的硬件,所使用的普通硬盘或者设备进行数据记录和处理的时候,最大的记录速率和处理速率均限制在2Gbps,且对每通道的带宽有一定的限制。
实用新型内容
本实用新型的目的在于提供一种射电终端高速基带数据处理装置,以解决上述背景技术中提出的问题。
为实现上述目的,本实用新型提供如下技术方案:一种射电终端高速基带数据处理装置,包括数据传输模块、数据解析模块、数据分析模块,所述数据传输模块、数据解析模块、数据分析模块相互连接;所述数据传输模块用于传输每个台站的原始数据,所述数据解析模块用于数据的原始数据的初步预处理,所述数据分析模块用于数据的初步相关处理以及接口部分并用于最终数据的分析;所述数据解析模块包括数据聚合单元、数据解压单元以及数据重组单元。
优选的,所述数据传输模块中设置有N路光模块接口,并通过N路光模块接口与信号采集终端相连。
优选的,所述数据聚合单元用于将多组的原始数据聚合为一组以特定帧头开始的基带数据,所述数据解压单元用于将聚合的基带数据解压为不同通道设备的数据,所述数据重组单元用于将解压的输出数据按照要求重组为指定格式的数据。
与现有技术相比,本实用新型的有益效果是:本实用新型整体的数据预处理速率在5Gbps-14Gbps之间浮动,平均速率约10Gbps;整体提升了高速基带数据预处理的处理效率,确保了可以参加更高灵敏度的宽带观测;对数据的稳定性有了很大的改进,从原来的数据丢失了基本在1/4以上,降低到1/8甚至更低到1/32。
附图说明
图1为本实用新型的结构示意图;
图中标号:1、数据传输模块;2、数据解析模块;21、数据聚合单元;22、数据解压单元;23、数据重组单元;3、数据分析模块。
具体实施方式
下面将结合本实用新型实施例中的附图,对本实用新型实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本实用新型一部分实施例,而不是全部的实施例。基于本实用新型中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本实用新型保护的范围。
请参阅图1,本实用新型提供一种技术方案:一种射电终端高速基带数据处理装置,包括数据传输模块1、数据解析模块2、数据分析模块3,所述数据传输模块1、数据解析模块2、数据分析模块3相互连接;所述数据传输模块1用于传输每个台站的原始数据,所述数据解析模块2用于数据的原始数据的初步预处理,所述数据分析模块3用于数据的初步相关处理以及接口部分并用于最终数据的分析;所述数据解析模块2包括数据聚合单元21、数据解压单元22以及数据重组单元23。
进一步的,所述数据传输模块1中设置有N路光模块接口,并通过N路光模块接口与信号采集终端相连。
进一步的,所述数据聚合单元21用于将多组的原始数据聚合为一组以特定帧头开始的基带数据,所述数据解压单元22用于将聚合的基带数据解压为不同通道设备的数据,所述数据重组单元23用于将解压的输出数据按照要求重组为指定格式的数据。
工作原理:数据传输系统1包含N路光模块接口用于传输原始数据,数据解析模块2主要包括数据聚合、解压、重组等功能,数据分析模块3主要用于对最终数据的分析与鉴定。
通过数据聚合单元21对数据进行聚合;记录的基带数据每10MB存储一次,每次存储时均会在帧头部分补充相应的序号信息。比如记录时帧头额外会包含N-M信息,其中N表示第N组数据,M表示第M次存储,且数据会被随机地分散存储在32组磁盘。数据聚合的作用为将随机分散在32组硬盘的数据合并为1组有序数据,通过解析每10MB一组的数据块,分析其中的序列号,并将其对应的数据按照实际顺序拼接起来,完全还原原始数据状态,按数据接收采集先后顺序,形成一个个数据包。数据聚合时存在最大问题是数据量大,同时需正确解析每一组数据并按顺序拼接,判断出有问题数据包以供后续相关处理分析时参考;不丢失数据,不引进误差数据,为相关处理获得正确结果提供基本保障。
通过数据解压单元22进行数据的解压;经过聚合后的数据文件,因为其包含多路thread数据、多路通道数据,当前的相关处理软件并不支持该数据类型,需要将其解析为单thread、多路或者一路通道的基带数据。通过解压基带数据的帧头数据,将含有相同thread的数据包进行整合并写入一组文件,当前观测的基带数据一般为8个thread,每个thread包含8路通道数据。所以最终解析的数据为8组数据,每组数据流会根据具体的通道和帧号信息进行排序。
通过数据重组单元23进行数据的重组;当前射电终端高速观测的基带数据经过解析后有8个文件生成,重组的输入数据即为这8组数据,保持大部分的帧头信息,只需要修改同步字、thread以及每个数据包的包长信息。然后将重组的数据写入1个文件,该文件只包含1个thread,64个通道的数据。
尽管已经示出和描述了本实用新型的实施例,对于本领域的普通技术人员而言,可以理解在不脱离本实用新型的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型,本实用新型的范围由所附权利要求及其等同物限定。
Claims (3)
1.一种射电终端高速基带数据处理装置,其特征在于:包括数据传输模块(1)、数据解析模块(2)、数据分析模块(3),所述数据传输模块(1)、数据解析模块(2)、数据分析模块(3)相互连接;所述数据传输模块(1)用于传输每个台站的原始数据,所述数据解析模块(2)用于数据的原始数据的初步预处理,所述数据分析模块(3)用于数据的初步相关处理以及接口部分并用于最终数据的分析;所述数据解析模块(2)包括数据聚合单元(21)、数据解压单元(22)以及数据重组单元(23)。
2.根据权利要求1所述的一种射电终端高速基带数据处理装置,其特征在于:所述数据传输模块(1)中设置有N路光模块接口,并通过N路光模块接口与信号采集终端相连。
3.根据权利要求1所述的一种射电终端高速基带数据处理装置,其特征在于:所述数据聚合单元(21)用于将多组的原始数据聚合为一组以特定帧头开始的基带数据,所述数据解压单元(22)用于将聚合的基带数据解压为不同通道设备的数据,所述数据重组单元(23)用于将解压的输出数据按照要求重组为指定格式的数据。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202121555481.4U CN215420317U (zh) | 2021-07-08 | 2021-07-08 | 一种射电终端高速基带数据处理装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202121555481.4U CN215420317U (zh) | 2021-07-08 | 2021-07-08 | 一种射电终端高速基带数据处理装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN215420317U true CN215420317U (zh) | 2022-01-04 |
Family
ID=79648062
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202121555481.4U Active CN215420317U (zh) | 2021-07-08 | 2021-07-08 | 一种射电终端高速基带数据处理装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN215420317U (zh) |
-
2021
- 2021-07-08 CN CN202121555481.4U patent/CN215420317U/zh active Active
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20220343047A1 (en) | Method and system for processing simulation data | |
CN109408424B (zh) | 一种基于PCIe接口的SpaceFibre总线数据采集方法 | |
CN110968534B (zh) | 一种基于fpga的多通道分片合并处理方法及系统 | |
CN109951750A (zh) | 基于FlexE一层交叉架构的数据处理方法及系统 | |
US8130826B2 (en) | Systems and methods for preparing network data for analysis | |
CN112751788A (zh) | 一种支持多类型帧混合传输的双平面交换方法 | |
CN116582133B (zh) | 一种变压器生产过程数据智能管理系统 | |
CN215420317U (zh) | 一种射电终端高速基带数据处理装置 | |
CN114553852A (zh) | 一种基于异步工业文件服务器的快速上传方法 | |
CN115567460B (zh) | 数据包处理方法及装置 | |
CN115113821B (zh) | 基于量子加密的5g大数据算力服务系统 | |
CN112072783B (zh) | 秒级负荷数据在端侧和边缘侧设备间传输的方法和装置 | |
CN115695409A (zh) | 一种大容量飞参数据及总线数据的卸载处理方法 | |
CN111355801B (zh) | 一种远程人工智能通信业务办理系统及其控制方法 | |
CN115643310A (zh) | 一种压缩数据的方法、装置和系统 | |
CN112565821B (zh) | 数据处理方法、装置、安全网关及存储设备 | |
CN104506390A (zh) | 一种路测系统日志存储方法及装置 | |
CN114265821A (zh) | 一种基于能力协商的文件压缩算法的选择方法 | |
US10827040B2 (en) | System and method for enabling lossless interpacket gaps for lossy protocols | |
CN109168008B (zh) | 一种基于云分布式海量交通视频信息处理方法 | |
CN116633808B (zh) | 一种时间触发光纤通道网络下的数据监控系统及其方法 | |
GB2587427A (en) | Processing local area network diagnostic data | |
CN113872982B (zh) | 一种基于mqtt协议的船舶监控数据传输方法及系统 | |
US20230403219A1 (en) | High speed data packet pcap capture and storage with error detection-correction | |
CN111064727B (zh) | 一种帧格式流式信号数据高性能软件解析方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
GR01 | Patent grant | ||
GR01 | Patent grant |