CN215264803U - 一种大容量数据转存系统 - Google Patents

一种大容量数据转存系统 Download PDF

Info

Publication number
CN215264803U
CN215264803U CN202120829858.4U CN202120829858U CN215264803U CN 215264803 U CN215264803 U CN 215264803U CN 202120829858 U CN202120829858 U CN 202120829858U CN 215264803 U CN215264803 U CN 215264803U
Authority
CN
China
Prior art keywords
data
interface
box
storage module
speed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202120829858.4U
Other languages
English (en)
Inventor
杨红卫
王成才
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Zhiliang Electronic Technology Co ltd
Original Assignee
Shanghai Zhiliang Electronic Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Zhiliang Electronic Technology Co ltd filed Critical Shanghai Zhiliang Electronic Technology Co ltd
Priority to CN202120829858.4U priority Critical patent/CN215264803U/zh
Application granted granted Critical
Publication of CN215264803U publication Critical patent/CN215264803U/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Small-Scale Networks (AREA)

Abstract

本实用新型公开了一种大容量数据转存系统,包括数据存储模块和数据服务器,还包括数据卸载盒,所述数据存储模块和数据服务器之间通过数据卸载盒连接,所述数据卸载盒通过网口和光口连接到数据服务器。本实用新型,由于数据存储模块与数据卸载盒之间通过高速数据接口连接,可以达到数GB/s的数据传输速率。光纤也采用高速数据接口,也可以实现远高于传统千兆以太网的传输速率。考虑到硬盘存储速率也能够达到数GB/s的数据速率,从而实现整个数据转存的数据达到数GB/s,较传统的数据转存速度提高数倍。

Description

一种大容量数据转存系统
技术领域
本实用新型涉及通信、遥测技术领域,具体为一种大容量数据转存系统。
背景技术
在通信、遥测、大数据应用等领域,需要将任务过程中在现场采集的无线信号存储在数据存储模块中,待任务结束后,将存储模块中的数据转存到数据服务器硬盘系统等其他存储介质中,实现数据备份、后续分析等。传统的数据转存系统结构如图1所示。这种系统架构常采用传统的千兆以太网,其数据速率不能满足大容量数据转存的需要。以存储8TB数据模块的转存为例,通过千兆以太网卸载,至少需要8000秒,给用户的数据转存带来很大延迟,用户体验差。特别是在某些应用场景,采集的数据需要快速转存和分析。传统的数据转存架构难以满足需要。
实用新型内容
本实用新型的目的在于提供一种大容量数据转存系统,以解决上述背景技术中提出的问题。
为实现上述目的,本实用新型提供如下技术方案:一种大容量数据转存系统,包括数据存储模块和数据服务器,还包括数据卸载盒,所述数据存储模块和数据服务器之间通过数据卸载盒连接,所述数据卸载盒通过网口和光口连接到数据服务器。
优选的,所述数据卸载盒上设置有机械插槽和电路接口,所述数据存储模块插入机械插槽来实现和电路接口的连接。
优选的,所述电路接口包括高速数据接口和控制接口。
优选的,所述数据卸载盒还包括第一FPGA模块,所述第一FPGA模块与高速数据接口、控制接口、网口和光口连接。
优选的,所述高速数据接口硬件上可采用LRM插头和插座实现,软件上通过GTX协议实现高速数据传输,所述控制接口采用SPI总线实现。
优选的,所述光口的硬件可以采用成熟的QSFP光口,软件可以采用GTX总线协议,所述网口采用以太网接口。
优选的,所述数据存储模块包括第二FPGA模块和数据存储器,所述第二FPGA模块和数据存储器连接。
优选的,所述数据存储器采用E2PROM。
一种大容量数据转存方法,包括如下步骤:
S1,在现场执行数据采集任务时,数据存储模块的第二FPGA模块将采集的数据通过缓存、存储到数据存储器;
S2,当数据存储模块插入数据卸载盒后,第二FPGA模块将通过控制接口与数据卸载盒的第一FPGA模块交互控制指令,并在控制指令的控制下,将数据存储器的数据通过高速数据接口,发送给数据卸载盒;
S3,数据卸载盒的第一FPGA模块通过以太网接口与数据服务器交互控制数据;在控制数据的控制下,数据卸载盒读取数据存储模块中的数据,并通过光口转发给数据服务器。
与现有技术相比,本实用新型的有益效果是:
本实用新型,由于数据存储模块与数据卸载盒之间通过高速数据接口连接,可以达到数GB/s的数据传输速率。光纤也采用高速数据接口,也可以实现远高于传统千兆以太网的传输速率。考虑到硬盘存储速率也能够达到数GB/s的数据速率,从而实现整个数据转存的数据达到数GB/s,较传统的数据转存速度提高数倍。
附图说明
图1为现有技术的数据转存系统结构示意图;
图2为本实用新型的数据转存系统结构示意图;
图3为本实用新型的数据存储模块原理图;
图4为本实用新型的数据卸载盒原理图。
具体实施方式
下面将结合本实用新型实施例中的附图,对本实用新型实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本实用新型一部分实施例,而不是全部的实施例。基于本实用新型中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本实用新型保护的范围。
实施例
请参阅图1-4,本实用新型提供一种技术方案:一种大容量数据转存系统,包括数据存储模块和数据服务器,数据存储模块包括第二FPGA模块和数据存储器,数据存储器采用E2PROM,所述第二FPGA模块和数据存储器连接,还包括数据卸载盒,所述数据存储模块和数据服务器之间通过数据卸载盒连接,所述数据卸载盒上设置有机械插槽和电路接口,数据卸载盒还包括第一FPGA模块,所述第一FPGA模块与高速数据接口、控制接口、网口和光口连接,所述数据存储模块插入机械插槽来实现和电路接口的连接,电路接口包括高速数据接口和控制接口,高速数据接口硬件上可采用LRM插头和插座实现,软件上通过GTX协议实现高速数据传输,所述控制接口采用SPI总线实现,所述数据卸载盒通过网口和光口连接到数据服务器,光口的硬件可以采用成熟的QSFP光口,软件可以采用GTX总线协议,所述网口采用以太网接口。
一种大容量数据转存方法,包括如下步骤:
S1,在现场执行数据采集任务时,数据存储模块的第二FPGA模块将采集的数据通过缓存、存储到数据存储器;
S2,当数据存储模块插入数据卸载盒后,第二FPGA模块将通过控制接口与数据卸载盒的第一FPGA模块交互控制指令,并在控制指令的控制下,将数据存储器的数据通过高速数据接口,发送给数据卸载盒;
S3,数据卸载盒的第一FPGA模块通过以太网接口与数据服务器交互控制数据;在控制数据的控制下,数据卸载盒读取数据存储模块中的数据,并通过光口转发给数据服务器。
增加了专用的数据卸载盒设备;
数据卸载盒中有机械插槽和电路接口;
使用时,将数据存储模块插入数据卸载盒的插槽中,通过数据卸载盒的电路接口,将数据存储模块中的数据快速读取,并通过光口转发给数据服务器;
数据卸载盒有网口和光口两种接口连接到服务器。其中,网口主要实现数据服务器对数据卸载盒的控制;光口实现将数据卸载盒转发的数据快速转发和存储到数据服务器。
由于数据存储模块与数据卸载盒之间通过高速数据接口连接,可以达到数GB/s的数据传输速率。光纤也采用高速数据接口,也可以实现远高于传统千兆以太网的传输速率。考虑到硬盘存储速率也能够达到数GB/s的数据速率,从而实现整个数据转存的数据达到数GB/s,较传统的数据转存速度提高数倍。
数据服务器可以采用带有网口和光口的货架产品。
尽管已经示出和描述了本实用新型的实施例,对于本领域的普通技术人员而言,可以理解在不脱离本实用新型的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型,本实用新型的范围由所附权利要求及其等同物限定。

Claims (8)

1.一种大容量数据转存系统,包括数据存储模块和数据服务器,其特征在于:还包括数据卸载盒,所述数据存储模块和数据服务器之间通过数据卸载盒连接,所述数据卸载盒通过网口和光口连接到数据服务器。
2.根据权利要求1所述的一种大容量数据转存系统,其特征在于:所述数据卸载盒上设置有机械插槽和电路接口,所述数据存储模块插入机械插槽来实现和电路接口的连接。
3.根据权利要求2所述的一种大容量数据转存系统,其特征在于:所述电路接口包括高速数据接口和控制接口。
4.根据权利要求1所述的一种大容量数据转存系统,其特征在于:所述数据卸载盒还包括第一FPGA模块,所述第一FPGA模块与高速数据接口、控制接口、网口和光口连接。
5.根据权利要求4所述的一种大容量数据转存系统,其特征在于:所述高速数据接口硬件上可采用LRM插头和插座实现,软件上通过GTX协议实现高速数据传输,所述控制接口采用SPI总线实现。
6.根据权利要求4所述的一种大容量数据转存系统,其特征在于:所述光口的硬件可以采用成熟的QSFP光口,软件可以采用GTX总线协议,所述网口采用以太网接口。
7.根据权利要求1所述的一种大容量数据转存系统,其特征在于:所述数据存储模块包括第二FPGA模块和数据存储器,所述第二FPGA模块和数据存储器连接。
8.根据权利要求7所述的一种大容量数据转存系统,其特征在于:所述数据存储器采用E2PROM。
CN202120829858.4U 2021-04-21 2021-04-21 一种大容量数据转存系统 Active CN215264803U (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202120829858.4U CN215264803U (zh) 2021-04-21 2021-04-21 一种大容量数据转存系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202120829858.4U CN215264803U (zh) 2021-04-21 2021-04-21 一种大容量数据转存系统

Publications (1)

Publication Number Publication Date
CN215264803U true CN215264803U (zh) 2021-12-21

Family

ID=79510199

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202120829858.4U Active CN215264803U (zh) 2021-04-21 2021-04-21 一种大容量数据转存系统

Country Status (1)

Country Link
CN (1) CN215264803U (zh)

Similar Documents

Publication Publication Date Title
CN102624874B (zh) 一种语音信息传送方法及系统
CN113179316B (zh) 一种基于容器化设计的云边端协同计算系统和方法
CN103984662B (zh) 一种读、写数据的方法及设备、存储系统
CN106897159A (zh) 一种用于采集自动气象站数据的系统及方法
CN105447146A (zh) 一种海量数据的收集与交换系统及方法
CN109787981A (zh) 协议转换系统、方法、装置、设备和存储介质
CN215264803U (zh) 一种大容量数据转存系统
CN113726592B (zh) 一种边缘服务器的传输延迟测试方法、系统及相关组件
CN107276834B (zh) 一种航空电子环境下光纤通道流量分析记录方法及装置
CN113254386A (zh) 一种数据存储系统及转存方法
CN102013900A (zh) 电力专用千兆b码时戳卡
CN106789967A (zh) 一种多源网络安全事件的采集与同步方法
CN106685856A (zh) 智能变电站海量网络报文处理方法、系统和设备
CN110674221A (zh) 一种空间数据同步方法、终端及计算机可读存储介质
CN106375324A (zh) 一种基于tcp/ip通信协议的网络通信系统及方法
CN114189445B (zh) 一种usb信号透传处理方法、装置、终端及存储介质
CN114928587A (zh) 一种基于云边协同系统的AIoT设备复用建模化方法
CN214544338U (zh) 一种数据卸载装置
CN109743260A (zh) 一种基于改进的acbm算法对网络流量进行过滤的装置和方法
CN109379401A (zh) 基于Kafka的原始流量存储装置
CN101808138B (zh) 提高wap漫游用户订购或退订业务速度的系统及方法
CN107040455A (zh) 一种基于redis的即时消息通讯方法和系统
CN103312687B (zh) 一种协议转换器及方法
WO2017020292A1 (zh) 一种光接入设备及光接入系统
CN113300858A (zh) 一种适用于多种数据存储模块构型的数据卸载装置

Legal Events

Date Code Title Description
GR01 Patent grant
GR01 Patent grant