CN107037262B - 一种大数据频谱分析系统及其方法 - Google Patents
一种大数据频谱分析系统及其方法 Download PDFInfo
- Publication number
- CN107037262B CN107037262B CN201710284460.5A CN201710284460A CN107037262B CN 107037262 B CN107037262 B CN 107037262B CN 201710284460 A CN201710284460 A CN 201710284460A CN 107037262 B CN107037262 B CN 107037262B
- Authority
- CN
- China
- Prior art keywords
- data
- spectrum analysis
- unit
- analysis
- spectrum
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01R—MEASURING ELECTRIC VARIABLES; MEASURING MAGNETIC VARIABLES
- G01R23/00—Arrangements for measuring frequencies; Arrangements for analysing frequency spectra
- G01R23/16—Spectrum analysis; Fourier analysis
Landscapes
- Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- General Physics & Mathematics (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
- Automatic Analysis And Handling Materials Therefor (AREA)
Abstract
本发明公开了一种大数据频谱分析系统,包括用户接口单元、数据处理分析单元、数据提取单元、大数据存储单元、数据显示单元,还提供了一种大数据频谱分析系统的分析方法,包括以下步骤:用户通过用户接口单元输入频谱分析参数,包括系统数据存储速率或数据采样率、频谱分析的扫描时间、频谱分辨率及分析点数;根据用户设置的频谱分析参数,数据处理分析单元利用频谱分析算法转换为数据提取参数;数据提取单元根据数据处理分析单元提供的数据提取参数提取大数据存储单元中的数据,并传送至数据处理分析单元进行频谱分析;频谱分析结果传送至数据显示单元供用户查看。本发明能够根据用户设定的频谱分析参数对大量数据进行快速、准确地分析处理。
Description
技术领域
本发明涉及数字信号处理领域,特别是涉及一种大数据频谱分析系统及其方法。
背景技术
所谓频谱分析,是指将信号源发出的时域信号按其频率分量顺序展开,使其成为频率的函数,并考察其变化规律;也就是,将时域信号转换为频域信号以对信号进行分析的一种方法。
随着信息技术的发展,数据处理量正呈爆炸性增长,针对海量数据若不使用针对性的算法进行频谱分析处理,会出现数据处理速度慢、数据分析效率低、用户等待时间过长等情况。因此亟需提供一种新型的大数据频谱分析系统及其分析方法来解决上述问题。
发明内容
本发明所要解决的技术问题是提供一种大数据频谱分析系统及其方法,能够在保证满足用户需求的基础上提高数据分析效率。
为解决上述技术问题,本发明采用的一个技术方案是:提供一种大数据频谱分析系统,包括用户接口单元、数据处理分析单元、数据提取单元、大数据存储单元、数据显示单元,数据处理分析单元与用户接口单元、数据提取单元相互通信,数据处理分析单元的输出端与数据显示单元相连,大数据存储单元的输出端与数据提取单元相连;
用户接口单元用于接收用户的频谱分析参数设置;
数据提取单元在数据处理分析单元的控制下提取大数据存储单元中的数据;
数据处理分析单元将接收到的频谱分析参数转换为数据提取参数,并根据数据提取参数对数据提取单元提取的数据进行频谱分析;
数据显示单元用于显示数据处理分析单元频谱分析的结果。
在本发明一个较佳实施例中,用户接口单元接收的频谱分析参数包括系统数据存储速率或数据采样速率、频谱分析的扫描时间、频谱分辨率及分析点数。
为解决上述技术问题,本发明采用的另一个技术方案是:提供一种大数据频谱分析系统的分析方法,包括以下步骤:
S1:用户通过用户接口单元输入频谱分析参数,包括系统数据存储速率或数据采样速率、频谱分析的扫描时间、频谱分辨率及分析点数;
S2:根据用户设置的频谱分析参数,数据处理分析单元利用频谱分析算法转换为数据提取参数;
S3:数据提取单元根据数据处理分析单元提供的数据提取参数提取大数据存储单元中的数据,并传送至数据处理分析单元进行频谱分析;
S4:频谱分析结果传送至数据显示单元供用户查看。
在本发明一个较佳实施例中,在步骤S2中,频谱分析算法的具体步骤如下:
S2.1:根据系统数据存储速率和频谱分析的扫描时间,计算出时域里的帧长度,将大数据存储单元里存储的数据进行分帧,其中,
每帧包含的数据量=(数据存储速率或数据采样速率)*频谱分析扫描时间,频谱分析范围为零频到0.5倍的数据存储速率或数据采样速率;
S2.2:根据频谱分辨率及分析点数确定每次提取的数据量即数据包;
每个数据包的数据量=频谱分析范围/频率分辨率;或者
每个数据包的数据量=分析点数;频谱分析范围为零频到0.5倍的数据存储速率或数据采样速率;
S2.3:根据所述帧长度和数据包大小,按照如下数据提取规律进行数据提取:首先提取帧1中的数据包1,然后提取帧2中的数据包2,再提取帧3中的数据包3,以此类推;
S2.4:对提取的数据进行离散傅里叶变换得到数据的频谱数据。
本发明的有益效果是:本发明所述大数据频谱分析系统能够根据用户设定的频谱分析参数对大量数据进行快速准确地分析处理,所述大数据频谱分析方法提供的频谱分析算法将用户设定的频谱分析参数转换为数据提取参数,既满足用户需求,又无需对大数据进行全部分析,提高了数据分析效率,减少了用户等待时间。
附图说明
图1是本发明所述大数据频谱分析系统一较佳实施例的结构框图;
图2是所述大数据频谱分析方法的流程图;
图3是所述帧与数据包的示意图。
具体实施方式
下面结合附图对本发明的较佳实施例进行详细阐述,以使本发明的优点和特征能更易于被本领域技术人员理解,从而对本发明的保护范围做出更为清楚明确的界定。
本发明实施例包括:
请参阅图1,一种大数据频谱分析系统,包括用户接口单元、数据处理分析单元、数据提取单元、大数据存储单元、数据显示单元。数据处理分析单元与用户接口单元、数据提取单元相互通信,数据处理分析单元的输出端与数据显示单元相连,大数据存储单元的输出端与数据提取单元相连。
用户接口单元用于接收用户的频谱分析参数设置,所述频谱分析参数包括系统数据存储速率或数据采样速率、频谱分析的扫描时间、频谱分辨率及分析点数;
大数据存储单元用于存储大量的待处理数据;
数据提取单元在数据处理分析单元的控制下提取大数据存储单元中的数据;
数据处理分析单元将接收到的频谱分析参数转换为数据提取参数,并根据数据提取参数对数据提取单元提取的数据进行频谱分析;
数据显示单元用于显示数据处理分析单元频谱分析的结果。
所述大数据频谱分析系统能够根据用户设定的频谱分析参数对大量数据进行快速准确地分析处理,提高了数据分析效率,减少了用户等待时间。
基于所述大数据频谱分析系统,本发明还提供了一种大数据频谱分析系统的分析方法,请参阅图2,包括以下步骤:
S1:用户通过用户接口单元输入频谱分析参数,包括系统数据存储速率或数据采样速率、频谱分析的扫描时间、频谱分辨率及分析点数;
S2:根据用户设置的频谱分析参数,数据处理分析单元利用频谱分析算法转换为数据提取参数;
进一步的,在步骤S2中,频谱分析算法的具体步骤如下:
S2.1:根据系统数据存储速率和频谱分析的扫描时间,计算出时域里的帧长度,将大数据存储单元里存储的数据进行分帧,其中,
每帧包含的数据量=(数据存储速率或数据采样速率)*频谱分析扫描时间,频谱分析范围为零频到0.5倍的数据存储速率或数据采样速率;
S2.2:根据频谱分辨率及分析点数确定每次提取的数据量即数据包;
每个数据包的数据量=频谱分析范围/频率分辨率;或者
每个数据包的数据量=分析点数;频谱分析范围为零频到0.5倍的数据存储速率或数据采样速率;
S2.3:根据所述帧长度和数据包大小,结合图3,按照如下数据提取规律进行数据提取:首先提取帧1中的数据包1,然后提取帧2中的数据包2,再提取帧3中的数据包3,以此类推。
由于数据包大小小于帧大小,系统只需对数据包中的数据进行处理分析,无需对大量数据进行全部分析处理,大大提高了分析效率。
S2.4:对提取的数据进行离散傅里叶变换得到数据的频谱数据。
S3:数据提取单元根据数据处理分析单元提供的数据提取参数提取大数据存储单元中的数据,并传送至数据处理分析单元进行频谱分析,即进行离散傅里叶变换得到数据的频谱分量;
S4:频谱分析结果传送至数据显示单元供用户查看。
所述大数据频谱分析方法提供的频谱分析算法将用户设定的频谱分析参数转换为数据提取参数,既满足用户需求,又无需对大数据进行全部分析,提高了数据分析效率,减少了用户等待时间。
以上所述仅为本发明的实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (2)
1.一种大数据频谱分析系统,其特征在于,包括用户接口单元、数据处理分析单元、数据提取单元、大数据存储单元、数据显示单元,数据处理分析单元与用户接口单元、数据提取单元相互通信,数据处理分析单元的输出端与数据显示单元相连,大数据存储单元的输出端与数据提取单元相连;
用户接口单元用于接收用户的频谱分析参数设置;
数据提取单元在数据处理分析单元的控制下提取大数据存储单元中的数据;
数据处理分析单元将接收到的频谱分析参数利用频谱分析算法转换为数据提取参数,再处理数据提取单元根据数据提取参数提取的数据;
数据显示单元用于显示数据处理分析单元频谱分析的结果;
用户接口单元接收的频谱分析参数包括系统数据存储速率、频谱分析的扫描时间、频谱分辨率及分析点数;
所述频谱分析的具体步骤如下:
S2.1:根据系统数据存储速率和频谱分析的扫描时间,计算出时域里的帧长度,将大数据存储单元里存储的数据进行分帧,其中,
每帧包含的数据量=数据存储速率*频谱分析扫描时间,频谱分析范围为零频到0.5倍的数据存储速率对应的频率;
S2.2:根据频谱分辨率及分析点数确定每次提取的数据量即数据包大小;
每个数据包的数据量=频谱分析范围/频率分辨率;或者
每个数据包的数据量=分析点数;频谱分析范围为零频到0.5倍的数据存储速率对应的频率;
S2.3:根据所述帧长度和数据包大小,按照如下数据提取规律进行数据提取:首先提取帧1中的数据包1,然后提取帧2中的数据包2,再提取帧3中的数据包3,以此类推;
S2.4:对提取的数据进行离散傅里叶变换得到数据的频谱数据。
2.基于权利要求1所述一种大数据频谱分析系统的分析方法,包括以下步骤:
S1:用户通过用户接口单元输入频谱分析参数,包括系统数据存储速率、频谱分析的扫描时间、频谱分辨率及分析点数;
S2:数据处理分析单元利用频谱分析算法,将用户设置的频谱分析参数转换为数据提取参数;
S3:数据提取单元根据数据处理分析单元提供的数据提取参数提取大数据存储单元中的数据,并传送至数据处理分析单元进行频谱分析;
S4:频谱分析结果传送至数据显示单元供用户查看。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710284460.5A CN107037262B (zh) | 2017-04-25 | 2017-04-25 | 一种大数据频谱分析系统及其方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710284460.5A CN107037262B (zh) | 2017-04-25 | 2017-04-25 | 一种大数据频谱分析系统及其方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107037262A CN107037262A (zh) | 2017-08-11 |
CN107037262B true CN107037262B (zh) | 2020-02-11 |
Family
ID=59535079
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710284460.5A Active CN107037262B (zh) | 2017-04-25 | 2017-04-25 | 一种大数据频谱分析系统及其方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107037262B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109902076A (zh) * | 2019-03-05 | 2019-06-18 | 上海创远仪器技术股份有限公司 | 针对长曝光对比频谱图进行大数据处理的系统及其方法 |
CN114792352B (zh) * | 2022-06-22 | 2022-09-20 | 成都玖锦科技有限公司 | 一种频谱图像处理方法和系统 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN201392366Y (zh) * | 2009-04-02 | 2010-01-27 | 无锡科思电子科技有限公司 | 一种改良的便携式频谱分析仪 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1042282C (zh) * | 1989-10-13 | 1999-02-24 | 德克萨斯仪器公司 | 用于同步矢量处理机的第二最近邻通讯网络、系统和方法 |
TW595140B (en) * | 2002-04-22 | 2004-06-21 | Cognio Inc | System and method for spectrum management of a shared frequency band |
WO2005011294A1 (ja) * | 2003-07-28 | 2005-02-03 | Nec Corporation | 視聴調査システム |
US8145219B2 (en) * | 2004-07-28 | 2012-03-27 | Broadcom Corporation | Handoff of a multimedia call session using background network scanning |
US7630882B2 (en) * | 2005-07-15 | 2009-12-08 | Microsoft Corporation | Frequency segmentation to obtain bands for efficient coding of digital media |
JP2007080367A (ja) * | 2005-09-13 | 2007-03-29 | Toshiba Corp | 情報記憶媒体、情報記録方法、および情報再生装置 |
CN102256201A (zh) * | 2010-05-19 | 2011-11-23 | 上海聪维声学技术有限公司 | 用于助听器的自动环境识别方法 |
CN103236255A (zh) * | 2013-04-03 | 2013-08-07 | 广西环球音乐图书有限公司 | 音频文件转化midi文件 |
CN104931966B (zh) * | 2015-06-12 | 2018-01-02 | 北京航空航天大学 | 一种基于dcs算法的星载视频sar成像处理方法 |
-
2017
- 2017-04-25 CN CN201710284460.5A patent/CN107037262B/zh active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN201392366Y (zh) * | 2009-04-02 | 2010-01-27 | 无锡科思电子科技有限公司 | 一种改良的便携式频谱分析仪 |
Non-Patent Citations (1)
Title |
---|
"一种新的基于Lab Windows/CVI的虚拟频谱分析仪的设计与实现";赵汝和 等;《黑龙江科技信息》;20141231(第27期);第183-184页 * |
Also Published As
Publication number | Publication date |
---|---|
CN107037262A (zh) | 2017-08-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11163991B2 (en) | Method and apparatus for detecting body | |
CN112929695B (zh) | 视频去重方法、装置、电子设备和存储介质 | |
SG10201900339QA (en) | Computing device and method for detecting malicious domain names in a network traffic | |
US20160284344A1 (en) | Speech data recognition method, apparatus, and server for distinguishing regional accent | |
CN110020665B (zh) | 一种兼容不同飞行质谱仪的微生物质谱数据分析方法 | |
CN107037262B (zh) | 一种大数据频谱分析系统及其方法 | |
CN104834597A (zh) | 应用响应时长的测量方法和系统 | |
CN110995273B (zh) | 电力数据库的数据压缩方法、装置、设备及介质 | |
CN104484410A (zh) | 应用于大数据系统的数据融合方法及系统 | |
CN112765324A (zh) | 一种概念漂移检测方法及装置 | |
CN115203004A (zh) | 代码覆盖率测试方法、装置、存储介质及电子设备 | |
CN112926621A (zh) | 数据标注方法、装置、电子设备及存储介质 | |
CN109064464B (zh) | 用于检测电池极片毛刺的方法和装置 | |
CN109240916B (zh) | 信息输出控制方法、装置及计算机可读存储介质 | |
KR20220124273A (ko) | 동적 제스처 인식 방법, 장치, 기기 및 저장 매체 | |
CN101762320B (zh) | 一种在mac平台下绘制音频波形图的方法及系统 | |
CN111211939A (zh) | 一种基于网络处理器实现流表高效计数的装置和方法 | |
CN111080362A (zh) | 广告监测系统及方法 | |
CN107872352B (zh) | 一种网管系统的性能测试方法、装置及系统 | |
CN111079185B (zh) | 数据库信息处理的方法、装置、存储介质及电子设备 | |
CN114186637A (zh) | 流量识别方法、装置、服务器和存储介质 | |
CN110456238B (zh) | 一种电晕放电离子源检测方法及系统 | |
JP2018088225A (ja) | ガウシアンフィッティングを利用したアナログ波形データに対する異常値抽出システム及び方法 | |
CN104820074A (zh) | 一种基于移动窗函数的电子鼻特征提取方法 | |
CN117292395B (zh) | 审图模型的训练方法和训练装置及审图的方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |