CN101826113A - 一种高效统一的无线测量数据存储方法 - Google Patents
一种高效统一的无线测量数据存储方法 Download PDFInfo
- Publication number
- CN101826113A CN101826113A CN 201010172731 CN201010172731A CN101826113A CN 101826113 A CN101826113 A CN 101826113A CN 201010172731 CN201010172731 CN 201010172731 CN 201010172731 A CN201010172731 A CN 201010172731A CN 101826113 A CN101826113 A CN 101826113A
- Authority
- CN
- China
- Prior art keywords
- data
- file
- information
- wireless measurement
- analyzing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种高效统一的无线测量数据存储方法,包括以下步骤:(1)定义存储数据的统一存储结构;(2)利用数据解析工具对测试信息数据文件进行解析,提取数据点;(3)将产生的数据点的结构映射为统一存储结构;(4)对结构转换后生成的数据点进行数据分析处理,将分析处理后的数据点按照信息分类保存为分类信息数据文件;(5)记录保存的数据点在分类信息数据文件中的位置偏移信息,并将该位置偏移信息保存为索引文件。利用本发明的存储方法对无线测量数据进行保存保证数据的一致性,可以大大提高分析软件的兼容程度,分析软件在对数据文件进行分析处理时可以高效快速地进行。
Description
技术领域
本发明涉及无线测量数据的处理技术。特别是一种高效统一的无线测量数据存储方法。
背景技术
在无线信号测试分析过程中,先使用不同厂商的各种型号的通信测试设备进行无线环境信号的侦测及信息采集,并将测量得到的无线测量数据以一个或多个数据文件的形式保存,然后在不同的软件应用平台中进行相关的分析处理。
由于不同的设备其存储结构是不一样的,不同设备所生成的测试信息数据文件没有统一的存储结构,因此这些测试信息数据文件对分析软件兼容性不够好,使得分析软件对数据文件进行分析处理时反应速度慢、分析处理效果差,在不同的分析软件中,即使对相同的数据文件进行同样指标的分析,得出的结果也不能完全一致,准确性也不能得到保证;此外,受限于存储结构的不同,分析软件不能很好的同时对多个测试信息数据文件进行分析处理,对较大的数据文件(大于500M)不能有效的支持。为了解决上述问题,部分存储结构采用了数据库的处理方式,但这种数据库的处理方式对分析处理的性能提高帮助不大,反而极大增加了数据存储空间,增加了用户的使用成本,由于使用时还需要进行安装、配置数据库等工作,因此进一步增加了软件应用的复杂性。
发明内容
为解决上述问题,本发明提供一种高效统一的无线测量数据存储方法,利用这种存储方法对无线测量数据进行保存保证数据的一致性,可以大大提高分析软件的兼容程度,分析软件在对数据文件进行分析处理时可以高效快速地进行。
本发明为解决其问题所采用的技术方案是:
一种高效统一的无线测量数据存储方法,包括以下步骤:
(1)定义存储数据的统一存储结构;
(2)利用数据解析工具对通信测试设备产生的测试信息数据文件进行解析,提取一个或者多个数据点;
(3)将步骤(2)中产生的一个或者多个数据点的结构映射为步骤(1)中所定义的统一存储结构;
(4)对步骤(3)中结构转换后生成的一个或者多个数据点进行数据分析处理,将分析处理后的一个或者多个数据点按照信息分类保存为一个或者多个用于输出的分类信息数据文件;
(5)记录步骤(4)中保存的数据点在分类信息数据文件中的位置偏移信息,并将该位置偏移信息保存为索引文件。
进一步,步骤(2)中所述数据解析工具为解码库。
进一步,步骤(4)中的数据分析处理包括数据点有效信息的过滤、GPS插值、信令事件分析、事件分析、过滤采样点的继承值。
进一步,步骤(4)中将分析处理后的数据点先缓存到内存块中,每间隔一段固定时间值后将缓存在内存块中的一个或者多个数据点保存为一个或者多个用于输出的分类信息数据文件。
进一步,分析处理后的数据点保存为分类信息数据文件时按照不同的端口信息进行分类。
进一步,步骤(1)中所定义的统一存储结构采用不继承的方式进行存储。
本发明可以将不同通信测试设备产生的测试信息数据文件转化为具有统一存储结构的分类信息数据文件,并生成相应的索引文件,与传统的数据处理方法相比,具有以下优点:
1、分析软件只需通过简单的接口处理便可以支持多种不同厂商的各种型号的通信设备产生的测试信息数据文件,对通信测试设备的兼容性大大提高;
2、通过索引文件,可以快速的在庞大的数据文件中得到分析结果,支持计算机所能支持的任意大的数据文件的分析处理;
3、保证了数据的一致性,同时为分析处理结果的准确性提供保障,有效的提高分析处理效果;
4、很好的支持同时对多个测试信息数据文件进行分析处理;
5、数据结构的可扩展性好,可以很方便的增加或减少分类信息数据文件及其对应的索引文件。
此外,当所定义的统一存储结构采用不继承的方式进行存储时,可以有效地对数据文件进行压缩,使得存储介质空间可以更有效地进行利用,不需要额外的辅助,能够减少用户使用成本。
附图说明
下面结合附图和实施例对本发明作进一步说明:
图1为应用本发明的一种实施例的硬件组成框图。
具体实施方式
本发明在应用时一般需要到如图1中实施例所示的硬件组成模块,其中该硬件组成模块包括外部系统101、数据解析接口102、索引接口103、数据及索引操控模块104、数据文件模块105、索引模块106、索引触发模块107等,其在进行无线测量数据的处理时采用以下步骤:
(1)定义存储数据的统一存储结构,该存储结构优选采用不继承的方式进行存储,该存储方式能够减少数据存储量,可以有效地压缩数据文件大小,在本实施例中,将数据文件模块105定义为统一存储结构;
(2)利用数据解析工具对通信测试设备产生的测试信息数据文件进行解析,提取一个或者多个数据点,此过程在外部系统101中进行,该数据解析工具一般为解码库,利用解码库可以将测试信息数据文件中的有效数据点解析出来,解析出来的一个或者多个数据点通过数据解析接口102送入到数据及索引操控模块104中;
(3)将步骤(2)中产生的一个或者多个数据点的结构映射为步骤(1)中所定义的统一存储结构;
(4)对步骤(3)中结构转换后生成的一个或者多个数据点进行数据分析处理,将分析处理后的一个或者多个数据点按照信息分类保存为一个或者多个用于输出的分类信息数据文件,其中,数据分析处理包括数据点有效信息的过滤、GPS插值、信令事件分析、事件分析、过滤采样点的继承值等过程,经过这些过程进行处理后得到的数据点可以还原出最主要的有效数据信息,作为优选的实施方式,在对数据点进行分析处理时先将处理得到的数据点先缓存到内存块中,每间隔一段固定时间值后将缓存在内存块中的一个或者多个数据点保存为一个或者多个用于输出的分类信息数据文件,这种方式能够增强分析处理的速度,此外,由于测试信息数据中一般都包括了多个端口信息,因此在对数据点进行信息分类时优选按照不同的端口信息进行分类,在本实施例中,数据分析处理的过程在数据及索引操控模块104中进行,得到的分类信息数据文件存储于数据文件模块105中;
(5)记录步骤(4)中保存的数据点在分类信息数据文件中的位置偏移信息,并将该位置偏移信息保存为索引文件,通过该索引文件可以快速地在庞大的数据文件中得到所需要的数据,大大提高对分类信息数据的处理速度,在本实施例中,索引文件存储于索引模块106中,外部系统101利用索引接口103可以快速地获得分类信息数据的索引文件,并根据索引文件提取所需要的分类信息数据,其中索引触发模块107用于监控新增的分类信息数据文件,当新增加的数据文件符合产生索引规则时,便生成相应索引文件数据并提交到索引模块106中,外部系统101利用索引接口103可以快速地获得分类信息数据的索引文件,并根据索引文件提取所需要的分类信息数据,当需要减少数据时,只需将相应的分类信息数据文件及其对应的索引文件删除便可,因此本发明的存储方法在增加和删减数据时十分方便,具有良好的扩展性。
此外,本发明还支持索引重建功能,利用所生成的分类信息数据文件及索引文件可以重新生成原始数据。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,可以作出若干改进,这些改进也应视为本发明的保护范围。
Claims (6)
1.一种高效统一的无线测量数据存储方法,其特征在于包括以下步骤:
(1)定义存储数据的统一存储结构;
(2)利用数据解析工具对通信测试设备产生的测试信息数据文件进行解析,提取一个或者多个数据点;
(3)将步骤(2)中产生的一个或者多个数据点的结构映射为步骤(1)中所定义的统一存储结构;
(4)对步骤(3)中结构转换后生成的一个或者多个数据点进行数据分析处理,将分析处理后的一个或者多个数据点按照信息分类保存为一个或者多个用于输出的分类信息数据文件;
(5)记录步骤(4)中保存的数据点在分类信息数据文件中的位置偏移信息,并将该位置偏移信息保存为索引文件。
2.根据权利要求1所述的一种高效统一的无线测量数据存储方法,其特征在于步骤(2)中所述数据解析工具为解码库。
3.根据权利要求1所述的一种高效统一的无线测量数据存储方法,其特征在于步骤(4)中的数据分析处理包括数据点有效信息的过滤、GPS插值、信令事件分析、事件分析、过滤采样点的继承值。
4.根据权利要求1所述的一种高效统一的无线测量数据存储方法,其特征在于步骤(4)中将分析处理后的数据点先缓存到内存块中,每间隔一段固定时间值后将缓存在内存块中的一个或者多个数据点保存为一个或者多个用于输出的分类信息数据文件。
5.根据权利要求1或3或4所述的一种高效统一的无线测量数据存储方法,其特征在于分析处理后的数据点保存为分类信息数据文件时按照不同的端口信息进行分类。
6.根据权利要求1所述的一种高效统一的无线测量数据存储方法,其特征在于步骤(1)中所定义的统一存储结构采用不继承的方式进行存储。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 201010172731 CN101826113A (zh) | 2010-05-14 | 2010-05-14 | 一种高效统一的无线测量数据存储方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 201010172731 CN101826113A (zh) | 2010-05-14 | 2010-05-14 | 一种高效统一的无线测量数据存储方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN101826113A true CN101826113A (zh) | 2010-09-08 |
Family
ID=42690033
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN 201010172731 Pending CN101826113A (zh) | 2010-05-14 | 2010-05-14 | 一种高效统一的无线测量数据存储方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN101826113A (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102163186A (zh) * | 2011-04-18 | 2011-08-24 | 广东电网公司电力科学研究院 | 检测高压电力设备局部放电信号生成文件的方法及装置 |
CN102467348A (zh) * | 2010-11-03 | 2012-05-23 | 北京普源精电科技有限公司 | 从测量仪器接收数据的方法及系统 |
CN102841860A (zh) * | 2012-08-17 | 2012-12-26 | 珠海世纪鼎利通信科技股份有限公司 | 一种大数据量信息存储与访问方法 |
CN104484373A (zh) * | 2014-12-05 | 2015-04-01 | 中国航空工业集团公司第六三一研究所 | 一种发动机健康数据存储方法 |
CN112328544A (zh) * | 2020-09-18 | 2021-02-05 | 广州中望龙腾软件股份有限公司 | 一种多学科仿真数据分类方法、设备及存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2002101579A1 (en) * | 2001-06-07 | 2002-12-19 | International Business Machines Corporation | System & method of mapping between software objects & structured language element-based documents |
CN1687930A (zh) * | 2005-05-25 | 2005-10-26 | 北京四方继保自动化股份有限公司 | 一种实现iec61850信息间接接入实时数据库的方法 |
CN1764097A (zh) * | 2005-10-13 | 2006-04-26 | 中兴通讯股份有限公司 | 一种基于解释型信令的解码方法 |
CN1845099A (zh) * | 2006-04-27 | 2006-10-11 | 掌富科技(南京)有限公司 | 智能移动终端多媒体电子文档转换存储方法及转换存储结构 |
-
2010
- 2010-05-14 CN CN 201010172731 patent/CN101826113A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2002101579A1 (en) * | 2001-06-07 | 2002-12-19 | International Business Machines Corporation | System & method of mapping between software objects & structured language element-based documents |
CN1687930A (zh) * | 2005-05-25 | 2005-10-26 | 北京四方继保自动化股份有限公司 | 一种实现iec61850信息间接接入实时数据库的方法 |
CN1764097A (zh) * | 2005-10-13 | 2006-04-26 | 中兴通讯股份有限公司 | 一种基于解释型信令的解码方法 |
CN1845099A (zh) * | 2006-04-27 | 2006-10-11 | 掌富科技(南京)有限公司 | 智能移动终端多媒体电子文档转换存储方法及转换存储结构 |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102467348A (zh) * | 2010-11-03 | 2012-05-23 | 北京普源精电科技有限公司 | 从测量仪器接收数据的方法及系统 |
CN102163186A (zh) * | 2011-04-18 | 2011-08-24 | 广东电网公司电力科学研究院 | 检测高压电力设备局部放电信号生成文件的方法及装置 |
CN102163186B (zh) * | 2011-04-18 | 2013-04-17 | 广东电网公司电力科学研究院 | 检测高压电力设备局部放电信号生成文件的方法及装置 |
CN102841860A (zh) * | 2012-08-17 | 2012-12-26 | 珠海世纪鼎利通信科技股份有限公司 | 一种大数据量信息存储与访问方法 |
CN102841860B (zh) * | 2012-08-17 | 2015-09-16 | 珠海世纪鼎利通信科技股份有限公司 | 一种大数据量信息存储与访问方法 |
CN104484373A (zh) * | 2014-12-05 | 2015-04-01 | 中国航空工业集团公司第六三一研究所 | 一种发动机健康数据存储方法 |
CN104484373B (zh) * | 2014-12-05 | 2019-03-05 | 中国航空工业集团公司第六三一研究所 | 一种发动机健康数据存储方法 |
CN112328544A (zh) * | 2020-09-18 | 2021-02-05 | 广州中望龙腾软件股份有限公司 | 一种多学科仿真数据分类方法、设备及存储介质 |
CN112328544B (zh) * | 2020-09-18 | 2022-01-11 | 广州中望龙腾软件股份有限公司 | 一种多学科仿真数据分类方法、设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107647860B (zh) | 一种心率检测方法、装置、电子设备及存储介质 | |
CN101826113A (zh) | 一种高效统一的无线测量数据存储方法 | |
CN107861981B (zh) | 一种数据处理方法及装置 | |
US20140040276A1 (en) | Method and apparatus for processing time series data | |
US8990792B2 (en) | Method for constructing dynamic call graph of application | |
CN110995273B (zh) | 电力数据库的数据压缩方法、装置、设备及介质 | |
CN104331487B (zh) | 日志的处理方法及装置 | |
CN110874324A (zh) | 一种测试结果数据保存方法、装置、终端设备及存储介质 | |
CN105488415B (zh) | 扫描系统进程的方法和装置 | |
CN106294826A (zh) | 一种集群数据实时查询方法及系统 | |
WO2021068891A1 (en) | Method, system, electronic device, and storage medium for storing and collecting temperature data | |
CN110769002A (zh) | 基于LabVIEW的报文解析方法、系统、电子设备和介质 | |
JP2012018990A5 (zh) | ||
CN110020665B (zh) | 一种兼容不同飞行质谱仪的微生物质谱数据分析方法 | |
CN105242873A (zh) | 云计算系统的性能数据的采集与存储方法及装置 | |
US20230036600A1 (en) | Method and apparatus for training acoustic network model, and electronic device | |
CN109062507A (zh) | 心电数据的处理储存方法及装置 | |
CN111210817B (zh) | 数据处理方法及装置 | |
US10963364B2 (en) | Analysis system, analysis method and program | |
CN108694041A (zh) | 数据转换方法、装置及服务终端 | |
CN109344083B (zh) | 一种程序调试方法、装置、设备及可读存储介质 | |
Patel et al. | ECG analysis and detection of arrhythmia using MATLAB | |
US10338197B2 (en) | System and method for use of qualitative modeling for signal analysis | |
CN109062797B (zh) | 生成信息的方法和装置 | |
CN109408235B (zh) | 一种数据处理方法及装置、一种计算设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C12 | Rejection of a patent application after its publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20100908 |