CN113626187A - 测量数据的处理方法及装置 - Google Patents
测量数据的处理方法及装置 Download PDFInfo
- Publication number
- CN113626187A CN113626187A CN202110876632.4A CN202110876632A CN113626187A CN 113626187 A CN113626187 A CN 113626187A CN 202110876632 A CN202110876632 A CN 202110876632A CN 113626187 A CN113626187 A CN 113626187A
- Authority
- CN
- China
- Prior art keywords
- data
- waveform
- thread
- queue
- producer
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 24
- 238000000034 method Methods 0.000 title claims abstract description 21
- 238000005259 measurement Methods 0.000 title claims description 17
- 238000012360 testing method Methods 0.000 claims abstract description 20
- 230000006835 compression Effects 0.000 claims abstract description 17
- 238000007906 compression Methods 0.000 claims abstract description 17
- 238000001514 detection method Methods 0.000 claims abstract description 13
- 238000013500 data storage Methods 0.000 claims abstract description 12
- 238000003672 processing method Methods 0.000 claims description 4
- 238000001914 filtration Methods 0.000 claims description 3
- 238000012546 transfer Methods 0.000 claims description 3
- 238000012544 monitoring process Methods 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 6
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
- G06F9/5011—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals
- G06F9/5016—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals the resource being the memory
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
- G06F9/5011—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals
- G06F9/5022—Mechanisms to release resources
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
- G06T1/60—Memory management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Recording Measured Values (AREA)
Abstract
本发明涉及一种测量数据的处理方法及装置,包括用于数据存储的生产者‑消费者线程,以及用于图表显示的状态机线程,生产者‑消费者线程和状态机线程并列运行,生产者线程将传感器采集的数据压入队列消息处理器,消费者线程从队列消息处理器中读取数据保存至磁盘,状态机线程将由采集模块读取的检测数据保存至波形缓存数组中,并对当前显示的波形数据进行压缩阈值判断,达到压缩阈值时,进行有损压缩处理。本发明对数据存储和数据波形显示做技术优化,解决长时间试验过程中检测数据波形显示问题和意外断电或系统死机时数据存储的安全性问题。
Description
技术领域
本发明涉及一种测量数据的处理方法及装置,尤其适用于做长时间试验的数据处理和显示的场合。
背景技术
现有检测试验设备对测量数据处理方式:传感器采集数据处理后以波形图的方式呈现试验状态和趋势,测量装置显示的波形图因考虑物理内存的限制,常规作法是只截取最近一段数据显示,后台实时存储测量数据到数据库中,这种方式适用于大多数场合,但在做轴承等产品寿命试验,试验按步骤谱循环跑,试验时间长,有长达几千上万小时的试验,需要针对整个试验运行过程,保存试验数据和波形显示,数据量非常大,若要全部呈现实时测量数据,大量的数据调用显示会严重消耗装置的CPU、显卡和内存资源,系统会非常卡顿,甚至出现软件死机的情况。另外,长时间试验的数据连续保存也考验数据存储的安全性,在长时间试验过程中,若发生意外的断电或系统死机,此时数据库未正常关闭,有可能出现数据库损坏,检测数据丢失等情况。
发明内容
有鉴于此,本发明的目的在于提供一种对数据存储和数据波形显示做技术优化,解决长时间试验过程中波形显示问题和意外断电或系统死机时数据存储的安全性问题的测量数据的处理方法及装置。
为了实现以上目的,本发明采用这样一种测量数据的处理方法,包括用于数据存储的生产者-消费者线程,以及用于图表显示的状态机线程,所述的生产者-消费者线程和所述的状态机线程并列运行,生产者线程将传感器采集的数据压入队列消息处理器,消费者线程从队列消息处理器中读取数据保存至磁盘,所述的状态机线程包括
步骤一、由采集模块读取检测数据保存至波形缓存数组中;
步骤二、按照顺序轮流显示选项卡图表,所述的选项卡图表包括由波形缓存数组过滤处理形成的不止一个的波形数据,所述的波形数据包括“载荷&转速波形图显示”波形数据、“温度波形图显示”波形数据、“振动波形图显示”波形数据、“转速&电流波形图显示”波形数据,所述的顺序由枚举指针实现状态机转移;
步骤三、对当前显示的波形数据进行压缩阈值判断,达到压缩阈值时,进行有损压缩处理;
步骤四、进入下一个循环。
特别的,步骤二中各个选项卡图表显示均包括两个子步骤,
子步骤一、判断波形选项卡是否是当前显示页面,如果是则显示该波形选项卡对应的波形数据;
子步骤二、未当前显示页面的波形数据进行波形显示阈值判断,若达到阈值,则未当前显示页面的波形缓存数组清空,释放占用的内存。
特别的,所述的步骤三中的有损压缩处理的方法为对当前显示的波形数据每隔一组,删除一组数据。
特别的,所述的生产者线程包括
第一步骤、判断是否达到保存时间,达到则检测数据保存至缓存数组;
第二步骤、判断是否达到设置时间或设置次数,达到则缓存数组入队列;
第三步骤、判断时间是否是在“23:59:59”,是则强制缓存数组入队列;
第四步骤、判断试验是否停止,是则强制缓存数组入队列。
第五步骤、进入下一个循环。
特别的,所述的消费者线程包括
步骤Ⅰ、侦听是否有数据入队列,有则执行数据出队列;
步骤Ⅱ、判断是否隔天,是则新建数据库;
步骤Ⅲ、执行数据保存至磁盘;
步骤Ⅳ、进入下一个循环。
本发明还提供一种测量数据的处理装置,包括
传感器,所述的传感器用于采集不止一种信号类型的现场数据,所述的现场数据包括载荷、转速、温度、电流和振动参数;
数据采集模块,用于汇集以上不同传感器的数据;
和电脑,所述的电脑上具有上位机软件,所述的上位机软件根据数据采集模块传递过来的数据进行显示和存储,显示和存储采用如上所述的测量数据的处理方法。
与现有技术相比,本发明创造的有益技术效果在于:
1、试验数据的存储采用“生产者/消费者”模式,使用队列消息处理器进行检测数据周期性缓存并将结果按设置条件按时记录在磁盘上,每天零点时更换文件名新建数据库文件,即使装置异常情况导致数据库损坏,也只是一天的存储数据丢失,限制了数据丢失范围。由于试验时间长,一天的存储数据丢失是在可接受范围内,实现检测数据存储安全。
2、对波形数据每隔一组删除一组数据的做法可将数据压缩50%,因试验时间长,变步时间跨度长,虽经有损压缩,波形显示还是相对完整,不影响波形图呈现试验状态和趋势,因此,通过波形压缩阈值限制了波形图占用内存大小,解决了波形长时间记录和硬件资源冲突问题;另外,通过波形显示阈值,其他未当前显示的波形图数值清空,释放波形图所占内存,进一步地保证了显示的实时性;波形显示阈值和波形压缩阈值可根据硬件资源情况调整,配置灵活。
附图说明
图1是本发明实施例中第二线程的流程图;
图2是本发明实施例中第二线程步骤二中每个选项卡图表显示的流程图;
图3是本发明实施例中生产者线程的流程图;
图4是本发明实施例中消费者线程的流程图;
图5是本发明实施例中测量数据的处理装置的结构图。
具体实施方式
如图1~4所示,一种测量数据的处理方法,包括用于数据存储的生产者-消费者线程,以及用于图表显示的状态机线程,生产者-消费者线程和状态机线程并列运行,生产者线程将传感器采集的数据压入队列消息处理器,消费者线程从队列消息处理器中读取数据保存至磁盘,状态机线程包括
步骤一101、由采集模块读取检测数据保存至波形缓存数组中;
步骤二102、103、104、105,按照顺序轮流显示选项卡图表,选项卡图表包括由波形缓存数组过滤处理形成的不止一个的波形数据,波形数据包括“载荷&转速波形图显示”波形数据、“温度波形图显示”波形数据、“振动波形图显示”波形数据、“转速&电流波形图显示”波形数据,顺序由枚举指针实现状态机转移;
步骤三106、对当前显示的波形数据进行压缩阈值判断,达到压缩阈值时,进行有损压缩处理;
步骤四、进入下一个循环。
这里,步骤二102、103、104、105中各个选项卡图表显示均包括两个子步骤,
子步骤一201、判断波形选项卡是否是当前显示页面,如果是则显示该波形选项卡对应的波形数据;
子步骤二202、未当前显示页面的波形数据进行波形显示阈值判断,若达到阈值,则未当前显示页面的波形缓存数组清空,释放占用的内存。
这里,步骤三106中的有损压缩处理的方法为对当前显示的波形数据每隔一组,删除一组数据。
生产者线程包括
第一步骤301、判断是否达到保存时间,达到则检测数据保存至缓存数组;
第二步骤302、判断是否达到设置时间或设置次数,达到则缓存数组入队列;
第三步骤303、判断时间是否是在“23:59:59”,是则强制缓存数组入队列;
第四步骤304、判断试验是否停止,是则强制缓存数组入队列。
第五步骤、进入下一个循环。
消费者线程包括
步骤Ⅰ401、侦听是否有数据入队列,有则执行数据出队列;
步骤Ⅱ402、判断是否隔天,是则新建数据库;
步骤Ⅲ403、执行数据保存至磁盘;
步骤Ⅳ、进入下一个循环。
如图5所示,一种测量数据的处理装置,包括
传感器,传感器用于采集不止一种信号类型的现场数据,现场数据包括载荷、转速、温度、电流和振动参数;
数据采集模块,用于汇集以上不同传感器的数据;
和电脑,电脑上具有上位机软件,上位机软件根据数据采集模块传递过来的数据进行显示和存储,显示和存储采用如上所述的测量数据的处理方法。
Claims (6)
1.一种测量数据的处理方法,其特征在于:包括用于数据存储的生产者-消费者线程,以及用于图表显示的状态机线程,所述的生产者-消费者线程和所述的状态机线程并列运行,生产者线程将传感器采集的数据压入队列消息处理器,消费者线程从队列消息处理器中读取数据保存至磁盘,所述的状态机线程包括
步骤一、由采集模块读取检测数据保存至波形缓存数组中;
步骤二、按照顺序轮流显示选项卡图表,所述的选项卡图表包括由波形缓存数组过滤处理形成的不止一个的波形数据,所述的波形数据包括“载荷&转速波形图显示”波形数据、“温度波形图显示”波形数据、“振动波形图显示”波形数据、“转速&电流波形图显示”波形数据,所述的顺序由枚举指针实现状态机转移;
步骤三、对当前显示的波形数据进行压缩阈值判断,达到压缩阈值时,进行有损压缩处理;
步骤四、进入下一个循环。
2.根据权利要求1所述的测量数据的处理方法,其特征在于:步骤二中各个选项卡图表显示均包括两个子步骤,
子步骤一、判断波形选项卡是否是当前显示页面,如果是则显示该波形选项卡对应的波形数据;
子步骤二、未当前显示页面的波形数据进行波形显示阈值判断,若达到阈值,则未当前显示页面的波形缓存数组清空,释放占用的内存。
3.根据权利要求1或2所述的测量数据的处理方法,其特征在于:所述的步骤三中的有损压缩处理的方法为对当前显示的波形数据每隔一组,删除一组数据。
4.根据权利要求1所述的测量数据的处理方法,其特征在于:所述的生产者线程包括
第一步骤、判断是否达到保存时间,达到则检测数据保存至缓存数组;
第二步骤、判断是否达到设置时间或设置次数,达到则缓存数组入队列;
第三步骤、判断时间是否是在“23:59:59”,是则强制缓存数组入队列;
第四步骤、判断试验是否停止,是则强制缓存数组入队列。
第五步骤、进入下一个循环。
5.根据权利要求1或4所述的测量数据的处理方法,其特征在于:所述的消费者线程包括
步骤Ⅰ、侦听是否有数据入队列,有则执行数据出队列;
步骤Ⅱ、判断是否隔天,是则新建数据库;
步骤Ⅲ、执行数据保存至磁盘;
步骤Ⅳ、进入下一个循环。
6.一种测量数据的处理装置,其特征在于:包括
传感器,所述的传感器用于采集不止一种信号类型的现场数据,所述的现场数据包括载荷、转速、温度、电流和振动参数;
数据采集模块,用于汇集以上不同传感器的数据;
和电脑,所述的电脑上具有上位机软件,所述的上位机软件根据数据采集模块传递过来的数据进行显示和存储,显示和存储采用如上所述的测量数据的处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110876632.4A CN113626187A (zh) | 2021-07-31 | 2021-07-31 | 测量数据的处理方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110876632.4A CN113626187A (zh) | 2021-07-31 | 2021-07-31 | 测量数据的处理方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113626187A true CN113626187A (zh) | 2021-11-09 |
Family
ID=78381978
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110876632.4A Pending CN113626187A (zh) | 2021-07-31 | 2021-07-31 | 测量数据的处理方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113626187A (zh) |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040189636A1 (en) * | 2003-03-27 | 2004-09-30 | Azinger Frederick A. | Automated storage of unique waveforms presented as an oscilloscope image |
US20050222775A1 (en) * | 2004-04-02 | 2005-10-06 | Saad Kisra | Data compression methods and systems |
US20060212238A1 (en) * | 2004-04-18 | 2006-09-21 | Pol Nisenblat | Power quality monitoring |
US20110078222A1 (en) * | 2009-09-30 | 2011-03-31 | Samplify Systems, Inc. | Enhanced multi-processor waveform data exchange using compression and decompression |
CN102722150A (zh) * | 2012-06-07 | 2012-10-10 | 中国东方电气集团有限公司 | 一种基于通用串口的多路波形采集显示和数据分析处理系统 |
CN103559255A (zh) * | 2013-11-01 | 2014-02-05 | 北京理工大学 | 一种分布式液压系统的可视化数据处理方法 |
CN108663555A (zh) * | 2017-03-29 | 2018-10-16 | 苏州普源精电科技有限公司 | 一种数字示波器的波形搜索方法及数字示波器 |
US20200138291A1 (en) * | 2013-09-25 | 2020-05-07 | Bardy Diagnostics, Inc. | Electrocardiography monitor configured for self-optimizing ecg data compression |
CN112763778A (zh) * | 2020-12-23 | 2021-05-07 | 北京普源精电科技有限公司 | 波形显示方法、装置、设备及存储介质 |
-
2021
- 2021-07-31 CN CN202110876632.4A patent/CN113626187A/zh active Pending
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040189636A1 (en) * | 2003-03-27 | 2004-09-30 | Azinger Frederick A. | Automated storage of unique waveforms presented as an oscilloscope image |
US20050222775A1 (en) * | 2004-04-02 | 2005-10-06 | Saad Kisra | Data compression methods and systems |
US20060212238A1 (en) * | 2004-04-18 | 2006-09-21 | Pol Nisenblat | Power quality monitoring |
US20110078222A1 (en) * | 2009-09-30 | 2011-03-31 | Samplify Systems, Inc. | Enhanced multi-processor waveform data exchange using compression and decompression |
CN102722150A (zh) * | 2012-06-07 | 2012-10-10 | 中国东方电气集团有限公司 | 一种基于通用串口的多路波形采集显示和数据分析处理系统 |
US20200138291A1 (en) * | 2013-09-25 | 2020-05-07 | Bardy Diagnostics, Inc. | Electrocardiography monitor configured for self-optimizing ecg data compression |
CN103559255A (zh) * | 2013-11-01 | 2014-02-05 | 北京理工大学 | 一种分布式液压系统的可视化数据处理方法 |
CN108663555A (zh) * | 2017-03-29 | 2018-10-16 | 苏州普源精电科技有限公司 | 一种数字示波器的波形搜索方法及数字示波器 |
CN112763778A (zh) * | 2020-12-23 | 2021-05-07 | 北京普源精电科技有限公司 | 波形显示方法、装置、设备及存储介质 |
Non-Patent Citations (2)
Title |
---|
夏玉龙: "基于虚拟仪器的电机测试系统", 《中国优秀硕士学位论文全文数据库 工程科技Ⅱ辑》, 15 February 2016 (2016-02-15) * |
王世阳 等: "基于LabVIEW多通道应变采集系统设计", 《 国外电子测量技术》, vol. 36, no. 8, 18 September 2017 (2017-09-18), pages 83 - 87 * |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109186744B (zh) | 汽轮机叶片裂纹评估系统及汽轮机叶片裂纹预警方法 | |
EP4231027A1 (en) | Lithium ion battery life span prediction method, discharge capacity retention rate prediction method, life span prediction program, discharge capacity retention rate prediction program, and information processing device | |
CN104317709B (zh) | 软件性能测试方法和系统 | |
US8977908B2 (en) | Method and apparatus for detecting a suspect memory leak | |
CN112179691A (zh) | 基于对抗学习策略的机械装备运行状态异常检测系统和方法 | |
CN101339434A (zh) | 机械设备故障在线诊断装置及方法 | |
CN112749013B (zh) | 线程负载的检测方法、装置、电子设备及存储介质 | |
WO2012081784A1 (ko) | 차량 내 감시장치의 검지데이터에 대한 데이터 축소 방법 및 그 방법에 의한 차량의 준실시간 결함 감시 방법 | |
CN114155692A (zh) | 一种设备故障上报方法、装置及存储介质 | |
JP2010243092A (ja) | 冷凍機の劣化検出方法およびシステム | |
CN112985488B (zh) | 一种用于传感器的温度应力加速寿命试验系统及方法 | |
CN113626187A (zh) | 测量数据的处理方法及装置 | |
CN112131078B (zh) | 一种监控磁盘容量的方法及设备 | |
CN116620245A (zh) | 一种电子制动系统云端故障记录方法、装置、设备及介质 | |
CN116400249A (zh) | 储能电池的检测方法及装置 | |
CN114492636B (zh) | 一种变压器绕组状态信号的采集系统 | |
CN114327266B (zh) | 一种存储装置的卡慢识别方法、装置、介质 | |
EP3629304B1 (en) | Method and system for smart and continuous engine operation monitoring | |
KR101201679B1 (ko) | 상하치별차법에 의한 데이터 축소 방법 및 그 방법에 의한 차량의 준실시간 결함 감시 방법 | |
CN113098132A (zh) | 一种基于群智能优化的改进机器学习故障诊断系统 | |
CN116431454B (zh) | 一种大数据的计算机性能控制系统及方法 | |
CN111552960B (zh) | 一种程序完整性的动态度量方法和装置 | |
CN113361823B (zh) | 一种基于预测数据的燃料电池故障预测方法及系统 | |
WO2024043153A1 (ja) | 因子選択装置、因子選択方法及びプログラム | |
CN116975769B (zh) | 用于状态监测实时预警的自适应多维度异常值检测方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |