CN109143974A - 一种应用于数控机床监控领域的sdt改进方法 - Google Patents
一种应用于数控机床监控领域的sdt改进方法 Download PDFInfo
- Publication number
- CN109143974A CN109143974A CN201710450410.XA CN201710450410A CN109143974A CN 109143974 A CN109143974 A CN 109143974A CN 201710450410 A CN201710450410 A CN 201710450410A CN 109143974 A CN109143974 A CN 109143974A
- Authority
- CN
- China
- Prior art keywords
- data
- compression
- sdt
- tolerance
- fitting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/18—Numerical control [NC], i.e. automatically operating machines, in particular machine tools, e.g. in a manufacturing environment, so as to execute positioning, movement or co-ordinated operations by means of programme data in numerical form
- G05B19/408—Numerical control [NC], i.e. automatically operating machines, in particular machine tools, e.g. in a manufacturing environment, so as to execute positioning, movement or co-ordinated operations by means of programme data in numerical form characterised by data handling or data format, e.g. reading, buffering or conversion of data
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/30—Nc systems
- G05B2219/35—Nc in input of data, input till input file format
- G05B2219/35356—Data handling
Landscapes
- Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Manufacturing & Machinery (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Numerical Control (AREA)
Abstract
本发明涉及一种应用于数控机床监控领域的SDT改进方法,包括:对数控系统内部状态原始数据分段并进行标准SDT压缩;采用多模型寻优的方法对压缩后的数据进行函数拟合;根据拟合误差保存对压缩精度影响大的点;根据相邻区间的波动状态,对下一待压缩区间的容差进行动态调整。该方法能够根据数据的波动状态对容差进行动态调整;采用多模型寻优方法进行函数拟合;并根据拟合误差保存对压缩精度影响较大的点。从而删除部分冗余的机床加工状态过程信息,在保证尽量不丢失有效信息的情况下存储更少的机床状态数据,具有较好的压缩效果。
Description
技术领域
本发明涉及数控机床监控领域,具体的说是一种应用于数控机床监控领域的SDT改进方法。
背景技术
在数控机床监控平台中,通常每秒可采集多条工业过程数据,且采集的数据种类也较多,如轴的转速、功率、负载、电流及传感器数据等,多台机床一天的数据量大小就达到GB量级,这给数据库的存储带来了很大的负担,因此需要对这些数据进行压缩处理,来提高存储效率,同时节省存储空间。
目前,工业过程数据的压缩方法通常有3类:分段线性插值方法、矢量量化方法和信号变换方法。其中在工业领域广泛使用的是分段线性插值方法,其中又包括矩形波串法、反向斜率法,旋转门法(SDT)以及分段线性趋势方法等。其中旋转门算法是一种快速的线性拟合有损压缩算法,具有高效率、高压缩比、实现简单和误差可控等优点,得到了学者们广泛的使用和研究。但旋转门法等算法只能提高数控机床过程数据压缩率,没有考虑到提高压缩率的同时减小压缩误差。
发明内容
针对数控系统内部状态数据实时采集造成的占用大量存储单元,存储器过度消耗这一问题,为使海量的过程数据易于存储和回调,本发明提供了一种应用于数控机床监控领域的SDT改进方法。
本发明为实现上述目的所采用的技术方案是:一种应用于数控机床监控领域的SDT改进方法,包括以下步骤:
步骤1:对数控系统内部状态原始数据分段并进行标准SDT压缩;
步骤2:采用多模型寻优的方法对压缩后的数据进行函数拟合;
步骤3:根据拟合误差保存对压缩精度影响大的点;
步骤4:根据相邻区间的波动状态,对下一待压缩区间的容差进行动态调整,返回步骤1直到完成所有数据压缩,提高了压缩率、降低了压缩误差。
所述步骤1包括:
步骤1.1:对ΔE容差进行初始化,令ΔE=(ΔEmin+ΔEmax)/2;截取时间间隔为T的待压缩区间;其中,ΔEmin为容差的最小值,ΔEmax为容差的最大值;
步骤1.2:对待压缩区间内的数据进行标准的SDT压缩,由上一保存的数据点和当前数据点来画一条直线,查看当前数据点和上一保存的数据点所构成的压缩偏差区来确定前一时刻的数据点是否要保存;如果压缩偏差区不能覆盖两者之间所有的点,那么则保存前一时刻数据点,否则不保存;重复这个过程获取压缩后的m个数据
所述步骤2包括:
步骤2.1:对压缩后的m个数据使用函数类中的函数进行最小二乘拟合,使拟合误差平方和最小,即:
其中,yi为原始数据,i=1,2,……,n。
所述函数类为线性、多项式、样条数学模型。
所述步骤3包括:
使用拟合后的函数计算在步骤1中删除的原始数据记录的误差
如果δmax≤δi则保留第i个原始数据记录,否则不做处理,其中δmax表示压缩的最大拟合误差。
所述步骤4包括:
步骤4.1:计算该压缩区间内原始数据的标准差:
其中,u为区间内原始数据的平均值,如果该压缩区间为初次压缩区间则保存本区间标准差σ,且有σ’=σ,σ’是上一压缩区间标准差;并跳过步骤4.2继续后面的步骤;
步骤4.2:如果不为初次压缩区间,比较两次压缩区间的标准差σ’、σ,重新计算ΔE;
(1)如果σ=0,表示压缩区间中的数据没有波动,将ΔEmax赋值给ΔEnew;
(2)如果且σ≠0表示数据波动有变大的趋势,因此其中k为系数,k越大波动的变化对容差的影响越大;当ΔEmin>ΔEnew时,将ΔEmin赋值给ΔEnew;
(3)如果且σ≠0表示数据波动有变小的趋势,因此其中k为系数,且k越大波动的变化对容差的影响越大;当ΔEmax<ΔEnew时,将ΔEmax赋值给ΔEnew;
其中,ΔEold为上一次计算的容差值,ΔEnew为本次计算的容差值。
本发明具有以下有益效果及优点:
1.采用动态容差方式对分段数据进行旋转门法压缩,降低数据压缩误差。
2.采用多模型寻优的方法替换源于拟合方法,使拟合结果更准确。
3.根据拟合的误差保存对压缩精度影响较大的点,降低数据压缩误差。
附图说明
图1为本发明方法流程图;
图2为原始X轴位置信息数据;
图3为压缩后X轴位置信息数据。
具体实施方式
下面结合附图对本发明方法作进一步详细说明。
在SDT改进压缩算法中,ΔE表示SDT算法中的容差,范围为ΔEmin≤ΔE≤ΔEmax;T表示压缩区间时间间隔;δmax表示压缩的最大拟合误差。其中,ΔEmin为容差的最小值,ΔEmax为容差的最大值。
衡量一个过程数据压缩算法好坏的指标包括压缩比CR(Compression Ratio)和压缩误差CE(Compression Error)。其中n为原始的数据点数,m为压缩后的数据点数,且满足m≤n。yi为实际的数据点值,为通过压缩数据解压后恢复的数据点值。CE描述了压缩后解压恢复的数据与实际数据的逼近程度。
如图1所示,本方法的具体步骤如下:
步骤1:对ΔE容差进行初始化,令ΔE=(ΔEmin+ΔEmax)/2;截取时间间隔为T的待压缩区间。
步骤2:对待压缩区间内的数据进行一次标准的SDT压缩,即先由前一个保存的数据点和当前数据点来画一条直线,查看当前记录点和上一保存的记录点所构成的压缩偏差区来确定前一时刻的数据点是否要保存。如果压缩偏差区不能覆盖两者之间所有的点,那么则保存前一时刻的数据点,否则不保存。旋转门算法以最近保存的数据点为起点,当前数据点为终点,以两者之间的直线为中轴,构造一个高度(即压缩容差)固定的平行四边形。通过这个平行四边形去套数据,在起点和终点之间有任一数据点不在范围之内,则存储待保存数据点,然后将其作为新的起点,来重复这个过程。
步骤3:当本压缩区间压缩结束后,对压缩数据解压后的数据点值 进行最小二乘拟合。本方法使用函数类中的数学模型进行函数拟合,函数类包括线性、多项式、样条等数学模型。并选取一个函数 使误差平方和最小,即:
其中,yi(i=1,2,……,n)为实际的数据点值。
步骤4:使用拟合后的函数计算在步骤2中删除的原始数据记录的误差如果δmax≤δi则保留第i个数据记录,否则不做处理,其中δmax表示压缩的最大误差。
步骤5:计算该压缩区间内原始数据的标准差:
其中u为该压缩区间内原始数据的平均值。如果该压缩区间为初次压缩区间,则保存本区间标准差σ,与下一个压缩区间共同实现容差调整,即σ’=σ。并跳过步骤6,继续后面的步骤。
步骤6:比较两次压缩区间的标准差σ,σ’,重新计算ΔE。
(1)如果σ=0,表示压缩区间中的数据没有波动,将ΔEmax赋值给ΔEnew;
(2)如果且σ≠0表示数据波动有变大的趋势,因此
其中k为系数,k越大波动的变化对容差的影响越大;
当ΔEmin>ΔEnew时,将ΔEmin赋值给ΔEnew;
(3)如果且σ≠0表示数据波动有变小的趋势,因此
其中k为系数,且k越大波动的变化对容差的影响越大;当ΔEmax<ΔEnew时,将ΔEmax赋值给ΔEnew;
其中,ΔEold为上一次计算的容差值,ΔEnew为本次计算的容差值。
步骤7:如果还有未压缩完的点,且未压缩时间区域大于T,继续执行步骤2,否则算法结束。
为验证本发明的效果,我们采集数控系统内部真实加工数据进行数据压缩,其中采集频率为50Hz。图2为压缩前原始数据X轴位置坐标的值,图3为采用本压缩方法后压缩之后的X轴位置坐标值。从图中可以看出,改进后的算法保留了原始数据曲线的特征趋势,同时舍弃了一些轻微扰动的非关键信息,减小了压缩误差,保证压缩后的曲线趋势与原始趋势更加逼近。为验证所提方法的可行性,将本方法应用于数字化虚拟车间的工业大数据平台中,经过了24h的运行,所占的存储空间相比以往减少47.53%,取得了理想的效果。
Claims (6)
1.一种应用于数控机床监控领域的SDT改进方法,其特征在于,包括以下步骤:
步骤1:对数控系统内部状态原始数据分段并进行标准SDT压缩;
步骤2:采用多模型寻优的方法对压缩后的数据进行函数拟合;
步骤3:根据拟合误差保存对压缩精度影响大的点;
步骤4:根据相邻区间的波动状态对下一待压缩区间的容差进行动态调整,返回步骤1直到完成所有数据压缩。
2.按照权利要求1所述一种应用于数控机床监控领域的SDT改进方法,其特征在于,所述步骤1包括:
步骤1.1:对ΔE容差进行初始化,令ΔE=(ΔEmin+ΔEmax)/2;截取时间间隔为T的待压缩区间;其中,ΔEmin为容差的最小值,ΔEmax为容差的最大值;
步骤1.2:对待压缩区间内的数据进行标准的SDT压缩,由上一保存的数据点和当前数据点来画一条直线,查看当前数据点和上一保存的数据点所构成的压缩偏差区来确定前一时刻的数据点是否要保存;如果压缩偏差区不能覆盖两者之间所有的点,那么则保存前一时刻数据点,否则不保存;重复这个过程获取压缩后的m个数据
3.按照权利要求1所述一种应用于数控机床监控领域的SDT改进方法,其特征在于,所述步骤2包括:
步骤2.1:对压缩后的m个数据使用函数类中的函数进行最小二乘拟合,使拟合误差平方和最小,即:
其中,yi为原始数据,i=1,2,……,n。
4.按照权利要求3所述一种应用于数控机床监控领域的SDT改进方法,其特征在于,所述函数类为线性、多项式、样条数学模型。
5.按照权利要求1所述一种应用于数控机床监控领域的SDT改进方法,其特征在于,所述步骤3包括:
使用拟合后的函数计算在步骤1中删除的原始数据记录的误差
如果δmax≤δi则保留第i个原始数据记录,否则不做处理,其中δmax表示压缩的最大拟合误差。
6.按照权利要求1所述一种应用于数控机床监控领域的SDT改进方法,其特征在于,所述步骤4包括:
步骤4.1:计算该压缩区间内原始数据的标准差:
其中,u为区间内原始数据的平均值,如果该压缩区间为初次压缩区间则保存本区间标准差σ,且有σ’=σ,σ’是上一压缩区间标准差;并跳过步骤4.2继续后面的步骤;
步骤4.2:如果不为初次压缩区间,比较两次压缩区间的标准差σ’、σ,重新计算ΔE;
(1)如果σ=0,表示压缩区间中的数据没有波动,将ΔEmax赋值给ΔEnew;
(2)如果且σ≠0表示数据波动有变大的趋势,因此其中k为系数,k越大波动的变化对容差的影响越大;当ΔEmin>ΔEnew时,将ΔEmin赋值给ΔEnew;
(3)如果且σ≠0表示数据波动有变小的趋势,因此其中k为系数,且k越大波动的变化对容差的影响越大;当ΔEmax<ΔEnew时,将ΔEmax赋值给ΔEnew;
其中,ΔEold为上一次计算的容差值,ΔEnew为本次计算的容差值。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710450410.XA CN109143974B (zh) | 2017-06-15 | 2017-06-15 | 一种应用于数控机床监控领域的sdt改进方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710450410.XA CN109143974B (zh) | 2017-06-15 | 2017-06-15 | 一种应用于数控机床监控领域的sdt改进方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109143974A true CN109143974A (zh) | 2019-01-04 |
CN109143974B CN109143974B (zh) | 2021-10-15 |
Family
ID=64829640
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710450410.XA Active CN109143974B (zh) | 2017-06-15 | 2017-06-15 | 一种应用于数控机床监控领域的sdt改进方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109143974B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114640355A (zh) * | 2022-03-30 | 2022-06-17 | 北京诺司时空科技有限公司 | 时序数据库的有损压缩及解压缩方法、系统、存储介质、设备 |
CN115659070A (zh) * | 2022-12-28 | 2023-01-31 | 鸿基骏业环保科技有限公司 | 一种基于nb-iot智能水表的水流量数据传输方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4669097A (en) * | 1985-10-21 | 1987-05-26 | The Foxboro Company | Data compression for display and storage |
CN1866241A (zh) * | 2006-06-21 | 2006-11-22 | 浙江中控软件技术有限公司 | 一种基于最小二乘线性拟合的实时数据压缩方法 |
CN101078931A (zh) * | 2007-06-01 | 2007-11-28 | 华南理工大学 | 一种分布式双层实时压缩方法及系统 |
KR20120132878A (ko) * | 2011-05-30 | 2012-12-10 | 한상혁 | 공정 제어 데이터베이스 시스템 구조 |
-
2017
- 2017-06-15 CN CN201710450410.XA patent/CN109143974B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4669097A (en) * | 1985-10-21 | 1987-05-26 | The Foxboro Company | Data compression for display and storage |
CN1866241A (zh) * | 2006-06-21 | 2006-11-22 | 浙江中控软件技术有限公司 | 一种基于最小二乘线性拟合的实时数据压缩方法 |
CN101078931A (zh) * | 2007-06-01 | 2007-11-28 | 华南理工大学 | 一种分布式双层实时压缩方法及系统 |
KR20120132878A (ko) * | 2011-05-30 | 2012-12-10 | 한상혁 | 공정 제어 데이터베이스 시스템 구조 |
Non-Patent Citations (4)
Title |
---|
于松涛: "基于容差动态调整的旋转门( SDT) 改进算法", 《北京化工大学学报(自然科学版)》 * |
张望: "过程数据压缩算法SDT的改进研究与应用", 《工业控制计算机》 * |
李其昌: "基于SDLST算法的导弹状态数据压缩方法", 《计算机测量与控制》 * |
祁兰: "一种传感数据的压缩和高效存储方案", 《计算机技术与发展》 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114640355A (zh) * | 2022-03-30 | 2022-06-17 | 北京诺司时空科技有限公司 | 时序数据库的有损压缩及解压缩方法、系统、存储介质、设备 |
CN115659070A (zh) * | 2022-12-28 | 2023-01-31 | 鸿基骏业环保科技有限公司 | 一种基于nb-iot智能水表的水流量数据传输方法 |
Also Published As
Publication number | Publication date |
---|---|
CN109143974B (zh) | 2021-10-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106649026B (zh) | 适用于运维自动化系统的监测数据压缩方法 | |
CN109727446B (zh) | 一种用电数据异常值的识别与处理方法 | |
CN114640355B (zh) | 时序数据库的有损压缩及解压缩方法、系统、存储介质、设备 | |
CN109143974A (zh) | 一种应用于数控机床监控领域的sdt改进方法 | |
CN111428201B (zh) | 基于经验模态分解和前馈神经网络对时序数据的预测方法 | |
CN110162290B (zh) | 一种针对OLED屏DeMURA数据的压缩方法 | |
CN110062233B (zh) | 卷积神经网络全连接层稀疏的权值矩阵的压缩方法及系统 | |
Dickson et al. | Gamma processes and finite time survival probabilities | |
CN116700630B (zh) | 基于物联网的有机无机复混肥料生产数据优化存储方法 | |
CN103413143A (zh) | 基于动态稀疏投影的视频目标跟踪方法 | |
CN113052264A (zh) | 一种压缩目标检测神经网络的方法 | |
CN117353751B (zh) | 基于大数据的无人充电桩交易数据智能管理系统 | |
CN114969060B (zh) | 一种工业设备时序数据压缩存储方法、装置 | |
CN116318174A (zh) | 一种污水处理厂的垃圾运输管理系统的数据管理方法 | |
CN116827350A (zh) | 基于云边协同的灵活用工平台智能监管方法及系统 | |
CN108667463B (zh) | 监测数据压缩方法 | |
CN114329663A (zh) | 基于历史地质灾害规模的斜坡单元划分方法 | |
CN117274408A (zh) | 一种钕铁硼磁体表面处理数据管理系统 | |
CN117090758B (zh) | 一种空压机节能控制方法及系统 | |
CN109340094B (zh) | 一种基于负荷的空压机节能控制方法 | |
US5911006A (en) | Method and apparatus for controlling a quantity of codes representative of image data | |
CN116338322A (zh) | 一种电网线路阻抗预测方法及系统 | |
CN114090654A (zh) | 工业时序数据的近似查询处理方法、系统、介质及设备 | |
CN110704408A (zh) | 一种基于聚类的时序数据压缩方法及系统 | |
CN102545909B (zh) | 贪婪式智能拟合有损数据压缩方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CP01 | Change in the name or title of a patent holder | ||
CP01 | Change in the name or title of a patent holder |
Address after: No. 16-2, Nanping East Road, Dongling District, Shenyang City, Liaoning Province, 110168 Patentee after: Shenyang Zhongke CNC Technology Co.,Ltd. Address before: No. 16-2, Nanping East Road, Dongling District, Shenyang City, Liaoning Province, 110168 Patentee before: Shenyang Golding Nc Intelligence Tech.co.,ltd. |