CN107329410A - 一种工业过程控制的快速数据存储方法 - Google Patents

一种工业过程控制的快速数据存储方法 Download PDF

Info

Publication number
CN107329410A
CN107329410A CN201710486327.8A CN201710486327A CN107329410A CN 107329410 A CN107329410 A CN 107329410A CN 201710486327 A CN201710486327 A CN 201710486327A CN 107329410 A CN107329410 A CN 107329410A
Authority
CN
China
Prior art keywords
data
class
response speed
memory
shared drive
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710486327.8A
Other languages
English (en)
Other versions
CN107329410B (zh
Inventor
王学峰
丁杰
冯立斌
周伟
唐颖
信敬亮
王立平
王佐伟
彭爱辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wei'er Automation Co Ltd Of Tangshan Iron And Steel Group
Original Assignee
Wei'er Automation Co Ltd Of Tangshan Iron And Steel Group
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wei'er Automation Co Ltd Of Tangshan Iron And Steel Group filed Critical Wei'er Automation Co Ltd Of Tangshan Iron And Steel Group
Priority to CN201710486327.8A priority Critical patent/CN107329410B/zh
Publication of CN107329410A publication Critical patent/CN107329410A/zh
Application granted granted Critical
Publication of CN107329410B publication Critical patent/CN107329410B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00—Programme-control systems
    • G05B19/02—Programme-control systems electric
    • G05B19/04—Programme control other than numerical control, i.e. in sequence controllers or logic controllers

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

一种工业过程控制的快速数据存储方法，属控制技术领域，用于解决控制系统压力大，数据相应速度慢的问题，其技术方案是，该方法根据交互量的大小和对响应速度要求的高低将数据分为两类，对于交互量大和响应速度要求高的一类数据，通过建立对应的数据结构，开辟对应的内存空间和建立共享内存映射文件，在内存区域和内存映射文件中进行即时操作；对于另一类数据，则直接即时写入数据库中。本发明将交互量大和响应速度要求高的数据直接写入内存空间和共享内存映射文件中，待系统不繁忙时，再将数据写入数据库。由于内存响应速度要远高于硬盘的I/O速度，这样既能保证数据的响应速度，又能缓解计算机控制系统的压力，从而确保了生产的正常进行。

Description

一种工业过程控制的快速数据存储方法
技术领域
本发明涉及一种工业过程控制的快速数据存储方法，可缓解计算机控制系统压力，增加数据吞吐速度，属于控制技术领域。
背景技术
随着国家两化融合（即信息化和工业化的高层次的深度结合）的发展，计算机过程控制的发展势在必行，在工业过程控制中，生产控制数据和生产实绩数据的控制和存储管理尤为关键。目前钢铁行业的过程计算机控制系统都是选择将数据存储到实时数据库中，在现代化快节奏的生产过程中，在数据交互量大、响应速度要求很高的情况下，这种数据存储方法会造成系统压力增大、负荷增高、响应速度减慢，严重时还会导致过程计算机控制程序的崩溃，影响工业生产的正常进行，制约生产的稳定。因此，有必要开发一种更加安全、高效、合理的数据存储方法，保证过程计算机系统应用程序的正常运行。
发明内容
本发明的目的在于针对现有技术之弊端，提供一种工业过程控制的快速数据存储方法，以缓解计算机控制系统的压力，增加数据的吞吐速度，确保工业生产的正常进行。
本发明所述问题是以下述技术方案实现的：
一种工业过程控制的快速数据存储方法，所述方法根据交互量的大小和对响应速度要求的高低将数据分为两类，对于交互量大和响应速度要求高的一类数据，通过建立对应的数据结构，开辟对应的内存空间和建立共享内存映射文件，在内存区域和内存映射文件中进行即时操作；对于另一类数据，则直接即时写入数据库中。
上述工业过程控制的快速数据存储方法，所述方法包括以下步骤：
a.筛选数据，开辟内存空间；
①将交互量和响应速度要求超过设定的阈值的数据筛选出来归为类A，其它数据归为类B；
②建立与所筛选数据对应的数据结构；
③开辟与所筛选数据对应的内存空间；
b.建立A类数据的共享内存映射文件；
①确定A类数据中每块的最大容量；
②建立A类数据的共享内存映射文件，每个文件的大小不小于对应数据块的最大容量；
c.将开辟的内存空间与共享内存映射文件进行映射关联；
①确定内存空间中的各数据结构类型及大小；
②确定共享内存映射文件已存在；
③内存空间与共享内存映射文件进行映射关联；
d.选择数据存储方式和时机，对两类数据进行存储；
①确定数据类型，即确定待存储的数据是A类数据还是B类数据；
②为A类数据和B类数据分别选择存储方式和时机：A类数据即时存储在共享内存和共享内存映射文件中；B类数据直接存储到数据库中。
上述工业过程控制的快速数据存储方法，A类数据存储到共享内存和共享内存映射文件中后，计算机控制系统实时检测自身的负荷状态，若系统处于非满负荷状态，则将存储的A类数据转存到数据库中。
上述工业过程控制的快速数据存储方法，筛选数据时，数据的交互量和响应速度要求的阈值由过程控制实绩数据的存储需要和过程控制系统中对于实时控制数据的使用要求确定，也可以根据工厂的工艺生产人员的要求进行确定。
本发明将一些交互量大和响应速度要求高的数据直接写入内存空间和共享内存映射文件中，待系统不繁忙时，再将数据写入数据库。由于内存响应速度要远高于硬盘的I/O速度，这样既能保证数据的响应速度，又能缓解计算机控制系统的压力，从而确保了工业生产的正常进行。
附图说明
下面结合附图对本发明作进一步详述。
图1为本发明数据存储方法的流程图；
图2为本发明数据存储系统的结构图。
具体实施方式
本发明提供了一种工业过程控制的快速数据存储方法，该方法将各种控制数据进行分类和分时存储，对于交互量大和响应速度要求高的数据，在内存区域和内存映射文件中进行即时操作，保证数据存储的安全和高效，而对于其它数据，直接即时将数据写入数据库中，这样能很大程度上缓解系统的压力，增加数据的吞吐速度。
本发明包含如下步骤：
①筛选数据，开辟内存空间；
1.1将交互量大、响应速度要求高的数据分为类A，其它数据分为类B；
1.2建立所筛选数据对应的数据结构；
1.3开辟对应的内存空间；
②建立A类数据共享内存映射文件；
2.1确定A类数据中每块的最大容量；
2.2建立A类数据的共享内存映射文件，每个文件大小不小于对应数据块的最大容量；
③将开辟的内存空间与共享内存映射文件进行映射关联；
3.1确定内存空间中的各数据结构类型及大小；
3.2确定共享内存映射文件已存在；
3.3内存空间与共享内存映射文件进行映射关联，保证数据的同步；
④选择数据存储方式和时机；
4.1确定数据类型（A\B）；
4.2为A、B类数据分别选择存储方式和时机：A类数据（选定此类数据存储方式为M1，时机为T1）即时存储在共享内存和共享内存映射文件中，待系统不繁忙时，再将数据写入数据库中；B类数据（选定此类数据存储方式为M2，时机为T2）直接存储到数据库中。
图1是本发明的一个实施例的数据存储方法流程图。
如图1所示，详细的存储步骤如下：
步骤101、计算机进行过程控制开始操作；
步骤102和步骤103、根据具体生产工艺要求，对于生产过程控制中的数据进行分析判断，确定数据类型；
若是交互量大、响应要求高的数据定为A类，进入104步骤；否则，定为B类，进入步骤115；
步骤104、进入此步后，将数据存储方式设定为M1，存储时机设定为T1；根据设定好的类型和时机，进入步骤105，在内存中开辟相应内存数据空间；进入步骤106，确定此类控制数据的最大缓存容量；进入107步，对共享内存映射文件大小进行检查确认，确认通过后进入步骤108，否则，需要返回步骤106，重新确定最大容量，重新进行共享内存映射文件大小的检查；
步骤108、确认共享内存映射文件是否已经存在，如果是第一次创建共享内存，则会直接进入步骤109，进行创建；如果控制系统已经运行，则文件已经创建，此步跳过，直接进入步骤110；
步骤110、建立内存空间与共享内存映射文件的映射关系，保持两者数据的同步，这样当程序关闭后，将最近设定的状态安全及时地保存在共享内存映射文件中，便于再次恢复；
步骤111、过程控制计算机应用程序进行数据存储时，进入步骤112，首先将数据写入内存空间和共享内存映射文件中；然后进入步骤113，如果系统没有满负荷（负荷状态可以预先进行设定），否则回到步骤112，进行等待，直到系统负荷降下来，进入步骤117，将工艺所需要的各种数据保存到传统数据库表中；
步骤115、如果数据类型被判定为B类，那么直接进行数据保存，即进入步骤116，建立对应数据结构，连接数据库，将数据保存到传统数据库表中；
步骤118、数据存储结束。
本发明提供的快速数据存储方法，能够很好地解决工业过程控制计算机系统对于交互量大、响应速度要求高的数据的处理难题，利用本发明，可以有效避免数据卡死、丢失等现象，保证数据安全高效存储，降低过程控制计算机系统的压力，进而保证工业生产过程的安全稳定。需要说明的是，以上描述的具体实施例仅仅用于解释本发明，并不用于限定本发明，本领域技术人员在不脱离本发明内容的基础上，还可以对实施例进行各种改进。因此，本发明的保护范围应当由权利要求书的内容确定。

Claims (4)

1.一种工业过程控制的快速数据存储方法，其特征是，所述方法根据交互量的大小和对响应速度要求的高低将数据分为两类，对于交互量大和响应速度要求高的一类数据，通过建立对应的数据结构，开辟对应的内存空间和建立共享内存映射文件，在内存区域和内存映射文件中进行即时操作；对于另一类数据，则直接即时写入数据库中。
2.根据权利要求1所述的工业过程控制的快速数据存储方法，其特征是，所述方法包括以下步骤：
a.筛选数据，开辟内存空间；
①将交互量和响应速度要求超过设定的阈值的数据筛选出来归为类A，其它数据归为类B；
②建立与所筛选数据对应的数据结构；
③开辟与所筛选数据对应的内存空间；
b.建立A类数据的共享内存映射文件；
①确定A类数据中每块的最大容量；
②建立A类数据的共享内存映射文件，每个文件的大小不小于对应数据块的最大容量；
c.将开辟的内存空间与共享内存映射文件进行映射关联；
①确定内存空间中的各数据结构类型及大小；
②确定共享内存映射文件已存在；
③内存空间与共享内存映射文件进行映射关联；
d.选择数据存储方式和时机，对两类数据进行存储；
①确定数据类型，即确定待存储的数据是A类数据还是B类数据；
②为A类数据和B类数据分别选择存储方式和时机：A类数据即时存储在共享内存和共享内存映射文件中；B类数据直接存储到数据库中。
3.根据权利要求2所述的工业过程控制的快速数据存储方法，其特征是，A类数据存储到共享内存和共享内存映射文件中后，计算机控制系统实时检测自身的负荷状态，若系统处于非满负荷状态，则将存储的A类数据转存到数据库中。
4.根据权利要求3所述的工业过程控制的快速数据存储方法，其特征是，筛选数据时，数据的交互量和响应速度要求的阈值由过程控制实绩数据的存储需要和过程控制系统中对于实时控制数据的使用要求确定，也可以根据工厂的工艺生产人员的要求进行确定。
CN201710486327.8A 2017-06-23 2017-06-23 一种工业过程控制的快速数据存储方法 Active CN107329410B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710486327.8A CN107329410B (zh) 2017-06-23 2017-06-23 一种工业过程控制的快速数据存储方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710486327.8A CN107329410B (zh) 2017-06-23 2017-06-23 一种工业过程控制的快速数据存储方法

Publications (2)

Publication Number Publication Date
CN107329410A true CN107329410A (zh) 2017-11-07
CN107329410B CN107329410B (zh) 2019-10-25

Family

ID=60194453

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710486327.8A Active CN107329410B (zh) 2017-06-23 2017-06-23 一种工业过程控制的快速数据存储方法

Country Status (1)

Country Link
CN (1) CN107329410B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108197433A (zh) * 2017-12-29 2018-06-22 厦门极元科技有限公司 快速dna测序数据分析平台的数据内存和硬盘分流存储方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104142937A (zh) * 2013-05-07 2014-11-12 深圳中兴网信科技有限公司 一种分布式数据存取方法、装置和系统
CN104820670A (zh) * 2015-03-13 2015-08-05 国家电网公司 一种电力信息大数据的采集和存储方法
CN105306345A (zh) * 2015-10-08 2016-02-03 南京南瑞继保电气有限公司 基于jms消息的电力调度实时数据发布系统及方法
CN103559075B (zh) * 2013-10-30 2016-10-05 华为技术有限公司 一种数据传输方法、装置和系统及内存装置
CN106354687A (zh) * 2016-08-29 2017-01-25 珠海市魅族科技有限公司 一种数据传输方法及系统
CN106844236A (zh) * 2016-12-27 2017-06-13 北京五八信息技术有限公司 终端设备的数据存储方法和装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104142937A (zh) * 2013-05-07 2014-11-12 深圳中兴网信科技有限公司 一种分布式数据存取方法、装置和系统
CN103559075B (zh) * 2013-10-30 2016-10-05 华为技术有限公司 一种数据传输方法、装置和系统及内存装置
CN104820670A (zh) * 2015-03-13 2015-08-05 国家电网公司 一种电力信息大数据的采集和存储方法
CN105306345A (zh) * 2015-10-08 2016-02-03 南京南瑞继保电气有限公司 基于jms消息的电力调度实时数据发布系统及方法
CN106354687A (zh) * 2016-08-29 2017-01-25 珠海市魅族科技有限公司 一种数据传输方法及系统
CN106844236A (zh) * 2016-12-27 2017-06-13 北京五八信息技术有限公司 终端设备的数据存储方法和装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108197433A (zh) * 2017-12-29 2018-06-22 厦门极元科技有限公司 快速dna测序数据分析平台的数据内存和硬盘分流存储方法

Also Published As

Publication number Publication date
CN107329410B (zh) 2019-10-25

Similar Documents

Publication Publication Date Title
CN104461387B (zh) 一种提高固态硬盘对未映射区域的读性能的方法
EP2631821B1 (en) File storage method and device thereof
US9280459B2 (en) Block grouping method for garbage collection of solid state drive
CN105279115B (zh) 闪存控制装置、闪存控制系统以及闪存控制方法
CN104516677B (zh) 磁盘数据读写方法及磁盘存储装置
CN106469022A (zh) 存储驱动器的存储管理方法和系统
CN101908368A (zh) 电子存储装置及其操作方法
CN106445405A (zh) 一种面向闪存存储的数据访问方法及其装置
CN103927215B (zh) 基于内存盘与SSD硬盘的kvm虚拟机调度的优化方法及系统
CN103064633A (zh) 一种数据存储方法及装置
CN106383742A (zh) 一种基于linux的IO调度方法
CN107329410A (zh) 一种工业过程控制的快速数据存储方法
CN105426112A (zh) 固态硬盘动态调整高速缓冲区的方法
CN106201918A (zh) 一种基于大数据量和大规模缓存快速释放的方法和系统
DE102015008380A1 (de) Implementierung von verbesserter Leistungsfähigkeit mit Lesen vor Schreiben in Phasenänderungsspeicher, um Schreibabbrüche zu vermeiden
CN106951193B (zh) 改善Nand Flash存储性能的方法及其系统
CN105630697B (zh) 一种利用mram存储小文件的存储装置
CN109189726B (zh) 一种读写日志的处理方法及装置
CN103544120A (zh) 能够提升记忆体效能的方法和相关的记忆体系统
CN105528303B (zh) 用于管理存储系统的方法和装置
CN103440181A (zh) 一种文件修改的方法及系统
CN105739911A (zh) 存储数据的分配方法、装置以及存储系统
CN115576924A (zh) 一种数据迁移的方法
CN109245772A (zh) 一种压缩i/o数据的方法、系统、装置及可读存储介质
CN105335520A (zh) 一种基于地铁综合自动化系统的数据处理方法及处理器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant