CN106682078B - 工控机数据转储方法及系统 - Google Patents
工控机数据转储方法及系统 Download PDFInfo
- Publication number
- CN106682078B CN106682078B CN201611033754.2A CN201611033754A CN106682078B CN 106682078 B CN106682078 B CN 106682078B CN 201611033754 A CN201611033754 A CN 201611033754A CN 106682078 B CN106682078 B CN 106682078B
- Authority
- CN
- China
- Prior art keywords
- file
- data
- data server
- xml format
- database
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 46
- 230000002159 abnormal effect Effects 0.000 claims description 8
- 238000011084 recovery Methods 0.000 claims description 8
- 230000000153 supplemental effect Effects 0.000 claims description 6
- 238000012545 processing Methods 0.000 abstract description 6
- 230000005540 biological transmission Effects 0.000 abstract description 4
- 230000008569 process Effects 0.000 description 9
- 238000011161 development Methods 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 7
- 238000010168 coupling process Methods 0.000 description 6
- 238000005859 coupling reaction Methods 0.000 description 6
- 238000003860 storage Methods 0.000 description 6
- 230000008878 coupling Effects 0.000 description 5
- 238000004519 manufacturing process Methods 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000012423 maintenance Methods 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 3
- 230000007246 mechanism Effects 0.000 description 3
- 230000001360 synchronised effect Effects 0.000 description 3
- 238000012546 transfer Methods 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 238000007689 inspection Methods 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 238000007639 printing Methods 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- LFQSCWFLJHTTHZ-UHFFFAOYSA-N Ethanol Chemical compound CCO LFQSCWFLJHTTHZ-UHFFFAOYSA-N 0.000 description 1
- 206010054949 Metaplasia Diseases 0.000 description 1
- 238000004140 cleaning Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000015689 metaplastic ossification Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 239000007921 spray Substances 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 238000000844 transformation Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/254—Extract, transform and load [ETL] procedures, e.g. ETL data flows in data warehouses
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/54—Interprogram communication
- G06F9/546—Message passing systems or structures, e.g. queues
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Data Mining & Analysis (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供一种工控机数据转储方法及系统。其中工控机数据转储方法包括：数据文件输出步骤：通过工控机的软件接口将数据文件输出；数据文件解析步骤：将所述由工控机的软件接口输出的数据文件解析成XML格式文件；数据文件传输步骤：将所述解析后的XML格式文件传输到数据服务器的相应文件夹；数据文件处理步骤：执行预先配置的SSIS服务将所述传输到数据服务器的XML格式文件转储到数据库中。本发明提供的技术方案实现了设备输出文件的自动采集；兼容设备产生的各种格式数据文件并实现格式统一化；能够将本地数据实时地映射到远程服务器中，提供了一种配置简便、安全可靠的数据转储方式。
Description
技术领域
本发明涉及信息技术领域，尤其涉及一种工控机数据转储方法及系统。
背景技术
随着工业4.0和中国制造2025的提出，制造业正在迈向一个新的台阶，那就是走智能化生产道路，制造业的改革离不开信息化的铺垫。对于工业现场来讲，设备互联互通、信息交换是首要前提。一般的设备数据传输、存储的方式是，通过编写SQL语句、触发器、存储过程等直接将数据发送至数据库，判断逻辑需要在软件里完成。存储过程的优点是可以重复使用，但缺点是存储过程依赖于特定的数据库，可移植性弱，而且随着用户需求的增加会导致数据结构和引用关系的对象发生变化，维护难度较大，维护代价较高。
发明内容
有鉴于此，本发明提供了一种工控机数据转储方法，包括：数据文件输出步骤：通过工控机的软件接口将数据文件输出；数据文件解析步骤：将所述由工控机的软件接口输出的数据文件解析成XML格式文件；数据文件传输步骤：将所述解析后的XML格式文件传输到数据服务器的相应文件夹；数据文件处理步骤：执行预先配置的SSIS服务将所述传输到数据服务器的XML格式文件转储到数据库中。
可选地，所述由工控机的软件接口输出的数据文件是平面文件，所述平面文件的格式包括XML、TXT或CSV；所述由工控机的软件接口输出的数据文件的内容包括设备的参数数据和/或设备本身的OEE数据。
可选地，所述数据文件传输步骤还包括：调用预先配置的WCF数据流传输服务，将所述解析后的XML格式文件传输到数据服务器的相应文件夹。
可选地，所述数据文件传输步骤还包括：在出现网络异常的情况下，将所述解析后的XML格式文件在本地缓存，待网络恢复后自动调用预先配置的WCF数据流传输服务，将所述解析后的XML格式文件传输到数据服务器的相应文件夹。
可选地，所述预先配置SSIS服务包括：配置包控制流、数据流及遍历文件内容的XSLT中间文件，将所述传输到数据服务器的XML格式文件内容映射到数据库中的表结构的相应字段。
可选地，所述数据文件处理步骤还包括：用SSIS监测所述数据服务器的文件夹，若所述数据服务器的文件夹中有文件，则逐一遍历所述数据服务器的文件夹中的文件，并将所述数据服务器的文件夹中的文件内容转储到数据库中。
可选地，所述数据文件处理步骤还包括：将所述预先配置的SSIS服务加入到数据库代理作业中，执行数据库代理作业将所述传输到数据服务器的XML格式文件转储到数据库中。
本发明的另一方面又提供了一种工控机数据转储系统，包括：数据文件输出模块，用于通过工控机的软件接口将数据文件输出；数据文件解析模块，用于将所述由工控机的软件接口输出的数据文件解析成XML格式文件；数据文件传输模块，用于将所述解析后的XML格式文件传输到数据服务器的相应文件夹；数据文件处理模块，用于执行预先配置的SSIS服务将所述传输到数据服务器的XML格式文件转储到数据库中。
可选地，所述由工控机的软件接口输出的数据文件是平面文件，所述平面文件的格式包括XML、TXT或CSV；所述由工控机的软件接口输出的数据文件的内容包括设备的参数数据和/或设备本身的OEE数据。
可选地，所述数据文件传输模块，还用于调用预先配置的WCF数据流传输服务，将所述解析后的XML格式文件传输到数据服务器的相应文件夹。
可选地，所述数据文件传输模块，还用于在出现网络异常的情况下，将所述解析后的XML格式文件在本地缓存，待网络恢复后自动调用预先配置的WCF数据流传输服务，将所述解析后的XML格式文件传输到数据服务器的相应文件夹。
可选地，所述预先配置的SSIS服务包括：配置包控制流、数据流及遍历文件内容的XSLT中间文件，用于将所述传输到数据服务器的XML格式文件内容映射到数据库中的表结构的相应字段。
可选地，所述数据文件处理步骤模块还用于,用SSIS监测所述数据服务器的文件夹，若所述数据服务器的文件夹中有文件，则逐一遍历所述数据服务器的文件夹中的文件，并将所述数据服务器的文件夹中的文件内容转储到数据库中。
可选地，所述数据文件处理模块还用于使用数据库代理作业执行预先配置的SSIS服务，将所述传输到数据服务器的XML格式文件转储到数据库中。
本发明提供的技术方案实现了设备输出文件的自动采集；兼容设备产生的各种格式数据文件并实现格式统一化；采用文件缓存机制，避免网络状况不好造成的数据丢失问题；算法开发与数据库配置同步进行，耦合度低，开发维护简单易行；能够将本地数据实时地映射到远程服务器中，提供了一种配置简便、安全可靠的数据转储方式。
附图说明
此处所说明的附图用来提供对本发明的进一步理解，构成本发明的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：
图1是本发明提供的工控机数据转储方法的整体框架图；
图2是本发明提供的工控机数据转储方法的数据文件传输的工作流程图；
图3是本发明提供的工控机数据转储方法的数据文件处理的工作流程图；
图4是本发明提供的工控机数据转储系统的整体结构图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合本发明具体实施例及相应的附图对本发明技术方案进行清楚、完整地描述。显然，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明提供了一种工控机数据转储方法。图1是本发明提供的工控机数据转储方法的整体框架图。如图1所示，本发明工控机数据转储方法包括：数据文件输出步骤S110：通过工控机的软件接口将数据文件输出；数据文件解析步骤S120：将所述由工控机的软件接口输出的数据文件解析成XML格式文件；数据文件传输步骤S130：将所述解析后的XML格式文件传输到数据服务器的相应文件夹；数据文件处理步骤S140：执行预先配置的SSIS服务将所述传输到数据服务器的XML格式文件转储到数据库中。SSIS是Microsoft SQL ServerIntegration Services的简称，是生成高性能数据集成解决方案(包括数据仓库的提取、转换和加载(ETL)包)的平台。本发明提供的技术方案只需配置SSIS服务，将其加入数据库代理作业中，按照设定的方式执行，不用编写较为复杂的存储过程，大大减少了开发的工作量。本发明的技术方案包括数据文件的采集、传输和处理，这种方式可适用于大型的SMT(Surface Mount Technology，表面贴装技术)线体，带有工控机的设备，需要将设备联网，能进行以太网进行数据传输。
在数据文件输出步骤S110中，由工控机的软件接口输出的数据文件是平面文件，所述平面文件的格式包括XML、TXT或CSV；所述由工控机的软件接口输出的数据文件的内容包括设备的参数数据和/或设备本身的OEE(Overall Equipment Effectiveness，全局设备效率)数据。OEE是一个独立的测量工具，它用来表现实际的生产能力相对于理论产能的比率。输出的设备数据一般包含两大类数据，生产过程的数据、设备本身的OEE数据。需要设备工控机上运行的工业软件留有接口，将设备数据以标准的文件格式，按时间保存在磁盘固定的文件夹内。文件格式可以是XML、TXT、CSV等多种的平面文件，文件内容则是设备实时的参数数据，例如印刷机印刷工艺参数、回流炉的炉温等参数、AOI(Automatic OpticInspection，自动光学检测)的检测等参数数据，印刷工艺参数主要包括酒精喷淋速度、印刷长度/起点/速度、清洗长度/起点/速度、压力等。
数据文件解析步骤S120是将设备输出的各种文件格式，经过解析得到XML格式文件，这种转换的过程需要开发解析软件完成，也可以开发成windows服务后台运行来实现。不需要了解设备种类，只需将设备输出文件按照一定的规则去解析，最后形成统一格式的XML文件。
根据本发明工控机数据转储方法的一种实施方式，所述数据文件传输步骤S130还包括：调用预先配置的WCF数据流传输服务，将所述解析后的XML格式文件传输到数据服务器的相应文件夹。WCF(Windows Communication Foundation,Windows通讯开发平台)是由微软开发的一系列支持数据通信的应用程序框架，是Windows平台上开发分布式应用最佳的实践方式。在数据文件解析步骤S120中，格式不统一的设备文件，已通过软件解析转换为标准的XML格式。然后通过调用一个WCF数据流传输服务，现场每个客户端将解析后的XML发送到数据服务器相应位置。这样就将现场设备的数据文件采集到统一的服务器了。
根据本发明工控机数据转储方法的一种实施方式，所述数据文件传输步骤S130还包括：在出现网络异常的情况下，将所述解析后的XML格式文件在本地缓存，待网络恢复后自动调用预先配置的WCF数据流传输服务，将所述解析后的XML格式文件传输到数据服务器的相应文件夹。图2是本发明提供的工控机数据转储方法的数据文件传输的工作流程图。如图2所示，首先判断网络是否OK，即判断网格传输功能是否正常，若是则调用数据传输服务，发送源类型为string的流，在远程服务器相应位置生成标准XML；若否则暂时本地缓存，本地生成标准XML，等待网络OK后再调用数据传输服务自动上传。采用本地缓存机制，即使在出现网络异常的情况下，也不会造成数据丢失。
根据本发明工控机数据转储方法的一种实施方式，所述预先配置SSIS服务包括：配置包控制流、数据流及遍历文件内容的XSLT中间文件，将所述传输到数据服务器的XML格式文件内容映射到数据库中的表结构的相应字段。SSIS的典型用途是合并来自异类数据存储区的数据。数据通常存储在很多个不同的数据存储系统中，SSIS可以连接到各种各样的数据源。SSIS包含一些源组件，这些组件负责从包所连接的数据源中的平面文件、Excel电子表格、XML文档和关系数据库中的表及视图提取数据。然后，通常要用SSIS包含的转换功能对数据进行转换。数据转换为兼容格式后，就可以将其物理合并到一个数据集中。数据在合并成功且应用转换后，通常会被加载到一个或多个目标。在本地采集的设备数据传输到远程服务器后，进行数据文件处理步骤，需开发对应文件的SSIS服务，里面包含组态式的数据流任务及遍历文件内容的XSLT(Extensible Stylesheet Language Transformations，扩展样式表转换语言)中间文件。XSLT是一种对XML(标准通用标记语言的子集)文档进行转化的语言。通过配置包数据流及控制流，可以将被采集的文件内容和数据库中的表结构中字段一一对应，达到条件映射，数据文件即产生就会直接存储到数据库中。
根据本发明工控机数据转储方法的一种实施方式，所述数据文件处理步骤S140还包括：用SSIS监测所述数据服务器的文件夹，若所述数据服务器的文件夹中有文件，则逐一遍历所述数据服务器的文件夹中的文件，并将所述数据服务器的文件夹中的文件内容转储到数据库中。SSIS有监控文件夹的功能，整体流程是：文件传输到文件夹，SSIS监控文件夹是否有文件，然后逐一的去遍历。例如：文件夹有5个文件，先采集第一个，第一个文件里的数据从头遍历到尾，结束将数据存入数据库，将原文件删除，再进行下一个文件遍历。图3是本发明提供的工控机数据转储方法的数据文件处理的工作流程图。如图3所示，首先SSIS监测目标文件夹是否有文件，若是则解析XML文件，将所需信息存入到远程数据库相对应的表，判断数据库中是否存在相同信息，若是则更新信息；否则插入信息。然后文件是否遍历完，若否则继续解析XML文件；若是则返回监测继续目标文件夹是否有文件。
根据本发明工控机数据转储方法的一种实施方式，所述数据文件处理步骤还包括：将所述预先配置的SSIS服务加入到数据库代理作业中，执行数据库代理作业将所述传输到数据服务器的XML格式文件转储到数据库中。设备本地数据传输到服务器后，再进行这个数据处理过程，数据处理过程是SSIS服务配置到数据库的代理作业，执行一个个的SSIS服务，把传过来的文件数据存储到数据库的过程。SQL Server代理是一种MicrosoftWindows服务，它在SQL Server中执行计划的管理任务，即“作业”。作业包含一个或多个作业步骤。每个步骤都有自己的任务，例如备份数据库。SQL Server代理可以按照计划运行作业，也可以在响应特定事件时运行作业，还可以根据需要运行作业。使用SQL Server代理作业来安排SSIS包，将配置的SSIS服务加入数据库代理作业中，按照设定的方式执行。采用ETL技术进行数据处理服务，采用建立代理作业的形式，实时监控目标文件，按需处理、存储、更新、删除数据到数据库。
另外，本发明实现了测试驱动开发的技术思想，即在开发前可定义测试用例；团队成员一起配合开发软件时候，减少了前后顺序的等待。传统的开发方式是先开发完，才能开始数据处理，与之不同的是在开发前商定一种统一的数据文件的格式、结构、字段。这样可以依据统一的格式在开发逻辑和算法的同时进行数据库配置，虽然没有产生真实数据，也可以将文件结构中的数据字段一一对应约定好怎样去处理。实现软件应用开发与数据处理同步进行，降低了耦合性。
本发明的另一方面又提供了一种工控机数据转储系统。图4是本发明提供的工控机数据转储系统的整体结构图。如图4所示，本发明工控机数据转储系统包括：数据文件输出模块100，用于通过工控机的软件接口将数据文件输出；数据文件解析模块200，用于将所述由工控机的软件接口输出的数据文件解析成XML格式文件；数据文件传输模块300，用于将所述解析后的XML格式文件传输到数据服务器的相应文件夹；数据文件处理模块400，用于执行预先配置的SSIS服务将所述传输到数据服务器的XML格式文件转储到数据库中。
根据本发明工控机数据转储系统的一种实施方式，所述由工控机的软件接口输出的数据文件是平面文件，所述平面文件的格式包括XML、TXT或CSV；所述由工控机的软件接口输出的数据文件的内容包括设备的参数数据和/或设备本身的OEE数据。
根据本发明工控机数据转储系统的一种实施方式，所述数据文件传输模块300，还用于调用预先配置的WCF数据流传输服务，将所述解析后的XML格式文件传输到数据服务器的相应文件夹。
根据本发明工控机数据转储系统的一种实施方式，所述数据文件传输模块300，还用于在出现网络异常的情况下，将所述解析后的XML格式文件在本地缓存，待网络恢复后自动调用预先配置的WCF数据流传输服务，将所述解析后的XML格式文件传输到数据服务器的相应文件夹。
根据本发明工控机数据转储系统的一种实施方式，所述预先配置的SSIS服务包括：配置包控制流、数据流及遍历文件内容的XSLT中间文件，用于将所述传输到数据服务器的XML格式文件内容映射到数据库中的表结构的相应字段。
根据本发明工控机数据转储系统的一种实施方式，所述数据文件处理步骤模块400还用于,用SSIS监测所述数据服务器的文件夹，若所述数据服务器的文件夹中有文件，则逐一遍历所述数据服务器的文件夹中的文件，并将所述数据服务器的文件夹中的文件内容转储到数据库中。
根据本发明工控机数据转储系统的一种实施方式，所述数据文件处理模块400还用于使用数据库代理作业执行预先配置的SSIS服务，将所述传输到数据服务器的XML格式文件转储到数据库中。
本发明提供的技术方案实现了设备输出文件的自动采集；兼容设备产生的各种格式数据文件并实现格式统一化；采用文件缓存机制，避免网络状况不好造成的数据丢失问题；算法开发与数据库配置同步进行，耦合度低，开发维护简单易行；能够将本地数据实时地映射到远程服务器中，提供了一种配置简便、安全可靠的数据转储方式。
本文中所描述的功能可在硬件、由处理器执行的软件、固件或其任何组合中实施。如果在由处理器执行的软件中实施，那么可将功能作为一或多个指令或代码存储于计算机可读媒体上或经由计算机可读媒体予以传输。其它实例及实施方案在本发明及所附权利要求书的范围及精神内。举例来说，归因于软件的性质，上文所描述的功能可使用由处理器、硬件、固件、硬连线或这些中的任何者的组合执行的软件实施。此外，各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
在本申请所提供的几个实施例中，应该理解到，所揭露的技术内容，可通过其它的方式实现。其中，以上所描述的装置实施例仅仅是示意性的，例如所述单元的划分，可以为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，单元或模块的间接耦合或通信连接，可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为控制装置的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅为本发明的实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的权利要求范围之内。
Claims (24)
1.一种工控机数据转储方法，其特征在于，包括：
数据文件输出步骤：通过工控机的软件接口将数据文件输出；
数据文件解析步骤：将所述由工控机的软件接口输出的数据文件解析成XML格式文件；
数据文件传输步骤：将所述解析后的XML格式文件传输到数据服务器的相应文件夹；
数据文件处理步骤：执行预先配置的SSIS服务将所述传输到数据服务器的XML格式文件转储到数据库中；
所述预先配置SSIS服务包括：配置包控制流、数据流及遍历文件内容的XSLT中间文件，将所述传输到数据服务器的XML格式文件内容映射到数据库中的表结构的相应字段。
2.根据权利要求1所述的方法，其特征在于，所述由工控机的软件接口输出的数据文件是平面文件；所述由工控机的软件接口输出的数据文件的内容包括设备的参数数据和/或设备本身的OEE数据。
3.根据权利要求1或2所述的方法，其特征在于，所述数据文件传输步骤还包括：调用预先配置的WCF数据流传输服务，将所述解析后的XML格式文件传输到数据服务器的相应文件夹。
4.根据权利要求1-2中任一项所述的方法，其特征在于，所述数据文件传输步骤还包括：在出现网络异常的情况下，将所述解析后的XML格式文件在本地缓存，待网络恢复后自动调用预先配置的WCF数据流传输服务，将所述解析后的XML格式文件传输到数据服务器的相应文件夹。
5.根据权利要求3所述的方法，其特征在于，所述数据文件传输步骤还包括：在出现网络异常的情况下，将所述解析后的XML格式文件在本地缓存，待网络恢复后自动调用预先配置的WCF数据流传输服务，将所述解析后的XML格式文件传输到数据服务器的相应文件夹。
6.根据权利要求1、2或5中任一项所述的方法，其特征在于，所述数据文件处理步骤还包括：用SSIS监测所述数据服务器的文件夹，若所述数据服务器的文件夹中有文件，则逐一遍历所述数据服务器的文件夹中的文件，并将所述数据服务器的文件夹中的文件内容转储到数据库中。
7.根据权利要求3中所述的方法，其特征在于，所述数据文件处理步骤还包括：用SSIS监测所述数据服务器的文件夹，若所述数据服务器的文件夹中有文件，则逐一遍历所述数据服务器的文件夹中的文件，并将所述数据服务器的文件夹中的文件内容转储到数据库中。
8.根据权利要求4中所述的方法，其特征在于，所述数据文件处理步骤还包括：用SSIS监测所述数据服务器的文件夹，若所述数据服务器的文件夹中有文件，则逐一遍历所述数据服务器的文件夹中的文件，并将所述数据服务器的文件夹中的文件内容转储到数据库中。
9.根据权利要求1、2、5、7-8中任一项所述的方法，其特征在于，所述数据文件处理步骤还包括：将所述预先配置的SSIS服务加入到数据库代理作业中，执行数据库代理作业将所述传输到数据服务器的XML格式文件转储到数据库中。
10.根据权利要求3中所述的方法，其特征在于，所述数据文件处理步骤还包括：将所述预先配置的SSIS服务加入到数据库代理作业中，执行数据库代理作业将所述传输到数据服务器的XML格式文件转储到数据库中。
11.根据权利要求4中所述的方法，其特征在于，所述数据文件处理步骤还包括：将所述预先配置的SSIS服务加入到数据库代理作业中，执行数据库代理作业将所述传输到数据服务器的XML格式文件转储到数据库中。
12.根据权利要求6中所述的方法，其特征在于，所述数据文件处理步骤还包括：将所述预先配置的SSIS服务加入到数据库代理作业中，执行数据库代理作业将所述传输到数据服务器的XML格式文件转储到数据库中。
13.一种工控机数据转储系统，其特征在于，包括：
数据文件输出模块，用于通过工控机的软件接口将数据文件输出；
数据文件解析模块，用于将所述由工控机的软件接口输出的数据文件解析成XML格式文件；
数据文件传输模块，用于将所述解析后的XML格式文件传输到数据服务器的相应文件夹；
数据文件处理模块，用于执行预先配置的SSIS服务将所述传输到数据服务器的XML格式文件转储到数据库中；
所述预先配置的SSIS服务包括：配置包控制流、数据流及遍历文件内容的XSLT中间文件，用于将所述传输到数据服务器的XML格式文件内容映射到数据库中的表结构的相应字段。
14.根据权利要求13所述的系统，其特征在于，所述由工控机的软件接口输出的数据文件是平面文件；所述由工控机的软件接口输出的数据文件的内容包括设备的参数数据和/或设备本身的OEE数据。
15.根据权利要求13或14所述的系统，其特征在于，所述数据文件传输模块，还用于调用预先配置的WCF数据流传输服务，将所述解析后的XML格式文件传输到数据服务器的相应文件夹。
16.根据权利要求13-14中任一项所述的系统，其特征在于，所述数据文件传输模块，还用于在出现网络异常的情况下，将所述解析后的XML格式文件在本地缓存，待网络恢复后自动调用预先配置的WCF数据流传输服务，将所述解析后的XML格式文件传输到数据服务器的相应文件夹。
17.根据权利要求15中所述的系统，其特征在于，所述数据文件传输模块，还用于在出现网络异常的情况下，将所述解析后的XML格式文件在本地缓存，待网络恢复后自动调用预先配置的WCF数据流传输服务，将所述解析后的XML格式文件传输到数据服务器的相应文件夹。
18.根据权利要求13、14或17中任一项所述的系统，其特征在于，所述数据文件处理步骤模块还用于,用SSIS监测所述数据服务器的文件夹，若所述数据服务器的文件夹中有文件，则逐一遍历所述数据服务器的文件夹中的文件，并将所述数据服务器的文件夹中的文件内容转储到数据库中。
19.根据权利要求15中所述的系统，其特征在于，所述数据文件处理步骤模块还用于,用SSIS监测所述数据服务器的文件夹，若所述数据服务器的文件夹中有文件，则逐一遍历所述数据服务器的文件夹中的文件，并将所述数据服务器的文件夹中的文件内容转储到数据库中。
20.根据权利要求16中所述的系统，其特征在于，所述数据文件处理步骤模块还用于,用SSIS监测所述数据服务器的文件夹，若所述数据服务器的文件夹中有文件，则逐一遍历所述数据服务器的文件夹中的文件，并将所述数据服务器的文件夹中的文件内容转储到数据库中。
21.根据权利要求13、14、17、19-20中任一项所述的系统，其特征在于，所述数据文件处理模块还用于使用数据库代理作业执行预先配置的SSIS服务，将所述传输到数据服务器的XML格式文件转储到数据库中。
22.根据权利要求15中所述的系统，其特征在于，所述数据文件处理模块还用于使用数据库代理作业执行预先配置的SSIS服务，将所述传输到数据服务器的XML格式文件转储到数据库中。
23.根据权利要求16中所述的系统，其特征在于，所述数据文件处理模块还用于使用数据库代理作业执行预先配置的SSIS服务，将所述传输到数据服务器的XML格式文件转储到数据库中。
24.根据权利要求18中所述的系统，其特征在于，所述数据文件处理模块还用于使用数据库代理作业执行预先配置的SSIS服务，将所述传输到数据服务器的XML格式文件转储到数据库中。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201611033754.2A CN106682078B (zh) | 2016-11-17 | 2016-11-17 | 工控机数据转储方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201611033754.2A CN106682078B (zh) | 2016-11-17 | 2016-11-17 | 工控机数据转储方法及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN106682078A CN106682078A (zh) | 2017-05-17 |
| CN106682078B true CN106682078B (zh) | 2019-10-01 |
Family
ID=58867610
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201611033754.2A Active CN106682078B (zh) | 2016-11-17 | 2016-11-17 | 工控机数据转储方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN106682078B (zh) |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110941615A (zh) * | 2019-11-25 | 2020-03-31 | 西安精雕软件科技有限公司 | 分布式分级cnc数据采集转储方法及系统 |
| CN112417013B (zh) * | 2020-10-23 | 2023-01-06 | 中国南方电网有限责任公司 | 一种考虑不同网络安全分区的电网稳定断面自动同步方法 |
| CN112559612B (zh) * | 2020-12-15 | 2024-05-10 | 北京动力机械研究所 | 动态数据提取及共享方法及装置 |
| CN112765605A (zh) * | 2020-12-31 | 2021-05-07 | 浙江中控技术股份有限公司 | 一种数据处理方法及相关设备 |
| CN117032085A (zh) * | 2023-08-04 | 2023-11-10 | 安徽捷圆电子科技有限公司 | Aoi机连线自动化控制方法、系统及其应用 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102855548A (zh) * | 2012-09-12 | 2013-01-02 | 浙江图讯科技有限公司 | 一种基于工控机的数据交换方法 |
| CN103425934A (zh) * | 2013-07-31 | 2013-12-04 | 北京华易互动科技有限公司 | 一种基于MySQL数据库的同态解密存储方法 |
| CN104102489A (zh) * | 2014-07-24 | 2014-10-15 | 深圳市神州通在线科技有限公司 | 一种第三方数据库app构建系统及构建方法 |
| CN105808675A (zh) * | 2016-03-01 | 2016-07-27 | 万达信息股份有限公司 | 从Informix数据库向人大金仓数据库迁移的方法 |
-
2016
- 2016-11-17 CN CN201611033754.2A patent/CN106682078B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102855548A (zh) * | 2012-09-12 | 2013-01-02 | 浙江图讯科技有限公司 | 一种基于工控机的数据交换方法 |
| CN103425934A (zh) * | 2013-07-31 | 2013-12-04 | 北京华易互动科技有限公司 | 一种基于MySQL数据库的同态解密存储方法 |
| CN104102489A (zh) * | 2014-07-24 | 2014-10-15 | 深圳市神州通在线科技有限公司 | 一种第三方数据库app构建系统及构建方法 |
| CN105808675A (zh) * | 2016-03-01 | 2016-07-27 | 万达信息股份有限公司 | 从Informix数据库向人大金仓数据库迁移的方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN106682078A (zh) | 2017-05-17 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106682078B (zh) | 工控机数据转储方法及系统 | |
| CN107864174B (zh) | 一种基于规则的物联网设备联动方法 | |
| CN104410662A (zh) | 物联网并行海量数据传输中间件及其工作方法 | |
| CN101252471B (zh) | 一种分布式自动化测试系统及其方法 | |
| CN107390650A (zh) | 一种基于物联网的数据采集系统及基于该系统的数据压缩方法 | |
| CN105512201A (zh) | 数据收集和加工方法及装置 | |
| WO2013120170A1 (en) | Method and system for generating transaction data from network traffic data for an application system | |
| CN101867620B (zh) | 一种跨安全区查看前置报文的方法 | |
| CN105573760B (zh) | 基于storm的物联网数据处理系统及方法 | |
| CN114268640A (zh) | 云边协同的工业物联网智能路由系统 | |
| US20140379777A1 (en) | Device and method for performing distributed processing | |
| CN109462590A (zh) | 一种基于模糊测试的未知协议逆向分析方法 | |
| CN102368716A (zh) | 一种网络配置协议的数据获取方法及网络配置服务器 | |
| CN105868364B (zh) | 一种基于字节流的结构化数据表示方法 | |
| CN104363131A (zh) | 基于有限状态机动态可扩展的电力通信协议异常检测方法 | |
| CN108234541A (zh) | 一种企业总线平台的服务管理方法及系统 | |
| CN105302917A (zh) | 应用于电子商务平台的数据处理系统及数据处理方法 | |
| CN102946376A (zh) | 一种异步通讯的实现方法 | |
| CN108228755A (zh) | 基于日志解析技术的MySQL数据库到Hadoop平台的数据同步复制方法 | |
| CN108924007A (zh) | 通信运营信息的大数据采集及存储系统和方法 | |
| CN109547240A (zh) | 基于边缘计算的智能设备以及接入与设备的解析方法 | |
| CN106569789B (zh) | 任务提交的方法和装置 | |
| CN110493140A (zh) | 信息网络系统中链路事件的感知方法及其运行系统 | |
| CN107465694B (zh) | 基于消息队列的openstack租户操作行为审计方法及系统 | |
| CN103916368A (zh) | 一种实现不同数据源之间数据处理的方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB02 | Change of applicant information | ||
| CB02 | Change of applicant information |
Address after: 519000 Qianshan Golden Chicken West Road in Zhuhai, Guangdong Applicant after: GREE ELECTRIC APPLIANCES,Inc.OF ZHUHAI Applicant after: ZHUHAI GREE INTELLIGENT EQUIPMENT Co.,Ltd. Address before: 519000 No. 1 Workshop and Office Building of Zhuhai Lingda Compressor Co., Ltd. No. 2097 Jiuzhou Avenue, Zhuhai City, Guangdong Province Applicant before: ZHUHAI GREE INTELLIGENT EQUIPMENT Co.,Ltd. Applicant before: GREE ELECTRIC APPLIANCES,Inc.OF ZHUHAI |
|
| GR01 | Patent grant | ||
| GR01 | Patent grant |