CN113642408A - 一种工业互联网实时处理解析图片数据的方法 - Google Patents

一种工业互联网实时处理解析图片数据的方法 Download PDF

Info

Publication number
CN113642408A
CN113642408A CN202110801550.3A CN202110801550A CN113642408A CN 113642408 A CN113642408 A CN 113642408A CN 202110801550 A CN202110801550 A CN 202110801550A CN 113642408 A CN113642408 A CN 113642408A
Authority
CN
China
Prior art keywords
data
field
fields
real time
coordinates
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110801550.3A
Other languages
English (en)
Inventor
黎冬生
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Jiuxin Internet Of Things Science & Technology Co ltd
Original Assignee
Hangzhou Jiuxin Internet Of Things Science & Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Jiuxin Internet Of Things Science & Technology Co ltd filed Critical Hangzhou Jiuxin Internet Of Things Science & Technology Co ltd
Priority to CN202110801550.3A priority Critical patent/CN113642408A/zh
Publication of CN113642408A publication Critical patent/CN113642408A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/17—Details of further file system functions
    • G06F16/172—Caching, prefetching or hoarding of files

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明提出了一种工业互联网实时处理解析图片数据的方法，首先定期对工业现场机器的内部系统页面进行截图(截屏)，然后对所获得的截图建立横纵xy坐标系，并识别出图上各字段(或描述、含义)及其对应数据的坐标和数值，将坐标和数值存入CSV文件。接着将CSV文件上传到云端存储系统。云端程序从云端存储系统获取CSV文件并结合所配置的需要解析(识别)的字段提取出各字段的数值，结合其字段对应的编码，一同传送到外部数据库或下游应用程序。该方法节省了人工抄表的工作量，便于后续对数据进行分析和统计。同时可定期采集数据，保证了数据实时性，增加了数据的可用性和分析价值。在云端可批量解析大量机器数据，及批量传送数据，极大提高效率。

Description

一种工业互联网实时处理解析图片数据的方法
【技术领域】
本发明涉及工业互联网的技术领域，特别是一种工业互联网实时处理解析图片数据的方法。
【背景技术】
工业现场有很多机器内部系统数据对外不开放,仅可在工业现场机器上查询，无法通过边缘网关采用开放或已知协议采集输出。为便于统计、分析和加工使用这类数据，需要采集这些数据传送到外部数据库系统供后续开发和使用。
存在以下一些技术问题：
1.工业现场各机器内部系统数据对外不开放，获取数据不易；
2.工业现场各机器内部系统数据格式、样式多样化；同一机器在生产不同产品时的数据格式(样式)也可能不一样。
3.无开放或已知协议解析机器内部系统数据,第一手数据仅能通过截图(截屏)获取。
4.图片识别结果有偏差和重复，且没有统一的输出格式不便于解析。
5.因为数据格式或样式多样化，需要灵活可配置的方式采集指定数据，这样不便于在工业现场机器或边缘网关上解析、处理这类数据。
【发明内容】
本发明的目的就是解决现有技术中的问题，提出一种工业互联网实时处理解析图片数据的方法，方便采集和解析数据。
为实现上述目的，本发明提出了一种工业互联网实时处理解析图片数据的方法，该方法包括以下步骤：
S1.对工业现场机器的内部系统页面进行截图(截屏)；
S2.根据步骤S1中获得的截图，建立横纵XY坐标系，并识别出图上各字段及其对应数据的坐标和数值，将坐标和数值存入CSV文件；
S3.将步骤S2得到的CSV文件上传到云端存储系统；
S4.应用侧配置需要解析(识别)的字段，并对各字段分别赋于一个编码，用于区分各字段及供下游应用程序使用；
S5.对于需要解析(识别)的字段，云端程序从步骤S3获取的CSV文件中，分别去掉重复坐标并根据X,Y坐标排序，修正坐标偏差，然后逐一匹配各字段及其对应数值；
S6.云端程序将解析出来的数据，结合其字段对应的编码，一同传送到外部数据库或下游应用程序。
作为优选，步骤S1中，在工业现场机器上安装截图程序，该程序在后台运行，并设置定期截取机器运行屏幕图片。
作为优选，步骤S2中将步骤S1获取的图片传输至与机器相连的一个边缘网关上，在边缘网关上运行程序对图片建立横纵XY坐标系。
作为优选，步骤S2中对截图建立一个坐标系，将截图的上半部分(固定几个字段的头部)和下半部分(行、列数可能会根据时间和产品改变)分开，便于简化算法，分别得出上半部分和下半部分的每个字段的具体数值。
作为优选，步骤S2中的CSV文件包括字段名坐标文件和数值坐标文件。
作为优选，步骤S3中利用边缘网关将坐标和数值文件(CSV格式)上传至云端存储系统，便于云端批量解析。
作为优选，步骤S4中应用侧(用户)按需配置需要解析(识别)字段，并赋于编码，用于区分不同机器同名字段，相同机器不同时间段同名字段等，该字段编码也用于查找解析出来的对应数据。
作为优选，步骤S5中结合字段名坐标文件和数值坐标文件的X，Y坐标，根据X,Y坐标排序得出字段和数据的对应关系，进而得出各字段对应的数值。
本发明的有益效果：
将工业现场各机器内部系统数采集出来，节省了人工抄表的工作量，便于后续对数据进行分析和统计。同时可定期采集数据，保证了数据实时性，增加了数据的可用性和分析价值。需采集、识别数据可配置化，便于定向采集数据。同时在云端可批量解析大量机器数据，及批量传送数据，极大提高效率。
本发明的特征及优点将通过实施例结合附图进行详细说明。
【附图说明】
图1是本发明一种工业互联网实时处理解析图片数据的方法的流程图；
图2是实施例1中工业现场机器的内部系统页面的截图；
图3是实施例1中截图所建立的横纵XY坐标系示意图；
图4是实施例1中数据库存储示例图。
【具体实施方式】
本发明一种工业互联网实时处理解析图片数据的方法，包括以下步骤：
S1.对工业现场机器的内部系统页面进行截图(截屏)；
S2.根据步骤S1中获得的截图，建立横纵XY坐标系，并识别出图上各字段(或描述、含义)及其对应数据的坐标和数值，将坐标和数值存入逗号分隔值(Comma-SeparatedValues，CSV)文件，即CSV文件，分别有字段名坐标文件和数值坐标文件；
S3.利用边缘网关将步骤S2得到的CSV文件上传到云端存储系统；
S4.应用侧配置需要解析(识别)的字段(或描述、含义)，并对各字段分别赋于一个编码，用于区分各字段及供下游应用程序使用；
S5.对于需要解析(识别)的字段(或描述、含义)，云端程序从S3获取的字段名坐标文件和数值坐标文件中，分别去掉重复坐标并根据X,Y坐标排序，修正坐标偏差，然后逐一匹配各字段及其对应数值；
S6.云端程序将解析出来的数据，结合其字段对应的编码，一同传送到外部数据库或下游应用程序。
进一步地，步骤S1具体步骤为：在工业现场机器上安装截图程序，该程序在后台运行，可设置定期截取机器运行屏幕图片。
进一步地，步骤S2中将步骤S1获取的图片传输至与机器相连的一个边缘网关上。在边缘网关上运行程序对图片建立横纵XY坐标系，将截图的上半部分(固定几个字段的头部)和下半部分(行、列数可能会根据时间和产品改变)分开，分别得出上半部分和下半部分的每个字段(或描述、含义)及其对应数据的坐标和数值,然后将坐标和数值存入CSV文件中。
进一步地，步骤S3中运行于边缘网关上的程序将步骤S2得到的CSV通过网络传输到云端存储系统(文件传输协议FTP服务器或对象存储系统OSS)。
针对不同机器，不同时间段可能需要解析不同字段。进一步地，步骤S4应用程序按需配置需要识别或解析的字段及其编码。字段编码用于区分不同机器同名字段，相同机器不同时间段同名字段等。该字段编码也用于查找解析出来的对应数据。
步骤S5云端程序结合步骤S4配置的字段及其编码，从步骤S3获取的CSV文件中提取出各字段的数值。然后将解析出来的数据，结合其字段对应的编码，一同传送到外部数据库或下游应用程序，供下游应用程序使用。
实施例1
本发明一种工业互联网实时处理解析图片数据的方法，通过对工业现场机器内部系统页面的截图，建立横纵XY坐标系，给出每个区域的X，Y的坐标值，得出每个字段的具体数值，具体步骤如下：
A.对工业现场机器的内部系统页面进行截图，截取如图2所示的图片。
B.参阅图3，以左上角为原点建立一个横纵XY坐标系。为便于解析，将上半部分(固定几个字段的头部)和下半部分(行、列数可能会根据时间和产品改变)分开。
C.对于上半部分，输出关于字段及其坐标值的字段名坐标，参考：
X＝16,Y＝14,S＝Period
X＝16,Y＝42,S＝Thickness
X＝16,Y＝70,S＝Total Length
X＝472,Y＝14,S＝Total Surface
X＝472,Y＝42,S＝Edge Loss
X＝472,Y＝70,S＝Yield Share
再输出一个各字段数值及其坐标值的数据，参考：
X＝130,Y＝10,S＝2021/6/30 16:00-2021/6/30 17:21
X＝130,Y＝38,S＝6.00mm
X＝130,Y＝66,S＝757.8m
X＝618,Y＝10,S＝3829.3m
X＝618,Y＝38,S＝139.7m
X＝618,Y＝66,S＝93.7％
D.对于下半部分，处理原理同上半部分。但需要指出的是，下半部分的行、列数可能会随着时间或生产不同产品有改变。行列交叉空格处(暂无数值)也需得出坐标以简化匹配字段及其数值算法。
E.上、下半部分坐标数据存于CSV文件，并传输到云端存储系统。
F.应用侧给各字段编码，例如：给字段Period编码10001,Thickness编码10002，Total Length编码10003，Total Surface编码10004，Edge Loss编码10005，Yield Share编码10006。
G.云端程序解析CSV文件。结合字段名坐标文件和数据坐标文件的X，Y坐标，根据X,Y坐标排序逐一匹配得出字段和数据的对应关系，得出各字段对应的数值。对于上半部分，即：
Period:2021/6/30 16:00-2021/6/30 17:21
Thickness:6.00mm
Total Length:757.8m
Total Surface:3829.3m
Edge Loss:139.7m
Yield Share:93.7％
再结合字段及其编码配置信息，传送对应数据至外部数据库或下游应用程序。数据库存储示例如图4所示：
上述实施例是对本发明的说明，不是对本发明的限定，任何对本发明简单变换后的方案均属于本发明的保护范围。

Claims (8)

1.一种工业互联网实时处理解析图片数据的方法，其特征在于：
S1.对工业现场机器的内部系统页面进行截图；
S2.根据步骤S1中获得的截图，建立横纵XY坐标系，并识别出图上各字段及其对应数据的坐标和数值，将坐标和数值存入CSV文件；
S3.将步骤S2得到的CSV文件上传到云端存储系统；
S4.应用侧配置需要解析的字段，并对各字段分别赋于一个编码，用于区分各字段及供下游应用程序使用；
S5.对于需要解析的字段，云端程序从步骤S3获取的CSV文件中，分别去掉重复坐标并根据X,Y坐标排序，修正坐标偏差，然后逐一匹配各字段及其对应数值；
S6.云端程序将解析出来的数据，结合其字段对应的编码，一同传送到外部数据库或下游应用程序。
2.如权利要求1所述的一种工业互联网实时处理解析图片数据的方法，其特征在于：步骤S1中，在工业现场机器上安装截图程序，该程序在后台运行，并设置定期截取机器运行屏幕图片。
3.如权利要求2所述的一种工业互联网实时处理解析图片数据的方法，其特征在于：步骤S2中将步骤S1获取的图片传输至与机器相连的一个边缘网关上，在边缘网关上运行程序对图片建立横纵XY坐标系。
4.如权利要求1所述的一种工业互联网实时处理解析图片数据的方法，其特征在于：步骤S2中对截图建立一个坐标系，将截图的上半部分和下半部分分开，分别得出上半部分和下半部分的每个字段的具体数值。
5.如权利要求1所述的一种工业互联网实时处理解析图片数据的方法，其特征在于：步骤S2中的CSV文件包括字段名坐标文件和数值坐标文件。
6.如权利要求1所述的一种工业互联网实时处理解析图片数据的方法，其特征在于：步骤S3中利用边缘网关将坐标和数值文件上传至云端存储系统。
7.如权利要求1所述的一种工业互联网实时处理解析图片数据的方法，其特征在于：步骤S4中应用侧按需配置需要解析的字段，并赋于编码，用于区分不同机器同名字段、相同机器不同时间段同名字段，该字段编码也用于查找解析出来的对应数据。
8.如权利要求1所述的一种工业互联网实时处理解析图片数据的方法，其特征在于：步骤S5中结合字段名坐标文件和数值坐标文件的X，Y坐标，根据X,Y坐标排序得出字段和数据的对应关系，进而得出各字段对应的数值。
CN202110801550.3A 2021-07-15 2021-07-15 一种工业互联网实时处理解析图片数据的方法 Pending CN113642408A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110801550.3A CN113642408A (zh) 2021-07-15 2021-07-15 一种工业互联网实时处理解析图片数据的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110801550.3A CN113642408A (zh) 2021-07-15 2021-07-15 一种工业互联网实时处理解析图片数据的方法

Publications (1)

Publication Number Publication Date
CN113642408A true CN113642408A (zh) 2021-11-12

Family

ID=78417483

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110801550.3A Pending CN113642408A (zh) 2021-07-15 2021-07-15 一种工业互联网实时处理解析图片数据的方法

Country Status (1)

Country Link
CN (1) CN113642408A (zh)

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9613086B1 (en) * 2014-08-15 2017-04-04 Tableau Software, Inc. Graphical user interface for generating and displaying data visualizations that use relationships
CN106777398A (zh) * 2017-03-02 2017-05-31 北京微影时代科技有限公司 一种csv文件的生成方法及装置
CN108132916A (zh) * 2017-11-30 2018-06-08 厦门市美亚柏科信息股份有限公司 解析pdf表格数据的方法、存储介质
CN108446717A (zh) * 2018-02-07 2018-08-24 苏州工业大数据创新中心有限公司 一种基于图像识别的机台状态采集方法及系统
CN108763175A (zh) * 2018-06-26 2018-11-06 中国银行股份有限公司 一种csv文件处理方法及系统
CN109451083A (zh) * 2018-09-11 2019-03-08 东华大学 航天结构件工业物联标识高可靠解析系统
CN110569329A (zh) * 2019-10-28 2019-12-13 深圳市商汤科技有限公司 数据处理方法及装置、电子设备和存储介质
CN110569626A (zh) * 2019-10-28 2019-12-13 云南瀚哲科技有限公司 一种基于数据表的cad户型图批量出图方法
CN111542813A (zh) * 2017-10-09 2020-08-14 塔谱软件有限责任公司 使用异构数据的对象模型来便于建立数据可视化
CN111880897A (zh) * 2020-07-24 2020-11-03 哈尔滨工业大学（威海） 一种Windows窗体应用程序行为模拟机器人及其工作方法
US10997217B1 (en) * 2019-11-10 2021-05-04 Tableau Software, Inc. Systems and methods for visualizing object models of database tables
CN112906352A (zh) * 2021-03-06 2021-06-04 道和云科技(天津)有限公司 一种车辆保险电子保单文本识别和抽取方法及系统
CN112906602A (zh) * 2021-03-04 2021-06-04 杭州电力设备制造有限公司 基于图像处理的配电柜电量表自动识别装置及识别方法
CN112905642A (zh) * 2021-02-24 2021-06-04 南京久为自动化科技有限公司 基于csv映射文件将iec61850报告数据存入关系数据库的方法

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9613086B1 (en) * 2014-08-15 2017-04-04 Tableau Software, Inc. Graphical user interface for generating and displaying data visualizations that use relationships
CN106777398A (zh) * 2017-03-02 2017-05-31 北京微影时代科技有限公司 一种csv文件的生成方法及装置
CN111542813A (zh) * 2017-10-09 2020-08-14 塔谱软件有限责任公司 使用异构数据的对象模型来便于建立数据可视化
CN108132916A (zh) * 2017-11-30 2018-06-08 厦门市美亚柏科信息股份有限公司 解析pdf表格数据的方法、存储介质
CN108446717A (zh) * 2018-02-07 2018-08-24 苏州工业大数据创新中心有限公司 一种基于图像识别的机台状态采集方法及系统
CN108763175A (zh) * 2018-06-26 2018-11-06 中国银行股份有限公司 一种csv文件处理方法及系统
CN109451083A (zh) * 2018-09-11 2019-03-08 东华大学 航天结构件工业物联标识高可靠解析系统
CN110569329A (zh) * 2019-10-28 2019-12-13 深圳市商汤科技有限公司 数据处理方法及装置、电子设备和存储介质
CN110569626A (zh) * 2019-10-28 2019-12-13 云南瀚哲科技有限公司 一种基于数据表的cad户型图批量出图方法
US10997217B1 (en) * 2019-11-10 2021-05-04 Tableau Software, Inc. Systems and methods for visualizing object models of database tables
CN111880897A (zh) * 2020-07-24 2020-11-03 哈尔滨工业大学（威海） 一种Windows窗体应用程序行为模拟机器人及其工作方法
CN112905642A (zh) * 2021-02-24 2021-06-04 南京久为自动化科技有限公司 基于csv映射文件将iec61850报告数据存入关系数据库的方法
CN112906602A (zh) * 2021-03-04 2021-06-04 杭州电力设备制造有限公司 基于图像处理的配电柜电量表自动识别装置及识别方法
CN112906352A (zh) * 2021-03-06 2021-06-04 道和云科技(天津)有限公司 一种车辆保险电子保单文本识别和抽取方法及系统

Similar Documents

Publication Publication Date Title
CN112235326B (zh) 物联网设备数据的解析方法、装置和电子设备
WO2022032684A1 (en) A method, device, system and storage medium for fault diagnosis and solution recommendation
CN111274095B (zh) 日志数据处理方法、装置、设备及计算机可读存储介质
CN104572975B (zh) 一种实时数据处理分析系统
CN106713343B (zh) 一种基于云计算实现通信协议智能解析的方法
CN110750414B (zh) 移动数据监控分析方法、装置、计算机设备和存储介质
CN101441629A (zh) 一种非结构化网页信息的自动采集方法
CN113810489A (zh) 一种工业互联网控制系统及方法
CN113242265A (zh) 一种网关数据处理系统、方法和电子设备
CN115567370B (zh) 基于实时事件数据的自动化告警方法、存储介质及系统
CN104122871A (zh) 一种半导体测试数据实时监控系统及其方法
US20230066703A1 (en) Method for estimating structural vibration in real time
CN113050992A (zh) 一种寄存器地址获取方法、装置、终端及可读存储介质
CN113642408A (zh) 一种工业互联网实时处理解析图片数据的方法
CN114138865A (zh) 客户投诉数据分析方法、装置、设备及存储介质
CN117093620A (zh) 一种解决IoT设备海量数据压力的方法、装置及存储介质
CN111080362A (zh) 广告监测系统及方法
JP2016014980A (ja) ログ取込抽出システム
CN107194616A (zh) 企业产能统计系统和方法
CN114116831B (zh) 一种大数据挖掘处理方法及装置
CN107037262B (zh) 一种大数据频谱分析系统及其方法
JP2019016325A (ja) プログラマブル・ロジック・コントローラおよびデータ収集装置
EP3926428B1 (en) Control device, control program, and control system
CN117473347B (zh) 一种基于规则引擎的选矿全流程数据处理方法及系统
CN109639839A (zh) 一种基于云平台的可扩展信号数据集系统及其工作方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination