CN116009465B - 分布式数据采集方法及相关装置 - Google Patents

分布式数据采集方法及相关装置 Download PDF

Info

Publication number
CN116009465B
CN116009465B CN202211099430.4A CN202211099430A CN116009465B CN 116009465 B CN116009465 B CN 116009465B CN 202211099430 A CN202211099430 A CN 202211099430A CN 116009465 B CN116009465 B CN 116009465B
Authority
CN
China
Prior art keywords
target
data
plc
information
acquisition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202211099430.4A
Other languages
English (en)
Other versions
CN116009465A (zh
Inventor
王同林
陈光夫
马岩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Flexem Technology Co ltd
Original Assignee
Shanghai Flexem Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Flexem Technology Co ltd filed Critical Shanghai Flexem Technology Co ltd
Priority to CN202211099430.4A priority Critical patent/CN116009465B/zh
Publication of CN116009465A publication Critical patent/CN116009465A/zh
Application granted granted Critical
Publication of CN116009465B publication Critical patent/CN116009465B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Landscapes

  • Programmable Controllers (AREA)

Abstract

本申请公开了一种分布式数据采集方法及相关装置,包括:通过获取目标工程信息,并根据所述目标工程信息获取数据请求信息;获取历史采集日志,并根据所述数据请求信息在所述历史采集日志中判断所述目标工程信息是否为首次请求;若是,在所述目标工程信息中获取PLC连接信息,以根据预设条件获取目标PLC;在判断目标PLC满足采集需求之后,采用分布式数据采集的方式在所述目标PLC中进行数据采集以获得目标数据;将所述目标数据存放至消息队列以使上位机根据所述目标数据进行数据展示;通过对PLC连接信息获取对应目标PLC,在判定PLC满足采集需求之后采用分布式数据采集的方式获取目标PLC对应的目标数据;实现了快速获取数据点位中的数据信息的技术效果。

Description

分布式数据采集方法及相关装置
技术领域
本申请涉及数据处理领域,尤其是涉及一种分布式数据采集方法及相关装置。
背景技术
随着科技的发展,PLC设备在国内外已经广泛应用于钢铁、石油、化工、电力、建材、机械制造、汽车、轻纺、交通运输、环保以及文化娱乐各个行业。开关量逻辑控制、工业过程控制、运动控制、数据处理、通信及联网,PLC通信含PLC间的通信及PLC与其它智能设备间的通信。随着工厂自动化网络的发展,现在的PLC都具有通信接口,通信非常方便。
在工业控制领域,数据采集的对象一般是PLC,HMI将从PLC采集的数据做展示,同时支持将数据写入到PLC。伴随着工业物联网的快速发展,工厂的PLC越来越多,每个PLC里面的点位也越来越多,传统的HMI很难把所有的数据点位在短时间内采集,这和工控行业对低延迟的要求是矛盾的。
因此,如何实现快速采集数据点位中的数据信息成为了一个亟待解决的技术问题。
发明内容
为了实现快速采集数据点位中的数据信息,本申请提供一种分布式数据采集方法及相关装置。
第一方面,本申请提供的一种分布式数据采集方法采用如下的技术方案:
一种分布式数据采集方法,包括:
获取目标工程信息,并根据所述目标工程信息获取数据请求信息;
获取历史采集日志,并根据所述数据请求信息在所述历史采集日志中判断所述目标工程信息是否为首次请求;
若是,在所述目标工程信息中获取PLC连接信息,以根据预设条件获取目标PLC;
判断所述目标PLC是否满足采集需求;
若是,采用分布式数据采集的方式在所述目标PLC中进行数据采集以获得目标数据;
将所述目标数据存放至消息队列以使上位机根据所述目标数据进行数据展示。
可选的,所述在所述目标工程信息中获取PLC连接信息,以根据预设条件获取目标PLC包括:
在所述目标工程信息中获取PLC连接信息;
在所述PLC连接信息中获取所有PLC设备的标签信息;
根据预设条件对所述标签信息进行筛选以获得目标标签信息;
根据所述目标标签信息确定目标PLC。
可选的,所述根据预设条件对所述标签信息进行筛选以获得目标标签信息包括:
获取所述预设条件对应的目标字节位置和执行内容;
在所述标签信息中根据所述目标字节位置进行遍历,获得遍历结果;
在所述遍历结果中根据所述执行内容进行筛选以获得目标标签信息。
可选的,所述判断所述目标PLC是否满足采集需求包括:
获取所述目标PLC对应的数据采集节点;
判断所述数据采集节点的端口协议是否一致;
若是,则根据所述目标工程信息中的数据地址与所述目标PLC的采集地址的一致性判断所述目标PLC是否满足采集需求。
可选的,所述判断所述数据采集节点的端口协议是否一致之后,还包括:
若否,则获取所述数据采集节点的端口协议信息;
对所述端口协议信息进行分类,获得协议分类结果;
根据目标工程信息获取目标端口协议,结合所述分类结果获取对应的第二PLC集合;
在所述第二PLC集合中根据所述目标工程信息中的数据地址与第二PLC的采集地址的一致性判断所述第二PLC集合是否满足采集需求。
可选的,所述采用分布式数据采集的方式在所述目标PLC进行数据采集以获得目标数据包括:
确定所述目标PLC对应的端口信息;
根据所述端口信息确定预设分布式采集节点的信息;
采用分布式数据采集的方式利用所述分布式采集节点进行数据采集以获得目标数据。
可选的,所述将所述目标数据存放至消息队列以使上位机根据所述目标数据进行数据展示之后,还包括:
获取预设有效时间阈值;
在所述消息队列获取所有目标数据对应的有效时间字节;
根据所述有效时间阈值和有效时间字节判断是否存在无效数据;
若有,获取对应的无效数据,并将所述无效数据进行剔除。
第二方面,本申请提供一种分布式数据采集装置,所述分布式数据采集装置包括:
信息获取模块,用于获取目标工程信息,并根据所述目标工程信息获取数据请求信息;
日志获取模块,用于获取历史采集日志,并根据所述数据请求信息在所述历史采集日志中判断所述目标工程信息是否为首次请求;
PLC获取模块,用于若是,在所述目标工程信息中获取PLC连接信息,以根据预设条件获取目标PLC;
条件判断模块,用于判断所述目标PLC是否满足采集需求;
数据采集模块,用于若是,采用分布式数据采集的方式在所述目标PLC中进行数据采集以获得目标数据;
数据展示模块,用于将所述目标数据存放至消息队列以使上位机根据所述目标数据进行数据展示。
第三方面,本申请提供一种计算机设备,所述设备包括:存储器、处理器,所述处理器在运行所述存储器存储的计算机指令时,执行如上文中任一项所述的方法。
第四方面,本申请提供一种计算机可读存储介质,包括指令,当所述指令在计算机上运行时,使得计算机执行如上文所述的方法。
综上描述,本申请包括以下有益技术效果:
本申请通过获取目标工程信息,并根据所述目标工程信息获取数据请求信息;获取历史采集日志,并根据所述数据请求信息在所述历史采集日志中判断所述目标工程信息是否为首次请求;若是,在所述目标工程信息中获取PLC连接信息,以根据预设条件获取目标PLC;在判断目标PLC满足采集需求之后,采用分布式数据采集的方式在所述目标PLC中进行数据采集以获得目标数据;将所述目标数据存放至消息队列以使上位机根据所述目标数据进行数据展示;通过对PLC连接信息获取对应目标PLC,在判定PLC满足采集需求之后采用分布式数据采集的方式获取目标PLC对应的目标数据;实现了快速获取数据点位中的数据信息的技术效果。
附图说明
图1是本发明实施例方案涉及的硬件运行环境的计算机设备结构示意图;
图2是本发明分布式数据采集方法第一实施例的流程示意图;
图3是本发明分布式数据采集方法第一实施例中分布式数据采集的整体架构图;
图4是本发明分布式数据采集方法第二实施例的流程示意图;
图5是本发明分布式数据采集方法第三实施例的流程示意图;
图6是本发明分布式数据采集装置第一实施例的结构框图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下通过附图及实施例,对本申请进行进一步详细说明。应当理解,此处所描述的具体实施例仅用以解释本申请,并不用于限定本申请。
参照图1,图1为本发明实施例方案涉及的硬件运行环境的计算机设备结构示意图。
如图1所示,计算机设备可以包括:处理器1001,例如中央处理器(CentralProcessing Unit,CPU),通信总线1002、用户接口1003,网络接口1004,存储器1005。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如无线保真(Wireless-Fidelity,Wi-Fi)接口)。存储器1005可以是高速的随机存取存储器(RandomAccess Memory,RAM),也可以是稳定的非易失性存储器(Non-Volatile Memory,NVM),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解,图1中示出的结构并不构成对计算机设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图1所示,作为一种存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及分布式数据采集程序。
在图1所示的计算机设备中,网络接口1004主要用于与网络服务器进行数据通信;用户接口1003主要用于与用户进行数据交互;本发明计算机设备中的处理器1001、存储器1005可以设置计算机设备中,所述计算机设备通过处理器1001调用存储器1005中存储的分布式数据采集程序,并执行本发明实施例提供的分布式数据采集方法。
本发明实施例提供了一种分布式数据采集方法,参照图2,图2为本发明分布式数据采集方法第一实施例的流程示意图。
本实施例中,所述分布式数据采集方法包括以下步骤:
步骤S10:获取目标工程信息,并根据目标工程信息获取数据请求信息。
需要说明的是,本实施例旨在通过分布式技术水平的扩展采集服务的数量,从而提升物联网的数据采集能力。传统数据采集大多是单机上运行的,采集能力有限,本实施例出了分布式部署采集服务的方式,把不同的数据采集服务部署到多个机器上,随着PLC数量的增多,增加采集服务的数量就可以。
可以理解的是,本实施例在传统的数据采集上,加上分布式扩展的功能,让采集的任务分摊在多个电脑上运行,大大提高了数据采集的能力,从而可以应对当前数据点位庞大的现代化工厂的使用场景。
需要说明的是,在本实施例中,将对多个PLC的采集任务运行在多个机器上,每个机器只负责1到5个PLC的采集(这个数量可以调整),从而减轻了单个机器压力,提升了整体的采集能力。
在具体实施中,如图3所示的分布式数据采集的整体架构图,所示系统分为上位机、运行时和南向服务。上位机负责设计工程和配置参数,运行时负责展示数据,供用户操作,南向服务负责连接设备、采集数据。本实施例的分布式数据采集方法主要集中在南向服务。南向服务主要分为管理服务、采集服务、映射服务。管理服务负责加载工程数据,创建连接数据,控制采集节点的数量。采集服务负责与物理的PLC设备通讯,从PLC读取数据,写入数据到PLC。需要连接多少PLC、PLC的地址都是可以在上位机灵活配置的。上位机将设计好的工程下发到管理服务,管理服务控制每个采集节点运行几个采集任务。采集节点有多个,但是运行的是同一套代码,保证了逻辑的一致性。多个采集服务将采集到的数据添加到消息队列,映射服务消费消息,专门负责数据的后续处理,达到采集和逻辑处理的解耦。通过这个分布式的架构,系统的采集能力可以方便的做到自由伸缩。简单的工厂项目,采用单机基本就可以支持,节约成本。复杂的工厂项目,多加一批采集节点就可以应对,不用任何代码的改动,大大提高了代码的适用场景。
需要说明的是,PLC(可编程逻辑控制器)可编程逻辑控制器是种专门为在工业环境下应用而设计的数字运算操作电子系统。它采用一种可编程的存储器,在其内部存储执行逻辑运算、顺序控制、定时、计数和算术运算等操作的指令,通过数字式或模拟式的输入输出来控制各种类型的机械设备或生产过程。
可以理解的是,HMI(人机接口)人机接口是指人与计算机之间建立联系、交换信息的输入/输出设备的接口,这些设备包括键盘、显示器、打印机、鼠标器等。
步骤S20:获取历史采集日志,并根据数据请求信息在历史采集日志中判断目标工程信息是否为首次请求。
需要说明的是,根据数据请求在历史采集日志中判断目标工程信息是否为首次请求是指获取目标工程信息中的采集条件信息,其中采集条件信息包括采集地址、采集目标、采集时间要求以及采集数据容量要求。
在具体实施中,通过历史采集日志中对应的直接匹配条件结合所述数据请求信息对应的请求条件判断是否为首次请求。
需要说明的是,历史采集日志由PLC自带的运行日志生成的总日志。每一PLC工作日志记录当前PLC的工作记录,根据实际使用需求会设定工作日志的记录时长。
在具体实施中,是否为首次请求的条件即目标工程信息对应的数据请求的具体内容与历史采集日志中匹配的采集请求一致。此时可以直接从对应的PLC设备中直接获取数据。判断一致的条件有:采集地址、采集目标、采集时间以及采集数据容量要求一致。在PLC当前有效时间的工作日志内,如若匹配到了上述请求,将直接将对应存储的数据反馈至上位机。
步骤S30:若是,在目标工程信息中获取PLC连接信息,以根据预设条件获取目标PLC。
在具体实施中,若目标工程信息不为首次请求,将根据所述目标工程信息中的数据请求信息在所述历史采集日志中获取对应的PLC,从PLC中直接获取目标工程信息对应的数据。
需要说明的是,预设条件即为PLC连接信息为“已执行”或“未执行”对应的预设条件,对于接收到采集命令时,采集节点将从对应的数据库中获取“未执行”的PLC连接信息,以进行下一步步骤。
步骤S40:判断目标PLC是否满足采集需求。
需要说明的是,判断所述目标PLC是否满足采集需求是为了保证在数据采集时保证端口协议的一致性。
步骤S50:若是,采用分布式数据采集的方式在目标PLC中进行数据采集以获得目标数据。
进一步地,为了提升信息采集速度,所述采用分布式数据采集的方式在所述目标PLC进行数据采集以获得目标数据包括:确定所述目标PLC对应的端口信息;根据所述端口信息确定预设分布式采集节点的信息;采用分布式数据采集的方式利用所述分布式采集节点进行数据采集以获得目标数据。
步骤S60:将目标数据存放至消息队列以使上位机根据目标数据进行数据展示。
在具体实施中,本实施例通过实施分布式数据采集部署,提高数采能力的方法,步骤如下:
步骤1.启动一个管理节点和多个数据采集节点
步骤2.上位机添加多个PLC的连接信息,下发工程。
步骤3.服务管理节点将多个PLC连接信息保存到数据库,并标识“未执行”状态。
步骤4.采集节点从数据库获取“未执行”的PLC连接信息,连接PLC,执行读写命令。
步骤5.采集节点将读取到的数据放入消息队列。
步骤6.映射服务从消息队列获取数据,对数据进行处理(大小端处理、数据缩放等),然后上抛给上位机。
步骤7.上位机HMI展示数据。
进一步地,为了在数据采集之后减少冗余数据对系统的占用,所述将所述目标数据存放至消息队列以使上位机根据所述目标数据进行数据展示之后,还包括:获取预设有效时间阈值;在所述消息队列获取所有目标数据对应的有效时间字节;根据所述有效时间阈值和有效时间字节判断是否存在无效数据;若有,获取对应的无效数据,并将所述无效数据进行剔除。
本实施例通过获取目标工程信息,并根据所述目标工程信息获取数据请求信息;获取历史采集日志,并根据所述数据请求信息在所述历史采集日志中判断所述目标工程信息是否为首次请求;若是,在所述目标工程信息中获取PLC连接信息,以根据预设条件获取目标PLC;在判断目标PLC满足采集需求之后,采用分布式数据采集的方式在所述目标PLC中进行数据采集以获得目标数据;将所述目标数据存放至消息队列以使上位机根据所述目标数据进行数据展示;通过对PLC连接信息获取对应目标PLC,在判定PLC满足采集需求之后采用分布式数据采集的方式获取目标PLC对应的目标数据;实现了快速获取数据点位中的数据信息的技术效果。
参考图4,图为本发明分布式数据采集方法第二实施例的流程示意图。
基于上述第一实施例,本实施例分布式数据采集方法的所述步骤S30,还包括:
步骤S301:在目标工程信息中获取PLC连接信息。
步骤S302:在PLC连接信息中获取所有PLC设备的标签信息。
需要说明的是,PLC设备标签信息即对应该PLC属于已执行或者未执行状态的标签信息,若该PLC在预设时间周期内执行过信息采集任务,其标签信息将自动变成“已执行”状态。
在具体实施中,在PLC连接信息中获取所有PLC设备的标签信息是通过获取PLC连接信息中对应的标签信息。通过标签信息确定对应的PLC连接信息具体属于哪种标签。
步骤S303:根据预设条件对标签信息进行筛选以获得目标标签信息。
进一步地,为了提升标签筛选的精确程度,所述根据预设条件对所述标签信息进行筛选以获得目标标签信息包括:获取所述预设条件对应的目标字节位置和执行内容;在所述标签信息中根据所述目标字节位置进行遍历,获得遍历结果;在所述遍历结果中根据所述执行内容进行筛选以获得目标标签信息。
步骤S304:根据目标标签信息确定目标PLC。
本实施例通过在所述目标工程信息中获取PLC连接信息;在PLC连接信息中获取所有PLC设备的标签信息;根据预设条件对所述标签信息进行筛选获取目标标签信息;根据所述目标标签信息确定目标PLC;通过对所有PLC设备的标签信息进行筛选,结合预设条件获取符合预设条件的目标标签,进一步获取目标标签对应的目标PLC,实现了在进行数据采集时精确获取目标数据的技术效果。
参考图5,图5为本发明分布式数据采集方法第三实施例的流程示意图。
基于上述第一实施例,本实施例分布式数据采集方法的所述步骤S40,还包括:
步骤S401:获取目标PLC对应的数据采集节点。
需要说明的是,所述对应的数据采集节点为预设的分布式数据采集对应分配的数据节点。
步骤S402:判断数据采集节点的端口协议是否一致。
可以理解的是,为了保证逻辑一致性,在采集数据时要求保持端口的协议的一致性。
进一步地,为了在数据采集节点的端口信息不一致时,也能实现数据的采集,所述判断所述数据采集节点的端口协议是否一致之后,还包括:若否,则获取所述数据采集节点的端口协议信息;对所述端口协议信息进行分类,获得协议分类结果;根据目标工程信息获取目标端口协议,结合所述分类结果获取对应的第二PLC集合;在所述第二PLC集合中根据所述目标工程信息中的数据地址与第二PLC的采集地址的一致性判断所述第二PLC集合是否满足采集需求。
步骤S403:若是,则根据目标工程信息中的数据地址与目标PLC的采集地址的一致性判断所述目标PLC是否满足采集需求。
需要说明的是,在本实施例中,由管理服务、采集服务、映射服务组成;管理服务控制采集服务的分配,并将PLC的连接信息存入数据库;采集服务负责与PLC设备通讯,将采集的数据上抛给运行做数据加工处理,将HMI上的写入操作写入PLC;映射服务负责数据的加工处理,比如:数据缩放、大小端处理等,处理完的数据再推送给HMI做展示。
本实施例通过获取所述目标PLC对应的数据采集节点;判断所述数据采集节点的端口协议是否一致;若是,则根据所述目标工程信息中的数据地址与所述目标PLC的采集地址的一致性判断所述目标PLC是否满足采集需求,保证了在数据采集过程中端口协议的一致,进一步实现了保证了逻辑的一致性。
此外,本发明实施例还提出一种计算机可读存储介质,所述存储介质上存储有分布式数据采集的程序,所述分布式数据采集的程序被处理器执行时实现如上文所述的分布式数据采集的方法的步骤。
参照图6,图6为本发明分布式数据采集的装置第一实施例的结构框图。
如图6所示,本发明实施例提出的分布式数据采集装置包括:
信息获取模块10,用于获取目标工程信息,并根据所述目标工程信息获取数据请求信息;
日志获取模块20,用于获取历史采集日志,并根据所述数据请求信息在所述历史采集日志中判断所述目标工程信息是否为首次请求;
PLC获取模块30,用于若是,在所述目标工程信息中获取PLC连接信息,以根据预设条件获取目标PLC;
条件判断模块40,用于判断所述目标PLC是否满足采集需求;
数据采集模块50,用于若是,采用分布式数据采集的方式在所述目标PLC中进行数据采集以获得目标数据;
数据展示模块60,用于将所述目标数据存放至消息队列以使上位机根据所述目标数据进行数据展示。
应当理解的是,以上仅为举例说明,对本发明的技术方案并不构成任何限定,在具体应用中,本领域的技术人员可以根据需要进行设置,本发明对此不做限制。
本实施例通过获取目标工程信息,并根据所述目标工程信息获取数据请求信息;获取历史采集日志,并根据所述数据请求信息在所述历史采集日志中判断所述目标工程信息是否为首次请求;若是,在所述目标工程信息中获取PLC连接信息,以根据预设条件获取目标PLC;在判断目标PLC满足采集需求之后,采用分布式数据采集的方式在所述目标PLC中进行数据采集以获得目标数据;将所述目标数据存放至消息队列以使上位机根据所述目标数据进行数据展示;通过对PLC连接信息获取对应目标PLC,在判定PLC满足采集需求之后采用分布式数据采集的方式获取目标PLC对应的目标数据;实现了快速获取数据点位中的数据信息的技术效果。
在一实施例中,所述PLC获取模块30,还用于在所述PLC连接信息中获取所有PLC设备的标签信息;根据预设条件对所述标签信息进行筛选以获得目标标签信息;根据所述目标标签信息确定目标PLC。
在一实施例中,所述PLC获取模块30,还用于获取所述预设条件对应的目标字节位置和执行内容;在所述标签信息中根据所述目标字节位置进行遍历,获得遍历结果;在所述遍历结果中根据所述执行内容进行筛选以获得目标标签信息。
在一实施例中,所述条件判断模块40,还用于获取所述目标PLC对应的数据采集节点;判断所述数据采集节点的端口协议是否一致;若是,则根据所述目标工程信息中的数据地址与所述目标PLC的采集地址的一致性判断所述目标PLC是否满足采集需求。
在一实施例中,所述条件判断模块40,还用于若否,则获取所述数据采集节点的端口协议信息;对所述端口协议信息进行分类,获得协议分类结果;根据目标工程信息获取目标端口协议,结合所述分类结果获取对应的第二PLC集合;在所述第二PLC集合中根据所述目标工程信息中的数据地址与第二PLC的采集地址的一致性判断所述第二PLC集合是否满足采集需求。
在一实施例中,所述数据采集模块50,还用于确定所述目标PLC对应的端口信息;根据所述端口信息确定预设分布式采集节点的信息;采用分布式数据采集的方式利用所述分布式采集节点进行数据采集以获得目标数据。
在一实施例中,所述数据展示模块60,还用于获取预设有效时间阈值;在所述消息队列获取所有目标数据对应的有效时间字节;根据所述有效时间阈值和有效时间字节判断是否存在无效数据;若有,获取对应的无效数据,并将所述无效数据进行剔除。
需要说明的是,以上所描述的工作流程仅仅是示意性的,并不对本发明的保护范围构成限定,在实际应用中,本领域的技术人员可以根据实际的需要选择其中的部分或者全部来实现本实施例方案的目的,此处不做限制。
另外,未在本实施例中详尽描述的技术细节,可参见本发明任意实施例所提供的分布式数据采集的方法,此处不再赘述。
此外,需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如只读存储器(Read Only Memory,ROM)/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (7)

1.一种分布式数据采集方法,其特征在于,包括:
获取目标工程信息,并根据所述目标工程信息获取数据请求信息;
获取历史采集日志,并根据所述数据请求信息在所述历史采集日志中判断所述目标工程信息是否为首次请求;
若是,在所述目标工程信息中获取PLC连接信息,以根据预设条件获取目标PLC;
判断所述目标PLC是否满足采集需求;
若是,采用分布式数据采集的方式在所述目标PLC中进行数据采集以获得目标数据;
将所述目标数据存放至消息队列以使上位机根据所述目标数据进行数据展示;
其中,所述获取历史采集日志,并根据所述数据请求信息在所述历史采集日志中判断所述目标工程信息是否为首次请求的步骤,包括:
获取历史采集日志;
通过所述历史采集日志中对应的直接匹配条件结合所述数据请求信息对应的请求条件判断所述目标工程信息是否为首次请求;
其中,所述在所述目标工程信息中获取PLC连接信息,以根据预设条件获取目标PLC包括:
在所述目标工程信息中获取PLC连接信息;
在所述PLC连接信息中获取所有PLC设备的标签信息;
根据预设条件对所述标签信息进行筛选以获得目标标签信息;
根据所述目标标签信息确定目标PLC;
其中,所述根据预设条件对所述标签信息进行筛选以获得目标标签信息包括:
获取所述预设条件对应的目标字节位置和执行内容;
在所述标签信息中根据所述目标字节位置进行遍历,获得遍历结果;
在所述遍历结果中根据所述执行内容进行筛选以获得目标标签信息;
其中,所述判断所述目标PLC是否满足采集需求包括:
获取所述目标PLC对应的数据采集节点;
判断所述数据采集节点的端口协议是否一致;
若是,则根据所述目标工程信息中的数据地址与所述目标PLC的采集地址的一致性判断所述目标PLC是否满足采集需求。
2.根据权利要求1所述的分布式数据采集方法,其特征在于,所述判断所述数据采集节点的端口协议是否一致之后,还包括:
若否,则获取所述数据采集节点的端口协议信息;
对所述端口协议信息进行分类,获得协议分类结果;
根据目标工程信息获取目标端口协议,结合所述分类结果获取对应的第二PLC集合;
在所述第二PLC集合中根据所述目标工程信息中的数据地址与第二PLC的采集地址的一致性判断所述第二PLC集合是否满足采集需求。
3.根据权利要求1所述的分布式数据采集方法,其特征在于,所述采用分布式数据采集的方式在所述目标PLC进行数据采集以获得目标数据包括:
确定所述目标PLC对应的端口信息;
根据所述端口信息确定预设分布式采集节点的信息;
采用分布式数据采集的方式利用所述分布式采集节点进行数据采集以获得目标数据。
4.根据权利要求1至3任一项所述的分布式数据采集方法,其特征在于,所述将所述目标数据存放至消息队列以使上位机根据所述目标数据进行数据展示之后,还包括:
获取预设有效时间阈值;
在所述消息队列获取所有目标数据对应的有效时间字节;
根据所述有效时间阈值和有效时间字节判断是否存在无效数据;
若有,获取对应的无效数据,并将所述无效数据进行剔除。
5.一种分布式数据采集装置,其特征在于,所述分布式数据采集装置包括:
信息获取模块,用于获取目标工程信息,并根据所述目标工程信息获取数据请求信息;
日志获取模块,用于获取历史采集日志,并根据所述数据请求信息在所述历史采集日志中判断所述目标工程信息是否为首次请求;
PLC获取模块,用于若是,在所述目标工程信息中获取PLC连接信息,以根据预设条件获取目标PLC;
条件判断模块,用于判断所述目标PLC是否满足采集需求;
数据采集模块,用于若是,采用分布式数据采集的方式在所述目标PLC中进行数据采集以获得目标数据;
数据展示模块,用于将所述目标数据存放至消息队列以使上位机根据所述目标数据进行数据展示;
其中,所述日志获取模块,还用于获取历史采集日志;
通过所述历史采集日志中对应的直接匹配条件结合所述数据请求信息对应的请求条件判断所述目标工程信息是否为首次请求;
其中,所述PLC获取模块还用于在所述PLC连接信息中获取所有PLC设备的标签信息;
根据预设条件对所述标签信息进行筛选以获得目标标签信息;
根据所述目标标签信息确定目标PLC;
其中,所述PLC获取模块,还用于获取所述预设条件对应的目标字节位置和执行内容;
在所述标签信息中根据所述目标字节位置进行遍历,获得遍历结果;
在所述遍历结果中根据所述执行内容进行筛选以获得目标标签信息;
其中,所述条件判断模块,还用于获取所述目标PLC对应的数据采集节点;
判断所述数据采集节点的端口协议是否一致;
若是,则根据所述目标工程信息中的数据地址与所述目标PLC的采集地址的一致性判断所述目标PLC是否满足采集需求。
6.一种计算机设备,其特征在于,所述设备包括:存储器、处理器,所述处理器在运行所述存储器存储的计算机指令时,执行如权利要求1至4中任一项所述的方法。
7.一种计算机可读存储介质,其特征在于,包括指令,当所述指令在计算机上运行时,使得计算机执行如权利要求1至4中任一项所述的方法。
CN202211099430.4A 2022-09-08 2022-09-08 分布式数据采集方法及相关装置 Active CN116009465B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211099430.4A CN116009465B (zh) 2022-09-08 2022-09-08 分布式数据采集方法及相关装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211099430.4A CN116009465B (zh) 2022-09-08 2022-09-08 分布式数据采集方法及相关装置

Publications (2)

Publication Number Publication Date
CN116009465A CN116009465A (zh) 2023-04-25
CN116009465B true CN116009465B (zh) 2024-01-30

Family

ID=86020022

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211099430.4A Active CN116009465B (zh) 2022-09-08 2022-09-08 分布式数据采集方法及相关装置

Country Status (1)

Country Link
CN (1) CN116009465B (zh)

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003114908A (ja) * 2001-10-05 2003-04-18 Omron Corp データ収集装置及びデータ収集システム並びにプログラム製品
US8966117B1 (en) * 2001-04-05 2015-02-24 Dj Inventions, Llc System for discovering routers in a communication path of a supervisory control and data acquisition system
CN106096056A (zh) * 2016-06-30 2016-11-09 西南石油大学 一种基于分布式的舆情数据实时采集方法和系统
CN111586090A (zh) * 2020-03-25 2020-08-25 杭州传化智能制造科技有限公司 工业数据采集的方法、系统、计算机设备和可读存储介质
WO2020238365A1 (zh) * 2019-05-31 2020-12-03 深圳前海微众银行股份有限公司 消息消费方法、装置、设备及计算机存储介质
CN112397193A (zh) * 2020-11-16 2021-02-23 康键信息技术(深圳)有限公司 数据上报方法、装置、设备及存储介质
CN112764398A (zh) * 2020-12-02 2021-05-07 于振山 基于vc++.net架构的分布式采集plc数据工业控制方法
CN113672176A (zh) * 2021-08-13 2021-11-19 济南浪潮数据技术有限公司 一种数据读取方法、系统、设备及计算机可读存储介质
CN113824801A (zh) * 2021-11-24 2021-12-21 中国电力科学研究院有限公司 一种智能融合终端统一接入管理组件系统
CN114363042A (zh) * 2021-12-30 2022-04-15 爱集微咨询(厦门)有限公司 日志分析方法、装置、设备及可读存储介质
CN114637268A (zh) * 2022-03-30 2022-06-17 柏锦亮 一种基于人工智能的工业生产控制方法、系统及云平台

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8966117B1 (en) * 2001-04-05 2015-02-24 Dj Inventions, Llc System for discovering routers in a communication path of a supervisory control and data acquisition system
JP2003114908A (ja) * 2001-10-05 2003-04-18 Omron Corp データ収集装置及びデータ収集システム並びにプログラム製品
CN106096056A (zh) * 2016-06-30 2016-11-09 西南石油大学 一种基于分布式的舆情数据实时采集方法和系统
WO2020238365A1 (zh) * 2019-05-31 2020-12-03 深圳前海微众银行股份有限公司 消息消费方法、装置、设备及计算机存储介质
CN111586090A (zh) * 2020-03-25 2020-08-25 杭州传化智能制造科技有限公司 工业数据采集的方法、系统、计算机设备和可读存储介质
CN112397193A (zh) * 2020-11-16 2021-02-23 康键信息技术(深圳)有限公司 数据上报方法、装置、设备及存储介质
CN112764398A (zh) * 2020-12-02 2021-05-07 于振山 基于vc++.net架构的分布式采集plc数据工业控制方法
CN113672176A (zh) * 2021-08-13 2021-11-19 济南浪潮数据技术有限公司 一种数据读取方法、系统、设备及计算机可读存储介质
CN113824801A (zh) * 2021-11-24 2021-12-21 中国电力科学研究院有限公司 一种智能融合终端统一接入管理组件系统
CN114363042A (zh) * 2021-12-30 2022-04-15 爱集微咨询(厦门)有限公司 日志分析方法、装置、设备及可读存储介质
CN114637268A (zh) * 2022-03-30 2022-06-17 柏锦亮 一种基于人工智能的工业生产控制方法、系统及云平台

Also Published As

Publication number Publication date
CN116009465A (zh) 2023-04-25

Similar Documents

Publication Publication Date Title
CN107590099B (zh) 一种多主机访问从机的方法、扩展装置及存储介质
CN101305551A (zh) 用于通信系统中的分布式工作流的构造和执行的方法
EP3489776B1 (en) Control device, control method, and program
CN113890879B (zh) 数据访问的负载均衡方法、装置、计算机设备及介质
CN113220229B (zh) 一种用于分布式控制系统的在线式i/o无扰组态方法
CN112313587B (zh) 数控系统的数据处理方法、计算机设备和存储介质
CN111813517A (zh) 任务队列的分配方法、装置、计算机设备及介质
CN113050992A (zh) 一种寄存器地址获取方法、装置、终端及可读存储介质
CN116009465B (zh) 分布式数据采集方法及相关装置
CN115756322A (zh) 数据存储方法、装置、电子设备及存储介质
CN115396526A (zh) 一种多源实时数据协议高速转换方法及装置
EP3786750B1 (en) Data collection system, data collection method, and program
CN114186976A (zh) 工作流程流转方法、装置、计算机设备及存储介质
CN114547206A (zh) 一种数据同步方法和数据同步系统
CN109150993B (zh) 一种获取网络请求切面的方法、终端装置及存储介质
CN113342270A (zh) 卷卸载方法、装置和电子设备
EP3933523A1 (en) Engineering device, engineering method, and program
CN116319665A (zh) 基于动态定位plc标签地址的通信方法、装置、设备及介质
CN116627682B (zh) 基于共享内存的远程工业信息检测方法及装置
CN117452873B (zh) 通信方法、装置、设备和存储介质
CN111061795B (zh) 一种数据处理方法、装置、智能终端及存储介质
CN112015681B (zh) 一种io端口的处理方法、装置、设备和介质
JP7197394B2 (ja) 表示用データバッファ
CN114257887A (zh) 一种数据通讯方法、系统、存储介质及电子设备
CN115268379A (zh) 制造控制系统、方法、装置及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant