CN115580664A - 一种数据采集方法、装置、设备和介质 - Google Patents
一种数据采集方法、装置、设备和介质 Download PDFInfo
- Publication number
- CN115580664A CN115580664A CN202211332980.6A CN202211332980A CN115580664A CN 115580664 A CN115580664 A CN 115580664A CN 202211332980 A CN202211332980 A CN 202211332980A CN 115580664 A CN115580664 A CN 115580664A
- Authority
- CN
- China
- Prior art keywords
- acquired
- data
- data acquisition
- communication protocol
- acquiring
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/08—Protocols for interworking; Protocol conversion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Computer And Data Communications (AREA)
Abstract
本申请提供了一种数据采集方法、装置、设备和介质,涉及物联网技术领域,方法包括:获取至少一个待采数系统分别相关的系统数据和通讯协议;根据至少一个待采数系统分别相关的系统数据和通讯协议,建立至少一个待采数系统分别对应的就地系统;通过至少一个待采数系统分别对应的就地系统,从至少一个待采数系统中采集数据。本申请在需要从多个支持不同通讯协议的待采数系统中采集数据时,无论多个待采数系统分别支持哪种通讯协议,均可以建立多个待采数系统分别对应的就地系统,打通了就地系统与多个待采数系统之间的数据通道,使得通过就地系统可以从多个待采数系统中采集数据,相比于通过多个数据采集网关进行采数的方式,降低了成本。
Description
技术领域
本申请涉及物联网技术领域,特别是涉及一种数据采集方法、装置、设备和介质。
背景技术
随着工业的飞速发展,工业现场产生的数据正在呈指数型增长,如何更快、更准确、更简单实现工业数据的采集成为一个热门话题。
目前,可以通过数据采集网关从支持特定通讯协议的可编程逻辑控制系统(Programmable Logic Controller,PLC)中采集数据,但是不同的PLC系统支持的通讯协议可能不同,导致多个PLC系统产生的数据可能需要由多个数据采集网关采集,采集成本较高。
发明内容
有鉴于此,本申请提供了一种数据采集方法、装置、设备和介质,用于解决现有技术存在的采集成本高的问题,其技术方案如下:
一种数据采集方法,包括:
获取至少一个待采数系统分别相关的系统数据和通讯协议,其中,一待采数系统相关的系统数据是指唯一描述该待采数系统的数据,一待采数系统相关的通讯协议是指该待采数系统能够支持的已有通讯协议和/或自定义通讯协议,待采数系统是指能够得到待采集的数据的边缘侧可编程逻辑控制PLC系统和/或与边缘侧PLC系统通信连接的边缘侧数据采集与监视控制(Supervisory Control And Data Acquisition,SCADA)系统;
根据至少一个待采数系统分别相关的系统数据和通讯协议,建立至少一个待采数系统分别对应的就地系统,其中,一待采数系统对应的就地系统与该待采数系统之间具有数据采集通道,数据采集通道是指从该待采数系统中采集数据时使用的通道;
通过至少一个待采数系统分别对应的就地系统,从至少一个待采数系统中采集数据。
可选的,通过至少一个待采数系统分别对应的就地系统,从至少一个待采数系统中采集数据,包括:
获取至少一个待采数系统分别对应的原始数据点文件,其中,一待采数系统对应的原始数据点文件是指描述该待采数系统中的数据的属性信息的文件;
根据至少一个待采数系统分别对应的原始数据点文件,确定至少一个待采数系统分别对应的采数方式;
通过至少一个待采数系统分别对应的就地系统,采用至少一个待采数系统分别对应的采数方式从至少一个待采数系统中采集数据。
可选的,在通过至少一个待采数系统分别对应的就地系统,从至少一个待采数系统中采集数据之后,还包括:
采用消息队列遥测传输MQTT协议,将采集的数据上传至云端系统;
和/或,对采集的数据进行预处理,并通过MQTT协议将预处理后的数据上传至云端系统,其中,预处理用于将采集的数据处理为符合用户需求的数据。
可选的,在通过至少一个待采数系统分别对应的就地系统,从至少一个待采数系统中采集数据之后,还包括:
将采集的数据保存至本地数据库,其中,本地数据库用于存储设定时间内采集的数据。
可选的,系统数据包括以下数据中的一种或多种:IP地址和端口号。
可选的,还包括:
监听每个待采数系统对应的就地系统与对应待采数系统的连接状态;
若监听到连接状态为断开连接,则重新与对应待采数系统建立连接。
一种数据采集装置,包括:信息获取模块、系统建立模块和数据采集模块;
信息获取模块,用于获取至少一个待采数系统分别相关的系统数据和通讯协议,其中,一待采数系统相关的系统数据是指唯一描述该待采数系统的数据,一待采数系统相关的通讯协议是指该待采数系统能够支持的已有通讯协议和/或自定义通讯协议,待采数系统是指能够得到待采集的数据的边缘侧可编程逻辑控制PLC系统和/或与边缘侧PLC系统通信连接的边缘侧数据采集与监视控制SCADA系统;
系统建立模块,用于根据至少一个待采数系统分别相关的系统数据和通讯协议,建立至少一个待采数系统分别对应的就地系统,其中,一待采数系统对应的就地系统与该待采数系统之间具有数据采集通道,数据采集通道是指从该待采数系统中采集数据时使用的通道;
数据采集模块,用于通过至少一个待采数系统分别对应的就地系统,从至少一个待采数系统中采集数据。
可选的,数据采集模块包括:原始数据点文件获取模块、采数方式确定模块和采数方式参考模块;
原始数据点文件获取模块,用于获取至少一个待采数系统分别对应的原始数据点文件,其中,一待采数系统对应的原始数据点文件是指描述该待采数系统产生的数据的属性信息的文件;
采数方式确定模块,用于根据至少一个待采数系统分别对应的原始数据点文件,确定至少一个待采数系统分别对应的采数方式;
采数方式参考模块,用于通过至少一个待采数系统分别对应的就地系统,采用至少一个待采数系统分别对应的采数方式从至少一个待采数系统中采集数据。
一种数据采集设备,包括存储器和处理器;
存储器,用于存储程序;
处理器,用于执行程序,实现如上述任一项的数据采集方法的各个步骤。
一种可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时,实现如上述任一项的数据采集方法的各个步骤。
经由上述的技术方案可知,本申请提供的数据采集方法,首先获取至少一个待采数系统分别相关的系统数据和通讯协议,然后根据至少一个待采数系统分别相关的系统数据和通讯协议,建立至少一个待采数系统分别对应的就地系统,最后通过至少一个待采数系统分别对应的就地系统,从至少一个待采数系统中采集数据。本申请在需要从多个支持不同通讯协议的待采数系统中采集数据时,无论多个待采数系统分别支持哪种通讯协议,均可以建立多个待采数系统分别对应的就地系统,打通了就地系统与多个待采数系统之间的数据通道,使得通过就地系统可以从多个待采数系统中采集数据,相比于通过多个数据采集网关进行采数的方式,降低了成本。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本申请实施例提供的数据采集方法的流程示意图;
图2为本申请实施例提供的就地系统的配置界面的示意图;
图3为本申请实施例提供的本地数据库中管理的数据的相关信息的示意图;
图4为本申请实施例提供的数据采集装置的结构示意图;
图5为本申请实施例提供的数据采集设备的硬件结构框图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请提供了一种数据采集方法,接下来通过下述实施例对本申请提供的数据采集方法进行详细介绍。
请参阅图1,示出了本申请实施例提供的数据采集方法的流程示意图,该数据采集方法可以包括:
步骤S101、获取至少一个待采数系统分别相关的系统数据和通讯协议。
其中,一待采数系统相关的系统数据是指唯一描述该待采数系统的数据,一待采数系统相关的通讯协议是指该待采数系统能够支持的已有通讯协议和/或自定义通讯协议,待采数系统是指能够得到待采集的数据的边缘侧可编程逻辑控制PLC系统和/或与边缘侧PLC系统通信连接的边缘侧数据采集与监视控制SCADA系统。
具体的,在需要从至少一个待采数系统中采集数据时,可以首先确定至少一个待采数系统分别相关的系统数据和通讯协议。
这里,系统数据是指唯一表述待采数系统的数据,通过各个待采数系统相关的系统数据能够将各个待采数系统区分开,例如,可选的,系统数据包括以下数据中的一种或多种:待采数系统的IP地址和端口号。
当然,上述系统数据包括IP地址和端口号仅为示例,不作为对本申请的限定。
上述通讯协议是指待采数系统能够支持的通讯协议,在本步骤中,通讯协议可以是目前已有的通讯协议,例如,Modbus-TCP协议、OPC(OLE for Process Control)UA(Unified architecture,统一架构)协议、OPC DA(Data Access,数据访问)协议、简单网络管理协议SNMP等,也可以是用户自定义的通讯协议,也就是说,无论待采数系统支持的通讯协议是已有通讯协议还是自定义通讯协议,本实施例均可以顺利执行。
步骤S102、根据至少一个待采数系统分别相关的系统数据和通讯协议,建立至少一个待采数系统分别对应的就地系统。
其中,一待采数系统对应的就地系统与该待采数系统之间具有数据采集通道,数据采集通道是指从该待采数系统中采集数据时使用的通道。
具体的,本步骤可以根据每个待采数系统相关的系统数据和通讯协议,建立每个待采数系统对应的就地系统,其中,在建立就地系统的同时,会建立就地系统与该待采数系统之间的数据采集通道,以便就地系统通过该数据采集通道从该待采数系统中采集数据。
本步骤通过构建就地系统可以实现与待采数系统建立数据连接,可以在构建的就地系统下建立待采数系统的实体映射,实现对系统及系统下数据点的统一管理。
可选的,参见图2所示的就地系统的配置界面的示意图。本实施例可以提供图2所示的界面,以便用户对待采数系统相关的系统数据和通讯协议进行配置,以建立对应的就地系统,当用户在至少一个配置界面对系统数据和通讯协议进行配置后,步骤S101可以获取至少一个待采数系统相关的系统数据和通讯协议,之后可以通过本步骤建立至少一个待采数系统分别对应的就地系统。
步骤S103、通过至少一个待采数系统分别对应的就地系统,从至少一个待采数系统中采集数据。
本步骤在建立至少一个待采数系统分别对应的就地系统后,即可以启动南向数采进程,从至少一个待采数系统中采集数据。这里,“南向数采进程”是指从待采数系统中采集数据时的进程。
可选的,本步骤采集的数据可以为智慧楼宇中的数据和/或微电网分布式能源数据和/或配电设备的运行操作数据。其中,智慧楼宇中的数据例如可以为电量、温度等数据,微电网分布式能源数据例如可以为发电机组、风机、燃料电池、汽车充电桩等设备的电量、功率数据。
本申请提供的数据采集方法,首先获取至少一个待采数系统分别相关的系统数据和通讯协议,然后根据所述至少一个待采数系统分别相关的系统数据和通讯协议,建立所述至少一个待采数系统分别对应的就地系统,最后通过所述至少一个待采数系统分别对应的就地系统,从所述至少一个待采数系统中采集数据。本申请在需要从多个支持不同通讯协议的待采数系统中采集数据时,无论多个待采数系统分别支持哪种通讯协议,均可以建立多个待采数系统分别对应的就地系统,打通了就地系统与多个待采数系统之间的数据通道,使得通过就地系统可以从多个待采数系统中采集数据,相比于通过多个数据采集网关进行采数的方式,降低了成本。
在一种可能的实现方式中,本申请实施例可以应用于物联网平台对应的服务器。
可选的,上述步骤S101~步骤S103可以通过预先在服务器上部署的虚拟网关实现,也就是说,本申请可以通过预先部署的虚拟网关获取至少一个待采数系统分别相关的系统数据和通讯协议,根据至少一个待采数系统分别相关的系统数据和通讯协议,建立至少一个待采数系统分别对应的就地系统,并通过至少一个待采数系统分别对应的就地系统,从至少一个待采数系统中采集数据。
其中,在服务器上部署虚拟网关的过程包括:服务器发起讯网关注册指令请求,云端系统接收到该请求后向服务器提供可下载的虚拟网关安装包(也可以称为南向部署程序安装包),服务器下载并保存虚拟网关安装包到本地,进行本地程序的安装部署。在虚拟网关安装包中会生成本次请求对应的加密许可证license,以通过license进行部署的安全验证,在验证通过后的部署过程中会绑定当前服务器网卡的Mac地址并上报至云端系统,以实现安全的授权控制管理,避免出现在多服务器部署的情况。
可选的,虚拟网关可以使用消息队列实现与云端系统以及每个待采数系统之间的命令和上报信息的交互。
本实施例通过设计虚拟网关来实现上述过程,在虚拟网关的部署过程中通过license和MAC(Media Access Control地址)地址的绑定来实现传输安全性,保证了虚拟网关在从待采数系统采数的过程,以及将采集的数据上报至云端系统的安全性。
同时,物联网平台通过虚拟网关定义数据采集的通讯协议,实现对多类别工业设备接入、多种工业通信网络协议解析、多源工业数据格式转换等问题。
在另一可选实施例中,考虑到步骤S103从至少一个待采数系统采集数据前,可能不知道至少一个待采数系统中的数据是什么样的数据,因此难以确定出应该采用哪种采数方式进行采数。
为此,提出本实施例,对“步骤S103、通过至少一个待采数系统分别对应的就地系统,从至少一个待采数系统中采集数据”的过程进行详细介绍。
具体的,“步骤S103、通过至少一个待采数系统分别对应的就地系统,从至少一个待采数系统中采集数据”的过程包括:
步骤S1031、获取至少一个待采数系统分别对应的原始数据点文件。
其中,一待采数系统对应的原始数据点文件是指描述该待采数系统中的数据的属性信息的文件。
步骤S1032、根据至少一个待采数系统分别对应的原始数据点文件,确定至少一个待采数系统分别对应的采数方式。
可选的,每个待采数系统均可能会包含多种类型的数据,为了区分,每种类型的数据均可以具有点位名称,那么一待采数系统对应的采数方式可以包括该待采数系统包含的每种类型的数据的采数方式,一类型的数据的采数方式例如可以包括:该类型的数据是否采集的信息、该类型的数据的点位名称、采集频率等。
步骤S1033、通过至少一个待采数系统分别对应的就地系统,采用至少一个待采数系统分别对应的采数方式从至少一个待采数系统中采集数据。
本步骤可以使每个待采数系统对应的就地系统按照对应的采数方式进行采数。
相比于不确定采数方式而是直接采集系统中的所有数据的方式,本实施例的方式可以提高采数效率,并且采集的数据更符合用户需求。
在本申请的一个实施例中,考虑到在一些场景中,需要将采集的数据上传至云端系统,以支持上层业务应用进行数据的展示、分析和服务等功能,而现有技术中的边缘侧数据采集网关与云端系统之间可能未打通数据上报通道,或者需要部署边缘侧数据采集网关硬件并配置软件,才可以实现采集数据上报至云端系统。
但是,未打通数据上报通道的情况下,需要在多个数据采集网关采集数据后,通过人工对多个数据采集网关采集的PLC数据进行汇总,然后才能上传至云端系统,浪费人力资源;而部署和配置软硬件的方式,投入成本较高,且大部分边缘侧数据采集网关上报物联网平台的数据格式无法修改,如果PLC与边缘侧数据采集网关间通讯出现问题,还会造成数据采集缺失,无法为工业应用提供有效数据支撑和稳定性保障。
为了解决上述问题,在一可选实施例中,本实施例在需要将采集的数据上传至云端系统的情况下,可以在步骤S102新建至少一个待采数系统分别对应的就地系统后,自动打通与云端系统之间的数据上报通道,从而步骤S103采集数据后,可以通过数据上报通道将采集的数据上传至云端系统。
可选的,本实施例可以采用消息队列遥测传输(Message Queuing TelemetryTransport,MQTT)协议,将采集的数据上传至云端系统。
可选的,考虑到步骤S103采集数据后,可能还需要按照用户需求进行预处理(例如求和、求均值、作差等),然后才能上传至云端。
基于此,本实施例可以对采集的数据进行预处理,并通过MQTT协议将预处理后的数据上传至云端系统。这里,预处理用于将采集的数据处理为符合用户需求的数据。
本实施例能够将南向采集的数据实时上传至云端系统。本实施例通过部署定义的南向(是指从PLC系统采集数据)、北向(将采集的数据上传至云端系统)协议实现边云数据协同的信息交互,完成对工业设备的数据采集,为数据的连接和采集提供更多可能性。
以下的一个实施例中,考虑到可能会在上报数据的过程中存在网络异常的情况,为了避免采集的数据无法及时上报至云端系统导致数据丢失的情况,本实施例还提供了本地数据库,以通过本地数据库存储设定时间内采集的数据,这里,设定时间可以根据实际情况确定,例如设定时间可以为3天或7天等。
基于此,在“步骤S103、通过至少一个待采数系统分别对应的就地系统,从至少一个待采数系统中采集数据”之后,本实施例提供的数据采集方法还可以包括:将采集的数据保存至本地数据库。
参见图3所示,为本地数据库中管理的数据的相关信息的示意图。如图3所示,本实施例可以在本地数据库中对采集的数据(本实施例采集的数据实际上为一个个的“数据点”,因此图3中描述为“数据点”)按照点位名称、是否采集、采集频率、介质、单位、数据类型、寄存器起始地址(即对应数据的起始存储地址)进行管理和存储。
本实施例可以在网络异常情况下自动缓存异常期间内采集的数据到本地数据库,待网络恢复正常后再自动上传异常期间的数据到云端系统,保证了数据采集的稳定性,避免了数据丢失。
可选的,本实施例可以启动一个能够遍历南向驱动生产的数据文件存储目录的作业,可提供实时数据作业、离线数据转移作业、离线上数作业三种不同方式,通过ack将数据上报到云端系统,实时数据作业提供数据实时采集,离线数据转移作业提供数据上传云端系统中断时的本地数据暂存,离线上数作业提供数据中断期间缓存的离线数据上传云端系统。
在一种可能的实现方式中,可能还存在就地系统与待采数系统异常中断的情况,为了避免这种情况导致无法采集数据,本实施例还可以监听每个待采数系统对应的就地系统与对应待采数系统的连接状态,并在监听到连接状态为断开连接时,重新与对应待采数系统建立连接。
可选的,本实施例还可以监听与云端系统的连接状态,并在监听到连接状态为异常断开时,重新与云端系统建立连接。
可选的,还可以将上述异常中断的相关信息(例如异常中断的原因)在日志中进行记录,以便于后续查看。
综上各实施例,本申请提供的数据采集方法具有如下优势:
便捷性:现场快速部署、云端简单调试、设备批量导入,相比传统的接入方案,调试效率提升至少10倍。
成本低、支持广:分布式部署架构、多标准协议支持,减少现场施工布线的工作,避免重复成本投入,缩短调试周期,降低成本20%~30%。
采集能力:支持国际或者行业主流的标准协议接入,实现对客户现场的SCADA软件或者设备的数据采集。
本申请实施例还提供了一种数据采集装置,下面对本申请实施例提供的数据采集装置进行描述,下文描述的数据采集装置与上文描述的数据采集方法可相互对应参照。
请参阅图4,示出了本申请实施例提供的数据采集装置的结构示意图,如图4所示,该数据采集装置可以包括:信息获取模块401、系统建立模块402和数据采集模块403。
信息获取模块401,用于获取至少一个待采数系统分别相关的系统数据和通讯协议,其中,一待采数系统相关的系统数据是指唯一描述该待采数系统的数据,一待采数系统相关的通讯协议是指该待采数系统能够支持的已有通讯协议和/或自定义通讯协议,待采数系统是指能够得到待采集的数据的边缘侧可编程逻辑控制PLC系统和/或与边缘侧PLC系统通信连接的边缘侧数据采集与监视控制SCADA系统。
系统建立模块402,用于根据至少一个待采数系统分别相关的系统数据和通讯协议,建立至少一个待采数系统分别对应的就地系统,其中,一待采数系统对应的就地系统与该待采数系统之间具有数据采集通道,数据采集通道是指从该待采数系统中采集数据时使用的通道。
数据采集模块403,用于通过至少一个待采数系统分别对应的就地系统,从至少一个待采数系统中采集数据。
本申请提供的数据采集装置,首先获取至少一个待采数系统分别相关的系统数据和通讯协议,然后根据至少一个待采数系统分别相关的系统数据和通讯协议,建立至少一个待采数系统分别对应的就地系统,最后通过至少一个待采数系统分别对应的就地系统,从至少一个待采数系统中采集数据。本申请在需要从多个支持不同通讯协议的待采数系统中采集数据时,无论多个待采数系统分别支持哪种通讯协议,均可以建立多个待采数系统分别对应的就地系统,打通了就地系统与多个待采数系统之间的数据通道,使得通过就地系统可以从多个待采数系统中采集数据,相比于通过多个数据采集网关进行采数的方式,降低了成本。
在一种可能的实现方式中,上述数据采集模块403可以包括:原始数据点文件获取模块、采数方式确定模块和采数方式参考模块。
原始数据点文件获取模块,用于获取至少一个待采数系统分别对应的原始数据点文件,其中,一待采数系统对应的原始数据点文件是指描述该待采数系统产生的数据的属性信息的文件。
采数方式确定模块,用于根据至少一个待采数系统分别对应的原始数据点文件,确定至少一个待采数系统分别对应的采数方式。
采数方式参考模块,用于通过至少一个待采数系统分别对应的就地系统,采用至少一个待采数系统分别对应的采数方式从至少一个待采数系统中采集数据。
在一种可能的实现方式中,本申请实施例提供的数据采集装置还可以包括:第一数据传输模块和/或第二数据传输模块。
第一数据传输模块,用于采用消息队列遥测传输MQTT协议,将采集的数据上传至云端系统。
第二数据传输模块,用于对采集的数据进行预处理,并通过MQTT协议将预处理后的数据上传至云端系统,其中,预处理用于将采集的数据处理为符合用户需求的数据。
在一种可能的实现方式中,本申请实施例提供的数据采集装置还可以包括:数据保存模块。
数据保存模块,用于将采集的数据保存至本地数据库,其中,本地数据库用于存储设定时间内采集的数据。
在一种可能的实现方式中,上述系统数据包括以下数据中的一种或多种:IP地址和端口号。
在一种可能的实现方式中,本申请实施例提供的数据采集装置还可以包括:状态监听模块和异常重连模块。
状态监听模块,用于监听每个待采数系统对应的就地系统与对应待采数系统的连接状态。
异常重连模块,用于若监听到连接状态为断开连接,则重新与对应待采数系统建立连接。
本申请实施例还提供了一种数据采集设备。可选的,图5示出了数据采集设备的硬件结构框图,参照图5,该数据采集设备的硬件结构可以包括:至少一个处理器501,至少一个通信接口502,至少一个存储器503和至少一个通信总线504;
在本申请实施例中,处理器501、通信接口502、存储器503、通信总线504的数量为至少一个,且处理器501、通信接口502、存储器503通过通信总线504完成相互间的通信;
处理器501可能是一个中央处理器CPU,或者是特定集成电路ASIC(ApplicationSpecific Integrated Circuit),或者是被配置成实施本发明实施例的一个或多个集成电路等;
存储器503可能包含高速RAM存储器,也可能还包括非易失性存储器(non-volatile memory)等,例如至少一个磁盘存储器;
其中,存储器503存储有程序,处理器501可调用存储器503存储的程序,所述程序用于:
获取至少一个待采数系统分别相关的系统数据和通讯协议,其中,一待采数系统相关的系统数据是指唯一描述该待采数系统的数据,一待采数系统相关的通讯协议是指该待采数系统能够支持的已有通讯协议和/或自定义通讯协议,待采数系统是指能够得到待采集的数据的边缘侧可编程逻辑控制PLC系统和/或与边缘侧PLC系统通信连接的边缘侧数据采集与监视控制SCADA系统;
根据至少一个待采数系统分别相关的系统数据和通讯协议,建立至少一个待采数系统分别对应的就地系统,其中,一待采数系统对应的就地系统与该待采数系统之间具有数据采集通道,数据采集通道是指从该待采数系统中采集数据时使用的通道;
通过至少一个待采数系统分别对应的就地系统,从至少一个待采数系统中采集数据。
可选的,所述程序的细化功能和扩展功能可参照上文描述。
本申请实施例还提供一种可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时,实现如上述数据采集方法。
可选的,所述程序的细化功能和扩展功能可参照上文描述。
最后,还需要说明的是,在本文中,诸如和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下,在其它实施例中实现。因此,本申请将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (10)
1.一种数据采集方法,其特征在于,包括:
获取至少一个待采数系统分别相关的系统数据和通讯协议,其中,一待采数系统相关的系统数据是指唯一描述该待采数系统的数据,一待采数系统相关的通讯协议是指该待采数系统能够支持的已有通讯协议和/或自定义通讯协议,所述待采数系统是指能够得到待采集的数据的边缘侧可编程逻辑控制PLC系统和/或与所述边缘侧PLC系统通信连接的边缘侧数据采集与监视控制SCADA系统;
根据所述至少一个待采数系统分别相关的系统数据和通讯协议,建立所述至少一个待采数系统分别对应的就地系统,其中,一待采数系统对应的就地系统与该待采数系统之间具有数据采集通道,所述数据采集通道是指从该待采数系统中采集数据时使用的通道;
通过所述至少一个待采数系统分别对应的就地系统,从所述至少一个待采数系统中采集数据。
2.根据权利要求1所述的数据采集方法,其特征在于,所述通过所述至少一个待采数系统分别对应的就地系统,从所述至少一个待采数系统中采集数据,包括:
获取所述至少一个待采数系统分别对应的原始数据点文件,其中,一待采数系统对应的原始数据点文件是指描述该待采数系统中的数据的属性信息的文件;
根据所述至少一个待采数系统分别对应的原始数据点文件,确定所述至少一个待采数系统分别对应的采数方式;
通过所述至少一个待采数系统分别对应的就地系统,采用所述至少一个待采数系统分别对应的采数方式从所述至少一个待采数系统中采集数据。
3.根据权利要求1所述的数据采集方法,其特征在于,在所述通过所述至少一个待采数系统分别对应的就地系统,从所述至少一个待采数系统中采集数据之后,还包括:
采用消息队列遥测传输MQTT协议,将采集的数据上传至云端系统;
和/或,对所述采集的数据进行预处理,并通过所述MQTT协议将预处理后的数据上传至所述云端系统,其中,所述预处理用于将所述采集的数据处理为符合用户需求的数据。
4.根据权利要求3所述的数据采集方法,其特征在于,在所述通过所述至少一个待采数系统分别对应的就地系统,从所述至少一个待采数系统中采集数据之后,还包括:
将采集的数据保存至本地数据库,其中,所述本地数据库用于存储设定时间内采集的数据。
5.根据权利要求1所述的数据采集方法,其特征在于,所述系统数据包括以下数据中的一种或多种:IP地址和端口号。
6.根据权利要求1所述的数据采集方法,其特征在于,还包括:
监听每个所述待采数系统对应的就地系统与对应待采数系统的连接状态;
若监听到所述连接状态为断开连接,则重新与所述对应待采数系统建立连接。
7.一种数据采集装置,其特征在于,包括:信息获取模块、系统建立模块和数据采集模块;
所述信息获取模块,用于获取至少一个待采数系统分别相关的系统数据和通讯协议,其中,一待采数系统相关的系统数据是指唯一描述该待采数系统的数据,一待采数系统相关的通讯协议是指该待采数系统能够支持的已有通讯协议和/或自定义通讯协议,所述待采数系统是指能够得到待采集的数据的边缘侧可编程逻辑控制PLC系统和/或与所述边缘侧PLC系统通信连接的边缘侧数据采集与监视控制SCADA系统;
所述系统建立模块,用于根据所述至少一个待采数系统分别相关的系统数据和通讯协议,建立所述至少一个待采数系统分别对应的就地系统,其中,一待采数系统对应的就地系统与该待采数系统之间具有数据采集通道,所述数据采集通道是指从该待采数系统中采集数据时使用的通道;
所述数据采集模块,用于通过所述至少一个待采数系统分别对应的就地系统,从所述至少一个待采数系统中采集数据。
8.根据权利要求7所述的数据采集装置,其特征在于,所述数据采集模块包括:原始数据点文件获取模块、采数方式确定模块和采数方式参考模块;
所述原始数据点文件获取模块,用于获取所述至少一个待采数系统分别对应的原始数据点文件,其中,一待采数系统对应的原始数据点文件是指描述该待采数系统产生的数据的属性信息的文件;
所述采数方式确定模块,用于根据所述至少一个待采数系统分别对应的原始数据点文件,确定所述至少一个待采数系统分别对应的采数方式;
所述采数方式参考模块,用于通过所述至少一个待采数系统分别对应的就地系统,采用所述至少一个待采数系统分别对应的采数方式从所述至少一个待采数系统中采集数据。
9.一种数据采集设备,其特征在于,包括存储器和处理器;
所述存储器,用于存储程序;
所述处理器,用于执行所述程序,实现如权利要求1~6任一项所述的数据采集方法的各个步骤。
10.一种可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时,实现如权利要求1~6任一项所述的数据采集方法的各个步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211332980.6A CN115580664A (zh) | 2022-10-28 | 2022-10-28 | 一种数据采集方法、装置、设备和介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211332980.6A CN115580664A (zh) | 2022-10-28 | 2022-10-28 | 一种数据采集方法、装置、设备和介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115580664A true CN115580664A (zh) | 2023-01-06 |
Family
ID=84587869
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211332980.6A Pending CN115580664A (zh) | 2022-10-28 | 2022-10-28 | 一种数据采集方法、装置、设备和介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115580664A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116483471A (zh) * | 2023-04-25 | 2023-07-25 | 山东中创软件商用中间件股份有限公司 | 一种数据采集插件、方法、设备及存储介质 |
-
2022
- 2022-10-28 CN CN202211332980.6A patent/CN115580664A/zh active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116483471A (zh) * | 2023-04-25 | 2023-07-25 | 山东中创软件商用中间件股份有限公司 | 一种数据采集插件、方法、设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101194233B (zh) | 测试无线组件应用程序的系统和方法 | |
CN112383502B (zh) | 物理机和虚拟机统一监控的方法、系统和电子装置 | |
CN108600029A (zh) | 一种配置文件更新方法、装置、终端设备及存储介质 | |
MXPA06012390A (es) | Sistema de metodo para configuracion eficiente en un sistema de lectura de medidor automatico de red fija. | |
WO2014164976A1 (en) | Distributed micro-grid controller | |
WO2012088905A1 (zh) | 一种通讯网络系统及通讯设备的巡检子系统和巡检方法 | |
CN109547240B (zh) | 基于边缘计算的智能设备以及接入与设备的解析方法 | |
US10887408B2 (en) | Remote monitoring of network communication devices | |
CN106713053A (zh) | 基于Linux的批量升级服务器固件的方法及其装置 | |
CN110995859A (zh) | 一种基于泛在物联网的变电站智能支撑平台系统 | |
CN104618341B (zh) | 用于安全的远程访问的系统和方法 | |
CN115580664A (zh) | 一种数据采集方法、装置、设备和介质 | |
CN115016923A (zh) | 基于边缘网关的物联网数据智能处理方法 | |
EP2869529B1 (en) | Systems and methods for secure file transfers | |
WO2016177054A1 (zh) | 充电设备的管理方法及装置 | |
CN110855003A (zh) | 一种主站自适应配置召唤与比对的方法及装置 | |
CN113824801B (zh) | 一种智能融合终端统一接入管理组件系统 | |
CN115987963A (zh) | 一种车辆数据上传方法、无线网联控制器及系统 | |
CN114567568A (zh) | 基于边缘计算的电力物联网数据处理方法和装置 | |
CN114760318A (zh) | 一种边缘计算管理方法及系统 | |
CN114679472A (zh) | 通信系统、方法、装置、存储介质及电子设备 | |
CN102624753B (zh) | 企业服务总线的分布式文件传输方法和设备 | |
CN113129570A (zh) | 一种智能电表 | |
CN116915669B (zh) | 报文管理方法、装置、相关设备、芯片及存储介质 | |
CN114328387A (zh) | 数据管理方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |