CN114531377B - 流程工业设备数据的流量控制方法、系统、设备及介质 - Google Patents
流程工业设备数据的流量控制方法、系统、设备及介质 Download PDFInfo
- Publication number
- CN114531377B CN114531377B CN202210059096.3A CN202210059096A CN114531377B CN 114531377 B CN114531377 B CN 114531377B CN 202210059096 A CN202210059096 A CN 202210059096A CN 114531377 B CN114531377 B CN 114531377B
- Authority
- CN
- China
- Prior art keywords
- data
- industrial equipment
- sensor
- preset
- time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 125
- 230000008569 process Effects 0.000 claims abstract description 80
- 238000003860 storage Methods 0.000 claims abstract description 24
- 238000004891 communication Methods 0.000 claims abstract description 17
- 230000005540 biological transmission Effects 0.000 claims description 62
- 238000004590 computer program Methods 0.000 claims description 11
- 238000012545 processing Methods 0.000 abstract description 12
- 238000004364 calculation method Methods 0.000 abstract description 3
- 238000010586 diagram Methods 0.000 description 10
- 230000036541 health Effects 0.000 description 9
- 238000001514 detection method Methods 0.000 description 8
- 238000013480 data collection Methods 0.000 description 5
- 238000007726 management method Methods 0.000 description 5
- 238000007405 data analysis Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 230000003862 health status Effects 0.000 description 4
- 238000012544 monitoring process Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 230000003139 buffering effect Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 230000001174 ascending effect Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 238000005265 energy consumption Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0876—Network utilisation, e.g. volume of load or congestion level
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
- G06F11/3006—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system is distributed, e.g. networked systems, clusters, multiprocessor systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3051—Monitoring arrangements for monitoring the configuration of the computing system or of the computing system component, e.g. monitoring the presence of processing resources, peripherals, I/O links, software programs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
- G06F16/24552—Database cache management
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/06—Management of faults, events, alarms or notifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/16—Threshold monitoring
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Quality & Reliability (AREA)
- Data Mining & Analysis (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Environmental & Geological Engineering (AREA)
- Computational Linguistics (AREA)
- Computer And Data Communications (AREA)
Abstract
本发明提出的一种流程工业设备数据的流量控制方法、系统、设备及介质,该方法通过预设用于存储流程工业设备数据的信息栈,并设置信息栈的预设缓存业务量阈值,获取待上传流程工业设备数据和信息栈中的当前业务量,若当前业务量小于预设缓存业务量阈值,将待上传流程工业设备数据存储入信息栈,若栈内时间与预设时间相同,则将信息栈中数据时间最早的流程工业设备数据发送至应用服务器,即便发生突发事件,比如通讯和服务请求数量激增时,也不会导致服务器在巨大通讯、存储和计算需求时宕机,服务器不被不可预估且源源不断的处理请求拖垮。
Description
技术领域
本发明涉及设备监测技术领域,尤其涉及一种流程工业设备数据的流量控制方法、系统、设备及介质。
背景技术
流程工业中往往需要很多设备共同实现,各设备的健康状态对所生产的产品等将产生很重要的影响。因此,需要对流程工业中的很多流程工业设备进行健康状态检测,以保证所成产的产品满足生产要求,及时发现故障或故障隐患等。由于流程工业中存在数量众多的流程工业设备的健康状态需要监测,同时每个设备配套的传感器数量也呈上升趋势,而用于采集、存储和处理数据的服务器(或服务器集群)是直接面向现场由下而上的收集网罗数据的,集群配置的性能和数量是根据应用需求折中估算。当面对突发事件,如通讯和服务请求数量激增时,将导致服务器在巨大通讯、存储和计算需求时宕机,服务器被不可预估且源源不断的处理请求拖垮。
发明内容
鉴于以上所述现有技术的缺点,本发明提供一种流程工业设备数据的流量控制方法、系统、设备及介质,以解决上述技术问题。
本发明提供的一种流程工业设备数据的流量控制方法,其特征在于,所述方法包括:
预设用于存储流程工业设备数据的信息栈,并设置所述信息栈的预设缓存业务量阈值;
获取待上传流程工业设备数据和所述信息栈中的当前业务量,所述待上传流程工业设备数据包括数据时间;
若所述当前业务量小于所述预设缓存业务量阈值,将所述待上传流程工业设备数据存储入所述信息栈;
若栈内时间与预设时间相同,则将所述信息栈中数据时间最早的所述流程工业设备数据发送至应用服务器。
可选的,所述流程工业设备数据包括多种传感器所采集的数据,每种所述传感器的数量为一个或多个,所述方法还包括:
若所述当前业务量大于或等于所述预设缓存业务量阈值,分别获取各所述传感器的当前传输速率,所述待上传流程工业设备数据的待上传数据大小,传感器种类数量,以及各所述传感器的传感器数量、数据大小和预设权重,并确定各所述传感器的调整传输速率。
可选的,各所述传感器的调整传输速率的确定方式包括:
其中,表示传感器j调整后的调整传输速速率,xj表示传感器j的当前传输速率,nj表示当前传感器j对应的传感器数量,lj表示当前传感器j对应的数据大小,nolo表示待上传数据大小,max表示预设缓存业务量阈值,wj表示传感器j的预设权重,#(T)表示传感器种类数量,w0表示传感器j的调整权重,T表示信息栈所对应的传感器。
可选的,所述方法还包括以下至少之一:
若所述当前业务量大于或等于所述预设缓存业务量阈值,将所述待上传流程工业设备数据丢弃;
若所述栈内时间与预设时间不同,获取当前时间,并通过所述当前时间更新所述栈内时间。
可选的,所述预设时间的确定方式包括:
分别获取当前传输数据的初始传输时间,以及所述信息栈的预设流出速率;
根据所述初始传输时间和预设流出速率确定所述预设时间。
可选的,所述流程工业设备数据包括多个传感器所采集的数据,所述方法还包括以下至少之一:
若传感器数量、传感器种类、传输速率中至少之一发生变化,根据所述预设缓存业务量阈值和变化后的所述传感器数量、传感器种类、传输速率中至少之一确定调整后缓存业务量阈值;
若向所述应用服务器发送数据的带宽发生变化,根据变化后的带宽和所述信息栈的预设流出速率确定调整后流出速率。
本发明还提供了一种流程工业设备数据的流量控制系统,所述系统包括:
信息栈,用于存储流程工业设备数据,所述信息栈设置有预设缓存业务量阈值;
获取模块,用于获取待上传流程工业设备数据和所述信息栈中的当前业务量,所述待上传流程工业设备数据包括数据时间;
第一侦听模块,用于若所述当前业务量小于所述预设缓存业务量阈值,将所述待上传流程工业设备数据存储入所述信息栈;
第二侦听模块,用于若栈内时间与预设时间相同,则将所述信息栈中数据时间最早的所述流程工业设备数据发送至应用服务器。
可选的,所述系统还包括:
多个流程工业设备,各所述流程工业设备设置有一个或多个传感器,所述传感器用于采集所述流程工业设备数据;
通信模块,用于将所述流程工业设备数据传输给所述信息栈;
应用服务器,所述应用服务器包括多个服务器。
本发明还提供了一种电子设备,包括处理器、存储器和通信总线;
所述通信总线用于将所述处理器和存储器连接;
所述处理器用于执行所述存储器中存储的计算机程序,以实现如上述中任一项实施例所述的方法。
本发明还提供了一种计算机可读存储介质,其上存储有计算机程序,
所述计算机程序用于使所述计算机执行如上述任一项实施例所述的方法。
本发明的有益效果:本发明提出的一种流程工业设备数据的流量控制方法、系统、设备及介质,该方法通过预设用于存储流程工业设备数据的信息栈,并设置信息栈的预设缓存业务量阈值,获取待上传流程工业设备数据和信息栈中的当前业务量,若当前业务量小于预设缓存业务量阈值,将待上传流程工业设备数据存储入信息栈,若栈内时间与预设时间相同,则将信息栈中数据时间最早的流程工业设备数据发送至应用服务器,即便发生突发事件,比如通讯和服务请求数量激增时,也不会导致服务器在巨大通讯、存储和计算需求时宕机,服务器不被不可预估且源源不断的处理请求拖垮。
附图说明
图1是本发明实施例一中提供的流程工业设备数据的流量控制方法的一种流程示意图;
图2是本发明实施例一中提供的流程工业设备数据的流量控制系统的一种设备框图;
图3是本发明实施例二提供的流程工业设备数据的流量控制系统的一种结构示意图;
图4是本发明一实施例提供的一种电子设备的结构示意图。
具体实施方式
以下通过特定的具体实例说明本发明的实施方式,本领域技术人员可由本说明书所揭露的内容轻易地了解本发明的其他优点与功效。本发明还可以通过另外不同的具体实施方式加以实施或应用,本说明书中的各项细节也可以基于不同观点与应用,在没有背离本发明的精神下进行各种修饰或改变。需说明的是,在不冲突的情况下,以下实施例及实施例中的特征可以相互组合。
需要说明的是,以下实施例中所提供的图示仅以示意方式说明本发明的基本构想,遂图式中仅显示与本发明中有关的组件而非按照实际实施时的组件数目、形状及尺寸绘制,其实际实施时各组件的型态、数量及比例可为一种随意的改变,且其组件布局型态也可能更为复杂。
在下文描述中,探讨了大量细节,以提供对本发明实施例的更透彻的解释,然而,对本领域技术人员来说,可以在没有这些具体细节的情况下实施本发明的实施例是显而易见的,在其他实施例中,以方框图的形式而不是以细节的形式来示出公知的结构和设备,以避免使本发明的实施例难以理解。
实施例一
如图1所示,本实施例提供了一种流程工业设备数据的流量控制方法,该方法包括:
步骤S101:预设用于存储流程工业设备数据的信息栈,并设置信息栈的预设缓存业务量阈值。
可选的,该信息栈可以设置于现场的智能设备(流程工业设备)与服务器(服务器集群、应用服务器)之间。通过信息栈获取流程工业设备的各传感器所采集的流程工业设备数据,在恰当的条件下,将对应的流程工业设备数据传输给到应用服务器,以供应用服务器进行相应的数据分析。
预设缓存业务量阈值可以是由本领域技术人员根据需要所设定的值。可选的,预设缓存业务量阈值可以根据应用服务器的历史数据请求量、当前传输带宽、流程工业设备的种类、流程工业设备数据的采集频率等中至少之一来确定。
可选的,该信息栈可以设置于边缘服务器(或靠近应用服务器集群侧的控制服务器)内,该边缘服务器(或控制服务器)一方面链接所有现场智能设备(流程工业设备),负责现场智能设备的通讯连接、解包,另一方面连接,负责对合规的通讯业务进行分派。该边缘服务器(或控制服务器)内部采用预设大小(预设缓存业务量阈值)的空间,用于缓存现场智能设备流入的业务(流程工业设备数据)。
端智能设备(流程工业设备)通过网络与互联网云上服务器(应用服务器、应用服务器集群、服务器集群、服务器)进行“云端协同”,可以提升单体设备的计算能力、协同分析能力。理论上,可接入网络的单体设备种类越多、数量越多,将最大化发挥云服务器集中分析和统筹智能,因此逐渐出现了更庞大和更复杂的网络应用。为了应对场景中节点和流量的增多,通过在边缘服务器(或控制服务器)中设置信息栈,控制信息栈中的数据传输,以实现保证后端服务器的稳定处理,避免服务器被不可预估且源源不断的处理请求拖垮。
可选的,智能设备(流程工业设备)可以是应力波传感设备、振动传感设备、谐波传感设备、压力传感设备、温度传感设备、转速传感设备等中至少之一,各端智能设备(流程工业设备)均设置有一个或多个传感器以采集相应的流程工业设备数据。
可选的,智能设备(流程工业设备)可以运转在设备健康运维的真实场景下,所采集到的流程工业设备数据为各智能设备的健康监测数据。
步骤S102:获取待上传流程工业设备数据和信息栈中的当前业务量。
其中,待上传流程工业设备数据包括数据时间。也就是说,每一份等待上传到信息栈中的数据均设置有数据时间,基于该数据时间可以知晓该数据是何时被采集到的,进而可以实现对于同一个设备的多个不同时间下所采集的数据进行区分。
待上传流程工业设备数据在上传到信息栈中被接收后,就成为了信息栈中的流程工业设备数据。
待上传流程工业设备数据可以是由流程工业设备的传感器所采集到的数据。由于一个信息栈可能对应多个流程工业设备,每一个流程工业设备也可能对应设置有一个或多个传感器,故待上传流程工业设备数据可以是全部的传感器所采集的数据,也可以是部分传感器所采集的数据,流程工业设备数据可以包括全部流程工业设备的数据,也可以是部分流程工业设备的数据。各流程工业设备的传感器的数据采集规则可以由本领域技术人员根据需要进行预先设定,或者基于信息栈的剩余数据容量进行反馈调整。各传感器的数据采集规则可以是相同的,也可以是不同的。
可选的,信息栈中的当前业务量可以为信息栈中当前存储的数量容量。该数据容量可以是当前存储的全部数据的数据大小,也可以是将信息栈中的空间划分为若干个存储空间,基于时间维度将不同时间所采集的待上传流程工业设备数据中不超过存储空间大小的数据进行存储,当前业务量可以是当前占用的存储空间的数量等。对应的,预设缓存业务量阈值可以是信息栈的全部存储空间的数据大小,也可以是信息栈中所划分的存储空间的总的数量等。
步骤S103:若当前业务量小于预设缓存业务量阈值,将待上传流程工业设备数据存储入信息栈。
待上传流程工业设备数据可以由无线网关或通过有线传输的方式传输给到信息栈,当信息栈仍有空白存储空间时,则存储该待上传流程工业设备数据,否则,当信息栈全部存储空间均使用,或者剩余的存储空间小于待上传流程工业设备数据的数据大小时,则丢弃该待上传流程工业设备数据或将待上传流程工业设备数据存入暂存空间。
可选的,信息栈将超过缓存空间(预设缓存业务量阈值)的业务(流程工业设备数据)进行抛弃,信息栈采用类似“栈”的先进先出原理,按预设的流出速率将缓存的业务(流程工业设备数据)分派给应用服务器。
在一个实施例中,流程工业设备数据包括多种传感器所采集的数据,每种传感器的数量为一个或多个,方法还包括:
若当前业务量大于或等于预设缓存业务量阈值,分别获取各传感器的当前传输速率,待上传流程工业设备数据的待上传数据大小,传感器种类数量,以及各传感器的传感器数量、数据大小和预设权重,并确定各传感器的调整传输速率。
此时,流程工业设备数据可能包括多个流程工业设备的数据,一流程工业设备可能设置有多个检测维度,也就是说一流程工业设备可能设置有多个传感器,故若信息栈内的存储空间不足以对待上传流程工业设备数据进行存储时,则需要对各传感器的数据采集频率和/或是传感器所采集数据的数据传输速率进行调整,以降低能耗。
可选的,通常传感器采集到数据后就形成待上传流程工业设备数据等待被信息栈进行存储,此时当前传输速率、调整传输速率可以与传感器的数据采集频率成正比(或相等)。若传感器自身携带有一定数据缓存空间,也可以通过调整传输速率来调整传感器的数据传输速率但不对传感器的数据采集频率进行调整,这样一旦设备出现问题,还可以基于传感器自身的数据缓存空间提取之前未上传的数据,丰富故障数据的来源。换句话说,调整传输速率可以仅是传感器的数据传输速率,也可以是传感器的数据传输速率和数据采集频率。
在一个实施例中,各所述传感器的调整传输速率的确定方式包括:
其中,表示传感器j调整后的调整传输速速率,xj表示传感器j的当前传输速率,nj表示当前传感器j对应的传感器数量,lj表示当前传感器j对应的数据大小,nolo表示待上传数据大小,max表示预设缓存业务量阈值,wj表示传感器j的预设权重,#(T)表示传感器种类数量,w0表示传感器j的调整权重,T表示信息栈所对应的传感器。
在一个实施例中,当前业务量M的确定方式可以采用如下公式:
M=∑j∈Tnjlj 公式(2);
其中,M为当前业务量,T为信息栈所对应(连接)的传感器,nj表示当前传感器j对应的传感器数量,lj表示当前传感器j对应的数据大小。
在另一个实施例中,当前业务量M的确定方式可以采用如下公式:
M=∑j∈Tnjlj+nolo 公式(3);
其中,M为当前业务量,T为信息栈所对应(连接)的传感器,nj表示当前传感器j对应的传感器数量,lj表示当前传感器j对应的数据大小,nolo表示待上传流程工业设备数据。
步骤S104:若栈内时间与预设时间相同,则将信息栈中数据时间最早的流程工业设备数据发送至应用服务器。
可选的,栈内时间与预设时间相同也可以理解为达到一定预设的间隔时间。换句话说,信息栈每间隔一定的时间发送一次数据。
由于每一波待上传流程工业设备数据均有数据时间,故可以基于数据时间将信息栈中当前缓存有的流程工业设备数据进行排序,将时间最早的流程工业设备数据发送给应用服务器。
可选的,应用服务器可以是多个单一服务器,也可以是以服务器集群的方式存在。
可选的,信息栈可以基于互联网将流程工业设备数据传输给设备健康检测系统,以便该系统对各设备的健康状态进行检测。
可选的,信息栈可以基于互联网将流程工业设备数据传输给包括但不限于设备资产管理系统、数据采集系统、数据分析系统、健康检测系统、数据孪生等中至少之一。可选的,设备资产管理系统、数据采集系统、数据分析系统、健康检测系统、数据孪生可以集成为一个或多个健康管理应用服务器集群。
在一个实施例中,该方法还包括以下至少之一:
若当前业务量大于或等于预设缓存业务量阈值,将待上传流程工业设备数据丢弃;
若栈内时间与预设时间不同,获取当前时间,并通过当前时间更新栈内时间。
可选的,栈内时间可以是信息栈内置的时间计数器的计数。
可选的,预设时间的确定方式包括:
分别获取当前传输数据的初始传输时间,以及信息栈的预设流出速率;
根据初始传输时间和预设流出速率确定预设时间。
初始传输时间可以是真实时间,根据预设流出速率可以得到时间间隔,进行将初始传世时间与时间间隔相加得到预设时间。比如初始传输时间为12:01:05,预设流出速率为5s/次,则当前的预设时间为12:01:10。
可选的,初始传输时间可以是0,根据预设流出速率可以得到时间间隔,进行将初始传世时间与时间间隔相加得到预设时间。比如初始传输时间为0,预设流出速率为5s/次,则当前的预设时间为5。此时,栈内时间也是初始为0的计数。
在一个实施例中,流程工业设备数据包括多个传感器所采集的数据,方法还包括以下至少之一:
若传感器数量、传感器种类、传输速率中至少之一发生变化,根据预设缓存业务量阈值和变化后的传感器数量、传感器种类、传输速率中至少之一确定调整后缓存业务量阈值,如根据传感器数量、传感器种类、传输速率的变化成正比例的对缓存业务量阈值进行调整等;
若向应用服务器发送数据的带宽发生变化,根据变化后的带宽和信息栈的预设流出速率确定调整后流出速率,如带宽增加,则将预设流出速率进行增加作为调整后流出速率,可以根据带宽的变化,成正比例的调整预设流出速率得到调整后流出速率。
上述实施例提供了流程工业设备数据的流量控制方法,该方法通过预设信息栈,基于当前信息栈中的当前业务量和预设缓存业务量阈值进行比较,以确定是否存储待上传流程工业设备数据,若信息栈中仍有剩余空间,则存储,否则则丢弃待上传流程工业设备数据。通过根据时间控制,以将将所述信息栈中数据时间最早的流程工业设备数据发送至应用服务器。通过采用预设大小的空间的信息栈,以缓存智能设备流入的业务,超过缓存空间的业务则进行抛弃,采用类似“栈”的先进先出原理,按预设的流出速率将缓存业务分派给应用服务器。该方法可保证应用服务器不被激增的业务破坏稳定性。
可选的,缓存的大小(预设缓存业务量阈值)和漏出的速率(流出速率),根据业务量(待上传流程工业设备数据的数据量)、网络速度(带宽)和应用服务器处理性能综合考虑,由本领域技术人员进行预设。当以上环境改变后,本领域技术人员可手动更新预设值,让流量控制方法在新的参数下运行,保持了该方法在不同智能设备规模、服务器硬件性能和网络环境下的良好适应能力。
下面通过一个具体的实施例,示例性的说明上述流程工业设备数据的流量控制方法,参见图2,图2为相关技术中一种流程工业设备数据的流量控制系统框图,参见图2,流量控制(信息栈)将接收到的各智能设备的传感器所采集的流程工业设备数据按照流量控制方法进行存储并分发给设备健康检测系统。其中,传感器包括有设置于应力波传感设备、振动传感设备、谐波传感设备、压力传感设备、温度传感设备、转速传感设备等上的中一个或多个传感器。流程工业设备数据可以通过无线网关基于互联网传输给到信息栈。设备健康检测系统包括但不限于设备资产管理系统、数据采集系统、数据分析系统、健康检测系统、数据孪生等中至少之一。
下面以一个示例举例说明流量控制方法的步骤:
(1)流量系统管理员根据业务量和应用服务器性能情况,初始化信息栈Msg[],预设缓存业务量阈值NumberMax和预设流出速率TimeMax,然后启动流量控制方法;
(2)流量控制方法可以通过两个While循环实现,一个循环LoopA用于处理来自现场智能设备的业务处理请求(用于监测并获取待上传流程工业设备数据,判断是否进行缓存);另一个循环LoopB用于将业务分派到应用服务器(判断是否将信息栈中数据时间最早的流程工业设备数据发送至应用服务器);
(3)LoopA会一直侦听来自现场智能设备的业务处理请求,并执行新业务(待上传流程工业设备数据)是否被信息栈尽心存储的判断:当前业务数量Numberbuf是否达到缓存上限(预设缓存业务量阈值)NumberMax,没有满,则在Msg[Numberbuf]插入一条新的业务数据(待上传流程工业设备数据),同时Numberbuf递增1;已满,则抛弃该业务数据;
(4)LoopB会一直判断是否需要将最早入栈的业务分派到应用服务器:计数器Timebuf是否等于流出速率计时器TimeMax,等于,则将最老的一条业务信息Msg[0]分派到应用服务器,同时计数器Timebuf置为0,Numberbuf递减1,Msg[]的各元素前移一位,亦即Msg[n]=Msg[n+1];不等于,则用当前时钟更新计数器;
(5)若管理员更新了预设参数,流量控制方法将以新参数重新初始化信息栈Msg[]、预设缓存业务量阈值NumberMax和预设流出速率TimeMax,并将已有信息栈的数据同步到新Msg[]中,然后启动LoopA和LoopB。其中,更新预设参数的情况可以是:底层设备数量(传感器数量)(n)、传输速率(x)有变化时,可能需要根据情况重新调信息栈的容量规模,也就是Number Max;如果带宽变化了,可能需要调整流出速率,也就是TimeMax,从而使性能达到最优。
可选的,信息栈中数据时间最早的所述流程工业设备数据发送至应用服务器可以通过Kafka(高吞吐量的分布式发布订阅消息系统)的消息管理系统实现,从信息栈出来的数据进入kafka,上层的各应用系统在kafka订阅的数据,kafka负责数据分发,kafka对订阅请求可以是并发处理。
在一个实施例中,若传入数据(待上传流程工业设备数据)量超过信息栈容量(预设缓存业务量阈值)时,根据各类传感器的预设权重自动反向调整传输速率。以x1,x2,x3,…,xk表示传感器的传输速率,l1,l2,l3,…,lk表示传感器数据大小,w1,w2,w3,…,wk表示传感器对应预设权重。当前业务量M计算方式如公式(3)所示。
M=∑j∈Tnjlj 公式(4)
其中,T表示在桶里的传感器,n1,n2,n3,…,nj表示当前桶对应的传感器个数。当∑j∈Tnjlj+nolo≤max时,对传输速度xj,j∈T不做任何调整,nolo表示下一刻传入信息栈里的数据(待上传流程工业设备数据)。当∑j∈Tnjlj+nolo>max时,对传输速度xj,j∈T的调整方式如公式(4)所示。
其中,表示传感器j调整后的调整传输速速率,xj表示传感器j的当前传输速率,nj表示当前传感器j对应的传感器数量,lj表示当前传感器j对应的数据大小,nolo表示待上传数据大小,max表示预设缓存业务量阈值,wj表示传感器j的预设权重,#(T)表示传感器种类数量,w0表示传感器j的调整权重,T表示信息栈所对应的传感器。
通过上述方法可保证应用服务器不被激增的业务破坏稳定性,同时,缓存的大小和漏出的速率,根据业务量、网络速度和应用服务器处理性能综合考虑,预先进行预设。当以上环境改变后,可以更新预设值,让流量控制方法在新的参数下运行,保持了方法在不同智能设备规模、服务器硬件性能和网络环境下的良好适应能力。
实施例二
请参阅图3,本实施例提供了一种流程工业设备数据的流量控制系统300,包括:
信息栈301,用于存储流程工业设备数据,信息栈设置有预设缓存业务量阈值;
获取模块302,用于获取待上传流程工业设备数据和信息栈中的当前业务量,待上传流程工业设备数据包括数据时间;
第一侦听模块303,用于若当前业务量小于预设缓存业务量阈值,将待上传流程工业设备数据存储入信息栈;
第二侦听模块304,用于若栈内时间与预设时间相同,则将信息栈中数据时间最早的流程工业设备数据发送至应用服务器。
可选的,该系统还包括:
多个流程工业设备,各流程工业设备设置有一个或多个传感器,传感器用于采集流程工业设备数据;
通信模块,用于将流程工业设备数据传输给信息栈;
应用服务器,应用服务器包括多个服务器。
在本实施例中,该系统实质上是设置了多个模块用以执行上述实施例中的方法,具体功能和技术效果参照上述实施例一即可,此处不再赘述。
参见图4,本发明实施例还提供了一种电子设备600,包括处理器601、存储器602和通信总线603;
通信总线603用于将处理器601和存储器连接602;
处理器601用于执行存储器602中存储的计算机程序,以实现如上述实施例一中的一个或多个所述的方法。
本发明实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,
计算机程序用于使计算机执行如上述实施例一中的任一项所述的方法。
本申请实施例还提供了一种非易失性可读存储介质,该存储介质中存储有一个或多个模块(programs),该一个或多个模块被应用在设备时,可以使得该设备执行本申请实施例的实施例一所包含步骤的指令(instructions)。
需要说明的是,本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码,上述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
上述实施例仅例示性说明本发明的原理及其功效,而非用于限制本发明。任何熟悉此技术的人士皆可在不违背本发明的精神及范畴下,对上述实施例进行修饰或改变。因此,举凡所属技术领域中具有通常知识者在未脱离本发明所揭示的精神与技术思想下所完成的一切等效修饰或改变,仍应由本发明的权利要求所涵盖。
Claims (8)
1.一种流程工业设备数据的流量控制方法,其特征在于,所述方法包括:
预设用于存储流程工业设备数据的信息栈,并设置所述信息栈的预设缓存业务量阈值;
获取待上传流程工业设备数据和所述信息栈中的当前业务量,所述待上传流程工业设备数据包括数据时间;
若所述当前业务量小于所述预设缓存业务量阈值,将所述待上传流程工业设备数据存储入所述信息栈;
所述流程工业设备数据包括多种传感器所采集的数据,每种所述传感器的数量为一个或多个,且若所述当前业务量大于或等于所述预设缓存业务量阈值,分别获取各所述传感器的当前传输速率,所述待上传流程工业设备数据的待上传数据大小,传感器种类数量,以及各所述传感器的传感器数量、数据大小和预设权重,并确定各所述传感器的调整传输速率,将所述流程工业设备数据传输给所述信息栈;
若栈内时间与预设时间相同,则将所述信息栈中数据时间最早的所述流程工业设备数据发送至应用服务器;
各所述传感器的调整传输速率的确定方式包括:
其中,表示传感器j调整后的调整传输速速率,xj表示传感器j的当前传输速率,nj表示当前传感器j对应的传感器数量,lj表示当前传感器j对应的数据大小,nolo表示待上传数据大小,max表示预设缓存业务量阈值,wj表示传感器j的预设权重,#(T)表示传感器种类数量,w0表示传感器j的调整权重,T表示信息栈所对应的传感器。
2.如权利要求1所述的方法,其特征在于,所述方法还包括以下至少之一:
若所述当前业务量大于或等于所述预设缓存业务量阈值,将所述待上传流程工业设备数据丢弃;
若所述栈内时间与预设时间不同,获取当前时间,并通过所述当前时间更新所述栈内时间。
3.如权利要求1所述的方法,其特征在于,所述预设时间的确定方式包括:
分别获取当前传输数据的初始传输时间,以及所述信息栈的预设流出速率;
根据所述初始传输时间和预设流出速率确定所述预设时间。
4.如权利要求1所述的方法,其特征在于,所述流程工业设备数据包括多个传感器所采集的数据,所述方法还包括以下至少之一:
若传感器数量、传感器种类、传输速率中至少之一发生变化,根据所述预设缓存业务量阈值和变化后的所述传感器数量、传感器种类、传输速率中至少之一确定调整后缓存业务量阈值;
若向所述应用服务器发送数据的带宽发生变化,根据变化后的带宽和所述信息栈的预设流出速率确定调整后流出速率。
5.一种流程工业设备数据的流量控制系统,其特征在于,所述系统包括:
信息栈,用于存储流程工业设备数据,所述信息栈设置有预设缓存业务量阈值;
获取模块,用于获取待上传流程工业设备数据和所述信息栈中的当前业务量,所述待上传流程工业设备数据包括数据时间;
第一侦听模块,用于若所述当前业务量小于所述预设缓存业务量阈值,将所述待上传流程工业设备数据存储入所述信息栈;
多个流程工业设备,各所述流程工业设备设置有一个或多个传感器,所述传感器用于采集所述流程工业设备数据,所述流程工业设备数据包括多种传感器所采集的数据,每种所述传感器的数量为一个或多个,且若所述当前业务量大于或等于所述预设缓存业务量阈值,分别获取各所述传感器的当前传输速率,所述待上传流程工业设备数据的待上传数据大小,传感器种类数量,以及各所述传感器的传感器数量、数据大小和预设权重,并确定各所述传感器的调整传输速率;
通信模块,用于将所述流程工业设备数据传输给所述信息栈;
第二侦听模块,用于若栈内时间与预设时间相同,则将所述信息栈中数据时间最早的所述流程工业设备数据发送至应用服务器;
各所述传感器的调整传输速率的确定方式包括:
其中,表示传感器j调整后的调整传输速速率,xj表示传感器j的当前传输速率,nj表示当前传感器j对应的传感器数量,lj表示当前传感器j对应的数据大小,nolo表示待上传数据大小,max表示预设缓存业务量阈值,wj表示传感器j的预设权重,#(T)表示传感器种类数量,w0表示传感器j的调整权重,T表示信息栈所对应的传感器。
6.如权利要求5所述的系统,其特征在于,所述系统还包括:
应用服务器,所述应用服务器包括多个服务器。
7.一种电子设备,其特征在于,包括处理器、存储器和通信总线;
所述通信总线用于将所述处理器和存储器连接;
所述处理器用于执行所述存储器中存储的计算机程序,以实现如权利要求1-4中任一项所述的方法。
8.一种计算机可读存储介质,其特征在于,其上存储有计算机程序,
所述计算机程序用于使所述计算机执行如权利要求1-4中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210059096.3A CN114531377B (zh) | 2022-01-19 | 2022-01-19 | 流程工业设备数据的流量控制方法、系统、设备及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210059096.3A CN114531377B (zh) | 2022-01-19 | 2022-01-19 | 流程工业设备数据的流量控制方法、系统、设备及介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114531377A CN114531377A (zh) | 2022-05-24 |
CN114531377B true CN114531377B (zh) | 2024-04-02 |
Family
ID=81620033
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210059096.3A Active CN114531377B (zh) | 2022-01-19 | 2022-01-19 | 流程工业设备数据的流量控制方法、系统、设备及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114531377B (zh) |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1684464A1 (en) * | 2005-01-24 | 2006-07-26 | Alcatel | Traffic management and monitoring in communications networks |
CN108769162A (zh) * | 2018-05-16 | 2018-11-06 | 上海携程商务有限公司 | 分布式消息均衡处理方法、装置、电子设备、存储介质 |
CN109885399A (zh) * | 2019-01-17 | 2019-06-14 | 平安普惠企业管理有限公司 | 数据处理方法、电子装置、计算机设备及存储介质 |
CN110401720A (zh) * | 2019-07-31 | 2019-11-01 | 中国工商银行股份有限公司 | 信息处理方法、装置、系统、应用服务器和介质 |
WO2020026013A1 (zh) * | 2018-07-31 | 2020-02-06 | 优视科技新加坡有限公司 | 数据传输方法、装置、设备/终端/服务器及计算机可读存储介质 |
CN110932997A (zh) * | 2019-12-09 | 2020-03-27 | 苏州浪潮智能科技有限公司 | 一种降低网络流量丢包的方法、设备及介质 |
WO2021004063A1 (zh) * | 2019-07-11 | 2021-01-14 | 网宿科技股份有限公司 | 一种缓存服务器的带宽调度方法及装置 |
CN113242184A (zh) * | 2021-06-10 | 2021-08-10 | 京东科技控股股份有限公司 | 分布式架构的流量控制方法及相关设备 |
-
2022
- 2022-01-19 CN CN202210059096.3A patent/CN114531377B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1684464A1 (en) * | 2005-01-24 | 2006-07-26 | Alcatel | Traffic management and monitoring in communications networks |
CN108769162A (zh) * | 2018-05-16 | 2018-11-06 | 上海携程商务有限公司 | 分布式消息均衡处理方法、装置、电子设备、存储介质 |
WO2020026013A1 (zh) * | 2018-07-31 | 2020-02-06 | 优视科技新加坡有限公司 | 数据传输方法、装置、设备/终端/服务器及计算机可读存储介质 |
CN109885399A (zh) * | 2019-01-17 | 2019-06-14 | 平安普惠企业管理有限公司 | 数据处理方法、电子装置、计算机设备及存储介质 |
WO2021004063A1 (zh) * | 2019-07-11 | 2021-01-14 | 网宿科技股份有限公司 | 一种缓存服务器的带宽调度方法及装置 |
CN110401720A (zh) * | 2019-07-31 | 2019-11-01 | 中国工商银行股份有限公司 | 信息处理方法、装置、系统、应用服务器和介质 |
CN110932997A (zh) * | 2019-12-09 | 2020-03-27 | 苏州浪潮智能科技有限公司 | 一种降低网络流量丢包的方法、设备及介质 |
CN113242184A (zh) * | 2021-06-10 | 2021-08-10 | 京东科技控股股份有限公司 | 分布式架构的流量控制方法及相关设备 |
Non-Patent Citations (1)
Title |
---|
串行网络中ABR业务的流量控制和缓存设计;杨根科,吴智铭,曾建潮;通信学报(第01期);全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN114531377A (zh) | 2022-05-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108293067B (zh) | 针对物联网设备管理通信拥塞 | |
JP6405416B2 (ja) | データ送信システム、及びデータ送信方法 | |
CN112188442A (zh) | 基于移动边缘计算的车联网数据驱动任务卸载系统和方法 | |
CN110765365B (zh) | 分布式边云协同缓存策略的实现方法、装置、设备和介质 | |
JPWO2018180369A1 (ja) | センサネットワークシステム | |
CN109117265A (zh) | 在集群中调度作业的方法、装置、设备及存储介质 | |
US20150339159A1 (en) | Systems, methods, and media for online server workload management | |
CN114039918B (zh) | 一种信息年龄优化方法、装置、计算机设备及存储介质 | |
US20120254413A1 (en) | Proxy server, hierarchical network system, and distributed workload management method | |
CN107040608A (zh) | 一种数据处理方法及系统 | |
US10708195B2 (en) | Predictive scheduler | |
CN113407426A (zh) | 服务器集群容量评估方法、装置、电子设备及存储介质 | |
WO2015154483A1 (zh) | 网络流量均衡的方法及超级控制器 | |
CN112907942A (zh) | 基于边缘计算的车辆调度方法、装置、设备和介质 | |
US9621438B2 (en) | Network traffic management | |
CN114531377B (zh) | 流程工业设备数据的流量控制方法、系统、设备及介质 | |
CN113344737B (zh) | 设备控制方法、装置、电子设备和计算机可读介质 | |
CN117221069A (zh) | 一种基于微服务器架构的管理方法及装置 | |
CN111476401A (zh) | 航班时刻表优化方法及系统 | |
CN117041229A (zh) | 基于VoLTE技术的主叫等待气象多媒体播放系统及方法 | |
JP5271737B2 (ja) | データ収集システム,及び伝送制御装置 | |
CN116708218A (zh) | 一种边缘物联代理设备的检测方法 | |
WO2020082599A1 (zh) | 云端控制方法、装置、计算机设备及存储介质 | |
CN117336521A (zh) | 视频流传输的控制方法及装置、设备、介质 | |
CN104601424A (zh) | 设备控制网中利用概率模型的主被动数据收集装置及方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |