CN114490091A - 工业数据采集管理系统中监控规则引擎性能的方法及装置 - Google Patents

工业数据采集管理系统中监控规则引擎性能的方法及装置 Download PDF

Info

Publication number
CN114490091A
CN114490091A CN202210352580.5A CN202210352580A CN114490091A CN 114490091 A CN114490091 A CN 114490091A CN 202210352580 A CN202210352580 A CN 202210352580A CN 114490091 A CN114490091 A CN 114490091A
Authority
CN
China
Prior art keywords
untimely
consumption
production
proportion value
preset
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210352580.5A
Other languages
English (en)
Other versions
CN114490091B (zh
Inventor
王玮玮
李福存
王苏扬
张波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jiangsu Jinheng Information Technology Co Ltd
Original Assignee
Jiangsu Jinheng Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiangsu Jinheng Information Technology Co Ltd filed Critical Jiangsu Jinheng Information Technology Co Ltd
Priority to CN202210352580.5A priority Critical patent/CN114490091B/zh
Publication of CN114490091A publication Critical patent/CN114490091A/zh
Application granted granted Critical
Publication of CN114490091B publication Critical patent/CN114490091B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication
    • G06F9/546Message passing systems or structures, e.g. queues
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00Indexing scheme relating to G06F9/00
    • G06F2209/54Indexing scheme relating to G06F9/54
    • G06F2209/548Queue
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • General Factory Administration (AREA)

Abstract

本申请提供一种工业数据采集管理系统中监控规则引擎性能的方法及装置。所述方法通过定期监测规则引擎订阅的消息队列的生产速度和消费速度,来判断当前规则引擎的处理性能是否能够满足当前工业数据的规则处理的性能需求,并根据判断结果来确定是否增设规则引擎服务器集群节点,能够有效避免出现规则引擎处理性能跟不上导致数据处理滞后或者数据丢失的问题。

Description

工业数据采集管理系统中监控规则引擎性能的方法及装置
技术领域
本申请涉及工业数据采集管理领域,特别涉及工业数据采集管理系统中监控规则引擎性能的方法及装置。
背景技术
规则引擎是一种嵌入在应用程序中的组件。在工业数据采集管理系统中,需要使用规则引擎来对设备点位采集的工业数据进行二次处理。承载规则引擎的硬件称为规则引擎服务器。
设备点位是工业生产中的工业设备上的运行参数。比如一个工业设备有转速、温度、开机状态、电压等运行参数,其中转速就是一个设备点位。一个工业设备包括多个点位,每个点位采集的工业数据包括采集频率字段信息。一个点位对应设置规则引擎中的一条规则链或不设置规则链。规则链是由多个数据处理规则按照执行先后顺序连接在一起形成的,一个规则链包括至少一个数据处理规则;其中,数据处理规则包括对采集到的工业数据进行处理的类型和逻辑。数据处理逻辑包括数值转换、数值检测是否超标、将工业数据转发到消息队列,数据处理规则类型包括数据过滤、数据告警、数据分发。在实际应用中,管理员可以动态设置数据处理规则的类型与逻辑;相同类型规则的处理逻辑也会不相同,比如数据分发规则,对应的处理逻辑可以是将工业数据分发到A主题的消息队列,也可以是将工业数据分发到B主题的消息队列。
在工业数据采集管理系统中工业数据的流转过程如下:设备点位采集工业数据并发送到消息队列;规则引擎持续监听消息队列,每当消息队列中接收到新的工业数据,规则引擎就会对新的工业数据进行消费;其中,消费包括解析工业数据,并找出该工业数据对应的规则链,然后根据对应的规则链对上述工业数据进行处理。
但是,在实际应用中,数据处理规则的处理逻辑经常变动,设备点位数量和种类也会经常变动,导致对工业数据的二次处理的性能需求经常变动。目前工业数据采集管理系统中,没有对数据处理规则的变动和设备点位变动进行实时监控的机制,导致规则引擎服务器的性能压力得不到优化,从而经常出现服务器处理性能跟不上导致数据处理滞后或者数据丢失的问题。
发明内容
为了解决目前工业数据采集管理系统中,没有对数据处理规则的变动和设备点位的变动进行实时监控的机制,导致规则引擎服务器的性能压力得不到优化,从而经常出现服务器处理性能跟不上导致数据处理滞后或者数据丢失的问题。本申请通过以下方面公开了一种工业数据采集管理系统中监控规则引擎性能的方法及装置。
本申请第一方面公开了一种工业数据采集管理系统中监控规则引擎性能的方法,所述工业数据采集管理系统包括多个数据采集器、消息队列和规则引擎服务器集群,所述工业数据采集管理系统还包括监控规则引擎性能的装置,所述装置按照预设的监控周期开启性能监控进程,所述性能监控进程用于执行所述方法,所述方法包括:
获取消息队列的生产速度和消费速度;其中,生产速度是指消息队列每秒接收工业数据的条数,消费速度是指规则引擎服务器集群每秒从消息队列中读取工业数据的条数;
根据生产速度和消费速度,确定消费不及时比例值;
判断消费不及时比例值是否小于预设消费不及时比例值;
若消费不及时比例值大于或者等于预设的消费不及时比例值,则增设规则引擎服务器集群节点。
可选的,所述方法还包括:若消费不及时比例值小于预设的消费不及时比例值,则根据生产速度和消费速度,确定生产不及时比例值;
判断生产不及时比例值是否小于预设生产不及时比例值;
若生产不及时比例值大于或者等于预设生产不及时比例值,则删减规则引擎服务器集群节点。
可选的,根据生产速度和消费速度,确定消费不及时比例值,包括根据以下公式确 定消费不及时比例值:
Figure 434794DEST_PATH_IMAGE001
,其中,E1为消费不及时比例值,A为生产速度,B为消费 速度。
可选的,根据生产速度和消费速度,确定生产不及时比例值,包括根据以下公式确 定生产不及时比例值:
Figure 571377DEST_PATH_IMAGE002
,其中,E2为生产不及时比例值,A为生产速度,B为消费 速度。
可选的,在判断消费不及时比例值是否小于预设消费不及时比例值之后,增设规则引擎服务器集群节点之前,所述方法还包括:
若消费不及时比例值大于或者等于预设的消费不及时比例值,则记录当前消费不及时触发时间;
根据当前消费不及时触发时间进行计算,得到消费不及时状态持续时间;
判断消费不及时状态持续时间是否小于第一预设状态持续时间;
若消费不及时状态持续时间大于或者等于第一预设状态持续时间,则执行增设规则引擎服务器集群节点的操作;
若消费不及时状态持续时间小于第一预设状态持续时间,则终止性能监控进程。
可选的,根据当前消费不及时触发时间进行计算,得到消费不及时状态持续时间,包括:
获得首次消费不及时触发时间;
使用当前消费不及时触发时间减去首次消费不及时触发时间,得到消费不及时状态持续时间;
其中,在第一字段中记录首次消费不及时触发时间;
当记录当前消费不及时触发时间时,判断第一字段是否为空;
若第一字段为空,则将当前消费不及时触发时间写入第一字段,将当前消费不及时触发时间记录为首次消费不及时触发时间;若所处第一字段不为空,则读取第一字段,获取首次消费不及时触发时间;
当消费不及时比例值小于预设的消费不及时比例值时,清空第一字段中的数据。
可选的,在判断生产不及时比例值是否小于预设生产不及时比例值之后,删减规则引擎服务器集群节点之前,方法还包括:
若生产不及时比例值大于或者等于预设生产不及时比例值,则记录当前生产不及时触发时间;
根据当前生产不及时触发时间进行计算,得到生产不及时状态持续时间;
判断生产不及时状态持续时间是否小于第二预设状态持续时间;
若生产不及时状态持续时间大于或者等于第二预设状态持续时间,则执行删减规则引擎服务器集群节点的操作;
若生产不及时状态持续时间小于第二预设状态持续时间,则终止性能监控进程。
可选的,根据当前生产不及时触发时间进行计算,得到生产不及时状态持续时间,包括:
获得首次生产不及时触发时间;
使用当前生产不及时触发时间减去首次生产不及时触发时间,得到生产不及时状态持续时间;
其中,在第二字段中记录首次生产不及时触发时间;
当记录当前生产不及时触发时间时,判断第二字段是否为空;
若第二字段为空,则将当前生产不及时触发时间写入第二字段,将当前生产不及时触发时间记录为首次生产不及时触发时间;若所处第二字段不为空,则读取第二字段,获取首次生产不及时触发时间;
当生产不及时比例值小于预设的生产不及时比例值时,清空第二字段中的数据。
本申请第二方面公开了一种工业数据采集管理系统中监控规则引擎性能的装置,所述装置按照预设的监控周期开启性能监控进程,以执行本申请第一方面公开的所述的工业数据采集管理系统中监控规则引擎性能的方法的步骤,所述装置包括:速度获取模块、计算模块、判断模块以及执行模块,其中,
速度获取模块用于获取消息队列的生产速度以及消费速度;其中,生产速度是指消息队列每秒接收工业数据的条数;消费速度是指规则引擎集群每秒从消息队列中读取工业数据的条数;
计算模块用于根据生产速度和消费速度,确定消费不及时比例值;
判断模块用于判断消费不及时比例值是否小于预设消费不及时比例值;
执行模块用于执行以下操作:若消费不及时比例值大于或者等于预设的消费不及时比例值,则增设规则引擎服务器集群节点。
可选的,计算模块还用于执行以下操作:若消费不及时比例值小于预设的消费不及时比例值,则根据生产速度和消费速度,确定生产不及时比例值;
判断模块还用于判断生产不及时比例值是否小于预设生产不及时比例值;
执行模块还用于执行以下操作:若生产不及时比例值大于或者等于预设生产不及时比例值,则删减规则引擎服务器集群节点。
本申请提供一种工业数据采集管理系统中监控规则引擎性能的方法及装置。所述方法通过定期监测规则引擎订阅的消息队列的生产速度和消费速度,来判断当前规则引擎的处理性能是否能够满足当前工业数据的规则处理的性能需求,并根据判断结果来确定是否增设规则引擎服务器集群节点,能够有效避免出现规则引擎处理性能跟不上导致数据处理滞后或者数据丢失的问题。
附图说明
图1为本申请实施例提供的一种工业数据采集管理系统中监控规则引擎性能的方法所适用的一种工业采集管理系统的结构示意图;
图2为本申请实施例提供的一种工业数据采集管理系统中监控规则引擎性能的方法的工作流程示意图;
图3为本申请实施例提供的另一种工业数据采集管理系统中监控规则引擎性能的方法的工作流程示意图;
图4为本申请实施例提供的一种工业数据采集管理系统中监控规则引擎性能的装置的结构示意图。
具体实施方式
为了解决目前工业数据采集管理系统中,没有对数据处理规则的变动和设备点位的变动进行实时监控的机制,导致规则引擎服务器的性能压力得不到优化,从而经常出现服务器处理性能跟不上导致数据处理滞后或者数据丢失的问题。本申请通过以下方面公开了一种工业数据采集管理系统中监控规则引擎性能的方法及装置。
参见图1,为本申请第一实施例提供的工业数据采集管理系统中监控规则引擎性能的方法所适用的一种工业数据采集管理系统的结构示意图。所述工业采集管理系统包括多个数据采集器、消息队列和规则引擎服务器集群。如图1所示,工业数据采集管理系统中的设备1中设置了多个数据采集器,每一个数据采集器对应一个点位,包括转速点位、温度点位和电压点位;设备X中也设置了多个数据采集器,包括CO2点位、GPS点位和开关点位。消息队列订阅点位生产的工业数据。规则引擎服务器集群会持续监听消息队列,每当消息队列中有新的工业数据进来时,就会对新的工业数据进行读取消费。其中,消费包括解析工业数据,并找出该工业数据对应的规则链,然后根据对应的规则链对上述工业数据进行处理。
但是在实际生产过程中,设备点位发生变动时,比如某个生产单位新部署了一批设备,并将设备中的点位加入到采集队列中,或者已有设备中未加入采集队列的点位新加入到采集队列中,单位时间内消息队列订阅的工业数据的量会大幅增加,而规则引擎没有及时根据上述情况提高处理性能,则会导致工业数据不能及时从消息队列中被消费,新的工业数据不断产生,导致消息队列中的数据堆积,未被规则引擎及时消费的工业数据会丢失。
为此,本实施例提供的工业采集管理系统中还包括监控规则引擎性能的装置,所述装置按照预设的监控周期开启性能监控进程,所述性能监控进程用于执行本实施例提供的工业数据采集管理系统中监控规则引擎性能的方法。示例性的,所述装置可以使用分布式任务调度框架来实现,例如PowerJob中间件。
参见图2,为本实施例提供的一种工业数据采集管理系统中监控规则引擎性能的方法的工作流程示意图。如图2所示,所述方法包括步骤201-步骤207。
步骤201,获取消息队列的生产速度和消费速度。其中,生产速度是指消息队列每秒接收工业数据的条数,在本实施例中,生产速度记为A条/秒;消费速度是指规则引擎服务器集群每秒从消息队列中读取工业数据的条数,在本实施例中,消费速度记为B条/秒。
步骤202,根据生产速度和消费速度,确定消费不及时比例值。在一种实现方式中, 根据以下公式确定消费不及时比例值:
Figure 427207DEST_PATH_IMAGE003
,其中,E1为消费不及时比例值。
步骤203,判断消费不及时比例值是否小于预设消费不及时比例值。
步骤204,若消费不及时比例值大于或者等于预设的消费不及时比例值,则增设规则引擎服务器集群节点。其中,预设的消费不及时比例值根据经验设定。
进一步,采用动态缩容技术来根据监控情况自动增设规则引擎服务器集群节点。示例性,采用Auto-Scaling的弹性收缩技术自动增设规则引擎服务器集群节点。Auto-Scaling的弹性手所述是根据业务需求和策略自动调整计算能力(即实例数量)的服务。用户可以指定实例的类型,即ECS实例或ECI实例。在业务需求增长时,弹性伸缩自动增加指定类型的实例,来保证计算能力;在业务需求下降时,弹性伸缩自动减少指定类型的实例,来节约成本。
在一种实现方式中,为了防止偶然出现的数据波动导致的误差,还需要根据消费不及时状态持续时间来决定是否增设规则引擎服务器集群节点。其中,消费不及时状态持续时间为消费不及时比例值大于或等于预设的消费不及时比例值的状态持续时间。进一步,本实施例提供的所述方法,在判断所述消费不及时比例值是否小于预设消费不及时比例值之后,增设规则引擎服务器集群节点之前,还包括步骤301-步骤305。
步骤301,若消费不及时比例值大于或者等于预设的消费不及时比例值,则记录当前消费不及时触发时间。
步骤302,根据当前消费不及时触发时间进行计算,得到消费不及时状态持续时间。进一步,先获得首次消费不及时触发时间;使用当前消费不及时触发时间减去首次消费不及时触发时间,得到消费不及时状态持续时间。其中,在第一字段中记录首次消费不及时触发时间;当记录当前消费不及时触发时间时,判断第一字段是否为空;若第一字段为空,则将当前消费不及时触发时间写入第一字段,将当前消费不及时触发时间记录为首次消费不及时触发时间;若所处第一字段不为空,则读取第一字段,获取首次消费不及时触发时间;当消费不及时比例值小于预设的消费不及时比例值时,清空第一字段中的数据。
步骤303,判断消费不及时状态持续时间是否小于第一预设状态持续时间。
步骤304,若消费不及时状态持续时间大于或者等于第一预设状态持续时间,则执行增设规则引擎服务器集群节点的操作。
步骤305,若消费不及时状态持续时间小于第一预设状态持续时间,则终止性能监控进程。
本实施例提供的一种工业数据采集管理系统中监控规则引擎性能的方法通过定期监测规则引擎订阅的消息队列的生产速度和消费速度,来判断当前规则引擎的处理性能是否能够满足当前工业数据的规则处理的性能需求,并根据判断结果来确定是否增设规则引擎服务器集群节点,能够有效避免出现服务器处理性能跟不上导致数据处理滞后或者数据丢失的问题。
为了更好的解释本实施例提供的工业数据采集管理系统中监控规则引擎性能的方法的实施过程,本申请给出一个结合具体应用场景的应用示例。
示例性的,在钢铁企业的智慧调度项目中,监控规则引擎性能的装置每20秒(预设的监控周期)开启一次性能监控任务,获取消息队列中的生产速度和消费速度,并进行计算获得对应的消费不及时比例值。当前的生产速度为2.5万条/秒,消费速度也是2.5万条/秒,即当前生产速度和消费速度是匹配的。
进一步的,在测试环节对当前的规则引擎性能进行压力测试,得出当前规则引擎服务器集群的压力上限为4万条/秒。在实际应用中,初始设置工业数据采集管理系统(即对应本示例中的智慧调度项目)时,一般规则引擎服务器器群的性能都会设置比当前生产环境中的消费速度大的配置。
一种会产生规则引擎性能不能满足生产的情况是,当上线运行所述智慧调度项目时,生产环境中根据业务情况增加了采集设备和点位。例如,新增点位数量1万个,点位的采集频率是200毫秒,则每秒每个点位会采集5次,对应的,生产环境中每秒增加了5万条的工业数据需要处理。对应的,消息队列的生产速度变成了7.5万条/秒。而此时消费速度为4万条/秒(即规则引擎性能的压力上限),监控规则引擎性能的装置在一次性能监控任务中,计算得出当前的消费不及时比例值为0.875,远大于预设的消费不及时比例值0.25,则增设一台规则引擎服务器。如果增设一台规则引擎服务器之后,消费不及时比例值还大于0.25,则在下一次性能监控任务中再根据监控结果增设一台规则引擎服务器。
进一步,为了防止生产速度的突然增加是偶发现象,设置第一预设时间为60s,即连续三次监控到消费不及时比例值大于或者等于0.25,才会增设一台规则引擎服务器。
又一种会产生规则引擎性能不能满足生产的情况是,当上线运行所述智慧调度项目时,规则引擎中的规则链根据具体的业务需求进行了调整,其中有的规则链的处理时间加长,有的规则链的处理时间缩短,规则引擎整体的处理时间加长,导致规则引擎当前7.5万条/秒的处理速度降为6万条/秒。监控规则引擎性能的装置计算得出当前的消费不及时比例值为0.25,等于预设的消费不及时比例值,则增设一台规则引擎服务器来分摊增加的消费压力,在短时间内及时保证了消费的及时性,使得消费队列中的工业数据能够得到及时的消费,能够有效避免出现规则引擎处理性能跟不上导致的数据处理滞后或者数据丢失的问题。
在本申请的第二实施例中,所述工业数据采集管理系统中监控规则引擎性能的方法中,为了防止规则引擎的性能浪费,在消费不及时比例值小于预设的消费不及时比例值时,所述监控规则引擎性能的方法中还包括计算生产不及时比例值,以判断是否需要删除规则引擎服务器集群节点。
进一步,在本申请第一实施例的基础上,所述工业数据采集管理系统中监控规则引擎性能的方法还包括步骤205-步骤207,如图3所示
步骤205,若消费不及时比例值小于预设的消费不及时比例值,则根据生产速度和消费速度,确定生产不及时比例值。
步骤206,判断生产不及时比例值是否小于预设生产不及时比例值。在一种实现方 式中,根据以下公式确定生产不及时比例值:
Figure 358254DEST_PATH_IMAGE002
,其中,E2为生产不及时比例值。
步骤207,若生产不及时比例值大于或者等于预设生产不及时比例值,则删减规则引擎服务器集群节点。
在一种实现方式中,为了防止偶然出现的数据波动导致的误差,还需要根据生产不及时状态持续时间来决定是否删减规则引擎服务器集群节点。其中,生产不及时状态持续时间为生产不及时比例值大于或等于预设的生产不及时比例值的状态持续时间。进一步,本实施例提供的所述方法,在判断所述生产不及时比例值是否小于预设生产不及时比例值之后,删减规则引擎服务器集群节点之前,还包括步骤401-步骤405。
步骤401,若生产不及时比例值大于或者等于预设生产不及时比例值,则记录当前生产不及时触发时间。
步骤402,根据当前生产不及时触发时间进行计算,得到生产不及时状态持续时间。
步骤403,判断生产不及时状态持续时间是否小于第二预设状态持续时间。进一步,首先,获得首次生产不及时触发时间;其次,使用当前生产不及时触发时间减去首次生产不及时触发时间,得到生产不及时状态持续时间。其中,在第二字段中记录首次生产不及时触发时间;当记录当前生产不及时触发时间时,判断第二字段是否为空;若第二字段为空,则将当前生产不及时触发时间写入第二字段,将当前生产不及时触发时间记录为首次生产不及时触发时间;若所处第二字段不为空,则读取第二字段,获取首次生产不及时触发时间;当生产不及时比例值小于预设的生产不及时比例值时,清空第二字段中的数据。
步骤404,若生产不及时状态持续时间大于或者等于第二预设状态持续时间,则执行删减规则引擎服务器集群节点的操作。
步骤405,若生产不及时状态持续时间小于第二预设状态持续时间,则终止性能监控进程。
本申请第二实施例提供的所述工业数据采集管理系统中监控规则引擎性能的方法,在消费不及时比例值小于预设的消费不及时比例值时,计算生产不及时比例值;若生产不及时比例值大于或者等于预设生产不及时比例值,则删减规则引擎服务器集群节点来释放服务器的计算资源,避免规则引擎的性能浪费。
与前述工业数据采集管理系统中监控规则引擎性能的方法方法的实施例相对应,本申请还提供了所述工业数据采集管理系统中监控规则引擎性能的装置500的实施例。所述装置500照预设的监控周期开启性能监控进程,以执行本申请第一实施例和第二实施例提供的工业数据采集管理系统中监控规则引擎性能的方法的步骤,所述装置包括速度获取模块501、计算模块502、判断模块503以及执行模块504。
速度获取模块501用于获取消息队列的生产速度以及消费速度;其中,生产速度是指消息队列每秒接收工业数据的条数;消费速度是指规则引擎集群每秒从消息队列中读取工业数据的条数。
计算模块502用于根据生产速度和消费速度,确定消费不及时比例值。
判断模块503用于判断消费不及时比例值是否小于预设消费不及时比例值。
执行模块504用于执行以下操作:若消费不及时比例值大于或者等于预设的消费不及时比例值,则增设规则引擎服务器集群节点。
在一种实现方式中,计算模块502还用于执行以下操作:若消费不及时比例值小于预设的消费不及时比例值,则根据生产速度和消费速度,确定生产不及时比例值。
判断模块503还用于判断生产不及时比例值是否小于预设生产不及时比例值。
执行模块504还用于执行以下操作:若生产不及时比例值大于或者等于预设生产不及时比例值,则删减规则引擎服务器集群节点。
上述装置500中在应用前述方法时的作用效果可参见前述方法实施例中的说明,在此不再赘述。
以上结合具体实施方式和范例性实例对本申请进行了详细说明,不过这些说明并不能理解为对本申请的限制。本领域技术人员理解,在不偏离本申请精神和范围的情况下,可以对本申请技术方案及其实施方式进行多种等价替换、修饰或改进,这些均落入本申请的范围内。本申请的保护范围以所附权利要求为准。

Claims (10)

1.一种工业数据采集管理系统中监控规则引擎性能的方法,所述工业数据采集管理系统包括多个数据采集器、消息队列和规则引擎服务器集群,其特征在于,所述工业数据采集管理系统还包括监控规则引擎性能的装置,所述装置按照预设的监控周期开启性能监控进程,所述性能监控进程用于执行所述方法,所述方法包括:
获取消息队列的生产速度和消费速度;其中,所述生产速度是指消息队列每秒接收工业数据的条数,所述消费速度是指规则引擎服务器集群每秒从消息队列中读取工业数据的条数;
根据所述生产速度和所述消费速度,确定消费不及时比例值;
判断所述消费不及时比例值是否小于预设消费不及时比例值;
若所述消费不及时比例值大于或者等于预设的消费不及时比例值,则增设规则引擎服务器集群节点。
2.根据权利要求1所述的工业数据采集管理系统中监控规则引擎性能的方法,其特征在于,所述方法还包括:
若所述消费不及时比例值小于预设的消费不及时比例值,则根据所述生产速度和所述消费速度,确定生产不及时比例值;
判断所述生产不及时比例值是否小于预设生产不及时比例值;
若所述生产不及时比例值大于或者等于预设生产不及时比例值,则删减规则引擎服务器集群节点。
3.根据权利要求1所述的工业数据采集管理系统中监控规则引擎性能的方法,其特征在于,所述根据所述生产速度和所述消费速度,确定消费不及时比例值,包括根据以下公式确定所述消费不及时比例值:
Figure 867942DEST_PATH_IMAGE001
其中,E1为所述消费不及时比例值,A为所述生产速度,B为所述消费速度。
4.根据权利要求2所述的工业数据采集管理系统中监控规则引擎性能的方法,其特征在于,所述根据所述生产速度和所述消费速度,确定生产不及时比例值,包括根据以下公式确定所述生产不及时比例值:
Figure 877355DEST_PATH_IMAGE002
其中,E2为所述生产不及时比例值,A为所述生产速度,B为所述消费速度。
5.根据权利要求1所述的工业数据采集管理系统中监控规则引擎性能的方法,其特征在于,在判断所述消费不及时比例值是否小于预设消费不及时比例值之后,增设规则引擎服务器集群节点之前,所述方法还包括:
若所述消费不及时比例值大于或者等于预设的消费不及时比例值,则记录当前消费不及时触发时间;
根据所述当前消费不及时触发时间进行计算,得到消费不及时状态持续时间;
判断所述消费不及时状态持续时间是否小于第一预设状态持续时间;
若所述消费不及时状态持续时间大于或者等于所述第一预设状态持续时间,则执行所述增设规则引擎服务器集群节点的操作;
若所述消费不及时状态持续时间小于所述第一预设状态持续时间,则终止所述性能监控进程。
6.根据权利要求5所述的工业数据采集管理系统中监控规则引擎性能的方法,其特征在于,所述根据所述当前消费不及时触发时间进行计算,得到消费不及时状态持续时间,包括:
获得首次消费不及时触发时间;
使用所述当前消费不及时触发时间减去所述首次消费不及时触发时间,得到所述消费不及时状态持续时间;
其中,在第一字段中记录首次消费不及时触发时间;
当记录所述当前消费不及时触发时间时,判断所述第一字段是否为空;
若所述第一字段为空,则将所述当前消费不及时触发时间写入所述第一字段,将所述当前消费不及时触发时间记录为所述首次消费不及时触发时间;若所处第一字段不为空,则读取所述第一字段,获取所述首次消费不及时触发时间;
当所述消费不及时比例值小于预设的消费不及时比例值时,清空所述第一字段中的数据。
7.根据权利要求2所述的工业数据采集管理系统中监控规则引擎性能的方法,其特征在于,在判断所述生产不及时比例值是否小于预设生产不及时比例值之后,删减规则引擎服务器集群节点之前,所述方法还包括:
若所述生产不及时比例值大于或者等于预设生产不及时比例值,则记录当前生产不及时触发时间;
根据所述当前生产不及时触发时间进行计算,得到生产不及时状态持续时间;
判断所述生产不及时状态持续时间是否小于第二预设状态持续时间;
若所述生产不及时状态持续时间大于或者等于所述第二预设状态持续时间,则执行所述删减规则引擎服务器集群节点的操作;
若所述生产不及时状态持续时间小于所述第二预设状态持续时间,则终止所述性能监控进程。
8.根据权利要求7所述的工业数据采集管理系统中监控规则引擎性能的方法,其特征在于,所述根据所述当前生产不及时触发时间进行计算,得到生产不及时状态持续时间,包括:
获得首次生产不及时触发时间;
使用所述当前生产不及时触发时间减去所述首次生产不及时触发时间,得到所述生产不及时状态持续时间;
其中,在第二字段中记录首次生产不及时触发时间;
当记录所述当前生产不及时触发时间时,判断所述第二字段是否为空;
若所述第二字段为空,则将所述当前生产不及时触发时间写入所述第二字段,将所述当前生产不及时触发时间记录为所述首次生产不及时触发时间;若所处第二字段不为空,则读取所述第二字段,获取所述首次生产不及时触发时间;
当所述生产不及时比例值小于预设的生产不及时比例值时,清空所述第二字段中的数据。
9.一种工业数据采集管理系统中监控规则引擎性能的装置,其特征在于,所述装置按照预设的监控周期开启性能监控进程,以执行权利要求1-8中任一项所述的工业数据采集管理系统中监控规则引擎性能的方法的步骤,所述装置包括:速度获取模块、计算模块、判断模块以及执行模块,其中,
所述速度获取模块用于获取消息队列的生产速度以及消费速度;其中,所述生产速度是指消息队列每秒接收工业数据的条数;所述消费速度是指规则引擎集群每秒从消息队列中读取工业数据的条数;
所述计算模块用于根据所述生产速度和所述消费速度,确定消费不及时比例值;
所述判断模块用于判断所述消费不及时比例值是否小于预设消费不及时比例值;
所述执行模块用于执行以下操作:若所述消费不及时比例值大于或者等于预设的消费不及时比例值,则增设规则引擎服务器集群节点。
10.根据权利要求9所述的工业数据采集管理系统中监控规则引擎性能的装置,其特征在于,所述计算模块还用于执行以下操作:若所述消费不及时比例值小于预设的消费不及时比例值,则根据所述生产速度和所述消费速度,确定生产不及时比例值;
所述判断模块还用于判断所述生产不及时比例值是否小于预设生产不及时比例值;
所述执行模块还用于执行以下操作:若所述生产不及时比例值大于或者等于预设生产不及时比例值,则删减规则引擎服务器集群节点。
CN202210352580.5A 2022-04-06 2022-04-06 工业数据采集管理系统中监控规则引擎性能的方法及装置 Active CN114490091B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210352580.5A CN114490091B (zh) 2022-04-06 2022-04-06 工业数据采集管理系统中监控规则引擎性能的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210352580.5A CN114490091B (zh) 2022-04-06 2022-04-06 工业数据采集管理系统中监控规则引擎性能的方法及装置

Publications (2)

Publication Number Publication Date
CN114490091A true CN114490091A (zh) 2022-05-13
CN114490091B CN114490091B (zh) 2022-07-08

Family

ID=81487942

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210352580.5A Active CN114490091B (zh) 2022-04-06 2022-04-06 工业数据采集管理系统中监控规则引擎性能的方法及装置

Country Status (1)

Country Link
CN (1) CN114490091B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115811537A (zh) * 2023-02-20 2023-03-17 江苏金恒信息科技股份有限公司 资源调整方法、装置、计算机设备和存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109240836A (zh) * 2018-09-06 2019-01-18 郑州云海信息技术有限公司 一种用于配置消息队列的消息的方法和装置
CN110187980A (zh) * 2019-04-19 2019-08-30 北京三快在线科技有限公司 消息队列监控方法、装置、电子设备及可读存储介质
CN110971430A (zh) * 2018-09-29 2020-04-07 北京国双科技有限公司 自动化扩容缩容的控制方法、装置、存储介质及处理器
CN111126933A (zh) * 2019-11-11 2020-05-08 中盈优创资讯科技有限公司 Kafka生产和消费进度监控方法及装置
WO2021180025A1 (zh) * 2020-03-13 2021-09-16 北京金山云网络技术有限公司 一种消息处理方法、装置、电子设备及介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109240836A (zh) * 2018-09-06 2019-01-18 郑州云海信息技术有限公司 一种用于配置消息队列的消息的方法和装置
CN110971430A (zh) * 2018-09-29 2020-04-07 北京国双科技有限公司 自动化扩容缩容的控制方法、装置、存储介质及处理器
CN110187980A (zh) * 2019-04-19 2019-08-30 北京三快在线科技有限公司 消息队列监控方法、装置、电子设备及可读存储介质
CN111126933A (zh) * 2019-11-11 2020-05-08 中盈优创资讯科技有限公司 Kafka生产和消费进度监控方法及装置
WO2021180025A1 (zh) * 2020-03-13 2021-09-16 北京金山云网络技术有限公司 一种消息处理方法、装置、电子设备及介质

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115811537A (zh) * 2023-02-20 2023-03-17 江苏金恒信息科技股份有限公司 资源调整方法、装置、计算机设备和存储介质

Also Published As

Publication number Publication date
CN114490091B (zh) 2022-07-08

Similar Documents

Publication Publication Date Title
CN110502494B (zh) 日志处理方法、装置、计算机设备及存储介质
CN108632365B (zh) 服务资源调整方法、相关装置和设备
CN102882745B (zh) 一种用于监控业务服务器的方法和装置
US20060277295A1 (en) Monitoring system and monitoring method
EP2324406B1 (en) Method and apparatus for monitoring the performance of a power delivery control system
CN111049705A (zh) 一种监控分布式存储系统的方法及装置
CN102521098B (zh) Cpu死机监控的处理方法和装置
CN103713981A (zh) 一种数据库服务器性能检测和预警方法
CN112115031A (zh) 集群状态监控方法及装置
CN114490091B (zh) 工业数据采集管理系统中监控规则引擎性能的方法及装置
US7324923B2 (en) System and method for tracking engine cycles
CN111767009A (zh) 磁盘清理方法、装置及设备
CN115811537A (zh) 资源调整方法、装置、计算机设备和存储介质
CN109766198B (zh) 流式处理方法、装置、设备及计算机可读存储介质
Khan et al. Modeling the autoscaling operations in cloud with time series data
CN111240936A (zh) 一种数据完整性校验的方法及设备
CN112214303A (zh) Kubernetes集群自动缩放系统
CN113849160B (zh) 编译任务的动态迁移方法、装置、电子设备及存储介质
CN115795359A (zh) 信号类型判别方法、装置和计算机设备
CN113064765B (zh) 节点异常处理方法、装置、电子设备及机器可读存储介质
CN113672449A (zh) 智能运维异常监测方法、装置、计算机设备和存储介质
CN111209102A (zh) 一种分布式任务分发方法与系统
CN111694705A (zh) 监控方法、装置、设备及计算机可读存储介质
CN110955579A (zh) 一种基于Ambari的大数据平台的监测方法
CN115686381B (zh) 存储集群运行状态的预测方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant