CN108628884B - 一种复杂事件处理方法、系统及其装置 - Google Patents
一种复杂事件处理方法、系统及其装置 Download PDFInfo
- Publication number
- CN108628884B CN108628884B CN201710165680.6A CN201710165680A CN108628884B CN 108628884 B CN108628884 B CN 108628884B CN 201710165680 A CN201710165680 A CN 201710165680A CN 108628884 B CN108628884 B CN 108628884B
- Authority
- CN
- China
- Prior art keywords
- event
- silent
- timer
- type set
- instruction message
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/06—Generation of reports
- H04L43/067—Generation of reports using time frame reporting
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Telephonic Communication Services (AREA)
Abstract
本申请实施例公开了一种复杂事件处理方法、系统及其装置,用于在复杂事件处理系统中识别静默事件。本申请实施例方法包括:任务管理装置获取事件类型集合;所述任务管理装置向事件分发装置发送所述事件类型集合;所述事件分发装置向静默事件匹配装置发送初始化指令消息,所述初始化指令消息包括所述事件类型集合;所述静默事件匹配装置启动定时器;若在所述定时器启动后的预置时间内,所述静默事件匹配装置未接收到属于所述事件类型集合中的任一事件类型的事件,则生成静默事件;所述静默事件匹配装置向终端发送所述静默事件。
Description
技术领域
本申请涉及通信领域,尤其涉及一种复杂事件处理方法、系统及其装置。
背景技术
大数据分析系统需要对各种业务系统产生的各种各样的海量数据进行采集、分析和存储,尽量发掘数据中蕴藏的价值,如电商系统、运营商系统等。其中有一些类别的数据吞吐量特别大,如网站的用户行为日志数据、运营商网络的信令数据。这些类别的数据的特点是其价值随着时间的流逝迅速降低,需要及时处理。例如,根据手机用户实时的位置信息做周边商家打折促销的短信推荐,然而如果过了一个小时,甚至几分钟再去做推荐,用户可能已经离开当时的位置了,此时若再进行推荐,则失去其意义。
对于这类数据的处理,通常有一个实时流系统(Streaming system)负责,通过实时采集数据,并内存中进行计算,最后输出数据分析结果给后端系统。整个处理过程尽量避免存储数据到磁盘,避免占用大量的空间,同时也避免读写磁盘代开了IO开销。在实时流系统中有一个重要的装置,用于识别事件的模式,叫做复杂事件处理系统(Complex EventProcessing,CEP)。
首先,管理员通过CEP的任务管理装置的界面或命令行接口创建一个事件模式,接着任务管理装置对输入的描述文本进行编译,编译的结果有两部分:一部分执行逻辑发送给“事件分发装置”,告诉它如何解码接收的事件,以及按哪个关键属性(例如,通常按手机号码属性的作为关键属性)进行事件分发;另一部分执行逻辑发送给“事件模式匹配装置”,告诉该装置上的状态机执行引擎,当事件到来的时候,为每一个关键属性值(例如手机号码)创建与模式对应的状态机,然后由状态机自身的状态迁移来实现模式的匹配。
但是由于使用了状态机原理实现,创建状态机通常在首个消息到达执行引擎时,如果没有事件进入的话,是无法工作的,因此无法识别用户的“静默事件”,例如,使用CEP分析移动用户的行为:用户连续1小时内没有打电话、用户一周内没有互联网访问、用户一个月内没有发生漫游。
为了解决当前的CEP系统无法识别用户的“静默事件”的问题,相关的业务功能要采用通过离线的方式搜集并存储事件数据,并定时周期性调度执行对数据的扫描统计。具体的,首先把事件采集后存储在分布式文件系统(Hadoop File System,HDFS)中,事件存储周期按事件模式中要求的识别的最长周期而定。接着,开发数据分析任务,定期调度执行,读取特定周期的数据,基于某个键集合查找是否有相关的数据,如果没有任何数据,说明满足空模式的要求,从而可以触发一个事件。
在大数据计算领域,流数据通常吞吐量非常大,上述方法存储事件到磁盘会造成繁忙,性能出现瓶颈,并且会消耗大量的存储空间,因此事件流落地会造成大量的性能损失和空间浪费。另外,由于处理延时大,周期性执行必然有时间间隔,导致事件数据处理不及时,在某些及时性要求高的场景下,离线周期调度执行是不可接受的。
发明内容
本申请实施例提供了一种复杂事件处理方法、系统及其装置,用于在复杂事件处理系统中识别静默事件。
有鉴于此,本申请实施例的第一方面提供一种复杂事件处理方法,包括:
任务管理装置获取事件类型集合,任务管理装置可以通过人机交互界面接收定义的事件类型集合,该事件类型集合包括一个或多个事件类型,该事件类型集合中的事件类型可以被事件分发装置判断分发的事件模式匹配装置,也可以被事件模式匹配装置判断是否需要生成复杂事件。
该任务管理装置向事件分发装置发送该事件类型集合,进行事件分发的算法可以采用典型的一致性哈希算法,哈希环首先被分成若干个相等的区域,每个区域使用一个标识,不同事件只要标识相同,计算出的哈希值所在的区域必然相同,事件分发装置将同一个标识的事件分发到同一个事件模式匹配装置中。
该事件分发装置向静默事件匹配装置发送初始化指令消息,该初始化指令消息包括该事件类型集合,在事件模式匹配装置集群中,接收了初始化指令消息以及接收了任务管理装置的事件模式匹配装置,可以作为静默事件匹配装置,以执行其功能。
该静默事件匹配装置启动定时器,当静默事件匹配装置接收到初始化指令消息时,可以启动定时器,也可以同时启动状态机引擎,以建立一个状态机,同时根据初始化指令消息设定超时的时间。
若在该定时器启动后的预置时间内,该静默事件匹配装置未接收到属于该事件类型集合中的任一事件类型的事件,则生成静默事件,在CQL的描述方式的前提下,增加了No关键字,模式的含义是:在60分钟内,对于集合中的每一个元素,没有发生相关的A、B、C事件的,触发一个复杂事件。该静默事件匹配装置向终端发送该静默事件,当静默事件匹配装置生成静默事件时,则可以向终端发送。在一些可行的实施例中,可以通过短信的形式发送,也可以通过向其应用的形式发送,此处不作限定。
系统处理静默事件时,数据不需要存储到磁盘,数据都在网络和内存中进行传输和处理,而且即时对事件进行处理,不会导致磁盘的性能下降。
结合本申请第一方面,本申请第一方面的第一种实施方式,该方法包括:
该事件分发装置接收事件;若该事件属于该事件类型集合中的任一事件类型,则该事件分发装置向该静默事件匹配装置发送该事件;若接收到该事件时为该定时器启动后的预置时间内,则该事件模式匹配装置终止该定时器。
在另一些可行的实施例中,当事件分发装置接收到事件时,会判断其是否为事件类型集合中任一事件类型的事件,若是,则销毁状态机,终止定时器,还可以同时重建一个新的状态机以及重启一个定时器,则不会生成任何静默事件。
可选的,该事件类型包括目标用户的通话业务、短信业务或视频业务。
可选的,该预置时间包括1分钟、1小时或者1周。
可选的,该移动终端包括手机、平板电脑或者车载终端。
本申请实施例的第二方面提供一种复杂事件处理系统,包括:
任务管理装置,用于获取事件类型集合,向事件分发装置发送该事件类型集合;该事件分发装置,用于向静默事件匹配装置发送初始化指令消息,该初始化指令消息包括该事件类型集合;该静默事件匹配装置,用于当接收到该空模式初始化事件时,启动定时器,若在该定时器启动后的预置时间内未接收到属于该事件类型集合中的任一事件类型的事件,则生成静默事件,并向终端发送该静默事件。
本申请实施例的第三方面提供一种复杂事件处理方法,包括:
事件分发装置接收事件类型集合;该事件分发装置向静默事件匹配装置发送初始化指令消息,该初始化指令消息包括该事件类型集合,以使得该静默事件匹配装置启动定时器,且若在该定时器启动后的预置时间内未接收到该事件,则生成静默事件,并向终端发送该静默事件。
结合本申请第三方面,本申请第三方面的第一种实施方式,该方法还包括:
该事件分发装置接收事件;若该事件属于该事件类型集合中的任一事件类型,则该事件分发装置向该静默事件匹配装置发送该事件,以使得该静默事件匹配装置终止该定时器。
可选的,该事件类型包括目标用户的通话业务、短信业务或视频业务。
可选的,该预置时间包括1分钟、1小时或者1周。
可选的,该移动终端包括手机、平板电脑或者车载终端。本申请实施例的第四方面提供一种事件分发装置,包括:
第一接收模块,用于接收事件类型集合;第一发送模块,用于向静默事件匹配装置发送初始化指令消息,该初始化指令消息包括该事件类型集合,以使得该静默事件匹配装置启动定时器,且若在该定时器启动后的预置时间内未接收到该事件,则生成静默事件,并向终端发送该静默事件。
结合本申请第四方面,本申请第四方面的第一种实施方式,该事件分发装置还包括:
第二接收模块,用于接收事件;第二发送模块,用于若该事件属于该事件类型集合中的任一事件类型,则向该静默事件匹配装置发送该事件,以使得该静默事件匹配装置终止该定时器。
本申请实施例的第五方面提供一种事件分发装置,包括:
总线、存储器、处理器、收发器;该总线用于与该存储器、该处理器、该收发器连接;该收发器,用于接收事件类型集合;该处理器,用于根据该事件类型集合生成初始化指令消息;该收发器,还用于向静默事件匹配装置发送初始化指令消息,该初始化指令消息包括该事件类型集合,以使得该静默事件匹配装置启动定时器,且若在该定时器启动后的预置时间内未接收到该事件,则生成静默事件,并向终端发送该静默事件;该存储器,用于存储程序、该事件类型集合和该初始化指令消息。
本申请实施例的第六方面提供一种事件分发方法,包括:
静默事件匹配装置接收该初始化指令消息,该初始化指令消息包括事件类型集合;该静默事件匹配装置根据该初始化指令消息启动定时器;若在该定时器启动后的预置时间内未接收到属于该事件类型集合中的任一事件类型的事件,则该静默事件匹配装置生成静默事件;该静默事件匹配装置向终端发送该静默事件。
结合本申请第四方面,本申请第四方面的第一种实施方式,该方法还包括:
该事件模式匹配装置接收事件;若该事件属于该事件类型集合中的任一事件类型,且在该定时器启动后的预置时间内,则该事件模式匹配装置终止该定时器。
可选的,该事件类型包括目标用户的通话业务、短信业务或视频业务。
可选的,该预置时间包括1分钟、1小时或者1周。
可选的,该移动终端包括手机、平板电脑或者车载终端。
本申请实施例的第七方面提供一种静默事件匹配装置,包括:
第一接收模块,用于接收该初始化指令消息,该初始化指令消息包括事件类型集合;定时器模块,用于该静默事件匹配装置根据该初始化指令消息启动定时器;生成模块,用于若在该定时器启动后的预置时间内未接收到属于该事件类型集合中的任一事件类型的事件,则生成静默事件;发送模块,用于向终端发送该静默事件。
结合本申请第七方面,本申请第七方面的第一种实施方式,该静默事件匹配装置还包括:
第二接收模块,用于接收事件;该定时器模块,还用于若该事件属于该事件类型集合中的任一事件类型,且在该定时器启动后的预置时间内,则终止该定时器。
本申请实施例的第八方面提供一种静默事件匹配装置,包括:
总线、存储器、处理器、收发器;该总线用于与该存储器、该处理器、该收发器连接;该收发器,用于接收初始化指令消息,该初始化指令消息包括事件类型集合;该处理器,用于根据该初始化指令消息启动定时器,若在该定时器启动后的预置时间内未接收到属于该事件类型集合中的任一事件类型的事件,则生成静默事件;该收发器,还用于向终端发送该静默事件;该存储器,用于存储程序、该初始化指令消息、该事件类型集合、该静默事件。
本申请还提供了一种计算机可读存储介质,包括指令,当其在计算机上运行时,使得计算机执行以上任意一方面所述的方法。
本申请还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行以上任意一方面所述的方法。
从以上技术方案可以看出,本申请实施例具有以下优点:
由于在该复杂事件处理系统中,任务管理装置获取事件类型集合,该任务管理装置向事件分发装置发送该事件类型集合,该事件分发装置向静默事件匹配装置发送初始化指令消息,该初始化指令消息包括该事件类型集合,该静默事件匹配装置启动定时器,若在该定时器启动后的预置时间内,该静默事件匹配装置未接收到属于该事件类型集合中的任一事件类型的事件,则生成静默事件,该静默事件匹配装置向终端发送该静默事件,因此,系统处理静默事件时,数据不需要存储到磁盘,数据都在网络和内存中进行传输和处理,而且即时对事件进行处理,不会导致磁盘的性能下降。
附图说明
图1为本申请实施例中复杂事件处理系统的框架示意图;
图2为本申请实施例中复杂事件处理方法一个实施例示意图;
图3为本申请实施例中复杂事件处理系统的一个实施例示意图;
图4为本申请实施例中事件分发装置的一个实施例示意图;
图5为本申请实施例中事件分发装置的另一个实施例示意图;
图6为本申请实施例中事件分发装置的另一个实施例示意图;
图7为本申请实施例中事件处理装置的一个实施例示意图;
图8为本申请实施例中事件处理装置的另一个实施例示意图;
图9为本申请实施例中事件处理装置的另一个实施例示意图。
具体实施方式
本申请实施例提供了一种复杂事件处理方法、系统及其装置,用于在复杂事件处理系统中识别静默事件。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
如图1所示,是一种复杂事件处理系统的架构,包括任务管理装置、事件分发装置和事件模式匹配装置集群,其中,该事件模式匹配装置集群包括多个事件模式匹配装置。
在本申请实施例中,任务管理装置用于负责提供人机交互界面和应用程序编程接口,为复杂事件处理系统中的各个装置下发配置模式和配置路由规则,包括通知事件模式匹配装置集群需要匹配的事件模式,以及通知事件分发装置分发事件的规则。
在本申请实施例中,事件分发装置需将事件根据事件的某一个或一组属性值进行分发,将相关事件分发到同一个事件模式匹配装置上。例如,根据电话号码来进行相关性的匹配,事件分发装置就根据电话号码进行分发。
在本申请实施例中,事件模式匹配装置集群包括的多个事件模式匹配装置,为分布式集群。事件模式匹配装置可以包括两个模块:状态机引擎和定时器。状态机引擎首先根据业务处理事件的场景生成一个有限状态机,当接收到事件时,状态机的状态进行变迁。
以下,举一个实际的业务场景,找出在5分钟内发短信超过1000条的手机号码,对这些手机号码进行特别关注,判断其是否再发诈骗短信。
CEP中的任务管理装置将此任务使用可视化查询语言(Common Query Language,CQL)编译而成,将事件匹配模式发送至事件模式匹配装置,将事件分发逻辑发送至事件分发装置,以使得事件分发装置接收事件,若接收到手机发送短信的事件,则将该事件发送至事件模式匹配装置。而当地一条短信事件到来时,事件模式匹配装置中的状态机引擎将为每一个发短信的手机建立一个状态机,状态机的状态的时间结束事件时5分钟,该状态接受到一个短信事件就做加1的计数操作,如果该状态在5分钟内总数超过1000,触发一个复杂事件,告诉应用某个号码达到了业务要求的条件,需要进行格外关注。终端或者复杂事件应用可能通知相关系统进行短信内容的鉴别。反之,如果5分钟到达,计数未超过1000,则状态机销毁,不产生复杂事件。
然而,由于状态机原理,在这种状态机的基础下的CEP首个消息到达执行状态机引擎时,如果没有事件进入的话,是无法工作的。例如,使用CEP分析移动用户的行为,识别连续1小时内没有打电话的用户;识别一周内没有互联网访问的用户;识别一个月内没有发生漫游的用户。这种事件称为静默事件,而在事件模式匹配装置集群中由于识别静默事件的称为静默事件匹配装置。
为了解决以上问题,本申请实施例中引入了处理静默事件的称为静默事件匹配装置。任务管理装置获取事件类型集合,并向事件分发装置发送该事件类型集合,该事件分发装置向静默事件匹配装置发送初始化指令消息,该初始化指令消息包括该事件类型集合,该静默事件匹配装置启动定时器,若在该定时器启动后的预置时间内,该静默事件匹配装置未接收到属于该事件类型集合中的任一事件类型的事件,则生成静默事件,该静默事件匹配装置向终端发送该静默事件,从而使得即使没有事件的静默事件,依然可以通过CEP辨识。
为便于理解,下面对本申请实施例中的具体流程进行描述,请参阅图2,本申请实施例中复杂事件处理方法一个实施例包括:
201、任务管理装置获取事件类型集合。
在本申请实施例中,任务管理装置可以通过人机交互界面接收定义的事件类型集合,该事件类型集合包括一个或多个事件类型。该事件类型集合中的事件类型可以被事件分发装置判断分发的事件模式匹配装置,也可以被事件模式匹配装置判断是否需要生成复杂事件。
任务管理装置对输入的描述文本进行编译,编译的结果有两部分:一部分执行逻辑发送给“事件分发装置”,告诉它如何解码接收的事件,以及按哪个关键属性(例如,通常按手机号码属性的作为关键属性)进行事件分发;另一部分执行逻辑发送给相应的“事件模式匹配装置”,告诉该装置上的状态机引擎,当事件到来的时候,为每一个关键属性值(例如手机号码)创建与模式对应的状态机,然后由状态机自身的状态迁移来实现模式的匹配。
在本申请实施例中,配置管理员首先通过CEP的任务管理装置的界面或命令行接口创建一个事件模式,该事件模式可以由特定的描述语言来描述,如CQL,或者一个正则表达式,也可能是其它私有的描述方式,此处不作限定。
需要说明的是,事件是指从数据源产生的已定义的数据元组的集合。例如,一条日志、一个信令都是一条事件,数据元组就是事件包含的字段或属性,例如事件标识、配置管理员标识、日志标识、信令标识。事件需要定义才能被CEP接受和处理。
事件源,指的是产生事件的业务系统,如,各种生产系统或事件探针系统。事件源是产生事件流的源头,事件流由连续不断的事件组成。一个事件包括一个唯一的事件标识,事件内容则包括一组事件属性,每个属性由一个属性名和对应的数据类型定义。相同事件标识的事件,其属性名和类型完全一致。
例如打电话事件,事件标识为CallingEvent,属性定义:
callingnumber:String;callednumber:String;duration:integer;starttime:date;endtime:date;timestamp:time
则该事件的一个实例,事件标识为callingEvent,事件内容为:
13513121569,18985655623,87,20151010 120523,20151010 121141,201510101205232412
202、该任务管理装置向事件分发装置发送该事件类型集合。
在一些可行的实施例中,进行事件分发的算法可以采用典型的一致性哈希算法。具体的步骤可以为,哈希环首先被分成若干个相等的区域,每个区域使用一个标识,不同事件只要标识相同,计算出的哈希值所在的区域必然相同,事件分发装置将同一个标识的事件分发到同一个事件模式匹配装置中。
下面以以下的定义规则进行定义:
Event A PARTITION BY(Userid);
Event B PARTITION BY(Userid);
Event C PARTITION BY(Userid);
在事件分发装置上,根据事件A、B、C的userid属性进行哈希路由的事件分发。
定义键集合:
Define keyset VIPuser(userid:string)loadfrom datasource_uri;
定义一个键集合,名称为VIPuser,键的用户是userid,数据从datasource_uri加载,数据源可以是数据库或文件等任何类型的数据存储。
在本申请实施例中,当需要辨识静默事件时,该任务管理装置向事件分发装置发送该事件类型集合,也可以有事件分发装置主动获取存储的事件类型集合,此处不作限定。
需要说明的是,该任务管理装置还可以向事件分发装置发送对于该事件类型集合的执行逻辑,具体为当事件分发装置接收到属于该事件类型集合中任一事件类型的事件时,将该事件分发到相应的事件模式匹配装置,在本申请实施例中,则将该事件分发到静默事件匹配装置中。
203、该事件分发装置向静默事件匹配装置发送初始化指令消息,该初始化指令消息包括该事件类型集合。
在本申请实施例中,当需要识别静默事件时,可以向事件模式匹配装置发送初始化指令消息,该初始化指令消息包括该事件类型集合,则在事件模式匹配装置集群中,接收了初始化指令消息以及接收了任务管理装置的事件模式匹配装置,可以作为静默事件匹配装置,以执行其功能。在一些可行的实施例中,该初始化指令消息还用于指示静默事件匹配装置在指定的时间启动状态机和定时器,以使得该静默事件匹配装置在该时间执行其功能。
需要说明的是,事件分发装置提取数据源上指定的数据表或件,实例化一个事件类型集合,然后为集合的每一个元素创建一条虚拟的内部事件来实例化空模式,事件的结构可以如下:
Event InitialNullPattern(Key:type)
则生成的事件与外部的事件可以先后发给静默事件匹配装置。
需要说明的是,事件模式是指用来描述多个事件之间的关系,包括先后顺序关系、事件发生的时间的相互关系。例如,假设有事件A、事件B、事件C,三类事件,可定义一个事件模式给CEP,要求CEP识别出:各个事件以“ACAB”的顺序发生,而且A事件和C事件间的间隔不小于10分钟。如果进入CEP的事件满足以上模式描述,CEP就会触发一个复杂事件,如果不满足CEP就什么也不输出一系列事件被输入进入CEP,CEP进行事件模式匹配计算,当符合预定义的事件模式,CEP产生一个复杂事件给的终端或者复杂事件应用。
在CQL语言中,配置管理员可以通过如下定义输出的事件类型,首先定义一个事件,事件名为ComplexEventName,包含1个属性并定义了该属性的类型为String:
Define ComplexEventName(Userid:String);
接着定义可能的输入事件的事件类型,定义3个事件,事件名分别为A、B、C,意思是可能会有这三种事件发生:
Define A(Userid:String,A_attribute1:String,A_attribute2:String);
Define B(Userid:String,B_attribute1:String,B_attribute2:String);
Define C(Userid:String,C_attribute1:String,C_attribute2:String);
则可以得到事件类型集合为(A,B,C),需要说明的是,该事件类型集合属于键集合,即元素不重复的数据集。
需要说明的是,该事件类型集合中的事件类型可以由配置管理员手动输入定义,也可以通过CEP接收的事件,提取该事件的事件类型,将该事件的事件类型添加进事件类型集合中,此处不做限定。
204、该静默事件匹配装置启动定时器。
当静默事件匹配装置接收到初始化指令消息时,可以启动定时器,也可以同时启动状态机引擎,以建立一个状态机,同时根据初始化指令消息设定超时的时间。
需要说明的是,在一些可行的实施例中,事件模式匹配装置中,状态机中每个状态必然有一个超时时间,状态的超时控制由定时管理器模块实现,当某个状态超时,定时管理器将发送时间结束事件给状态机引擎,触发状态的变迁,也就是说,状态机的状态变迁由外部的事件和时间结束事件共同驱动。当状态机的状态最终变迁到结束状态,将生成一个复杂事件发送出去,如果状态机未能到达结束状态而被销毁,说明事件模式无法匹配或者匹配失败。
205、若在该定时器启动后的预置时间内,该静默事件匹配装置未接收到属于该事件类型集合中的任一事件类型的事件,则生成静默事件。
静默事件匹配装置的状态机引擎按可以执行以下逻辑:
如果状态机到达60分钟超时事件仍未收到事件类型集合中的任一事件类型的事件时,则触发生成静默事件。
在一些可行的实施例中,可以通过CQL语言如下定义空模式:
Emit ComplexEventName(Userid=$id,attribute1,attribute2,attribute3)
Select
No A(userid=$id in VIPuser)and
No B(userid=$id in VIPuser)and
No C(userid=$id in VIPuser)
WITHIN 60mintues;
在CQL的描述方式的前提下,增加了“No”关键字,模式的含义是:在60分钟内,对于VIPuser集合中的每一个元素userid,没有发生相关的A、B、C事件的,触发一个复杂事件ComplexEventName。
206、该静默事件匹配装置向终端发送该静默事件。
当静默事件匹配装置生成静默事件时,则可以向终端发送。在一些可行的实施例中,可以通过短信的形式发送,也可以通过向其应用的形式发送,此处不作限定。
需要说明的是,该终端可以为包括手机、平板电脑、车载电脑等任意终端设备,以终端为手机为例,其内部结构可以包括:
射频(Radio Frequency,RF)电路、存储器、输入单元、显示单元、传感器、音频电路、无线保真(wireless fidelity,WiFi)模块、处理器、以及电源等部件。本领域技术人员可以理解,以上所述的手机结构并不构成对手机的限定,可以包括更多或更少的部件,或者组合某些部件,或者不同的部件布置。
207、该事件分发装置接收事件。
在一些可行的实施例中,该事件可以包括的通话业务、短信业务或视频业务。
208、若该事件属于该事件类型集合中的任一事件类型,则该事件分发装置向该静默事件匹配装置发送该事件。
在另一些可行的实施例中,当事件分发装置接收到事件时,会判断其是否为事件类型集合中任一事件类型的事件。
209、若接收到该事件时为该定时器启动后的预置时间内,则该事件模式匹配装置终止该定时器。
在一些可行的实施例中,预置时间可以包括1分钟、1小时或者1周。若在预置时间内,则销毁状态机,终止定时器,还可以同时重建一个新的状态机以及重启一个定时器,则不会生成任何静默事件。
上面对本申请实施例中复杂事件处理方法进行描述,下面对本申请实施例中的复杂事件处理系统进行描述,请参考图3,本申请实施例复杂事件处理系统300的一个实施例,包括:
任务管理装置301,用于获取事件类型集合,向事件分发装置发送该事件类型集合。
该事件分发装置302,用于向静默事件匹配装置发送初始化指令消息,该初始化指令消息包括该事件类型集合。
该静默事件匹配装置303,用于当接收到该空模式初始化事件时,启动定时器,若在该定时器启动后的预置时间内未接收到属于该事件类型集合中的任一事件类型的事件,则生成静默事件,并向终端发送该静默事件。
请参阅图4,本申请实施例中事件分发装置302的一个实施例,包括:
第一接收模块3021,用于接收事件类型集合。
第一发送模块3022,用于向静默事件匹配装置发送初始化指令消息,该初始化指令消息包括该事件类型集合,以使得该静默事件匹配装置启动定时器,且若在该定时器启动后的预置时间内未接收到该事件,则生成静默事件,并向终端发送该静默事件。
请参阅图5,本申请实施例中事件分发装置302的另一个实施例,包括:
第二接收模块3023,用于接收事件。
第二发送模块3024,用于若该事件属于该事件类型集合中的任一事件类型,则向该静默事件匹配装置发送该事件,以使得该静默事件匹配装置终止该定时器。
请参考图6,本申请实施例中事件分发装置600的一个实施例,包括:
总线601、存储器604、处理器603、收发器602。
该总线601用于与该存储器604、该处理器603、该收发器602连接。
该收发器602,用于接收事件类型集合。
收发器602可以包括该处理器603和标准通信子系统之间的通信接口(英文communication interface)。
收发器602还可以进一步包括EIA-RS-232C标准下的通信接口,即数据终端设备(Data Terminal Equipment,DTE)和数据通讯设备(Data Circuit-terminatingEquipment,DCE)之间串行二进制数据交换接口技术标准的通信接口,也可以包括RS-485协议下的通信接口,此处不作限定。
该处理器603,用于根据该事件类型集合生成初始化指令消息。
处理器603可以是中央处理器(central processing unit,CPU),网络处理器(network processor,NP)或者CPU和NP的组合。
处理器603还可以进一步包括硬件芯片。上述硬件芯片可以是专用集成电路(application-specific integrated circuit,ASIC),可编程逻辑器件(programmablelogic device,PLD)或其组合。上述PLD可以是复杂可编程逻辑器件(complexprogrammable logic device,CPLD),现场可编程逻辑门阵列(field-programmable gatearray,FPGA),通用阵列逻辑(generic array logic,GAL)或其任意组合。
该收发器602,还用于向静默事件匹配装置发送初始化指令消息,该初始化指令消息包括该事件类型集合,以使得该静默事件匹配装置启动定时器,且若在该定时器启动后的预置时间内未接收到该事件,则生成静默事件,并向终端发送该静默事件。
该存储器604,用于存储程序、该事件类型集合和该初始化指令消息。
存储器604可以包括易失性存储器(volatile memory),例如随机存取存储器(random-access memory,RAM)。存储器604也可以包括非易失性存储器(non-volatilememory),例如快闪存储器(flash memory),硬盘(hard disk drive,HDD)或固态硬盘(solid-state drive,SSD)。存储器604还可以包括上述种类的存储器的组合,此处不作限定。
可选地,存储器604还可以用于存储程序指令,处理器603可以调用该存储器604中存储的程序指令,执行图2所示实施例中的步骤,或其中可选的实施方式,使得实现上述方法的功能。
请参考图7,本申请实施例中静默事件匹配装置303的一个实施例,包括:
第一接收模块3031,用于接收该初始化指令消息,该初始化指令消息包括事件类型集合。
定时器模块3032,用于该静默事件匹配装置根据该初始化指令消息启动定时器。
生成模块3033,用于若在该定时器启动后的预置时间内未接收到属于该事件类型集合中的任一事件类型的事件,则生成静默事件。
发送模块3034,用于向终端发送该静默事件。
请参考图8,本申请实施例中静默事件匹配装置303的另一个实施例,包括:
第二接收模块3035,用于接收事件。
该定时器模块3036,还用于若该事件属于该事件类型集合中的任一事件类型,且在该定时器启动后的预置时间内,则终止该定时器。
请参考图9,本申请实施例中静默事件匹配装置900的一个实施例,包括:
总线901、存储器904、处理器903、收发器902。
该总线901用于与该存储器904、该处理器903、该收发器902连接。
该收发器902,用于接收初始化指令消息,该初始化指令消息包括事件类型集合。
该处理器903,用于根据该初始化指令消息启动定时器,若在该定时器启动后的预置时间内未接收到属于该事件类型集合中的任一事件类型的事件,则生成静默事件。
该收发器902,还用于向终端发送该静默事件。
该存储器904,用于存储程序、该初始化指令消息、该事件类型集合、该静默事件。
本申请还提供了一种计算机可读存储介质,包括指令,当其在计算机上运行时,使得计算机执行以上任意一实施例所述的方法。
本申请还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行以上任意一实施例所述的方法。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-OnlyMemory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。
Claims (22)
1.一种复杂事件处理方法,其特征在于,包括:
任务管理装置获取事件类型集合;
所述任务管理装置向事件分发装置发送所述事件类型集合;
所述事件分发装置向静默事件匹配装置发送初始化指令消息,所述初始化指令消息包括所述事件类型集合;
所述静默事件匹配装置启动定时器;
若在所述定时器启动后的预置时间内,所述静默事件匹配装置未接收到属于所述事件类型集合中的任一事件类型的事件,则生成静默事件;
所述静默事件匹配装置向终端发送所述静默事件。
2.根据权利要求1所述方法,其特征在于,所述静默事件匹配装置启动定时器之后,还包括:
所述事件分发装置接收事件;
若所述事件属于所述事件类型集合中的任一事件类型,则所述事件分发装置向所述静默事件匹配装置发送所述事件;
若接收到所述事件时为所述定时器启动后的预置时间内,则所述事件模式匹配装置终止所述定时器。
3.根据权利要求1或2所述方法,其特征在于,所述事件类型包括目标用户的通话业务、短信业务或视频业务。
4.根据权利要求1或2所述方法,其特征在于,所述预置时间包括1分钟、1小时或者1周。
5.根据权利要求1或2所述方法,其特征在于,所述终端包括手机、平板电脑或者车载终端。
6.一种复杂事件处理系统,其特征在于,包括:
任务管理装置,用于获取事件类型集合,向事件分发装置发送所述事件类型集合;
所述事件分发装置,用于向静默事件匹配装置发送初始化指令消息,所述初始化指令消息包括所述事件类型集合;
所述静默事件匹配装置,用于当接收到空模式初始化事件时,启动定时器,若在所述定时器启动后的预置时间内未接收到属于所述事件类型集合中的任一事件类型的事件,则生成静默事件,并向终端发送所述静默事件。
7.一种复杂事件处理方法,其特征在于,包括:
事件分发装置接收事件类型集合;
所述事件分发装置向静默事件匹配装置发送初始化指令消息,所述初始化指令消息包括所述事件类型集合,以使得所述静默事件匹配装置启动定时器,且若在所述定时器启动后的预置时间内未接收到属于所述事件类型集合中的任一事件类型的事件,则生成静默事件,并向终端发送所述静默事件。
8.根据权利要求7所述方法,其特征在于,所述事件分发装置向静默事件匹配装置发送初始化指令消息之后,还包括:
所述事件分发装置接收事件;
若所述事件属于所述事件类型集合中的任一事件类型,则所述事件分发装置向所述静默事件匹配装置发送所述事件,以使得所述静默事件匹配装置终止所述定时器。
9.根据权利要求7或8所述方法,其特征在于,所述事件类型包括目标用户的通话业务、短信业务或视频业务。
10.根据权利要求7或8所述方法,其特征在于,所述预置时间包括1分钟、1小时或者1周。
11.根据权利要求7或8所述方法,其特征在于,所述终端包括手机、平板电脑或者车载终端。
12.一种事件分发装置,其特征在于,包括:
第一接收模块,用于接收事件类型集合;
第一发送模块,用于向静默事件匹配装置发送初始化指令消息,所述初始化指令消息包括所述事件类型集合,以使得所述静默事件匹配装置启动定时器,且若在所述定时器启动后的预置时间内未接收到属于所述事件类型集合中的任一事件类型的事件,则生成静默事件,并向终端发送所述静默事件。
13.根据权利要求12所述事件分发装置,其特征在于,还包括:
第二接收模块,用于接收事件;
第二发送模块,用于若所述事件属于所述事件类型集合中的任一事件类型,则向所述静默事件匹配装置发送所述事件,以使得所述静默事件匹配装置终止所述定时器。
14.一种事件分发装置,其特征在于,包括:
总线、存储器、处理器、收发器;
所述总线用于与所述存储器、所述处理器、所述收发器连接;
所述收发器,用于接收事件类型集合;
所述处理器,用于根据所述事件类型集合生成初始化指令消息;
所述收发器,还用于向静默事件匹配装置发送初始化指令消息,所述初始化指令消息包括所述事件类型集合,以使得所述静默事件匹配装置启动定时器,且若在所述定时器启动后的预置时间内未接收到属于所述事件类型集合中的任一事件类型的事件,则生成静默事件,并向终端发送所述静默事件;
所述存储器,用于存储程序、所述事件类型集合和所述初始化指令消息。
15.一种复杂事件处理方法,其特征在于,包括:
静默事件匹配装置接收初始化指令消息,所述初始化指令消息包括事件类型集合;
所述静默事件匹配装置根据所述初始化指令消息启动定时器;
若在所述定时器启动后的预置时间内未接收到属于所述事件类型集合中的任一事件类型的事件,则所述静默事件匹配装置生成静默事件;
所述静默事件匹配装置向终端发送所述静默事件。
16.根据权利要求15所述方法,其特征在于,所述事件分发装置向静默事件匹配装置发送初始化指令消息之后,还包括:
所述事件模式匹配装置接收事件;
若所述事件属于所述事件类型集合中的任一事件类型,且在所述定时器启动后的预置时间内,则所述事件模式匹配装置终止所述定时器。
17.根据权利要求15或16所述方法,其特征在于,所述事件类型包括目标用户的通话业务、短信业务或视频业务。
18.根据权利要求15或16所述方法,其特征在于,所述预置时间包括1分钟、1小时或者1周。
19.根据权利要求15或16所述方法,其特征在于,所述终端包括手机、平板电脑或者车载终端。
20.一种静默事件匹配装置,其特征在于,包括:
第一接收模块,用于接收初始化指令消息,所述初始化指令消息包括事件类型集合;
定时器模块,用于所述静默事件匹配装置根据所述初始化指令消息启动定时器;
生成模块,用于若在所述定时器启动后的预置时间内未接收到属于所述事件类型集合中的任一事件类型的事件,则生成静默事件;
发送模块,用于向终端发送所述静默事件。
21.根据权利要求20所述静默事件匹配装置,其特征在于,还包括:
第二接收模块,用于接收事件;
所述定时器模块,还用于若所述事件属于所述事件类型集合中的任一事件类型,且在所述定时器启动后的预置时间内,则终止所述定时器。
22.一种静默事件匹配装置,其特征在于,包括:
总线、存储器、处理器、收发器;
所述总线用于与所述存储器、所述处理器、所述收发器连接;
所述收发器,用于接收初始化指令消息,所述初始化指令消息包括事件类型集合;
所述处理器,用于根据所述初始化指令消息启动定时器,若在所述定时器启动后的预置时间内未接收到属于所述事件类型集合中的任一事件类型的事件,则生成静默事件;
所述收发器,还用于向终端发送所述静默事件;
所述存储器,用于存储程序、所述初始化指令消息、所述事件类型集合、所述静默事件。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710165680.6A CN108628884B (zh) | 2017-03-20 | 2017-03-20 | 一种复杂事件处理方法、系统及其装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710165680.6A CN108628884B (zh) | 2017-03-20 | 2017-03-20 | 一种复杂事件处理方法、系统及其装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108628884A CN108628884A (zh) | 2018-10-09 |
CN108628884B true CN108628884B (zh) | 2022-03-25 |
Family
ID=63686968
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710165680.6A Active CN108628884B (zh) | 2017-03-20 | 2017-03-20 | 一种复杂事件处理方法、系统及其装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108628884B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113553120A (zh) * | 2021-06-30 | 2021-10-26 | 珠海豹趣科技有限公司 | 任务执行方法、装置、存储介质及电子设备 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101651746A (zh) * | 2004-12-20 | 2010-02-17 | 三星电子株式会社 | 处理无线终端中的与呼叫和消息相关的事件的设备和方法 |
CN101685466A (zh) * | 2009-07-22 | 2010-03-31 | 中兴通讯股份有限公司 | 事件处理方法和设备 |
CN102214187A (zh) * | 2010-04-12 | 2011-10-12 | 阿里巴巴集团控股有限公司 | 复合事件处理方法及装置 |
CN102629352A (zh) * | 2012-03-08 | 2012-08-08 | 中国科学院自动化研究所 | 面向实时感知环境的复合事件模式匹配方法及系统 |
CN102968339A (zh) * | 2012-12-19 | 2013-03-13 | 上海普元信息技术股份有限公司 | 基于云计算架构实现复杂事件处理的系统及其方法 |
CN103458120A (zh) * | 2013-08-27 | 2013-12-18 | 小米科技有限责任公司 | 事件处理方法、装置和移动终端 |
CN104219193A (zh) * | 2013-05-29 | 2014-12-17 | 中国电信股份有限公司 | 安全事件关联分析方法及系统 |
CN105988863A (zh) * | 2015-02-11 | 2016-10-05 | 华为技术有限公司 | 一种处理事件的方法及装置 |
CN106294824A (zh) * | 2016-08-17 | 2017-01-04 | 广东工业大学 | 制造物联网面向不确定数据流的复杂事件检测方法及系统 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI337715B (en) * | 2006-11-08 | 2011-02-21 | Inst Information Industry | Method and system for complex event processing |
US9305238B2 (en) * | 2008-08-29 | 2016-04-05 | Oracle International Corporation | Framework for supporting regular expression-based pattern matching in data streams |
-
2017
- 2017-03-20 CN CN201710165680.6A patent/CN108628884B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101651746A (zh) * | 2004-12-20 | 2010-02-17 | 三星电子株式会社 | 处理无线终端中的与呼叫和消息相关的事件的设备和方法 |
CN101685466A (zh) * | 2009-07-22 | 2010-03-31 | 中兴通讯股份有限公司 | 事件处理方法和设备 |
CN102214187A (zh) * | 2010-04-12 | 2011-10-12 | 阿里巴巴集团控股有限公司 | 复合事件处理方法及装置 |
CN102629352A (zh) * | 2012-03-08 | 2012-08-08 | 中国科学院自动化研究所 | 面向实时感知环境的复合事件模式匹配方法及系统 |
CN102968339A (zh) * | 2012-12-19 | 2013-03-13 | 上海普元信息技术股份有限公司 | 基于云计算架构实现复杂事件处理的系统及其方法 |
CN104219193A (zh) * | 2013-05-29 | 2014-12-17 | 中国电信股份有限公司 | 安全事件关联分析方法及系统 |
CN103458120A (zh) * | 2013-08-27 | 2013-12-18 | 小米科技有限责任公司 | 事件处理方法、装置和移动终端 |
CN105988863A (zh) * | 2015-02-11 | 2016-10-05 | 华为技术有限公司 | 一种处理事件的方法及装置 |
CN106294824A (zh) * | 2016-08-17 | 2017-01-04 | 广东工业大学 | 制造物联网面向不确定数据流的复杂事件检测方法及系统 |
Non-Patent Citations (3)
Title |
---|
《Complex Event Processing》;David B. Robins;《Citeseer》;20100206;第1-10页 * |
《LPCEP:基于HTF存储策略和实例映射表的长过程复杂事件处理模型》;林树宽等;《小型微型计算机系统》;20150131;第71-76页 * |
《复杂事件处理在分布式系统集中监控下的应用与研究》;曹彬;《中国优秀硕士学位论文全文数据库 信息科技辑》;20140515;第I139-65页 * |
Also Published As
Publication number | Publication date |
---|---|
CN108628884A (zh) | 2018-10-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107294801B (zh) | 基于海量实时互联网dpi数据的流式处理方法及系统 | |
CN107040863B (zh) | 实时业务推荐方法及系统 | |
CN107515878B (zh) | 一种数据索引的管理方法及装置 | |
CN110362455B (zh) | 一种数据处理方法和数据处理装置 | |
WO2021169268A1 (zh) | 数据处理方法、装置、设备和存储介质 | |
CN108228322B (zh) | 一种分布式链路跟踪、分析方法及服务器、全局调度器 | |
CN109039817B (zh) | 一种用于流量监控的信息处理方法、装置、设备及介质 | |
CN111311326A (zh) | 用户行为实时多维度分析方法、装置及存储介质 | |
TW201814609A (zh) | 一種資訊推送的方法和系統及用戶端和伺服器 | |
CN111698126B (zh) | 信息监控方法、系统及计算机可读存储介质 | |
CN103138981A (zh) | 一种社交网络分析方法和装置 | |
WO2023109806A1 (zh) | 物联网设备的活跃数据处理方法、装置及存储介质 | |
CN112035531A (zh) | 敏感数据处理方法、装置、设备及介质 | |
CN104899278A (zh) | 一种Hbase数据库数据操作日志的生成方法及装置 | |
WO2022237506A1 (zh) | 在线问诊业务监控方法、装置、设备及存储介质 | |
CN113806191A (zh) | 一种数据处理方法、装置、设备及存储介质 | |
WO2016101446A1 (zh) | 数据分析方法、装置、系统及终端和服务器 | |
CN112181678A (zh) | 业务数据的处理方法、装置和系统、存储介质、电子装置 | |
CN111859127A (zh) | 消费数据的订阅方法、装置及存储介质 | |
CN108628884B (zh) | 一种复杂事件处理方法、系统及其装置 | |
WO2012155702A1 (zh) | 一种业务密钥更新的方法、系统及业务处理服务器 | |
WO2019144803A1 (zh) | 流量统计方法、装置、存储介质及电子装置 | |
CN113434742A (zh) | 账号的筛选方法和装置、存储介质及电子装置 | |
CN108696559B (zh) | 流处理方法及装置 | |
CN103440333A (zh) | 一种数据处理方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20200206 Address after: 518129 Bantian HUAWEI headquarters office building, Longgang District, Guangdong, Shenzhen Applicant after: HUAWEI TECHNOLOGIES Co.,Ltd. Address before: 210012 HUAWEI Nanjing base, 101 software Avenue, Yuhuatai District, Jiangsu, Nanjing Applicant before: Huawei Technologies Co.,Ltd. |
|
GR01 | Patent grant | ||
GR01 | Patent grant |