CN113641712A - 复杂事件的命中处理方法、装置、设备及存储介质 - Google Patents

复杂事件的命中处理方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN113641712A
CN113641712A CN202110963261.3A CN202110963261A CN113641712A CN 113641712 A CN113641712 A CN 113641712A CN 202110963261 A CN202110963261 A CN 202110963261A CN 113641712 A CN113641712 A CN 113641712A
Authority
CN
China
Prior art keywords
event
target
state
complex
complex event
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110963261.3A
Other languages
English (en)
Other versions
CN113641712B (zh
Inventor
李申明
张卓
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An Bank Co Ltd
Original Assignee
Ping An Bank Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An Bank Co Ltd filed Critical Ping An Bank Co Ltd
Priority to CN202110963261.3A priority Critical patent/CN113641712B/zh
Publication of CN113641712A publication Critical patent/CN113641712A/zh
Application granted granted Critical
Publication of CN113641712B publication Critical patent/CN113641712B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2455Query execution
    • G06F16/24553Query execution of query operations
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23Updating
    • G06F16/2358Change logging, detection, and notification
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请涉及云计算技术领域,揭示了一种复杂事件的命中处理方法、装置、设备及存储介质,其中方法包括:通过根据目标应用发送的待处理消息确定目标简单事件;在获取到的事件配置库中查找得到至少一个与目标简单事件对应的目标复杂事件;根据目标复杂事件和目标简单事件得到查询关键字;根据查询关键字和目标简单事件在状态存储库中进行复杂事件状态的匹配,得到第一匹配结果;当存在为成功的第一匹配结果时根据与为成功的第一匹配结果对应的各个目标复杂事件确定第一命中事件集合;当存在为失败的第一匹配结果时根据目标简单事件和为成功的第一匹配结果对应的各个目标复杂事件更新状态存储库。有利于对复杂事件的内部状态的访问,提高配置动态性。

Description

复杂事件的命中处理方法、装置、设备及存储介质
技术领域
本申请涉及到云计算技术领域,特别是涉及到一种复杂事件的命中处理方法、装置、设备及存储介质。
背景技术
随着市场竞争越来越激烈,各种业务对时效性要求越来越高,对实时数据处理能力要求也越来越高。在很多场景下,需要系统按照一定规则逻辑进行复杂事件处理(Complex Event Processing,简称CEP)。比如,当用户浏览了某个产品页面,但在一定时间内没有下单时,可以给他发送一条提醒信息。又比如,当用户在一个月内累计消费指定类型的商品的次数超过3次,我们给他发送一个奖励。
总的来说,复杂事件处理指的是从输入的由简单事件构成的事件流,比如,浏览事件流、购买事件流等,根据一定规则识别简单事件之间的联系,输出满足规则的复杂事件。
目前,开源的实时复杂事件处理解决方案有Flink CEP,Flink提供了流式API(接口)和SQL(结构化查询语言)API,但在实际使用中存在以下问题:(1)对事件配置的任何修改都需要重启作业,导致配置动态性不足:(2)Flink CEP没有提供访问复杂事件的内部状态的API,导致无法访问复杂事件的内部状态,无法查看某个用户的命中明细,不利于排查问题。
发明内容
本申请的主要目的为提供一种复杂事件的命中处理方法、装置、设备及存储介质,旨在解决现有技术采用Flink CEP进行复杂事件处理,存在配置动态性不足、无法访问复杂事件的内部状态的技术问题。
为了实现上述发明目的,本申请提出一种复杂事件的命中处理方法,所述方法包括:
通过对目标应用发送的待处理消息进行事件解析,得到目标简单事件;
在获取到的事件配置库中查找得到至少一个与所述目标简单事件对应的目标复杂事件;
根据所述目标复杂事件和所述目标简单事件进行查询关键字构造,得到查询关键字;
获取状态存储库,根据所述查询关键字和所述目标简单事件在所述状态存储库中进行复杂事件状态的匹配,得到第一匹配结果;
当存在为成功的所述第一匹配结果时,根据与为成功的所述第一匹配结果对应的各个所述目标复杂事件确定第一命中事件集合;
当存在为失败的所述第一匹配结果时,根据所述目标简单事件和为成功的所述第一匹配结果对应的各个目标复杂事件更新所述状态存储库。
本申请还提出了一种复杂事件的命中处理装置,所述装置包括:
数据获取模块,用于通过对目标应用发送的待处理消息进行事件解析,得到目标简单事件;
目标复杂事件确定模块,用于在获取到的事件配置库中查找得到至少一个与所述目标简单事件对应的目标复杂事件;
查询关键字确定模块,用于根据所述目标复杂事件和所述目标简单事件进行查询关键字构造,得到查询关键字;
第一匹配结果确定模块,用于获取状态存储库,根据所述查询关键字和所述目标简单事件在所述状态存储库中进行复杂事件状态的匹配,得到第一匹配结果;
第一处理模块,用于当存在为成功的所述第一匹配结果时,根据与为成功的所述第一匹配结果对应的各个所述目标复杂事件确定第一命中事件集合;
第二处理模块,用于当存在为失败的所述第一匹配结果时,根据所述目标简单事件和为成功的所述第一匹配结果对应的各个目标复杂事件更新所述状态存储库。
本申请还提出了一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现上述任一项所述方法的步骤。
本申请还提出了一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述任一项所述的方法的步骤。
本申请的复杂事件的命中处理方法、装置、设备及存储介质,其中方法首先通过对目标应用发送的待处理消息进行事件解析,得到目标简单事件,然后在获取到的事件配置库中查找得到至少一个与所述目标简单事件对应的目标复杂事件;根据所述目标复杂事件和所述目标简单事件进行查询关键字构造,得到查询关键字,获取状态存储库,根据所述查询关键字和所述目标简单事件在所述状态存储库中进行复杂事件状态的匹配,得到第一匹配结果,最后当存在为成功的所述第一匹配结果时,根据与为成功的所述第一匹配结果对应的各个所述目标复杂事件确定第一命中事件集合,当存在为失败的所述第一匹配结果时,根据所述目标简单事件和为成功的所述第一匹配结果对应的各个目标复杂事件更新所述状态存储库,通过状态存储库实现了将复杂事件的内部状态独立存储,有利于对复杂事件的内部状态的访问,有利于快速排查问题,有利于排查问题;而且每次获取到目标简单事件时获取事件配置库,从而实现了事件配置库的动态更新,提高了配置动态性。
附图说明
图1为本申请一实施例的复杂事件的命中处理方法的流程示意图;
图2为本申请一实施例的复杂事件的命中处理装置的结构示意框图;
图3为本申请一实施例的计算机设备的结构示意框图。
本申请目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
参照图1,本申请实施例中提供一种复杂事件的命中处理方法,方法包括:
S1:通过对目标应用发送的待处理消息进行事件解析,得到目标简单事件;
S2:在获取到的事件配置库中查找得到至少一个与目标简单事件对应的目标复杂事件;
S3:根据目标复杂事件和目标简单事件进行查询关键字构造,得到查询关键字;
S4:获取状态存储库,根据查询关键字和目标简单事件在状态存储库中进行复杂事件状态的匹配,得到第一匹配结果;
S5:当存在为成功的第一匹配结果时,根据与为成功的第一匹配结果对应的各个目标复杂事件确定第一命中事件集合;
S6:当存在为失败的第一匹配结果时,根据目标简单事件和为成功的第一匹配结果对应的各个目标复杂事件更新状态存储库。
本实施例首先通过对目标应用发送的待处理消息进行事件解析,得到目标简单事件,然后在获取到的事件配置库中查找得到至少一个与目标简单事件对应的目标复杂事件;根据目标复杂事件和目标简单事件进行查询关键字构造,得到查询关键字,获取状态存储库,根据查询关键字和目标简单事件在状态存储库中进行复杂事件状态的匹配,得到第一匹配结果,最后当存在为成功的第一匹配结果时,根据与为成功的第一匹配结果对应的各个目标复杂事件确定第一命中事件集合,当存在为失败的第一匹配结果时,根据目标简单事件和为成功的第一匹配结果对应的各个目标复杂事件更新状态存储库,通过状态存储库实现了将复杂事件的内部状态独立存储,有利于对复杂事件的内部状态的访问,有利于快速排查问题,有利于排查问题;而且每次获取到目标简单事件时获取事件配置库,从而实现了事件配置库的动态更新,提高了配置动态性。
对于S1,获取目标应用发送的待处理的消息;对待处理的消息进行简单事件解析,将解析得到的简单事件作为目标简单事件。可以理解的是,待处理的消息可以封装在目标应用发送的请求中。请求包括但不限于:HTTP请求。
其中,目标应用可以是业务系统,也可以是客户端,还可以是MQ(消息队列),MQ用于接收业务系统和客户端的简单事件。客户端包括:移动设备的终端、移动设备的网页端、电脑的终端、电脑的网页端。
目标简单事件,是需要进行复杂事件的命中计算的简单事件。简单事件,也称为原子事件或基本事件,是一个仅在样本空间中单个结果的事件。
简单事件包括:第二事件标识、用户标识、发生时间、事件类型和事件描述信息。比如,简单事件为:S1、用户A1、2020年1月1日10时0分0秒、购买操作、购买10个产品C1,在此举例不做具体限定。第二事件标识可以是简单事件名称、简单事件ID等唯一标识一个简单事件的数据。用户标识可以是用户名称、用户ID等唯一标识一个用户的数据。
复杂事件,是简单事件集合。简单事件集合中包括多个简单事件。复杂事件的处理,是在简单事件集合中识别用户定义的有意义事件。
复杂事件包括:第一事件标识、事件类型和事件描述信息。第一事件标识可以是复杂事件名称、复杂事件ID等唯一标识一个复杂事件的数据。事件描述信息中包括多个简单事件。复杂事件的事件类型包括:顺序类型、统计类型、断点类型。
顺序类型,是简单事件依次发生。比如,顺序类型的复杂事件的事件描述信息为:发生简单事件A3后在第一预设时长内发生简单事件A4,在此举例不做具体限定。
统计类型,是满足预设条件进行统计计算。比如,统计类型的复杂事件的事件描述信息为:时间窗口内累计次数或累计金额超过预设阈值,在此举例不做具体限定。
断点类型,是简单事件之间断点。比如,断点类型的复杂事件的事件描述信息为:发生简单事件A5后在第二预设时长内不发生简单事件A6,在此举例不做具体限定。
对于S2,可以从数据库中获取事件配置库,也可以从第三方应用系统中获取事件配置库,还可以从内存中获取事件配置库。
事件配置库包括:事件标识映射表和复杂事件库。事件标识映射表包括:第二事件标识和第一事件标识,每个第二事件标识对应一个或多个第一事件标识。复杂事件库包括一个或多个复杂事件,其中,每个复杂事件携带一个第一事件标识。
其中,在事件配置库的事件标识映射表中查找与目标简单事件的第二事件标识对应的第二事件标识,作为命中标识,并获取命中标识对应的第一事件标识,获取各第一事件标识对应的复杂事件作为作为目标复杂事件。
可选的,根据在获取到的事件配置库中查找得到至少一个与目标简单事件对应的目标复杂事件的步骤之前,还包括:采用预设时间间隔,从事件配置中心获取事件配置数据,根据获取的事件配置数据更新内存中的事件配置库中。从而实现了动态配置,自动拉取最新的事件配置数据到事件配置库中,整个过程无需停止复杂事件的处理。
对于S3,根据每个目标复杂事件的第一事件标识和目标简单事件的用户标识进行查询关键字构造。可以理解的是,目标复杂事件与查询关键字一一对应。
对于S4,状态存储库存储在Aerospike中。可以理解的是,状态存储库还可以存储在其他数据库中,比如,Redis,在此不做限定。
Aerospike,是一个分布式、高可用的K-V类型的Nosql(非关系型的数据库)数据库。
为了保证并发安全,也就是说当存在两个并行的read-write(读-写)、write-read(写-读)、read-write-read(读-写-读)中一种或多种操作组合时,必须保证整个操作组合被原子地执行。当状态存储库存储在Redis时,需要采用LUA(小巧的脚本语言)脚本实现保证整个操作组合被原子地执行的功能。Aerosipke提供了保证整个操作组合被原子地执行的功能。
状态存储库包括:查询关键字、复杂事件状态数据,每个查询关键字对应一个复杂事件状态数据。查询关键字是根据第一事件标识和用户标识构造的关键字。复杂事件状态数据,是根据复杂事件的不同事件类型设计的不同的数据结构。复杂事件状态数据,用于表述复杂事件的事件描述信息以及复杂事件的执行状态。比如,复杂事件的事件描述信息的“发生简单事件A3后在第一预设时长内发生简单事件A4”,复杂事件的执行状态为:简单事件A3的执行状态为完成和第一预设时长内发生简单事件A4的执行状态为完成,在此举例不做具体限定。也就是说,状态存储库是KV存储结构,其中KV存储结构的K(也就是Key)存储的是查询关键字,KV存储结构的V(也就是Value)存储的是复杂事件状态数据。
可以理解的是,本申请还可以通过状态存储库向第三方应用提供复杂事件的进度和命中状态的查询服务。
其中,根据查询关键字在状态存储库中查询复杂事件状态数据,然后根据目标简单事件对查询到的复杂事件状态数据进行复杂事件状态的匹配,根据事件状态匹配得到的数据作为第一匹配结果,其中,第一匹配结果有两种状态,可以是成功,也可以是失败。可以理解的是,每个查询关键字对应一个第一匹配结果。
当第一匹配结果为成功时,意味着为成功的第一匹配结果的查询关键字对应的目标复杂事件的事件描述信息已经被满足;当第一匹配结果为失败时,意味着为失败的第一匹配结果的查询关键字对应的目标复杂事件的事件描述信息没有被满足。
对于S5,当存在为成功的第一匹配结果时,意味着为成功的第一匹配结果的查询关键字对应的目标复杂事件的事件描述信息已经被满足,此时可以根据为成功的第一匹配结果对应的目标复杂事件确定一个第一命中事件。可以理解的是,第一命中事件的数量和为成功的第一匹配结果的数量相同。
比如,目标简单事件为用户Y1购买产品C1,目标复杂事件为:购买产品C1三次触发一次抽奖,目标复杂事件包括简单事件(购买产品C1三次)、简单事件(抽奖一次),目标复杂事件对应的第一匹配结果为成功,根据为成功的第一匹配结果对应的目标复杂事件确定一个第一命中事件为抽奖,在此举例不做具体限定。
可选的,从状态存储库中,对为成功的第一匹配结果每个查询关键字对应的关联数据进行删除处理,从而减少状态存储库的数据量。其中,关联数据包括:查询关键字和复杂事件状态数据。
第一命中事件包括:第一事件标识、用户标识和命中时间。命中时间是目标简单事件的发生时间。
可选的,根据查询关键字和目标简单事件在状态存储库中进行复杂事件状态的匹配,得到第一匹配结果的步骤之后,还包括:将第一命中事件推送给下游应用。
下游应用可以是MQ,也可以是业务系统,还可以是客户端。
对于S6,当存在第一匹配结果为失败时,意味着为失败的第一匹配结果的查询关键字对应的目标复杂事件的事件描述信息没有被满足,根据目标简单事件更新状态存储库的复杂事件状态数据,将为失败的第一匹配结果的任一查询关键字对应的目标复杂事件作为待注册的复杂事件,根据待注册的复杂事件的窗口大小和事件类型,在状态存储库中进行定时任务注册。
统计类型的复杂事件的时间窗口的窗口类型包括:滚动窗口类型和滑动窗口类型。比如,滚动窗口类型的时间窗口为每天统计,则可以使用简单整数计数器作为定时器。又比如,滑动窗口类型的时间窗口为过去24小时,则要求复杂事件状态数据存储明细数据,针对每个槽位设置一个计数器作为定时器。
断点类型的复杂事件,在状态存储库中的复杂事件状态数据保存涉及的简单事件的状态,而且需要在分布式定时器中设置定时任务。比如,断点类事件的复杂事件的事件描述信息为:发生简单事件A5后在第二预设时长内不发生简单事件A6,当目标简单事件是简单事件A5时,根据目标简单事件的发生时间和第二预设时长确定定时时间,需要在确定的定时时间对应的分布式定时器中进行定时任务注册,在此举例不做具体限定。
可以理解的是,状态存储库中的复杂事件状态,可以通过目标应用发送的消息解析得到的简单事件进行更新,也可以通过状态存储库中的定时任务的执行进行更新。也就是说,完成对目标简单事件的处理之后,会再次获取目标应用发送的消息进行简单事件解析。
在一个实施例中,上述根据查询关键字和目标简单事件在状态存储库中进行复杂事件状态的匹配,得到第一匹配结果的步骤,包括:
S41:根据查询关键字在状态存储库中进行查找,得到待匹配的复杂事件状态数据;
S42:在状态存储库中,根据目标简单事件,对待匹配的复杂事件状态数据进行复杂事件状态的匹配,得到第一匹配结果。
本实施例实现了从状态存储库进行复杂事件状态数据的查找,然后在状态存储库中对查找到的复杂事件状态数据进行复杂事件状态的匹配,从而将复杂事件的内部状态独立存储在状态存储库中,有利于对复杂事件的内部状态的访问,有利于快速排查问题。
对于S41,根据查询关键字在状态存储库中进行查找,将在状态存储库中查找到的查询关键字对应的复杂事件状态数据作为待匹配的复杂事件状态数据。
对于S42,在状态存储库中,根据目标简单事件,对待匹配的复杂事件状态数据进行命中状态匹配计算,当目标复杂事件的事件描述信息已经被满足时确定第一匹配结果为成功,当目标复杂事件的事件描述信息没有被满足时确定第一匹配结果为失败。
在一个实施例中,上述根据目标简单事件,对待匹配的复杂事件状态数据进行复杂事件状态的匹配,得到第一匹配结果的步骤,包括:
S421:将各个待匹配的复杂事件状态数据中的一个待匹配的复杂事件状态数据,作为目标复杂事件状态数据;
S422:根据目标简单事件和目标复杂事件状态数据进行命中状态匹配计算;
S423:当命中状态匹配计算的结果为命中时,确定目标复杂事件状态数据对应的第一匹配结果为成功;
S424:当命中状态匹配计算的结果为未命中时,确定目标复杂事件状态数据对应的第一匹配结果为失败;
S425:重复执行将各个待匹配的复杂事件状态数据中的一个待匹配的复杂事件状态数据,作为目标复杂事件状态数据的步骤,直至完成待匹配的复杂事件状态数据的获取。
本实施例实现了在状态存储库中,根据目标简单事件,分别对复杂事件状态数据集合中的每个复杂事件状态数据进行事件状态匹配,从而将复杂事件的内部状态独立存储在状态存储库中,有利于对复杂事件的内部状态的访问,有利于快速排查问题。
对于S421,从各个待匹配的复杂事件状态数据获取一个待匹配的复杂事件状态数据,作为目标复杂事件状态数据。
对于S422,将目标简单事件的信息放入目标复杂事件状态数据中,对目标复杂事件状态数据进行命中状态匹配计算。
比如,目标复杂事件状态数据的事件描述信息为“发生简单事件A3后在第一预设时长内发生简单事件A4”,目标复杂事件状态数据中记录了简单事件A3已经完成,目标简单事件是简单事件A4,简单事件A4的发生时间减去简单事件A3的发生时间得到时间差,时间差小于第一预设时长,因此命中状态匹配计算的结果为命中,在此举例不做具体限定。
也就是说,满足复杂事件的事件描述信息时确定命中状态匹配计算的结果为命中,不满足复杂事件的事件描述信息时确定命中状态匹配计算的结果为未命中。
对于S423,当命中状态匹配计算的结果为命中时,意味着命中状态匹配计算的结果为命中目标复杂事件状态数据已经被满足,因此确定目标复杂事件状态数据对应的第一匹配结果为成功。
对于S424,当命中状态匹配计算的结果为未命中时,意味着命中状态匹配计算的结果为命中目标复杂事件状态数据未被满足,因此确定目标复杂事件状态数据对应的第一匹配结果为失败。
对于S425,重复执行步骤S421至步骤S425,直至完成待匹配的复杂事件状态数据的获取。
在一个实施例中,上述根据目标简单事件和目标复杂事件状态数据进行命中状态匹配计算的步骤,包括:
S4221:当目标简单事件未携带修补配置数据时,根据目标简单事件和目标复杂事件状态数据进行命中状态匹配计算;
S4222:当目标简单事件携带有修补配置数据时,根据修补配置数据的去重配置数据和目标简单事件,对目标复杂事件状态数据进行更新,根据目标简单事件和目标复杂事件状态数据进行命中状态匹配计算。
本实施例当目标简单事件未携带修补配置数据时不对目标复杂事件状态数据进行更新,直接进行命中状态匹配计算,当目标简单事件携带有修补配置数据时,限对目标复杂事件状态数据进行更新,然后进行命中状态匹配计算,从而满足了个性化的需求,提高了用户体验。
对于S4221,当目标简单事件未携带修补配置数据时,意味着不需要对目标复杂事件状态数据进行更新,因此直接根据目标简单事件和目标复杂事件状态数据进行命中状态匹配计算。
修补配置数据包括:去重配置数据。去重配置数据用于用户指定主键进行去重。可以理解的是,修补配置数据还可以包括其他配置数据,在此不做限定。
对于S4222,当目标简单事件携带修补配置数据时,意味着需要对目标复杂事件状态数据进行更新,首先根据修补配置数据的去重配置数据和目标简单事件,对目标复杂事件状态数据进行更新,然后采用更新后的目标复杂事件状态数据和目标简单事件进行命中状态匹配计算。
在一个实施例中,上述根据目标简单事件和为成功的第一匹配结果对应的各个目标复杂事件更新状态存储库的步骤,包括:
S61:根据目标简单事件更新状态存储库;
S62:将为失败的第一匹配结果各个目标复杂事件作为待注册的复杂事件集合;
S63:从待注册的复杂事件集合中获取复杂事件作为待处理的复杂事件;
S64:根据待处理的复杂事件的查询关键字、事件类型及事件描述信息中的窗口大小分别进行定时时间和定时任务信息确定,得到目标定时时间和目标定时任务信息;
S65:将目标定时时间在状态存储库中的各个定时器中进行查找,将查找到的定时器作为目标定时器;
S66:将目标定时时间和目标定时任务信息注册到目标定时器中。
本实施例根据为失败的第一匹配结果各个目标复杂事件在状态存储库中进行定时任务注册,从而为后续主动更新状态存储库中的复杂事件状态数据提供了基础,也满足了各种复杂事件的监控需求。
对于S61,将目标简单事件存储到状态存储库中。从而完成了对目标简单事件的在状态存储库中进行备份,有利于定时任务的执行和下一轮任务的迭代。
对于S62,将为失败的第一匹配结果各个查询关键字各自对应的目标复杂事件作为待注册的复杂事件集合。
对于S63,从待注册的复杂事件集合中一个获取复杂事件,将获取的复杂事件作为待处理的复杂事件。
对于S64,根据待处理的复杂事件的事件类型及事件描述信息中的窗口大小进行定时时间的确定,得到目标定时时间;根据待处理的复杂事件的查询关键字确定目标定时任务信息。
比如,待处理的复杂事件的事件描述信息为:发生简单事件A6后在第二预设时长内不发生简单事件A7,当目标简单事件是简单事件A6时,将目标简单事件的发生时间和第二预设时长(也就是事件描述信息中的窗口大小)进行相加得到目标定时时间,在目标定时时间对应的分布式定时器中进行目标定时任务信息的注册,在此举例不做具体限定。
目标定时任务信息包括但不限于:查询关键字。
对于S65,将目标定时时间在状态存储库中各个定时器的key中进行查找,当查找到定时器的key与目标定时时间相同时,将该定时器作为目标定时器。
对于S66,根据目标定时时间,将目标定时时间和目标定时任务信息注册到目标定时器中,从而完成了定时任务注册。
也就是说,定时器是KV存储结构,其中KV存储结构的K(也就是Key)存储的是定时时间,KV存储结构的V(也就是Value)存储的是定时任务信息。
可选的,定时时间包括时间和Hash(哈希)值,从而在采用集群的方式从定时器中拉取定时任务进行处理时,可以根据Hash值实现均衡处理负载。
在一个实施例中,上述将目标定时时间和目标定时任务信息注册到目标定时器中的步骤之后,还包括:
S71:采用预设扫描时间间隔,获取当前时间;
S72:根据当前时间,对状态存储库中的各个定时器的定时时间进行扫描,得到待执行的定时器集合;
S73:根据待执行的定时器集合中的各个定时任务信息的查询关键字,在状态存储库中进行查找及事件状态匹配,得到第二匹配结果集合;
S74:当第二匹配结果集合中存在第二匹配结果为成功时,根据第二匹配结果为成功的各个复杂事件确定第二命中事件集合,根据第二匹配结果为成功的各个查询关键字更新状态存储库;
S75:当存在第二匹配结果为失败时,将第二匹配结果为失败的各个查询关键字各自对应的复杂事件状态数据从状态存储库中进行删除。
本实施例采用预设扫描时间间隔对状态存储库中的定时任务注册进行处理,从而实现了主动更新状态存储库中的复杂事件状态数据,也满足了各种复杂事件的监控需求。
对于S71,可以从数据库中获取预设扫描时间间隔,也可以从第三方应用系统中获取预设扫描时间间隔,也可以将预设扫描时间间隔写入实现本申请的程序中。预设扫描时间间隔是一个具体数值。
其中,采用预设扫描时间间隔,从服务器中获取当前的世界时间作为当前时间。
对于S72,将当前时间在状态存储库中的各个定时器的key中进行查找,当存在定时器的key中的定时时间小于或等于当前时间时,将key中的定时时间小于或等于当前时间的各个定时器作为待执行的定时器集合。
对于S73,首先根据待执行的定时器集合中的各个定时任务信息的查询关键字,在状态存储库中进行复杂事件状态数据查找,然后对查新到的复杂事件状态数据进行事件状态匹配,根据事件状态匹配得到的数据作为第二匹配结果集合。
对于S74,当第二匹配结果集合中存在第二匹配结果为成功时,意味着第二匹配结果为成功的各个复杂事件状态数据已经被满足,此时可以将第二匹配结果为成功的每个复杂事件状态数据对应的复杂事件确定为一个第二命中事件,将所有第二命中事件作为第二命中事件集合;从状态存储库中,对第二匹配结果为成功的每个查询关键字对应的关联数据进行删除处理,从而实现对状态存储库的更新。
第二命中事件包括:第一事件标识、用户标识和命中时间。
对于S75,当存在第二匹配结果为失败时,意味着第二匹配结果为失败的各个复杂事件状态数据没有被满足,将第二匹配结果为失败的各个查询关键字各自对应的关联数据从状态存储库中进行删除,从而实现了对定时任务中的未命中的复杂事件状态数据从状态存储库进行状态消除处理。
在一个实施例中,上述根据目标复杂事件和目标简单事件进行查询关键字构造,得到查询关键字的步骤,包括:
将目标复杂事件的第一事件标识与目标简单事件的用户标识进行字符串拼接,得到查询关键字。
本实施例根据第一事件标识和用户标识进行查询关键字的构造,将用户信息和复杂事件绑定,为后续进行准确的事件状态匹配提供了基础。
对于S31,将待构造的复杂事件的第一事件标识与目标简单事件的用户标识依次进行字符串拼接,将拼接得到的字符串作为查询关键字。
参照图3,本申请还提出了一种复杂事件的命中处理装置,装置包括:
数据获取模块100,用于通过对目标应用发送的待处理消息进行事件解析,得到目标简单事件;
目标复杂事件确定模块200,用于在获取到的事件配置库中查找得到至少一个与目标简单事件对应的目标复杂事件;
查询关键字确定模块300,用于根据目标复杂事件和目标简单事件进行查询关键字构造,得到查询关键字;
第一匹配结果确定模块400,用于获取状态存储库,根据查询关键字和目标简单事件在状态存储库中进行复杂事件状态的匹配,得到第一匹配结果;
第一处理模块500,用于当存在为成功的第一匹配结果时,根据与为成功的第一匹配结果对应的各个目标复杂事件确定第一命中事件集合;
第二处理模块600,用于当存在为失败的第一匹配结果时,根据目标简单事件和为成功的第一匹配结果对应的各个目标复杂事件更新状态存储库。
本实施例首先通过对目标应用发送的待处理消息进行事件解析,得到目标简单事件,然后在获取到的事件配置库中查找得到至少一个与目标简单事件对应的目标复杂事件;根据目标复杂事件和目标简单事件进行查询关键字构造,得到查询关键字,获取状态存储库,根据查询关键字和目标简单事件在状态存储库中进行复杂事件状态的匹配,得到第一匹配结果,最后当存在为成功的第一匹配结果时,根据与为成功的第一匹配结果对应的各个目标复杂事件确定第一命中事件集合,当存在为失败的第一匹配结果时,根据目标简单事件和为成功的第一匹配结果对应的各个目标复杂事件更新状态存储库,通过状态存储库实现了将复杂事件的内部状态独立存储,有利于对复杂事件的内部状态的访问,有利于快速排查问题,有利于排查问题;而且每次获取到目标简单事件时获取事件配置库,从而实现了事件配置库的动态更新,提高了配置动态性。
参照图3,本申请实施例中还提供一种计算机设备,该计算机设备可以是服务器,其内部结构可以如图3所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口和数据库。其中,该计算机设计的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于储存复杂事件的命中处理方法等数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种复杂事件的命中处理方法。复杂事件的命中处理方法,包括:通过对目标应用发送的待处理消息进行事件解析,得到目标简单事件;在获取到的事件配置库中查找得到至少一个与目标简单事件对应的目标复杂事件;根据目标复杂事件和目标简单事件进行查询关键字构造,得到查询关键字;获取状态存储库,根据查询关键字和目标简单事件在状态存储库中进行复杂事件状态的匹配,得到第一匹配结果;当存在为成功的第一匹配结果时,根据与为成功的第一匹配结果对应的各个目标复杂事件确定第一命中事件集合;当存在为失败的第一匹配结果时,根据目标简单事件和为成功的第一匹配结果对应的各个目标复杂事件更新状态存储库。
本实施例首先通过对目标应用发送的待处理消息进行事件解析,得到目标简单事件,然后在获取到的事件配置库中查找得到至少一个与目标简单事件对应的目标复杂事件;根据目标复杂事件和目标简单事件进行查询关键字构造,得到查询关键字,获取状态存储库,根据查询关键字和目标简单事件在状态存储库中进行复杂事件状态的匹配,得到第一匹配结果,最后当存在为成功的第一匹配结果时,根据与为成功的第一匹配结果对应的各个目标复杂事件确定第一命中事件集合,当存在为失败的第一匹配结果时,根据目标简单事件和为成功的第一匹配结果对应的各个目标复杂事件更新状态存储库,通过状态存储库实现了将复杂事件的内部状态独立存储,有利于对复杂事件的内部状态的访问,有利于快速排查问题,有利于排查问题;而且每次获取到目标简单事件时获取事件配置库,从而实现了事件配置库的动态更新,提高了配置动态性。
本申请一实施例还提供一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现一种复杂事件的命中处理方法,包括步骤:通过对目标应用发送的待处理消息进行事件解析,得到目标简单事件;在获取到的事件配置库中查找得到至少一个与目标简单事件对应的目标复杂事件;根据目标复杂事件和目标简单事件进行查询关键字构造,得到查询关键字;获取状态存储库,根据查询关键字和目标简单事件在状态存储库中进行复杂事件状态的匹配,得到第一匹配结果;当存在为成功的第一匹配结果时,根据与为成功的第一匹配结果对应的各个目标复杂事件确定第一命中事件集合;当存在为失败的第一匹配结果时,根据目标简单事件和为成功的第一匹配结果对应的各个目标复杂事件更新状态存储库。
上述执行的复杂事件的命中处理方法,首先通过对目标应用发送的待处理消息进行事件解析,得到目标简单事件,然后在获取到的事件配置库中查找得到至少一个与目标简单事件对应的目标复杂事件;根据目标复杂事件和目标简单事件进行查询关键字构造,得到查询关键字,获取状态存储库,根据查询关键字和目标简单事件在状态存储库中进行复杂事件状态的匹配,得到第一匹配结果,最后当存在为成功的第一匹配结果时,根据与为成功的第一匹配结果对应的各个目标复杂事件确定第一命中事件集合,当存在为失败的第一匹配结果时,根据目标简单事件和为成功的第一匹配结果对应的各个目标复杂事件更新状态存储库,通过状态存储库实现了将复杂事件的内部状态独立存储,有利于对复杂事件的内部状态的访问,有利于快速排查问题,有利于排查问题;而且每次获取到目标简单事件时获取事件配置库,从而实现了事件配置库的动态更新,提高了配置动态性。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的和实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可以包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双速据率SDRAM(SSRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、装置、物品或者方法不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、装置、物品或者方法所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、装置、物品或者方法中还存在另外的相同要素。
以上仅为本申请的优选实施例,并非因此限制本申请的专利范围,凡是利用本申请说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本申请的专利保护范围内。

Claims (10)

1.一种复杂事件的命中处理方法,其特征在于,所述方法包括:
通过对目标应用发送的待处理消息进行事件解析,得到目标简单事件;
在获取到的事件配置库中查找得到至少一个与所述目标简单事件对应的目标复杂事件;
根据所述目标复杂事件和所述目标简单事件进行查询关键字构造,得到查询关键字;
获取状态存储库,根据所述查询关键字和所述目标简单事件在所述状态存储库中进行复杂事件状态的匹配,得到第一匹配结果;
当存在为成功的所述第一匹配结果时,根据与为成功的所述第一匹配结果对应的各个所述目标复杂事件确定第一命中事件集合;
当存在为失败的所述第一匹配结果时,根据所述目标简单事件和为成功的所述第一匹配结果对应的各个目标复杂事件更新所述状态存储库。
2.根据权利要求1所述的复杂事件的命中处理方法,其特征在于,所述根据所述查询关键字和所述目标简单事件在所述状态存储库中进行复杂事件状态的匹配,得到第一匹配结果的步骤,包括:
根据所述查询关键字在所述状态存储库中进行查找,得到待匹配的复杂事件状态数据;
在所述状态存储库中,根据所述目标简单事件,对所述待匹配的复杂事件状态数据进行复杂事件状态的匹配,得到所述第一匹配结果。
3.根据权利要求2所述的复杂事件的命中处理方法,其特征在于,所述根据所述目标简单事件,对所述待匹配的复杂事件状态数据进行复杂事件状态的匹配,得到所述第一匹配结果的步骤,包括:
将各个所述待匹配的复杂事件状态数据中的一个所述待匹配的复杂事件状态数据,作为目标复杂事件状态数据;
根据所述目标简单事件和所述目标复杂事件状态数据进行命中状态匹配计算;
当命中状态匹配计算的结果为命中时,确定所述目标复杂事件状态数据对应的所述第一匹配结果为成功;
当命中状态匹配计算的结果为未命中时,确定所述目标复杂事件状态数据对应的所述第一匹配结果为失败;
重复执行所述将各个所述待匹配的复杂事件状态数据中的一个所述待匹配的复杂事件状态数据,作为目标复杂事件状态数据的步骤,直至完成所述待匹配的复杂事件状态数据的获取。
4.根据权利要求3所述的复杂事件的命中处理方法,其特征在于,所述根据所述目标简单事件和所述目标复杂事件状态数据进行命中状态匹配计算的步骤,包括:
当所述目标简单事件未携带修补配置数据时,根据所述目标简单事件和所述目标复杂事件状态数据进行命中状态匹配计算;
当所述目标简单事件携带有所述修补配置数据时,根据所述修补配置数据的去重配置数据和所述目标简单事件,对所述目标复杂事件状态数据进行更新,根据所述目标简单事件和所述目标复杂事件状态数据进行命中状态匹配计算。
5.根据权利要求1所述的复杂事件的命中处理方法,其特征在于,所述根据所述目标简单事件和为成功的所述第一匹配结果对应的各个目标复杂事件更新所述状态存储库的步骤,包括:
根据所述目标简单事件更新所述状态存储库;
将所述为失败的第一匹配结果各个所述目标复杂事件作为待注册的复杂事件集合;
从所述待注册的复杂事件集合中获取复杂事件作为待处理的复杂事件;
根据所述待处理的复杂事件的查询关键字、事件类型及事件描述信息中的窗口大小分别进行定时时间和定时任务信息确定,得到目标定时时间和目标定时任务信息;
将所述目标定时时间在所述状态存储库中的各个定时器中进行查找,将查找到的定时器作为目标定时器;
将所述目标定时时间和所述目标定时任务信息注册到所述目标定时器中。
6.根据权利要求5所述的复杂事件的命中处理方法,其特征在于,所述将所述目标定时时间和所述目标定时任务信息注册到所述目标定时器中的步骤之后,还包括:
采用预设扫描时间间隔,获取当前时间;
根据所述当前时间,对所述状态存储库中的各个定时器的定时时间进行扫描,得到待执行的定时器集合;
根据所述待执行的定时器集合中的各个定时任务信息的查询关键字,在所述状态存储库中进行查找及事件状态匹配,得到第二匹配结果集合;
当所述第二匹配结果集合中存在第二匹配结果为成功时,根据所述第二匹配结果为成功的各个复杂事件确定第二命中事件集合,根据所述第二匹配结果为成功的各个所述查询关键字更新所述状态存储库;
当存在所述第二匹配结果为失败时,将所述第二匹配结果为失败的各个所述查询关键字各自对应的复杂事件状态数据从所述状态存储库中进行删除。
7.根据权利要求1所述的复杂事件的命中处理方法,其特征在于,所述根据所述目标复杂事件和所述目标简单事件进行查询关键字构造,得到查询关键字的步骤,包括:
将所述目标复杂事件的第一事件标识与所述目标简单事件的用户标识进行字符串拼接,得到所述查询关键字。
8.一种复杂事件的命中处理装置,其特征在于,所述装置包括:
数据获取模块,用于通过对目标应用发送的待处理消息进行事件解析,得到目标简单事件;
目标复杂事件确定模块,用于在获取到的事件配置库中查找得到至少一个与所述目标简单事件对应的目标复杂事件;
查询关键字确定模块,用于根据所述目标复杂事件和所述目标简单事件进行查询关键字构造,得到查询关键字;
第一匹配结果确定模块,用于获取状态存储库,根据所述查询关键字和所述目标简单事件在所述状态存储库中进行复杂事件状态的匹配,得到第一匹配结果;
第一处理模块,用于当存在为成功的所述第一匹配结果时,根据与为成功的所述第一匹配结果对应的各个所述目标复杂事件确定第一命中事件集合;
第二处理模块,用于当存在为失败的所述第一匹配结果时,根据所述目标简单事件和为成功的所述第一匹配结果对应的各个目标复杂事件更新所述状态存储库。
9.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
CN202110963261.3A 2021-08-20 2021-08-20 复杂事件的命中处理方法、装置、设备及存储介质 Active CN113641712B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110963261.3A CN113641712B (zh) 2021-08-20 2021-08-20 复杂事件的命中处理方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110963261.3A CN113641712B (zh) 2021-08-20 2021-08-20 复杂事件的命中处理方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN113641712A true CN113641712A (zh) 2021-11-12
CN113641712B CN113641712B (zh) 2023-08-15

Family

ID=78423264

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110963261.3A Active CN113641712B (zh) 2021-08-20 2021-08-20 复杂事件的命中处理方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN113641712B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114168601A (zh) * 2022-02-10 2022-03-11 浙江大学 一种面向移动端的数据流处理方法及设备
CN116841511A (zh) * 2023-07-10 2023-10-03 中国电信股份有限公司技术创新中心 Flink动态窗口的实现方法及装置、存储介质及电子设备
CN116861455A (zh) * 2023-06-25 2023-10-10 上海数禾信息科技有限公司 事件数据处理方法、系统、电子设备及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001039082A2 (en) * 1999-11-22 2001-05-31 Accenture Llp Scheduling and planning before and proactive management during maintenance and service in a network-based supply chain environment
CN103440274A (zh) * 2013-08-07 2013-12-11 北京航空航天大学 一种基于细节描述的视频事件概要图构造和匹配方法
US20140237487A1 (en) * 2013-02-15 2014-08-21 University Of Southern California Complex event processing for dynamic data
CN104156412A (zh) * 2014-07-30 2014-11-19 华北电力大学 一种基于复杂事件处理的电能质量扰动事件分类监测方法
US20160110645A1 (en) * 2014-10-17 2016-04-21 Korea Institute Of Science And Technology Information System and method for dynamically updating event configuration rule for processing complex event
CN105786635A (zh) * 2016-03-01 2016-07-20 国网江苏省电力公司电力科学研究院 一种面向故障敏感点动态检测的复杂事件处理系统及方法
CN112653749A (zh) * 2020-12-18 2021-04-13 北京工商大学 用于物联网的基于边缘计算的复杂事件处理系统及方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001039082A2 (en) * 1999-11-22 2001-05-31 Accenture Llp Scheduling and planning before and proactive management during maintenance and service in a network-based supply chain environment
US20140237487A1 (en) * 2013-02-15 2014-08-21 University Of Southern California Complex event processing for dynamic data
CN103440274A (zh) * 2013-08-07 2013-12-11 北京航空航天大学 一种基于细节描述的视频事件概要图构造和匹配方法
CN104156412A (zh) * 2014-07-30 2014-11-19 华北电力大学 一种基于复杂事件处理的电能质量扰动事件分类监测方法
US20160110645A1 (en) * 2014-10-17 2016-04-21 Korea Institute Of Science And Technology Information System and method for dynamically updating event configuration rule for processing complex event
CN105786635A (zh) * 2016-03-01 2016-07-20 国网江苏省电力公司电力科学研究院 一种面向故障敏感点动态检测的复杂事件处理系统及方法
CN112653749A (zh) * 2020-12-18 2021-04-13 北京工商大学 用于物联网的基于边缘计算的复杂事件处理系统及方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114168601A (zh) * 2022-02-10 2022-03-11 浙江大学 一种面向移动端的数据流处理方法及设备
CN114168601B (zh) * 2022-02-10 2022-07-22 浙江大学 一种面向移动端的数据流处理方法及设备
CN116861455A (zh) * 2023-06-25 2023-10-10 上海数禾信息科技有限公司 事件数据处理方法、系统、电子设备及存储介质
CN116861455B (zh) * 2023-06-25 2024-04-26 上海数禾信息科技有限公司 事件数据处理方法、系统、电子设备及存储介质
CN116841511A (zh) * 2023-07-10 2023-10-03 中国电信股份有限公司技术创新中心 Flink动态窗口的实现方法及装置、存储介质及电子设备

Also Published As

Publication number Publication date
CN113641712B (zh) 2023-08-15

Similar Documents

Publication Publication Date Title
CN113641712B (zh) 复杂事件的命中处理方法、装置、设备及存储介质
US11403306B2 (en) Systems and methods of sharing a database across multiple deployments and services
US8214411B2 (en) Atomic deletion of database data categories
CN111310427A (zh) 业务数据配置处理方法、装置、计算机设备和存储介质
CN109474456B (zh) 配置数据处理方法、装置、计算机设备和存储介质
US20160171505A1 (en) Extract, transform, and load (etl) processing
CN108256006B (zh) 一种直播间徽章图片加载方法及系统
CN108874661B (zh) 测试映射关系库生成方法、装置、计算机设备和存储介质
CN112256318B (zh) 一种用于依赖产品的构建方法及设备
US20150378828A1 (en) Test data management
CN112784029B (zh) 基于自然语言处理的业务处理方法、装置和计算机设备
CN111177121A (zh) 订单数据反馈方法、装置、计算机设备及存储介质
CN108874876B (zh) 一种消息推送方法、计算机可读存储介质及终端设备
CN104881454A (zh) 参数的更新方法及系统
CN112965936A (zh) 一种异构分布式模型的处理方法、装置、设备和存储介质
CN106503186A (zh) 一种数据管理方法、客户端及系统
CN112448979B (zh) 一种缓存信息的更新方法、装置及介质
US20060112299A1 (en) Implementing application specific management policies on a content addressed storage device
CN110737662A (zh) 一种数据分析方法、装置、服务器及计算机存储介质
CN109934609B (zh) 广告数据关联的方法、装置、计算机设备和存储介质
CN114168595B (zh) 一种数据分析方法及装置
CN113868329A (zh) 看板数据源的生成方法、装置、设备及存储介质
CN108491448B (zh) 一种数据推送的方法和装置
CN114138785A (zh) 适用于大数据量的数据检索方法、装置、设备及存储介质
CN114610973A (zh) 信息的搜索匹配方法、装置、计算机设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant