CN105488223A - 业务数据事件的分析订阅方法及系统 - Google Patents

业务数据事件的分析订阅方法及系统 Download PDF

Info

Publication number
CN105488223A
CN105488223A CN201511000964.7A CN201511000964A CN105488223A CN 105488223 A CN105488223 A CN 105488223A CN 201511000964 A CN201511000964 A CN 201511000964A CN 105488223 A CN105488223 A CN 105488223A
Authority
CN
China
Prior art keywords
data
module
result
user
model
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201511000964.7A
Other languages
English (en)
Other versions
CN105488223B (zh
Inventor
滕其武
熊国民
林敏�
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Travelsky Technology Co Ltd
China Travelsky Holding Co
Original Assignee
China Travelsky Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Travelsky Technology Co Ltd filed Critical China Travelsky Technology Co Ltd
Priority to CN201511000964.7A priority Critical patent/CN105488223B/zh
Publication of CN105488223A publication Critical patent/CN105488223A/zh
Application granted granted Critical
Publication of CN105488223B publication Critical patent/CN105488223B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/33—Querying
    • G06F16/335—Filtering based on additional data, e.g. user or group profiles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21—Design, administration or maintenance of databases
    • G06F16/211—Schema design and management
    • G06F16/212—Schema design and management with details for data modelling support
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/80—Information retrieval; Database structures therefor; File system structures therefor of semi-structured data, e.g. markup language structured data such as SGML, XML or HTML
    • G06F16/83—Querying

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种业务数据事件的分析订阅系统，所述系统包括：数据接收模块用于从数据源接收数据，并对数据进行解析和数据正确性验证；数据建模模块用于对数据接收模块接收到的正确数据进行分析、匹配，并根据数据类型进行建模，生成标准的数据模型；规则处理模块用于根据数据模型，进行事件分析和识别，并根据对数据进行重新建模；以及，对重新建模后的数据根据用户的订阅规则进行处理和过滤，得到用户需要的信息；结果推送模块用于对规则处理模块的结果进行格式化处理，生成符合用户需要的格式信息，并将格式化后的信息推送给用户。相应的，本发明还公开了一种业务数据事件的分析订阅方法，解决了订阅系统没有事件信息的问题，使得经典的订阅系统的消息订阅方式可以实现事件订阅的功能。

Description

业务数据事件的分析订阅方法及系统
技术领域
本发明涉及数据处理技术，尤其涉及一种业务数据事件的分析订阅方法及系统。
背景技术
在经典的订阅系统中，用户通过订阅系统注册订阅条件，订阅系统根据用户的订阅条件过滤系统中的信息，向用户推送符合用户条件的信息。订阅系统根据过滤条件类型可以分为三种：1.基于消息主题的订阅系统；2.基于消息内容的订阅系统；3.基于消息主题和内容的订阅系统。
在基于主题的系统中，消息被发布到主题或命名通道上。用户将收到其订阅的主题上的所有消息，并且所有订阅同一主题的订阅者将接收到同样的消息。发布者负责定义订阅者所订阅的消息类别。
在基于内容的系统中，订阅者定义其感兴趣的消息的条件，只有当消息的属性或内容满足订阅者定义的条件时，消息才会被投递到该订阅者。订阅者负责对消息进行分类。
在基于消息主题和内容的订阅系统，系统会支持基于主题和基于内容的混合订阅，即发布者发布消息到主题上，而订阅者将基于内容的订阅注册到一个或多个主题上。
以上三种类型的订阅系统实现都存在一个前提条件：系统收到的信息是有确定的主题和内容的。在实际的应用场景中，用户不仅对信息的内容感兴趣，对信息变化产生的事件更感兴趣。用户不仅需要知道信息的内容，更重要的是要知道发生了什么事件，尤其是某些具有重要意义的事件。
事件的判断需要比较消息的前后两个状态的数据项，根据数据项的变化来判断是发生了何种事件。现有的订阅系统只能根据信息当前的数据项进行过滤，因此无法根据事件来进行订阅。
由于事件的不可预知性，在判断事件时不能确定是否有事件发生及有几个事件发生，因此需要对每种事件进行识别。识别的逻辑即比较各个数据项前后是否发生变化。通用的方式通过命令式编程语言如java、c++来实现事件的识别逻辑，需要使用IF语句来判断每个事件，如果事件涉及多个数据项的变化，各个IF语句判断之间会存在关联。采用此种方式，一方面分支会随着事件增长，复杂度呈现非线性增长，非常容易出现逻辑错误，且程序运行的效率比较低；另一方面，每增加一个事件，需要对程序进行重新编译、部署、重启，对业务需求变化响应速度慢。
发明内容
为解决现有存在的技术问题，本发明实施例提供一种业务数据事件的分析订阅方法及系统。
为达到上述目的，本发明实施例的技术方案是这样实现的：
一种业务数据事件的分析订阅系统，所述系统包括：数据接收模块、数据建模模块、规则处理模块、结果推送模块。
其中，所述数据接收模块用于从数据源接收数据，并对数据进行解析和数据正确性验证；
所述数据建模模块用于对数据接收模块接收到的正确数据进行分析、匹配，并根据数据类型进行建模，生成标准的数据模型；
所述规则处理模块用于根据数据模型，进行事件分析和识别，并根据对数据进行重新建模；以及，对重新建模后的数据根据用户的订阅规则进行处理和过滤，得到用户需要的信息；
所述结果推送模块用于对规则处理模块的结果进行格式化处理，生成符合用户需要的格式信息，并将格式化后的信息推送给用户。
其中，所述数据接收模块，具体用于：首先从数据源接收数据，然后进行数据解析，数据解析后对数据进行验证，如果数据正确，把数据传递到数据建模模块；如果数据错误，重新从数据源接收数据，进行数据接收处理流程。
其中，所述数据建模模块，具体用于：从数据接收模块接收数据后，首先对数据进行解析，然后对解析后的结果进行重组配对，生成标准数据模型，最后将数据模型传递到所述规则处理模块。
其中，所述规则处理模块，具体用于：从所述数据建模模块得到标准数据模型后，首先对数据模型进行分析，根据分析的结果进行事件识别，对事件识别的结果和数据模型数据进行重新建模；根据用户的订阅规则，对新的数据模型规则过滤，得到用户需要的信息，并将结果传递到所述结果推送模块。
其中，所述结果推送模块，具体用于：从所述规则处理模块获得处理后的结果，将结果格式化为用户需要的格式，并根据用户选择发送通道，选定发送通道后，将结果推送给用户。
其中，所述数据接收模块，用于通过消息中间件WebSphereMQ从数据源接收数据，然后对数据完整性进行验证。
其中，所述数据建模模块用于对解析后的结果进行重组配对，包括：根据数据的属性到数据库表中查询，基于不同的查询结果采用不同方式将数据存储到数据对象；返回一个结果时，该结果是该数据的上一状态，将结果解析到一个新的数据对象中，将该对象定义为oldobject，然后将数据对象newobject更新到数据库中，覆盖数据表中的数据；返回结果为空时：定义一个oldobject，其值为空，然后将数据对象newobject插入到数据表中。
其中，所述数据建模模块用于对解析后的结果进行重组配对，包括：根据不同的业务场景，对newobject和oldobject进行重组，将newobject和oldobject分别拆分为以当前业务场景的关键项为基本单元的数据列表，将两个数据列表进行匹配；根据所述匹配的结果，将新旧数据列表中的数据分别填充到组合的数据对象中，该数据对象含有两个属性：oldobject和newobject；通过所述匹配，会得到组合对象列表，每个组合对象为一个新的数据模型，用于事件识别。
其中，如果数据是旅客预定记录，业务场景是旅客航段预定操作，则将newobject和oldobject分别拆分为以旅客航段为基本单元的数据列表，将两个数据列表进行匹配；如果数据是航班数据，业务场景为航班航段的操作，则将newobject和oldobject分别拆分为以航段为基本单元的数据列表，将两个数据列表进行匹配。
其中，所述规则处理模块，具体用于接收到数据建模模块的数据模型后，根据所述数据模型的类型调用不同的规则进行事件判断；对于一个数据模型，可能会判断出0到多个事件，将这些判断产生的事件和数据模型组合成一个新的数据模型，所述新的数据模型含oldobject、newobject和事件列表；将事件名作为数据模型的属性，与数据的其它属性一致，用于用户规则过滤，过滤后的数据模型传输到所述结果推送模块。
其中，所述结果推送模块，具体用于接收所述规则处理模块的结果，根据数据模型的内容类型确定数据模块的取值。
其中，所述结果推送模块，具体用于根据数据模型的取值，将其格式化为标准的XML字符串，并向预定的用户推送相应的信息。
一种业务数据事件的分析订阅方法，所述方法通过上述业务数据事件的分析订阅系统执行。
其中，所述方法包括：数据接收模块从数据源接收数据，并对数据进行解析和数据正确性验证；数据建模模块对数据接收模块接收到的正确数据进行分析、匹配，并根据数据类型进行建模，生成标准的数据模型；规则处理模块根据数据模型，进行事件分析和识别，并根据对数据进行重新建模；以及，对重新建模后的数据根据用户的订阅规则进行处理和过滤，得到用户需要的信息；结果推送模块对所述规则处理模块的结果进行格式化处理，生成符合用户需要的格式信息，并将格式化后的信息推送给用户。
其中，所述数据接收模块首先从数据源接收数据，然后进行数据解析，数据解析后对数据进行验证，如果数据正确，把数据传递到数据建模模块；如果数据错误，重新从数据源接收数据，进行数据接收处理流程。
其中，所述数据建模模块从数据接收模块接收数据后，首先对数据进行解析，然后对解析后的结果进行重组配对，生成标准数据模型，最后将数据模型传递到所述规则处理模块。
其中，所述规则处理模块从所述数据建模模块得到标准数据模型后，首先对数据模型进行分析，根据分析的结果进行事件识别，对事件识别的结果和数据模型数据进行重新建模；根据用户的订阅规则，对新的数据模型规则过滤，得到用户需要的信息，并将结果传递到所述结果推送模块。
其中，所述结果推送模块从所述规则处理模块获得处理后的结果，将结果格式化为用户需要的格式，并根据用户选择发送通道，选定发送通道后，将结果推送给用户。
其中，所述数据接收模块，用于通过消息中间件WebSphereMQ从数据源接收数据，然后对数据完整性进行验证。
其中，所述数据建模模块对解析后的结果进行重组配对，包括：根据数据的属性到数据库表中查询，基于不同的查询结果采用不同方式将数据存储到数据对象；返回一个结果时，该结果是该数据的上一状态，将结果解析到一个新的数据对象中，将该对象定义为oldobject，然后将数据对象newobject更新到数据库中，覆盖数据表中的数据；返回结果为空时：定义一个oldobject，其值为空，然后将数据对象newobject插入到数据表中。
其中，所述数据建模模块对解析后的结果进行重组配对，还包括：根据不同的业务场景，对newobject和oldobject进行重组，将newobject和oldobject分别拆分为以当前业务场景的关键项为基本单元的数据列表，将两个数据列表进行匹配；根据所述匹配的结果，将新旧数据列表中的数据分别填充到组合的数据对象中，该数据对象含有两个属性：oldobject和newobject；通过所述匹配，会得到组合对象列表，每个组合对象为一个新的数据模型，用于事件识别。
其中，如果数据是旅客预定记录，业务场景是旅客航段预定操作，则将newobject和oldobject分别拆分为以旅客航段为基本单元的数据列表，将两个数据列表进行匹配；如果数据是航班数据，业务场景为航班航段的操作，则将newobject和oldobject分别拆分为以航段为基本单元的数据列表，将两个数据列表进行匹配。
其中，所述规则处理模块接收到数据建模模块的数据模型后，根据所述数据模型的类型调用不同的规则进行事件判断；对于一个数据模型，可能会判断出0到多个事件，将这些判断产生的事件和数据模型组合成一个新的数据模型，所述新的数据模型含oldobject、newobject和事件列表；将事件名作为数据模型的属性，与数据的其它属性一致，用于用户规则过滤，过滤后的数据模型传输到所述结果推送模块。
其中，所述结果推送模块接收所述规则处理模块的结果，根据数据模型的内容类型确定数据模块的取值。
其中，所述结果推送模块根据数据模型的取值，将其格式化为标准的XML字符串，并向预定的用户推送相应的信息。
本发明实施例通过引入规则引擎技术来实现业务数据事件的分析和订阅方法及系统。通过规则引擎系统的Rete算法和描述式编程语言，可以高效地实现事件的识别，且支持无需重启系统即可修改事件判断规则，大大提高了响应业务需求变化的速度；规则引擎实现事件识别后，将事件作为信息的主题，从而解决了订阅系统没有事件信息的问题，使得经典的订阅系统的消息订阅方式可以实现事件订阅的功能。
附图说明
在附图(其不一定是按比例绘制的)中，相似的附图标记可在不同的视图中描述相似的部件。具有不同字母后缀的相似附图标记可表示相似部件的不同示例。附图以示例而非限制的方式大体示出了本文中所讨论的各个实施例。
图1为本发明实施例业务数据事件的分析订阅系统的组成结构示意图；
图2为本发明实施例业务数据事件的分析订阅方法的流程示意图；
图3为本发明实施例数据接收模块的处理流程示意图；
图4为本发明实施例数据建模模块的处理流程示意图；
图5为本发明实施例规则处理模块的处理流程示意图；
图6为本发明实施例结果推送模块的处理流程示意图。
具体实施方式
本发明实施例中的术语“事件”含义为：当某条消息前后状态发生变化，消息的某些信息项发生变化，该变化定义为事件。
本发明实施例通过数据建模，将数据拆分为合适业务处理的基本单元，通过比较数据的新旧状态来进行数据变化分析，从而实现事件识别。将事件识别的结果作为属性放到数据模型中比较数据新旧状态来进行事件识别，并将事件识别的结果作为数据模型的一个属性，从而使系统能够根据事件变化进行规则处理，解决了订阅系统只能处理数据静态属性不能处理动态变化信息的问题，实现动态信息的订阅发布功能。
如图1所示，本发明实施例的业务数据事件的分析订阅系统包括四个模块：数据接收模块、数据建模模块、规则处理模块、结果推送模块。
本发明实施例业务数据事件的分析订阅方法的流程如图2所示，其中，系统开始运行后，首先从上游系统接收数据，然后对数据的正确性进行验证，如果数据不正确，系统将会接收下一条数据；如果数据正确，对数据进行建模；数据建模后，将数据模型放入到规则引擎中进行规则处理，然后将处理后的结果推送给用户。此条数据处理完毕后，将会继续从上游系统接收数据，按上述流程循环处理。
结合图1与图2，下面针对本发明实施例各模块的功能和具体的实现流程进行详细说明。具体地，如下所述：
数据接收模块用于从数据源接收数据，并对数据进行解析和数据正确性验证。数据接收模块的处理流程如图3所示，包括：数据接收模块首先从数据源接收数据，然后进行数据解析，数据解析后对数据进行验证，如果数据正确，把数据传递到数据建模模块；如果数据错误，重新从数据源接收数据，进行数据接收处理流程。
数据建模模块用于对数据接收模块接收到的正确数据进行分析、匹配，并根据数据类型进行建模，生成标准的数据模型。数据建模模块的处理流程如图4所示，包括：数据建模模块从数据接收模块接收数据后，首先对数据进行解析，然后对解析后的结果进行重组配对，生成标准数据模型，最后将数据模型传递到规则处理模块。
规则处理模块用于根据数据模型，进行事件分析和识别，并根据对数据进行重新建模；以及，对重新建模后的数据根据用户的订阅规则进行处理和过滤，得到用户需要的信息。规则处理模块的处理流程如图5所示，包括：规则处理模块从数据建模模块得到标准数据模型后，首先对数据模型进行分析，根据分析的结果进行事件识别，对事件识别的结果和数据模型数据进行重新建模；根据用户的订阅规则，对新的数据模型规则过滤，得到用户需要的信息，并将结果传递到结果推送模块。
结果推送模块用于对规则处理模块的结果进行格式化处理，生成符合用户需要的格式信息，并将格式化后的信息推送给用户。结果推送模块的处理流程如图5所示，包括：结果推送模块从规则处理模块获得处理后的结果，将结果格式化为用户需要的格式，并根据用户选择发送通道，选定发送通道后，将结果推送给用户。
系统的数据接收模块通过消息中间件(WebSphereMQ)从数据源接收数据，然后对数据完整性进行验证。数据源的数据格式分为两种：二进制格式数据和XML格式数据。二进制数据格式的数据验证方法为：根据二进制数据的长度和二进制头部长度字段值进行比较，如果相等，判断该数据正确；如果不相等，判断数据不正确。XML数据通过Schema定义文件验证数据是否正确。对于不正确的数据，系统会进行日志记录，并获取下一条数据；如果是正确的数据，将会发送到数据建模模块。
数据建模模块收到数据后，首先将数据解析，将数据存储到一个数据对象中。每种业务数据都有各自的数据对象定义，如旅客订座记录、旅客电子客票、航班等都有各自的数据对象定义。数据对象定义为newobject，数据对象中含有业务数据的各种属性，数据建模模块根据数据的属性到数据库表中查询，查询结果有两种可能，基于不同的查询结果采用不同方式将数据存储到数据对象，具体地：1)返回一个结果时：该结果是该数据的上一状态，数据建模模块将结果解析到一个新的数据对象中，将该对象定义为上一状态的数据对象(oldobject)，然后将当前状态的数据对象(newobject)更新到数据库中，覆盖数据表中的数据；2)返回结果为空时：定义一个oldobject，其值为空，然后将数据对象newobject插入到数据表中。
根据不同的业务场景，数据建模模块对newobject和oldobject进行重组，将newobject和oldobject分别拆分为以当前业务场景的关键项为基本单元的数据列表，将两个数据列表进行匹配。具体地，如果数据是旅客预定记录，业务场景是旅客航段预定操作，则将newobject和oldobject分别拆分为以旅客航段为基本单元的数据列表，将两个数据列表进行匹配，匹配的关键字为旅客姓名、航段起始到达城市、航班号、航班日期；如果数据是航班数据，业务场景为航班航段的操作，则将newobject和oldobject分别拆分为以航段为基本单元的数据列表，将两个数据列表进行匹配，匹配的关键字为起始机场、到达机场。根据匹配的结果，将新旧数据列表中的数据分别填充到组合的数据对象中，该数据对象含有两个属性：oldobject和newobject。这里，数据匹配的结果有如下几种情况：1)旧的数据列表中有数据，新的数据列表中没有数据：组合对象的oldobject为旧的数据列表中的数据，newobject为空。2)旧的数据列表中没有数据，新的数据列表中有数据：组合对象的oldobject为空，newobject为新的数据列表中的数据。3)旧的数据列表中有数据，新的数据列表中有数据：组合对象的oldobject为旧的数据列表中的数据，newobject为新的数据列表中的数据。通过以上匹配，会得到组合对象列表，每个组合对象就是一个新的数据模型，用于事件识别。
规则处理模块接收到数据建模模块的数据模型后，根据数据模型的类型调用不同的规则进行事件判断。如果是旅客预定记录模型，事件判断有如下三种类型：1)newobject为空值，oldobject不为空值：该旅客航段被删除，据此判断发生取消旅客航段预定事件。2)oldobject为空值，newobject不为空值：该旅客航段是新增数据，据此判断发生新预定旅客航段事件。3)oldobject和newobject都不为空值：根据oldobject和newobject的属性值的变化来判断发生何种事件，如果是航段的状态码发生变化，据此可以判断发生航段状态修改事件；如果旅客证件信息发生变化，据此可以判断发生旅客信息修改事件。
对于一个数据模型，可能会判断出0到多个事件，将这些判断产生的事件和数据模型组合成一个新的数据模型，该模型含oldobject、newobject和事件列表。以旅客订座记录为例，如果用户订阅的条件是新预定国航航段的F舱位旅客，规则处理的流程为：首先判断事件名是否含新预定航段事件，如果含有，则判断newobject中航班是否为国航航班，如果是国航航班，再判断舱位是否为F舱位，如果是，则该数据模型的数据满足用户的需求；如果用户订阅的条件是取消国航航段的F舱位旅客，规则处理的流程为：首先判断事件名是否含取消预定航段事件，如果含有，则判断newobject中航班是否为国航航班，如果是国航航班，再判断舱位是否为F舱位，如果是，则该数据模型的数据满足用户的需求；如果用户订阅的条件是国航航段的F舱位发生常客卡号变更的旅客，规则处理的流程为：首先判断事件名是否含常客卡变更事件，如果含有，则判断newobject中航班是否为国航航班，如果是国航航班，再判断舱位是否为F舱位，如果是，则该数据模型的数据满足用户的需求。将事件名作为数据模型的属性，与数据的其它属性一致，用于用户规则过滤。过滤后的数据模型传输到结果推送模块。
结果推送模块收到规则处理模块的结果，根据数据模型的内容类型取值有三种处理情况：1)newobject为空值，oldobject不为空值：数据取值为oldobject的值和事件名。2)oldobject为空值，newobject不为空值：数据取值为newobject的值和事件名。3)oldobject不为空值，newobject不为空值：数据取值为newobject的值和事件名。根据数据模型的取值，结果推送模块将其格式化为标准的XML字符串，并向预定的用户推送相应的信息。
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用硬件实施例、软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述，仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。

Claims (26)

1.一种业务数据事件的分析订阅系统，其特征在于，所述系统包括：数据接收模块、数据建模模块、规则处理模块、结果推送模块。
2.根据权利要求1所述的系统，其特征在于，
所述数据接收模块用于从数据源接收数据，并对数据进行解析和数据正确性验证；
所述数据建模模块用于对数据接收模块接收到的正确数据进行分析、匹配，并根据数据类型进行建模，生成标准的数据模型；
所述规则处理模块用于根据数据模型，进行事件分析和识别，并根据对数据进行重新建模；以及，对重新建模后的数据根据用户的订阅规则进行处理和过滤，得到用户需要的信息；
所述结果推送模块用于对规则处理模块的结果进行格式化处理，生成符合用户需要的格式信息，并将格式化后的信息推送给用户。
3.根据权利要求2所述的系统，其特征在于，所述数据接收模块，具体用于：首先从数据源接收数据，然后进行数据解析，数据解析后对数据进行验证，如果数据正确，把数据传递到数据建模模块；如果数据错误，重新从数据源接收数据，进行数据接收处理流程。
4.根据权利要求2所述的系统，其特征在于，所述数据建模模块，具体用于：从数据接收模块接收数据后，首先对数据进行解析，然后对解析后的结果进行重组配对，生成标准数据模型，最后将数据模型传递到所述规则处理模块。
5.根据权利要求2所述的系统，其特征在于，所述规则处理模块，具体用于：从所述数据建模模块得到标准数据模型后，首先对数据模型进行分析，根据分析的结果进行事件识别，对事件识别的结果和数据模型数据进行重新建模；根据用户的订阅规则，对新的数据模型规则过滤，得到用户需要的信息，并将结果传递到所述结果推送模块。
6.根据权利要求2所述的系统，其特征在于，所述结果推送模块，具体用于：从所述规则处理模块获得处理后的结果，将结果格式化为用户需要的格式，并根据用户选择发送通道，选定发送通道后，将结果推送给用户。
7.根据权利要求3所述的系统，其特征在于，
所述数据接收模块，用于通过消息中间件WebSphereMQ从数据源接收数据，然后对数据完整性进行验证。
8.根据权利要求4所述的系统，其特征在于，所述数据建模模块用于对解析后的结果进行重组配对，包括：
根据数据的属性到数据库表中查询，基于不同的查询结果采用不同方式将数据存储到数据对象；
返回一个结果时，该结果是该数据的上一状态，将结果解析到一个新的数据对象中，将该对象定义为上一状态的数据对象oldobject，然后将当前状态的数据对象newobject更新到数据库中，覆盖数据表中的数据；
返回结果为空时：定义一个oldobject，其值为空，然后将newobject插入到数据表中。
9.根据权利要求8所述的系统，其特征在于，所述数据建模模块用于对解析后的结果进行重组配对，包括：
根据不同的业务场景，对newobject和oldobject进行重组，将newobject和oldobject分别拆分为以当前业务场景的关键项为基本单元的数据列表，将两个数据列表进行匹配；
根据所述匹配的结果，将新旧数据列表中的数据分别填充到组合的数据对象中，该数据对象含有两个属性：oldobject和newobject；
通过所述匹配，会得到组合对象列表，每个组合对象为一个新的数据模型，用于事件识别。
10.根据权利要求9所述的系统，其特征在于：
如果数据是旅客预定记录，业务场景是旅客航段预定操作，则将newobject和oldobject分别拆分为以旅客航段为基本单元的数据列表，将两个数据列表进行匹配；
如果数据是航班数据，业务场景为航班航段的操作，则将newobject和oldobject分别拆分为以航段为基本单元的数据列表，将两个数据列表进行匹配。
11.根据权利要求5所述的系统，其特征在于，所述规则处理模块，具体用于接收到数据建模模块的数据模型后，根据所述数据模型的类型调用不同的规则进行事件判断；
对于一个数据模型，可能会判断出0到多个事件，将这些判断产生的事件和数据模型组合成一个新的数据模型，所述新的数据模型含oldobject、newobject和事件列表；
将事件名作为数据模型的属性，与数据的其它属性一致，用于用户规则过滤，过滤后的数据模型传输到所述结果推送模块。
12.根据权利要求6所述的系统，其特征在于，所述结果推送模块，具体用于接收所述规则处理模块的结果，根据数据模型的内容类型确定数据模块的取值。
13.根据权利要求12所述的系统，其特征在于，所述结果推送模块，具体用于根据数据模型的取值，将其格式化为标准的XML字符串，并向预定的用户推送相应的信息。
14.一种业务数据事件的分析订阅方法，其特征在于，所述方法通过权利要求1至13任一项所述的系统执行。
15.根据权利要求14所述的方法，其特征在于，所述方法包括：
数据接收模块从数据源接收数据，并对数据进行解析和数据正确性验证；
数据建模模块对数据接收模块接收到的正确数据进行分析、匹配，并根据数据类型进行建模，生成标准的数据模型；
规则处理模块根据数据模型，进行事件分析和识别，并根据对数据进行重新建模；以及，对重新建模后的数据根据用户的订阅规则进行处理和过滤，得到用户需要的信息；
结果推送模块对所述规则处理模块的结果进行格式化处理，生成符合用户需要的格式信息，并将格式化后的信息推送给用户。
16.根据权利要求15所述的方法，其特征在于：所述数据接收模块首先从数据源接收数据，然后进行数据解析，数据解析后对数据进行验证，如果数据正确，把数据传递到数据建模模块；如果数据错误，重新从数据源接收数据，进行数据接收处理流程。
17.根据权利要求15所述的方法，其特征在于：所述数据建模模块从数据接收模块接收数据后，首先对数据进行解析，然后对解析后的结果进行重组配对，生成标准数据模型，最后将数据模型传递到所述规则处理模块。
18.根据权利要求15所述的方法，其特征在于：所述规则处理模块从所述数据建模模块得到标准数据模型后，首先对数据模型进行分析，根据分析的结果进行事件识别，对事件识别的结果和数据模型数据进行重新建模；根据用户的订阅规则，对新的数据模型规则过滤，得到用户需要的信息，并将结果传递到所述结果推送模块。
19.根据权利要求15所述的方法，其特征在于：所述结果推送模块从所述规则处理模块获得处理后的结果，将结果格式化为用户需要的格式，并根据用户选择发送通道，选定发送通道后，将结果推送给用户。
20.根据权利要求16所述的方法，其特征在于：所述数据接收模块，用于通过消息中间件WebSphereMQ从数据源接收数据，然后对数据完整性进行验证。
21.根据权利要求17所述的方法，其特征在于，所述数据建模模块对解析后的结果进行重组配对，包括：
根据数据的属性到数据库表中查询，基于不同的查询结果采用不同方式将数据存储到数据对象；
返回一个结果时，该结果是该数据的上一状态，将结果解析到一个新的数据对象中，将该对象定义为上一状态的数据对象oldobject，然后将当前状态的数据对象newobject更新到数据库中，覆盖数据表中的数据；
返回结果为空时：定义一个oldobject，其值为空，然后将newobject插入到数据表中。
22.根据权利要求21所述的方法，其特征在于，所述数据建模模块对解析后的结果进行重组配对，还包括：
根据不同的业务场景，对newobject和oldobject进行重组，将newobject和oldobject分别拆分为以当前业务场景的关键项为基本单元的数据列表，将两个数据列表进行匹配；
根据所述匹配的结果，将新旧数据列表中的数据分别填充到组合的数据对象中，该数据对象含有两个属性：oldobject和newobject；
通过所述匹配，会得到组合对象列表，每个组合对象为一个新的数据模型，用于事件识别。
23.根据权利要求22所述的方法，其特征在于：
如果数据是旅客预定记录，业务场景是旅客航段预定操作，则将newobject和oldobject分别拆分为以旅客航段为基本单元的数据列表，将两个数据列表进行匹配；
如果数据是航班数据，业务场景为航班航段的操作，则将newobject和oldobject分别拆分为以航段为基本单元的数据列表，将两个数据列表进行匹配。
24.根据权利要求18所述的方法，其特征在于：
所述规则处理模块接收到数据建模模块的数据模型后，根据所述数据模型的类型调用不同的规则进行事件判断；
对于一个数据模型，可能会判断出0到多个事件，将这些判断产生的事件和数据模型组合成一个新的数据模型，所述新的数据模型含oldobject、newobject和事件列表；
将事件名作为数据模型的属性，与数据的其它属性一致，用于用户规则过滤，过滤后的数据模型传输到所述结果推送模块。
25.根据权利要求19所述的方法，其特征在于：
所述结果推送模块接收所述规则处理模块的结果，根据数据模型的内容类型确定数据模块的取值。
26.根据权利要求25所述的方法，其特征在于：
所述结果推送模块根据数据模型的取值，将其格式化为标准的XML字符串，并向预定的用户推送相应的信息。
CN201511000964.7A 2015-12-28 2015-12-28 业务数据事件的分析订阅方法及系统 Active CN105488223B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201511000964.7A CN105488223B (zh) 2015-12-28 2015-12-28 业务数据事件的分析订阅方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201511000964.7A CN105488223B (zh) 2015-12-28 2015-12-28 业务数据事件的分析订阅方法及系统

Publications (2)

Publication Number Publication Date
CN105488223A true CN105488223A (zh) 2016-04-13
CN105488223B CN105488223B (zh) 2020-04-28

Family

ID=55675198

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201511000964.7A Active CN105488223B (zh) 2015-12-28 2015-12-28 业务数据事件的分析订阅方法及系统

Country Status (1)

Country Link
CN (1) CN105488223B (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105847063A (zh) * 2016-05-12 2016-08-10 中国联合网络通信集团有限公司 核心网数据管理方法和系统
CN106547915A (zh) * 2016-11-29 2017-03-29 上海轻维软件有限公司 基于模型库的智能数据提取方法
CN106936893A (zh) * 2017-01-18 2017-07-07 四川航空股份有限公司 航空数据传输系统
CN107491460A (zh) * 2016-06-13 2017-12-19 阿里巴巴集团控股有限公司 适配系统的数据映射方法及装置
CN110196862A (zh) * 2018-02-27 2019-09-03 财付通支付科技有限公司 一种数据场景构造方法、装置、服务器与系统
CN111708645A (zh) * 2020-06-12 2020-09-25 北京思特奇信息技术股份有限公司 基于流处理的事件处理方法及系统
CN111770182A (zh) * 2020-06-30 2020-10-13 北京百度网讯科技有限公司 数据推送方法和装置
CN111859127A (zh) * 2020-07-13 2020-10-30 海尔优家智能科技（北京）有限公司 消费数据的订阅方法、装置及存储介质
CN112214264A (zh) * 2020-10-10 2021-01-12 交通运输部规划研究院 Ais交互操作处理方法及装置
CN113098978A (zh) * 2021-04-21 2021-07-09 上海微盟企业发展有限公司 一种数据传输方法、装置及介质
CN113687957A (zh) * 2021-07-27 2021-11-23 上海浦东发展银行股份有限公司 事件建模方法、装置、计算机设备和存储介质
CN114003788A (zh) * 2021-11-02 2022-02-01 广州新科佳都科技有限公司 一种动态事件可视化分析系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020095399A1 (en) * 2000-08-04 2002-07-18 Devine Robert L.S. System and methods providing automatic distributed data retrieval, analysis and reporting services
CN102789491A (zh) * 2012-07-03 2012-11-21 河海大学 一种可配置的数据订阅和发布系统及其方法
CN104954469A (zh) * 2015-06-19 2015-09-30 长沙廖氏软件科技有限公司 一种异构系统信息交换方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020095399A1 (en) * 2000-08-04 2002-07-18 Devine Robert L.S. System and methods providing automatic distributed data retrieval, analysis and reporting services
CN102789491A (zh) * 2012-07-03 2012-11-21 河海大学 一种可配置的数据订阅和发布系统及其方法
CN104954469A (zh) * 2015-06-19 2015-09-30 长沙廖氏软件科技有限公司 一种异构系统信息交换方法

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105847063A (zh) * 2016-05-12 2016-08-10 中国联合网络通信集团有限公司 核心网数据管理方法和系统
CN107491460A (zh) * 2016-06-13 2017-12-19 阿里巴巴集团控股有限公司 适配系统的数据映射方法及装置
CN106547915A (zh) * 2016-11-29 2017-03-29 上海轻维软件有限公司 基于模型库的智能数据提取方法
CN106547915B (zh) * 2016-11-29 2019-10-29 上海轻维软件有限公司 基于模型库的智能数据提取方法
CN106936893A (zh) * 2017-01-18 2017-07-07 四川航空股份有限公司 航空数据传输系统
CN110196862B (zh) * 2018-02-27 2023-07-11 财付通支付科技有限公司 一种数据场景构造方法、装置、服务器与系统
CN110196862A (zh) * 2018-02-27 2019-09-03 财付通支付科技有限公司 一种数据场景构造方法、装置、服务器与系统
CN111708645A (zh) * 2020-06-12 2020-09-25 北京思特奇信息技术股份有限公司 基于流处理的事件处理方法及系统
CN111770182B (zh) * 2020-06-30 2022-05-31 北京百度网讯科技有限公司 数据推送方法和装置
CN111770182A (zh) * 2020-06-30 2020-10-13 北京百度网讯科技有限公司 数据推送方法和装置
CN111859127A (zh) * 2020-07-13 2020-10-30 海尔优家智能科技（北京）有限公司 消费数据的订阅方法、装置及存储介质
CN112214264A (zh) * 2020-10-10 2021-01-12 交通运输部规划研究院 Ais交互操作处理方法及装置
CN113098978A (zh) * 2021-04-21 2021-07-09 上海微盟企业发展有限公司 一种数据传输方法、装置及介质
CN113687957A (zh) * 2021-07-27 2021-11-23 上海浦东发展银行股份有限公司 事件建模方法、装置、计算机设备和存储介质
CN114003788A (zh) * 2021-11-02 2022-02-01 广州新科佳都科技有限公司 一种动态事件可视化分析系统

Also Published As

Publication number Publication date
CN105488223B (zh) 2020-04-28

Similar Documents

Publication Publication Date Title
CN105488223A (zh) 业务数据事件的分析订阅方法及系统
US20130304713A1 (en) System and method for metadata level validation of custom setup objects
US20140129550A1 (en) Content management
WO2016060547A1 (en) Emulating manual system of filing using electronic document and electronic file
CN110275861A (zh) 数据存储方法及装置、存储介质、电子装置
CN103019718A (zh) 在集中式源控制环境中使用分布式源控制
US20180068181A1 (en) A document verification system
CN116860223A (zh) 一种基于云原生的低代码开发交付方法
CN107294750A (zh) 一种云集群能自识别的分布配置管理方法和装置
CN110020358A (zh) 用于生成动态页面的方法和装置
US8190646B2 (en) Associative object model for composite entity information
EP2199905A1 (en) Lifecycle management and consistency checking of object models using application platform tools
CN111145011A (zh) 一种银行业务系统搭建方法及装置
Liu et al. A data‐operation model based on partial vector space for batch processing in workflow
CN115114372A (zh) 基于区块链的数据处理方法、装置、设备及可读存储介质
CN116627448A (zh) 一种创建微服务的方法及相关设备
CN106777310B (zh) 信息的校验方法及装置
US10942924B2 (en) LOB query performance via automatic inference of locator-less LOB by value semantics
CN112163024B (zh) 一种基于层级关联结构的配置信息导出和导入方法
CN112256978A (zh) 一种基于数据模型的数据处理方法、装置、介质
CN113111120B (zh) 业务数据校验的方法和装置
Fang et al. Modeling and Verifying MooseFS in CSP
CN114581033B (zh) 政务审批业务快速开发方法和装置及设备
CN110610371A (zh) 潜在用户分析方法、系统和计算机可读存储介质
CN112860780B (zh) 数据导出方法、装置和终端设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant