CN110336706B - 网络报文传输处理方法和装置 - Google Patents

网络报文传输处理方法和装置 Download PDF

Info

Publication number
CN110336706B
CN110336706B CN201910665289.1A CN201910665289A CN110336706B CN 110336706 B CN110336706 B CN 110336706B CN 201910665289 A CN201910665289 A CN 201910665289A CN 110336706 B CN110336706 B CN 110336706B
Authority
CN
China
Prior art keywords
message
processing
historical
frequent
transmission processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910665289.1A
Other languages
English (en)
Other versions
CN110336706A (zh
Inventor
黄玺磊
胡雨风
朱剑
赵全丽
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Industrial and Commercial Bank of China Ltd ICBC
Original Assignee
Industrial and Commercial Bank of China Ltd ICBC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Industrial and Commercial Bank of China Ltd ICBC filed Critical Industrial and Commercial Bank of China Ltd ICBC
Priority to CN201910665289.1A priority Critical patent/CN110336706B/zh
Publication of CN110336706A publication Critical patent/CN110336706A/zh
Application granted granted Critical
Publication of CN110336706B publication Critical patent/CN110336706B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08—Configuration management of networks or network elements
    • H04L41/0803—Configuration setting
    • H04L41/0823—Configuration setting characterised by the purposes of a change of settings, e.g. optimising configuration for enhancing reliability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/12—Discovery or management of network topologies
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer And Data Communications (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明提供一种网络报文传输处理方法和装置，该包括：获取发送端存量系统发送的历史报文数据；采用FP Growth算法分析所述历史报文数据得到报文频繁集；根据所述报文频繁集获取对应的报文处理规则；根据所述报文处理规则处理所述发送端存量系统发送的报文以及接收端存量系统接收的报文。其中，通过采用FP Growth算法分析所述历史报文数据得到报文频繁集，进而获取相应的报文处理规则，通过报文处理规则，可将原有历史存量系统多次往返小报文、前后依赖等待等“低效报文”，通过合并、异步化等手段，改造为合并高效、或可异步并发后的在网络交互、传输上更高效的报文，提高响应速度。

Description

网络报文传输处理方法和装置
技术领域
本发明涉及数据处理技术领域，尤其涉及一种网络报文传输处理方法和装置。
背景技术
随着信息化的发展，大型企业通常采用信息系统开展业务，以提高业务效率。大型企业的信息系统发展时间较长，历时基本上有10～20年。历史存量系统巨大，历史存量系统在网络上往往设计较为传统，基本上为Ping-Pong式往返小报文为主。这种设计在企业厂区、小范围部门局域网内使用时问题不大，但在企业发展后需将原有分区管辖网络架构改为全国统一内网网络架构时，往返小报文的设计在性能效率上将无法适应，造成极大的系统响应延时，等待时间浪费影响企业生产或客户服务体验，并且，因为历史存量系统原有开发人员离职、转岗不再从事开发等情况普遍，基本上难以找到对原有系统能够进行修改的开发人员，原系统改造风险极大，而重新设计开发新系统不但投入大，有可能还会涉及到上下游系统的对接报文改造，复杂度和难度进一步提高，阻碍了将原有分区管辖网络架构改为全国统一内网网络架构。
发明内容
针对现有技术中的问题，本发明提供一种网络报文传输处理方法、装置、电子设备以及计算机可读存储介质，能够至少部分地解决现有技术中存在的问题。
为了实现上述目的，本发明采用如下技术方案：
第一方面，提供一种网络报文传输处理方法，包括：
获取发送端存量系统发送的历史报文数据；
采用FP Growth算法分析所述历史报文数据得到报文频繁集；
根据所述报文频繁集获取对应的报文处理规则；
根据所述报文处理规则处理所述发送端存量系统发送的报文以及接收端存量系统接收的报文。
进一步地，所述采用FP Growth算法分析所述历史报文得到报文频繁集，包括：
获取所述历史报文数据中各类报文的重复支持度；
根据重复支持度对所述历史报文数据中各类报文进行排序，排序后的每类报文作为一个报文集合；
将报文集合插入FP树；
判断步骤：判断所述FP树的头部链表是否为空；
若否，从小到大遍历所述头部链表的节点，得到条件模式基，同时获得一个报文频繁项集，并且，根据所述条件模式基继续构造条件FP树，然后返回判断步骤；
若是，得到报文频繁项集。
进一步地，所述采用FP Growth算法分析所述历史报文得到报文频繁集，还包括：
按照预设比例丢弃所述历史报文数据中的非频繁的报文集合。
进一步地，所述采用FP Growth算法分析所述历史报文得到报文频繁集，还包括：
根据预设阈值丢弃所述历史报文数据中报文关联中的非频繁的报文集合。
进一步地，所述采用FP Growth算法分析所述历史报文得到报文频繁集，还包括：
对所述FP树的头部链表的各节点进行降序排序。
进一步地，所述报文处理规则：多报文合并处理规则、报文异步化处理规则或报文处理灰度化规则。
进一步地，还包括：
获取报文传输处理灰度实施策略；
根据所述报文传输处理灰度实施策略控制网络报文传输处理。
进一步地，所述报文传输处理灰度实施策略包括：按百分比部分交易逐步灰度策略、按设定交易类型逐步灰度策略和按交易所在机构地区逐步灰度策略中的至少一个。
第二方面，提供一种网络报文传输处理装置，包括：
报文数据获取模块，获取发送端存量系统发送的历史报文数据；
报文智能分析模块，采用FP Growth算法分析所述历史报文数据得到报文频繁集；
报文处理规则获取模块，根据所述报文频繁集获取对应的报文处理规则；
报文传输处理模块，根据所述报文处理规则处理所述发送端存量系统发送的报文以及接收端存量系统接收的报文。
进一步地，所述报文智能分析模块包括：
重复支持度获取子模块，获取所述历史报文数据中各类报文的重复支持度；
报文排序子模块，根据重复支持度对所述历史报文数据中各类报文进行排序，排序后的每类报文作为一个报文集合；
FP树构建子模块，将报文集合插入FP树；
判断子模块，判断所述FP树的头部链表是否为空；
遍历子模块，从小到大遍历所述头部链表的节点，得到条件模式基，同时获得一个报文频繁项集，并且，根据所述条件模式基继续构造条件FP树；
报文频繁项集获取子模块，得到报文频繁项集。
进一步地，所述报文智能分析模块还包括：
重复非频繁项集丢弃子模块，按照预设比例丢弃所述历史报文数据中的非频繁的报文集合。
进一步地，所述报文智能分析模块还包括：
关联非频繁项集丢弃子模块，根据预设阈值丢弃所述历史报文数据中报文关联中的非频繁的报文集合。
进一步地，所述报文智能分析模块还包括：
节点排序子模块，对所述FP树的头部链表的各节点进行降序排序。
进一步地，所述报文处理规则：多报文合并处理规则、报文异步化处理规则或报文处理灰度化规则。
进一步地，还包括：
灰度实施策略获取模块，获取报文传输处理灰度实施策略；
灰度实施策略实施模块，根据所述报文传输处理灰度实施策略控制网络报文传输处理。
进一步地，所述报文传输处理灰度实施策略包括：按百分比部分交易逐步灰度策略、按设定交易类型逐步灰度策略和按交易所在机构地区逐步灰度策略中的至少一个。
第三方面，提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述的网络报文传输处理方法的步骤。
第四方面，提供一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现上述的网络报文传输处理方法的步骤。
本发明提供的网络报文传输处理方法、装置、电子设备以及计算机可读存储介质，该包括：获取发送端存量系统发送的历史报文数据；采用FP Growth算法分析所述历史报文数据得到报文频繁集；根据所述报文频繁集获取对应的报文处理规则；根据所述报文处理规则处理所述发送端存量系统发送的报文以及接收端存量系统接收的报文。其中，通过采用FP Growth算法分析所述历史报文数据得到报文频繁集，进而获取相应的报文处理规则，通过报文处理规则，可将原有历史存量系统多次往返小报文、前后依赖等待等“低效报文”，通过合并、异步化等手段，改造为合并高效、或可异步并发后的在网络交互、传输上更高效的报文，以此，提高响应速度，等利于企业生产，提高客户服务体验，不需改造原系统，无需重新设计开发新系统，利于企业将原有分区管辖网络架构改为全国统一内网网络架构。
为让本发明的上述和其他目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附图式，作详细说明如下。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：
图1是本发明实施例中的网络报文传输处理方法的流程示意图；
图2示出了现有网络传输影像数据的报文传输流程；
图3示出了采用本发明实施例提供的网络报文传输处理方法实现影响数据传输的报文传输流程；
图4示出了现有网络分块传输视频的报文传输流程；
图5示出了采用本发明实施例提供的网络报文传输处理方法实现分块传输视频的报文传输流程；
图6示出了图1中步骤S200的一种具体步骤；
图7示出了图1中步骤S200的另一种具体步骤；
图8示出了应用本发明实施例提供的网络报文传输处理装置的系统架构图；
图9是本发明实施例中的网络报文传输处理装置的结构框图；
图10示出了图9中报文智能分析模块20的具体结构；
图11为本发明实施例电子设备的结构图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分的实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本申请保护的范围。
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
需要说明的是，本申请的说明书和权利要求书及上述附图中的术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。
图1是本发明实施例中的网络报文传输处理方法的流程示意图。参见图1，该网络报文传输处理方法可以包括以下内容：
步骤S100：获取发送端存量系统发送的历史报文数据。
其中，通过旁路截取发送端存量系统发送的报文，记录对应数据流及处理时间、对端信息等多方面信息，用于明确每个独立报文以及对端接收处理返回的具体流程报文间关联性，在不影响报文正常发送的基础上，能够有效获取历史报文数据。
步骤S200：采用FP Growth算法分析所述历史报文数据得到报文频繁集。
其中，FP-Growth算法是一种关联分析算法，通过FP-tree数据结构对原始数据进行压缩，即：将提供频繁项集的数据库压缩到一棵频繁模式树(FP-tree)，但仍保留项集关联信息。
步骤S300：根据所述报文频繁集获取对应的报文处理规则。
具体地，通过对历史报文数据开展报文可处理性分析，得到报文处理规则。报文处理规则：多报文合并处理规则、报文异步化处理规则或报文处理灰度化规则等。
报文处理规则示例如下：
1、先存在性、后交易性的报文，合并为仅交易性报文处理(部分依赖历史系
统交易性报文异常处理机制)；
2、部分业务交易外的交易准备性质的系统参数获取类等报文，合并到后续业
务交易报文处理；
3、顺序传输多个数据载荷、且数据间无实际前后依赖的报文，在发送端开展
异步化并发传输，异步传送到接收端报文代理单元缓存后，再由接收端报文代
理单元开展重新展开顺序化报文等。
值得说明的是，分析报文可处理性时，可根据实际需求不断调增报文处理规则。
步骤S400：根据所述报文处理规则处理所述发送端存量系统发送的报文以及接收端存量系统接收的报文。
具体地，发送端存量系统根据该报文处理规则处理所要发送的报文，处理后的报文传输至接收端存量系统，接收端存量系统根据该报文处理规则处理所接收的报文。
通过上述技术方案可以得知，本发明提供的网络报文传输处理方法，通过采用FPGrowth算法分析所述历史报文数据得到报文频繁集，进而获取相应的报文处理规则，通过报文处理规则，可将原有历史存量系统多次往返小报文、前后依赖等待等“低效报文”，通过合并、异步化等手段，改造为合并高效、或可异步并发后的在网络交互、传输上更高效的报文，以此，提高响应速度，等利于企业生产，提高客户服务体验，不需改造原系统，无需重新设计开发新系统，利于企业将原有分区管辖网络架构改为全国统一内网网络架构。
在一个可选的实施例中，该网络报文传输处理方法还可以包括：
获取报文传输处理灰度实施策略；
根据所述报文传输处理灰度实施策略控制网络报文传输处理。
值得说明的是，灰度实施是指在一定的范围内，在采用本发明实施例提供的网络报文传输处理方法的基础上，还要并行实施现有的报文传输方法，以保障改造的逐步过渡，在充分评估交易改造后对实际生产运行的影响的基础上，还可以保证生产的总体稳定运行。
具体地，所述报文传输处理灰度实施策略包括：按百分比部分交易逐步灰度策略、按设定交易类型逐步灰度策略和按交易所在机构地区逐步灰度策略中的至少一个。
其中，为确保对存量系统的逐步报文改造为高效报文的逐步实施，给出了逐步灰度的策略，如：按百分比部分交易逐步灰度、按设定交易类型逐步灰度、按交易所在机构地区逐步灰度、或进一步复合地按交易机构地区+部分交易开展灰度，以此充分评估交易改造后对实际生产运行的影响，同时又能尽量保证生产的总体稳定运行。
图2示出了现有网络传输影像数据的报文传输流程。如图2所示，存量系统A向存量系统B发送影像时，首先存量系统A通过网络向存量系统B发送“0101：影像存在性：提问”，存量系统B通过网络向存量系统A反馈“0102：影像存在性：存在”，再由存量系统A通过网络向存量系统B发送“0201：影像内容：获取”，存量系统B通过网络向存量系统A反馈“0202：影像内容：返回”……，即以Ping-Pong式往返小报文，导致响应速度慢、报文传输量大、传输效率低。
图3示出了采用本发明实施例提供的网络报文传输处理方法实现影响数据传输的报文传输流程。如图3所示，存量系统A向存量系统B发送影像时，首先存量系统A通过网络向存量系统B发送“0101：影像存在性：提问”，此时缓存在报文代理A中，报文代理A向存量系统A反馈“0102：影像存在性：存在”，存量系统A向报文代理A发送“0201：影像内容：获取”，然后由报文代理A通过网络向报文代理B发送“0201：影像内容：获取”，报文代理B“0201：影像内容：获取”转给存量系统B，并将存量系统B反馈的“0202：影像内容：返回”转发至报文代理A，报文代理A向存量系统A发送“0202：影像内容：返回”，……，通过对比图2和图3可以看出，通过采用报文处理规则将低效的报文合并为高效的报文，有效提升的响应速度，减少了报文传输量，提高了传输效率。
图4示出了现有网络分块传输视频的报文传输流程。如图4所示，该存量系统A将视频大文件分块传输给存量系统B，首先由存量系统A向存量系统B传输“9010-视频大文件传输：分块1传输”，存量系统B向存量系统A反馈“9011-视频大文件传输：分块1确认”；由存量系统A向存量系统B传输“9010-视频大文件传输：分块2传输”，存量系统B向存量系统A反馈“9011-视频大文件传输：分块2确认”……由存量系统A向存量系统B传输“9010-视频大文件传输：分块N传输”，存量系统B向存量系统A反馈“9011-视频大文件传输：分块N确认”。
图5示出了采用本发明实施例提供的网络报文传输处理方法实现分块传输视频的报文传输流程。如图5所示，由报文代理A对存量系统A发送的分块数据进行缓存和应答，其中，存量系统A向报文代理A传输“9010-视频大文件传输：分块1传输”，报文代理A向存量系统A反馈“9011-视频大文件传输：分块1确认”，然后报文代理A将缓存的分块1发送给报文代理B；以此类推，而报文代理B通过缓存报文代理A发送的分块，最后在所有分块均缓存完毕后，向存量系统B发送所有分块数据，存量系统B向报文代理B发送确认所有缓存分块的报文，由报文代理B转给报文代理A，进而转给存量系统A。即：将原有历史存量系统多次往返小报文，通过异步化等手段，改造为合并高效、或可异步并发后的在网络交互、传输上更高效的报文，以此，提高响应速度，等利于企业生产。
FP Growth算法是一种非常好的发现频繁项集算法，主要包括：基于数据构建FP树；从FP树种挖掘频繁项集。
图6示出了图1中步骤S200的一种具体步骤。如图6所示，该步骤S200可以包括以下内容：
步骤S210：获取所述历史报文数据中各类报文的重复支持度；
具体地，遍历所述历史报文数据中各类报文，统计所述历史报文数据中各类报文的出现次数。
步骤S220：根据重复支持度对所述历史报文数据中各类报文进行排序，排序后的每类报文作为一个报文集合；
其中，可以由大到小排序，也可以由小到大排序。
步骤S230：将报文集合插入FP树；
具体地，读取每个报文集合插入FP树中，同时用一个头部链表维护不同集合的相同项，得到最终的FP树。
其中，报文的FP树在结构上是一个以每个报文为一个节点，前后关联报文顺序形成链式的结构。通过不断的在已有重复出现的部分链节点上累计报文计数，或在完全重复出现的节点，挂在根节点上。不断插入直到形成完整的FP树。
步骤S240：判断所述FP树的头部链表是否为空；
若是，执行步骤S270；否则，执行步骤S250；
其中，头部链表是FP树的固有组织形式，是按报文类型的形成链表。
步骤S250：从小到大遍历所述头部链表的节点，得到条件模式基，同时获得一个报文频繁项集；
其中，头部链表的节点中存储报文类型、报文出现次数、同类报文链表连接、父节点连接、子节点连接等。
步骤S260：根据所述条件模式基继续构造条件FP树，得到频繁项集，与之前的频繁项组合起来，实现递归遍历头部链表生成FP的过程，递归截止条件时生成的FP树的头部链表为空。
值得说明的是，将条件模式基作为数据集继续构造出一棵FP树，计算重复支持度，去除非频繁项，集合按照支持度降序排序，重复上面构造FP树的步骤，最后得到条件FP树。
值得说明的是，头部链表中的某一点的前缀路径组合就是条件模式基，条件模式基的值取决于末尾节点的值。条件模式基是条件FP树的集合表述。从树上，按要查的目标报文类型为末尾的前缀树，即条件FP树。反复生成，直到所有的头部链表中的报文类型都被做完，头部链表为空。
以条件模式基为数据集构造的FP树叫做条件FP树。
步骤S270：若是，根据头部链表为空的FP树得到报文频繁项集。
其中，报文频繁集是条件模式基的集合。报文频繁集表达了各报文关联性分析的结果。
其中，通过采用FP Growth算法能够有效分析所述历史报文数据得到报文频繁集，以用于评价报文关系。
本领域技术人员可以理解的是，FP Growth算法为目前比较成熟的算法，可以直接调用开源程序实现，也可以通过采用Spark软件实现。
在一个可选的实施例中，参见图7，该步骤S200还可以包括：
步骤S215：按照预设比例丢弃所述历史报文数据中的非频繁的报文集合。
其中，预设比例根据实际需求进行设置，例如40％～0，如30％、20％、10％、50％等。
具体地，按照预设比例删除历史报文数据中重复支持度较低的报文集合，以此能够提高后续处理的速度和精度。
在一个可选的实施例中，该步骤S200还可以包括：
步骤S225：根据预设阈值丢弃所述历史报文数据中报文关联中的非频繁的报文集合。
举例来说，A报文、B报文、C报文为常见关联的报文，M报文、A报文、B报文、C报文、D报文为关联集合，M报文和D报文为偶发，此时，删除历史报文数据中M报文、A报文、B报文、C报文、D报文关联的报文。
通过丢弃所述历史报文数据中报文关联中的非频繁的报文集合，能够有效减少后续数据处理时的噪声，提高处理效率。
在一个可选的实施例中，该步骤S200还可以包括：
步骤S235：对所述FP树的头部链表的各节点进行降序排序。
其中，通过将FP树的头部链表的各节点进行排序，有利于后续数据处理过程，提高数据处理的速度。
综上所述，本发明实施例提供的网络报文传输处理方法，能够在不改造存量系统的前提下，快速迭代、逐步稳定地将网络报文由低效报文快速智能化改造为高效报文。对现有存量系统难以改造，但又需要适应集中式实施大规模网络改造的场景下能够有着良好的使用效果。
为了本领域技术人员更好地理解本发明，下面举例对采用本发明实施例提供的方法传输处理报文的过程：
(1)存量系统A发起报文传输，顺序传输多个数据载荷、且数据间无实际前后依赖的报文；
(2)存量系统A发起报文载荷1..n；
(3)代理节点A接收报文载荷，并缓存；
(4)报文载荷传送完毕；
(5)代理节点A取缓存向代理节点B并发异步发送；
(6)代理节点B接受报文载荷，并缓存；
(7)报文载荷接受完毕；
(8)代理节点B向存量系统B发送已缓存的报文载荷。
基于同一发明构思，本申请实施例还提供了一种网络报文传输处理装置，可以用于实现上述实施例所描述的方法，如下面的实施例所述。由于网络报文传输处理装置解决问题的原理与上述方法相似，因此网络报文传输处理装置的实施可以参见上述方法的实施，重复之处不再赘述。以下所使用的，术语“单元”或者“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现，但是硬件，或者软件和硬件的组合的实现也是可能并被构想的。
图8示出了应用本发明实施例提供的网络报文传输处理装置的系统架构图；如图8所示，该系统架构包括：存量系统A1、存量系统B 3以及网络报文传输处理装置，该网络报文传输处理装置包括：报文代理单元2、存量系统B 3、报文代理单元4、报文控制单元5、报文智能分析单元6、报文处理灰度实施单元7。需要说明的是图8为简化起见为单一个存量系统对应单一个报文代理的示意，但实际使用过程中上可以有多个存量系统与多个报文代理，可为多对多关系。
存量系统A1代表了报文传输的一方；存量系统B3代表了报文接收的一方；本领域技术人员可以理解的是，在报文的由往变返的传输过程功能中，双方的位置传输、接受位置会调换。
报文传输方代理单元2、报文接收方代理单元4代表在报文传输与接收过程中，原有存量系统之间不再直接传输，存量系统仅与报文代理的交互，系统间的传输，改由两个报文代理单元2、4间进行。每个存量系统都将对应到一个报文代理单元，这里主要是清晰描述报文传输过程，因此根据图中系统在传输过程中的角色，即是报文传输方，还是报文接收方划分为了报文传输方代理单元2和报文接收方代理单元4。
部署了报文代理单元后，存量系统A与存量系统B本身系统均不需要改造，仅将原有A－B间的直接通信，通过架设报文代理而转由报文代理进行通信。报文代理在最原始情况下直接转发报文，而后通过逐步的报文智能分析结果，对报文执行各类逻辑后在进行组合、拆分逻辑后转发。
报文控制单元5承担了两个职责，一是报文的旁路截取，二是控制报文代理实施报文处理规则与灰度实施策略。灰度实施策略一般通过按用户、按交易地区等，以一定较低比例报文开展新-旧报文处理逻辑并行，在评估新报文处理逻辑的处理正确性和效率性后，再行全量实施新报文处理逻辑替代旧逻辑。
报文旁路截取方面，通过对报文代理单元2两端分别处理后传输前、接收后处理前的报文进行获取后，记录对应数据流及处理时间、对端信息等多方面信息，提供后续报文智能分析单元6分析时，具体用于明确每个独立报文、以及对端接收处理返回的具体流程报文间关联性。
控制报文代理方面，获得报文处理规则后，下达到具体的报文传输方代理单元2、报文接收方代理单元4，决定具体报文在两个代理单元间网络传输过程中的处理逻辑。从报文处理灰度实施单元7获取灰度实施策略，进行灰度实施。
具体地，参见图9，该报文控制单元5包括：报文数据获取模块10，用于获取发送端存量系统发送的历史报文数据。
其中，通过旁路截取发送端存量系统发送的报文，记录对应数据流及处理时间、对端信息等多方面信息，用于明确每个独立报文以及对端接收处理返回的具体流程报文间关联性，在不影响报文正常发送的基础上，能够有效获取历史报文数据。
该报文智能分析单元6包括：报文智能分析模块20以及报文处理规则获取模块30；
报文智能分析模块20采用FP Growth算法分析所述历史报文数据得到报文频繁集。
其中，FP-Growth算法是一种关联分析算法，通过FP-tree数据结构对原始数据进行压缩，即：将提供频繁项集的数据库压缩到一棵频繁模式树(FP-tree)，但仍保留项集关联信息。
报文处理规则获取模块30根据所述报文频繁集获取对应的报文处理规则；
具体地，通过对历史报文数据开展报文可处理性分析，得到报文处理规则。报文处理规则：多报文合并处理规则、报文异步化处理规则或报文处理灰度化规则等。
报文处理规则示例如下：
1.先存在性、后交易性的报文，合并为仅交易性报文处理(部分依赖历史系统交易性报文异常处理机制)；
2.部分业务交易外的交易准备性质的系统参数获取类等报文，合并到后续业务交易报文处理；
3.顺序传输多个数据载荷、且数据间无实际前后依赖的报文，在发送端开展异步化并发传输，异步传送到接收端报文代理单元缓存后，再由接收端报文代理单元开展重新展开顺序化报文等。
值得说明的是，分析报文可处理性时，可根据实际需求不断调增报文处理规则。
该报文代理单元2和报文代理单元4中均包括报文传输处理模块40，根据所述报文处理规则处理所述发送端存量系统发送的报文以及接收端存量系统接收的报文。
具体地，发送端存量系统根据该报文处理规则处理所要发送的报文，处理后的报文传输至接收端存量系统，接收端存量系统根据该报文处理规则处理所接收的报文。
通过上述技术方案可以得知，本发明提供的网络报文传输处理装置，通过采用FPGrowth算法分析所述历史报文数据得到报文频繁集，进而获取相应的报文处理规则，通过报文处理规则，可将原有历史存量系统多次往返小报文、前后依赖等待等“低效报文”，通过合并、异步化等手段，改造为合并高效、或可异步并发后的在网络交互、传输上更高效的报文，以此，提高响应速度，等利于企业生产，提高客户服务体验，不需改造原系统，无需重新设计开发新系统，利于企业将原有分区管辖网络架构改为全国统一内网网络架构。
在一个可选的实施例中，参见图10，该报文智能分析模块20包括：重复支持度获取子模块21、报文排序子模块22、FP树构建子模块23、判断子模块24、遍历子模块25以及报文频繁项集获取子模块26。
重复支持度获取子模块21获取所述历史报文数据中各类报文的重复支持度。
具体地，统计所述历史报文数据中各类报文的出现次数。
报文排序子模块22根据重复支持度对所述历史报文数据中各类报文进行排序，排序后的每类报文作为一个报文集合；
其中，可以由大到小排序，也可以由小到大排序。
FP树构建子模块23将报文集合插入FP树；
判断子模块24判断所述FP树的头部链表是否为空；
遍历子模块25从小到大遍历所述头部链表的节点，得到条件模式基，同时获得一个报文频繁项集，并且，根据所述条件模式基继续构造条件FP树；
报文频繁项集获取子模块26得到报文频繁项集。
其中，通过采用FP Growth算法能够有效分析所述历史报文数据得到报文频繁集，以用于评价报文关系。
本领域技术人员可以理解的是，FP Growth算法为目前比较成熟的算法，可以直接调用开源程序实现，也可以通过采用Spark软件实现。
在一个可选的实施例中，该报文智能分析模块20还包括：重复非频繁项集丢弃子模块，按照预设比例丢弃所述历史报文数据中的非频繁的报文集合。
其中，预设比例根据实际需求进行设置，例如40％～0，如30％、20％、10％、50％等。
具体地，按照预设比例删除历史报文数据中重复支持度较低的报文集合，以此能够提高后续处理的速度和精度。
在一个可选的实施例中，该报文智能分析模块20还包括：关联非频繁项集丢弃子模块，根据预设阈值丢弃所述历史报文数据中报文关联中的非频繁的报文集合。
举例来说，A报文、B报文、C报文为常见关联的报文，M报文、A报文、B报文、C报文、D报文为关联集合，M报文和D报文为偶发，此时，删除历史报文数据中M报文、A报文、B报文、C报文、D报文关联的报文。
通过丢弃所述历史报文数据中报文关联中的非频繁的报文集合，能够有效减少后续数据处理时的噪声，提高处理效率。
在一个可选的实施例中，该报文智能分析模块20还包括：节点排序子模块，对所述FP树的头部链表的各节点进行降序排序。
其中，通过将FP树的头部链表的各节点进行排序，有利于后续数据处理过程，提高数据处理的速度。
综上所述，本发明实施例提供的网络报文传输处理装置，通过增加报文代理层次，旁路截获流量、实施集中化的报文分析、控制报文的合并处理，且可灰度评估效果，最终在不改动存量系统的前提下，转化存量系统低效报文为高效报文的方法能够在不改造存量系统的前提下，快速迭代、逐步稳定地将网络报文由低效报文快速智能化改造为高效报文。对现有存量系统难以改造，但又需要适应集中式实施大规模网络改造的场景下能够有着良好的使用效果。
在一个可选的实施例中，该报文代理单元2和报文代理单元4中均包括：灰度实施策略获取模块以及灰度实施策略实施模块。
灰度实施策略获取模块从报文处理灰度实施单元7所述获取报文传输处理灰度实施策略；
灰度实施策略实施模块根据所述报文传输处理灰度实施策略控制网络报文传输处理。
值得说明的是，灰度实施是指在一定的范围内，在采用本发明实施例提供的网络报文传输处理方法的基础上，还要并行实施现有的报文传输方法，以保障改造的逐步过渡，在充分评估交易改造后对实际生产运行的影响的基础上，还可以保证生产的总体稳定运行。
具体地，所述报文传输处理灰度实施策略包括：按百分比部分交易逐步灰度策略、按设定交易类型逐步灰度策略和按交易所在机构地区逐步灰度策略中的至少一个。
其中，为确保对存量系统的逐步报文改造为高效报文的逐步实施，给出了逐步灰度的策略，如：按百分比部分交易逐步灰度、按设定交易类型逐步灰度、按交易所在机构地区逐步灰度、或进一步复合地按交易机构地区+部分交易开展灰度，以此充分评估交易改造后对实际生产运行的影响，同时又能尽量保证生产的总体稳定运行。
上述实施例阐明的装置、模块或单元，具体可以由计算机芯片或实体实现，或者由具有某种功能的产品来实现。一种典型的实现设备为电子设备，具体的，电子设备例如可以为个人计算机、膝上型计算机、蜂窝电话、相机电话、智能电话、个人数字助理、媒体播放器、导航设备、电子邮件设备、游戏控制台、平板计算机、可穿戴设备或者这些设备中的任何设备的组合。
在一个典型的实例中电子设备具体包括存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现下述步骤：
获取发送端存量系统发送的历史报文数据；
采用FP Growth算法分析所述历史报文数据得到报文频繁集；
根据所述报文频繁集获取对应的报文处理规则；
根据所述报文处理规则处理所述发送端存量系统发送的报文以及接收端存量系统接收的报文。
从上述描述可知，本发明实施例提供的电子设备，可用于网络报文传输处理，通过采用FP Growth算法分析所述历史报文数据得到报文频繁集，进而获取相应的报文处理规则，通过报文处理规则，可将原有历史存量系统多次往返小报文、前后依赖等待等“低效报文”，通过合并、异步化等手段，改造为合并高效、或可异步并发后的在网络交互、传输上更高效的报文，以此，提高响应速度，等利于企业生产，提高客户服务体验，不需改造原系统，无需重新设计开发新系统，利于企业将原有分区管辖网络架构改为全国统一内网网络架构。
下面参考图11，其示出了适于用来实现本申请实施例的电子设备600的结构示意图。
如图11所示，电子设备600包括中央处理单元(CPU)601，其可以根据存储在只读存储器(ROM)602中的程序或者从存储部分608加载到随机访问存储器(RAM))603中的程序而执行各种适当的工作和处理。在RAM603中，还存储有系统600操作所需的各种程序和数据。CPU601、ROM602、以及RAM603通过总线604彼此相连。输入/输出(I/O)接口605也连接至总线604。
以下部件连接至I/O接口605：包括键盘、鼠标等的输入部分606；包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分607；包括硬盘等的存储部分608；以及包括诸如LAN卡，调制解调器等的网络接口卡的通信部分609。通信部分609经由诸如因特网的网络执行通信处理。驱动器610也根据需要连接至I/O接口606。可拆卸介质611，诸如磁盘、光盘、磁光盘、半导体存储器等等，根据需要安装在驱动器610上，以便于从其上读出的计算机程序根据需要被安装如存储部分608。
特别地，根据本发明的实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本发明的实施例包括一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现下述步骤：
获取发送端存量系统发送的历史报文数据；
采用FP Growth算法分析所述历史报文数据得到报文频繁集；
根据所述报文频繁集获取对应的报文处理规则；
根据所述报文处理规则处理所述发送端存量系统发送的报文以及接收端存量系统接收的报文。
从上述描述可知，本发明实施例提供的计算机可读存储介质，可用于网络报文传输处理，通过采用FP Growth算法分析所述历史报文数据得到报文频繁集，进而获取相应的报文处理规则，通过报文处理规则，可将原有历史存量系统多次往返小报文、前后依赖等待等“低效报文”，通过合并、异步化等手段，改造为合并高效、或可异步并发后的在网络交互、传输上更高效的报文，以此，提高响应速度，等利于企业生产，提高客户服务体验，不需改造原系统，无需重新设计开发新系统，利于企业将原有分区管辖网络架构改为全国统一内网网络架构。
在这样的实施例中，该计算机程序可以通过通信部分609从网络上被下载和安装，和/或从可拆卸介质611被安装。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。
为了描述的方便，描述以上装置时以功能分为各种单元分别描述。当然，在实施本申请时可以把各单元的功能在同一个或多个软件和/或硬件中实现。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。
本领域技术人员应明白，本申请的实施例可提供为方法、系统或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请可以在由计算机执行的计算机可执行指令的一般上下文中描述，例如程序模块。一般地，程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等等。也可以在分布式计算环境中实践本申请，在这些分布式计算环境中，由通过通信网络而被连接的远程处理设备来执行任务。在分布式计算环境中，程序模块可以位于包括存储设备在内的本地和远程计算机存储介质中。
本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
以上所述仅为本申请的实施例而已，并不用于限制本申请。对于本领域技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本申请的权利要求范围之内。

Claims (16)

1.一种网络报文传输处理方法，其特征在于，包括：
获取发送端存量系统发送的历史报文数据；
采用FP Growth算法分析所述历史报文数据得到报文频繁集；
根据所述报文频繁集获取对应的报文处理规则；
根据所述报文处理规则处理所述发送端存量系统发送的报文以及接收端存量系统接收的报文；
其中，所述采用FP Growth算法分析所述历史报文得到报文频繁集，包括：
获取所述历史报文数据中各类报文的重复支持度；
根据重复支持度对所述历史报文数据中各类报文进行排序，排序后的每类报文作为一个报文集合；
将报文集合插入FP树；
判断步骤：判断所述FP树的头部链表是否为空；
若否，从小到大遍历所述头部链表的节点，得到条件模式基，同时获得一个报文频繁集，并且，根据所述条件模式基继续构造条件FP树，然后返回判断步骤；
若是，得到报文频繁集。
2.根据权利要求1所述的网络报文传输处理方法，其特征在于，所述采用FP Growth算法分析所述历史报文得到报文频繁集，还包括：
按照预设比例丢弃所述历史报文数据中的非频繁的报文集合。
3.根据权利要求1所述的网络报文传输处理方法，其特征在于，所述采用FP Growth算法分析所述历史报文得到报文频繁集，还包括：
根据预设阈值丢弃所述历史报文数据中报文关联中的非频繁的报文集合。
4.根据权利要求1所述的网络报文传输处理方法，其特征在于，所述采用FP Growth算法分析所述历史报文得到报文频繁集，还包括：
对所述FP树的头部链表的各节点进行降序排序。
5.根据权利要求1所述的网络报文传输处理方法，其特征在于，所述报文处理规则：多报文合并处理规则、报文异步化处理规则或报文处理灰度化规则。
6.根据权利要求1所述的网络报文传输处理方法，其特征在于，在所述根据所述报文频繁集获取对应的报文处理规则之后，还包括：
获取报文传输处理灰度实施策略；
根据所述报文传输处理灰度实施策略控制网络报文传输处理；
其中，灰度实施指在预设范围内，执行所述网络报文传输处理方法的同时，并行实施现有的报文传输方法，使对存量系统的逐步报文改造为高效报文的逐步实施的实施方式。
7.根据权利要求6所述的网络报文传输处理方法，其特征在于，所述报文传输处理灰度实施策略包括：按百分比部分交易逐步灰度策略、按设定交易类型逐步灰度策略和按交易所在机构地区逐步灰度策略中的至少一个。
8.一种网络报文传输处理装置，其特征在于，包括：
报文数据获取模块，获取发送端存量系统发送的历史报文数据；
报文智能分析模块，采用FP Growth算法分析所述历史报文数据得到报文频繁集；
报文处理规则获取模块，根据所述报文频繁集获取对应的报文处理规则；
报文传输处理模块，根据所述报文处理规则处理所述发送端存量系统发送的报文以及接收端存量系统接收的报文；
其中，所述报文智能分析模块包括：
重复支持度获取子模块，获取所述历史报文数据中各类报文的重复支持度；
报文排序子模块，根据重复支持度对所述历史报文数据中各类报文进行排序，排序后的每类报文作为一个报文集合；
FP树构建子模块，将报文集合插入FP树；
判断子模块，判断所述FP树的头部链表是否为空；
遍历子模块，从小到大遍历所述头部链表的节点，得到条件模式基，同时获得一个报文频繁集，并且，根据所述条件模式基继续构造条件FP树；
报文频繁集获取子模块，得到报文频繁集。
9.根据权利要求8所述的网络报文传输处理装置，其特征在于，所述报文智能分析模块还包括：
重复非频繁项集丢弃子模块，按照预设比例丢弃所述历史报文数据中的非频繁的报文集合。
10.根据权利要求8所述的网络报文传输处理装置，其特征在于，所述报文智能分析模块还包括：
关联非频繁项集丢弃子模块，根据预设阈值丢弃所述历史报文数据中报文关联中的非频繁的报文集合。
11.根据权利要求8所述的网络报文传输处理装置，其特征在于，所述报文智能分析模块还包括：
节点排序子模块，对所述FP树的头部链表的各节点进行降序排序。
12.根据权利要求8所述的网络报文传输处理装置，其特征在于，所述报文处理规则：多报文合并处理规则、报文异步化处理规则或报文处理灰度化规则。
13.根据权利要求8所述的网络报文传输处理装置，其特征在于，还包括：
灰度实施策略获取模块，获取报文传输处理灰度实施策略；
灰度实施策略实施模块，根据所述报文传输处理灰度实施策略控制网络报文传输处理；
其中，灰度实施指在预设范围内，执行所述网络报文传输处理方法的同时，并行实施现有的报文传输方法，使对存量系统的逐步报文改造为高效报文的逐步实施的实施方式。
14.根据权利要求13所述的网络报文传输处理装置，其特征在于，所述报文传输处理灰度实施策略包括：按百分比部分交易逐步灰度策略、按设定交易类型逐步灰度策略和按交易所在机构地区逐步灰度策略中的至少一个。
15.一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现权利要求1至7任一项所述的网络报文传输处理方法的步骤。
16.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该计算机程序被处理器执行时实现权利要求1至7任一项所述的网络报文传输处理方法的步骤。
CN201910665289.1A 2019-07-23 2019-07-23 网络报文传输处理方法和装置 Active CN110336706B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910665289.1A CN110336706B (zh) 2019-07-23 2019-07-23 网络报文传输处理方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910665289.1A CN110336706B (zh) 2019-07-23 2019-07-23 网络报文传输处理方法和装置

Publications (2)

Publication Number Publication Date
CN110336706A CN110336706A (zh) 2019-10-15
CN110336706B true CN110336706B (zh) 2022-09-13

Family

ID=68147124

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910665289.1A Active CN110336706B (zh) 2019-07-23 2019-07-23 网络报文传输处理方法和装置

Country Status (1)

Country Link
CN (1) CN110336706B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110765197A (zh) * 2019-10-31 2020-02-07 广州安加互联科技有限公司 一种基于大数据的辅助分析方法、系统及终端
CN114143301B (zh) * 2021-12-07 2024-04-19 中国人民解放军国防科技大学 一种移动流量应用识别特征提取方法及系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101996102A (zh) * 2009-08-31 2011-03-30 中国移动通信集团公司 数据关联规则挖掘实现方法与系统
CN106570128A (zh) * 2016-11-03 2017-04-19 南京邮电大学 一种基于关联规则分析的挖掘算法
CN107835087A (zh) * 2017-09-14 2018-03-23 北京科东电力控制系统有限责任公司 一种基于频繁模式挖掘的安全设备告警规则自动提取方法
CN108573758A (zh) * 2018-04-26 2018-09-25 贵州大学 一种智能医疗大数据服务系统及应用方法
CN108710625A (zh) * 2018-03-16 2018-10-26 电子科技大学成都研究院 一种专题知识自动挖掘系统及方法
CN109657063A (zh) * 2018-12-24 2019-04-19 恒瑞通（福建）信息技术有限公司 一种海量环保人工上报事件数据的处理方法及存储介质

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10489363B2 (en) * 2016-10-19 2019-11-26 Futurewei Technologies, Inc. Distributed FP-growth with node table for large-scale association rule mining

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101996102A (zh) * 2009-08-31 2011-03-30 中国移动通信集团公司 数据关联规则挖掘实现方法与系统
CN106570128A (zh) * 2016-11-03 2017-04-19 南京邮电大学 一种基于关联规则分析的挖掘算法
CN107835087A (zh) * 2017-09-14 2018-03-23 北京科东电力控制系统有限责任公司 一种基于频繁模式挖掘的安全设备告警规则自动提取方法
CN108710625A (zh) * 2018-03-16 2018-10-26 电子科技大学成都研究院 一种专题知识自动挖掘系统及方法
CN108573758A (zh) * 2018-04-26 2018-09-25 贵州大学 一种智能医疗大数据服务系统及应用方法
CN109657063A (zh) * 2018-12-24 2019-04-19 恒瑞通（福建）信息技术有限公司 一种海量环保人工上报事件数据的处理方法及存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
《基于交易报文指纹关系的商业银行》;卢燕群;《计算机研究应用》;20170331;800-804 *

Also Published As

Publication number Publication date
CN110336706A (zh) 2019-10-15

Similar Documents

Publication Publication Date Title
US10171284B2 (en) Reachability-based coordination for cyclic dataflow
CN110113408B (zh) 一种区块同步方法、设备和存储介质
CN111277639B (zh) 一种保持数据一致性的方法和装置
US8095495B2 (en) Exchange of syncronization data and metadata
Hong A distributed, asynchronous and incremental algorithm for nonconvex optimization: An admm based approach
US8370521B2 (en) Reliable data message exchange
CN110287170B (zh) 数据库升级方法、状态数据调用方法、设备和存储介质
CN110336706B (zh) 网络报文传输处理方法和装置
WO2019206100A1 (zh) 一种特征工程编排方法及装置
CN111464352A (zh) 调用链路数据处理方法及装置
CN113434312A (zh) 数据血缘关系处理方法及装置
CN113220907A (zh) 业务知识图谱的构建方法及装置、介质、电子设备
CN113723893A (zh) 用于处理订单的方法和装置
CN109450684B (zh) 一种网络切片系统物理节点容量扩充方法及装置
CN111405037A (zh) 区块同步方法、设备和存储介质
Zhang et al. Joint optimization of multi-user computing offloading and service caching in mobile edge computing
WO2023077815A1 (zh) 一种处理敏感数据的方法及装置
Zhang et al. A composite service provisioning mechanism in edge computing
CN115827646A (zh) 索引配置方法、装置和电子设备
Yang et al. Replica placement in content delivery networks with stochastic demands and M/M/1 servers
CN111191103B (zh) 从互联网中识别分析企业主体信息方法、装置及存储介质
CN111125161A (zh) 数据的实时处理方法、装置、设备及存储介质
CN110019671B (zh) 一种处理实时消息的方法和系统
US9787564B2 (en) Algorithm for latency saving calculation in a piped message protocol on proxy caching engine
KR101206878B1 (ko) 다수의 모바일 호스트들 사이에서 조정 및 통신의 지능적 컨텍스트-기반 조절들을 위한 시스템

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant