CN112052026A - 系统间交互关系确定方法及装置 - Google Patents
系统间交互关系确定方法及装置 Download PDFInfo
- Publication number
- CN112052026A CN112052026A CN202010914337.9A CN202010914337A CN112052026A CN 112052026 A CN112052026 A CN 112052026A CN 202010914337 A CN202010914337 A CN 202010914337A CN 112052026 A CN112052026 A CN 112052026A
- Authority
- CN
- China
- Prior art keywords
- file
- interaction
- data integration
- record
- records
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000003993 interaction Effects 0.000 title claims abstract description 194
- 238000000034 method Methods 0.000 title claims abstract description 48
- 230000005540 biological transmission Effects 0.000 claims abstract description 78
- 230000002452 interceptive effect Effects 0.000 claims abstract description 17
- 230000007474 system interaction Effects 0.000 claims abstract description 15
- 238000004458 analytical method Methods 0.000 claims abstract description 14
- 230000010354 integration Effects 0.000 claims description 102
- 238000004590 computer program Methods 0.000 claims description 16
- 238000004806 packaging method and process Methods 0.000 claims description 12
- 238000012423 maintenance Methods 0.000 abstract description 17
- 235000019580 granularity Nutrition 0.000 description 46
- 238000004891 communication Methods 0.000 description 14
- 230000006870 function Effects 0.000 description 14
- 238000010586 diagram Methods 0.000 description 12
- 238000012545 processing Methods 0.000 description 11
- 230000008569 process Effects 0.000 description 5
- 239000000872 buffer Substances 0.000 description 4
- 238000007418 data mining Methods 0.000 description 4
- 239000000284 extract Substances 0.000 description 4
- 230000008859 change Effects 0.000 description 2
- 238000013480 data collection Methods 0.000 description 2
- 238000005065 mining Methods 0.000 description 2
- 230000033772 system development Effects 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000004321 preservation Methods 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/70—Software maintenance or management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3065—Monitoring arrangements determined by the means or processing involved in reporting the monitored data
- G06F11/3068—Monitoring arrangements determined by the means or processing involved in reporting the monitored data where the reporting involves data format conversion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/1805—Append-only file systems, e.g. using logs or journals to store data
- G06F16/1815—Journaling file systems
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Quality & Reliability (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Debugging And Monitoring (AREA)
Abstract
本申请实施例提供一种系统间交互关系确定方法及装置,方法包括:采集目标系统传输文本时产生的日志文件,根据所述目标系统的日志传输方式和操作系统类型对所述日志文件进行分类,得到文本传输记录;根据与所述文本传输记录的类型对应的解析方式进行关键元素信息提取,得到文件交互记录;根据所述文件交互记录中的系统交互信息,确定所述目标系统与关联系统之间的交互关系;本申请能够有效、便捷及准确得确定系统间的交互关系,进而提升系统的整体运维能力。
Description
技术领域
本申请涉及数据处理领域,具体涉及一种系统间交互关系确定方法及装置。
背景技术
在一些组织机构通常至少有几十套,多至成百上千套系统,而每套系统又存在多个应用节点,内部系统与系统之间、内部系统与外部系统之间都会有一些文本交互。这种文件交互关联关系通常以文档的方式记录,从系统的开发和运维人员处收集,而该文档的更新、保存主要依靠人工维护。
发明人发现,由于系统开发及运维人员的变迁、较多系统的模块很多且负责不同模块通常由不同的团队负责、不可控性等因素的影响,导致这种人工梳理文档记录的方式出现很多遗漏、信息不准确、属性不完全的情况,为产品运行维护工作带来很多不便。
发明内容
针对现有技术中的问题,本申请提供一种系统间交互关系确定方法及装置,能够有效、便捷及准确得确定系统间的交互关系,进而提升系统的整体运维能力。
为了解决上述问题中的至少一个,本申请提供以下技术方案:
第一方面,本申请提供一种系统间交互关系确定方法,包括:
采集目标系统传输文本时产生的日志文件,根据所述目标系统的日志传输方式和操作系统类型对所述日志文件进行分类,得到文本传输记录;
根据与所述文本传输记录的类型对应的解析方式进行关键元素信息提取,得到文件交互记录;
根据所述文件交互记录中的系统交互信息,确定所述目标系统与关联系统之间的交互关系。
进一步地,在所述根据所述文件交互记录中的系统交互信息,确定所述目标系统与关联系统之间的交互关系之前,包括:
根据预设整合粒度对所述文件交互记录进行数据整合,并将经过所述数据整合后的文件交互记录按照预设封装规则封装为对象格式。
进一步地,所述根据预设整合粒度对所述文件交互记录进行数据整合,包括:
对在设定文件传输时间段内文件名称符合预设文件名相似度的多个所述文件交互记录进行文件粒度级数据整合,得到经过所述文件粒度级数据整合的文件交互记录。
进一步地,所述根据预设整合粒度对所述文件交互记录进行数据整合,包括:
对所述目标系统的节点名称与关联系统的节点名称符合预设节点名相似度的多个所述文件交互记录进行模块粒度级数据整合,得到经过所述模块粒度级数据整合的文件交互记录。
进一步地,所述根据预设整合粒度对所述文件交互记录进行数据整合,包括:
根据所述文件交互记录中目标系统与关联系统各自对应的文件发送接收状态进行系统粒度级数据整合,得到经过所述系统粒度级数据整合的文件交互记录。
第二方面,本申请提供一种系统间交互关系确定装置,包括:
文本传输记录确定模块,用于采集目标系统传输文本时产生的日志文件,根据所述目标系统的日志传输方式和操作系统类型对所述日志文件进行分类,得到文本传输记录;
文件交互记录确定模块,用于根据与所述文本传输记录的类型对应的解析方式进行关键元素信息提取,得到文件交互记录;
交互关系确定模块,用于根据所述文件交互记录中的系统交互信息,确定所述目标系统与关联系统之间的交互关系。
进一步地,还包括:
数据整合模块,用于根据预设整合粒度对所述文件交互记录进行数据整合,并将经过所述数据整合后的文件交互记录按照预设封装规则封装为对象格式。
进一步地,所述数据整合模块包括:
文件粒度级数据整合单元,用于对在设定文件传输时间段内文件名称符合预设文件名相似度的多个所述文件交互记录进行文件粒度级数据整合,得到经过所述文件粒度级数据整合的文件交互记录。
进一步地,所述数据整合模块包括:
模块粒度级数据整合单元,用于对所述目标系统的节点名称与关联系统的节点名称符合预设节点名相似度的多个所述文件交互记录进行模块粒度级数据整合,得到经过所述模块粒度级数据整合的文件交互记录。
进一步地,所述数据整合模块包括:
系统粒度级数据整合单元,用于根据所述文件交互记录中目标系统与关联系统各自对应的文件发送接收状态进行系统粒度级数据整合,得到经过所述系统粒度级数据整合的文件交互记录。
第三方面,本申请提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现所述的系统间交互关系确定方法的步骤。
第四方面,本申请提供一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现所述的系统间交互关系确定方法的步骤。
由上述技术方案可知,本申请提供一种系统间交互关系确定方法及装置,通过采集目标系统传输文本时产生的日志文件,并根据所述目标系统的日志传输方式和操作系统类型对所述日志文件进行分类,以此得到各个类型的文本传输记录,并采用与所述文本传输记录的类型对应的解析方式进行关键元素信息提取,得到文件交互记录,由此准确、灵活得对不同数据格式的日志文件进行统一格式化处理,进而根据所述文件交互记录中的系统交互信息,便捷得确定所述目标系统与关联系统之间的交互关系,提升了系统的整体运维能力。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例中的系统间交互关系确定方法的流程示意图;
图2为本申请实施例中的系统间交互关系确定装置的结构图之一;
图3为本申请实施例中的系统间交互关系确定装置的结构图之二;
图4为本申请实施例中的电子设备的结构示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整的描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
考虑到由于系统开发及运维人员的变迁、较多系统的模块很多且负责不同模块通常由不同的团队负责、不可控性等因素的影响,导致这种人工梳理文档记录的方式出现很多遗漏、信息不准确、属性不完全的情况,为产品运行维护工作带来很多不便的问题,本申请提供一种系统间交互关系确定方法及装置,通过采集目标系统传输文本时产生的日志文件,并根据所述目标系统的日志传输方式和操作系统类型对所述日志文件进行分类,以此得到各个类型的文本传输记录,并采用与所述文本传输记录的类型对应的解析方式进行关键元素信息提取,得到文件交互记录,由此准确、灵活得对不同数据格式的日志文件进行统一格式化处理,进而根据所述文件交互记录中的系统交互信息,便捷得确定所述目标系统与关联系统之间的交互关系,提升了系统的整体运维能力。
为了能够有效、便捷及准确得确定系统间的交互关系,进而提升系统的整体运维能力,本申请提供一种系统间交互关系确定方法的实施例,参见图1,所述系统间交互关系确定方法具体包含有如下内容:
步骤S101:采集目标系统传输文本时产生的日志文件,根据所述目标系统的日志传输方式和操作系统类型对所述日志文件进行分类,得到文本传输记录。
可以理解的是,现有技术中目标系统在传输文本时由于日志传输方式的不同(FTP或CD)以及操作系统的不同(WINDOWS\LINUX\UNIX),因此产生的日志文件具有不同的数据格式,现有技术在通过人工进行数据整理时将产生不准确和不便捷的问题。
可选的,本申请通过对目标系统传输文本时产生的日志文件按照该目标系统具体的日志传输方式和操作系统类型进行分类,形成统一的文件格式存储,得到各个类型的文本传输记录。
可选的,本申请在进行日志文件采集前,还可以通过设置一参数配置模块,根据使用者的个性化设置,对后续的文本交互关联关系进行限定、定制,也可根据具体的环境内容配置与环境相匹配的工作模块,包括时间段限制、传输工具范围、对端阶段IP范围、文本大小等等的参数配置。
步骤S102:根据与所述文本传输记录的类型对应的解析方式进行关键元素信息提取,得到文件交互记录。
可选的,各个类型的文本传输记录具有各自对应的数据解析方式,本申请在前述已经对日志文件按照类型分类处理后,此时即可根据各文本传输记录的具体类型对应的进行数据解析操作。
可选的,所述关键元素信息包括但不限于:本节点、对方地址、开始时间、结束时间、文本大小、交互方向是发送还是接受、文件名称、文件存放路径,由此形成关键元素信息的内容、顺序、格式一致的记录,一次传输为一条记录,输出为全部的文件交互记录。
步骤S103:根据所述文件交互记录中的系统交互信息,确定所述目标系统与关联系统之间的交互关系。
可选的,所述文件交互记录中包含有目标系统与关联系统进行交互时的系统交互信息,由此可以便捷、准确的从中获取目标系统与关联系统之间的交互关系。
从上述描述可知,本申请实施例提供的系统间交互关系确定方法,能够通过采集目标系统传输文本时产生的日志文件,并根据所述目标系统的日志传输方式和操作系统类型对所述日志文件进行分类,以此得到各个类型的文本传输记录,并采用与所述文本传输记录的类型对应的解析方式进行关键元素信息提取,得到文件交互记录,由此准确、灵活得对不同数据格式的日志文件进行统一格式化处理,进而根据所述文件交互记录中的系统交互信息,便捷得确定所述目标系统与关联系统之间的交互关系,提升了系统的整体运维能力。
为了能够提高从日志文件中获取特定信息时的准确性和便捷性,在本申请的系统间交互关系确定方法的一实施例中,在步骤S103之前,还可以具体包含如下内容:
根据预设整合粒度对所述文件交互记录进行数据整合,并将经过所述数据整合后的文件交互记录按照预设封装规则封装为对象格式。
可选的,所述文件交互记录中每一次传输对应一条记录,对于某一个系统来说,由于该系统由多个模块组成,同时每个模块可能会与多个对方阶段存在交互,且交互的文本数量通常从几个到几百个不等,因此一个系统将会产生较多的记录条数。本申请通过对这些文件交互记录进行整合,根据预先配置的整合粒度(例如文件级、节点级、系统级)形成更方便人员查阅的对象格式,以此便捷、准确的从中获取目标系统与关联系统之间的交互关系。
为了能够准确得对文件交互记录进行数据整合,在本申请的系统间交互关系确定方法的一实施例中,还可以具体包含如下内容:
对在设定文件传输时间段内文件名称符合预设文件名相似度的多个所述文件交互记录进行文件粒度级数据整合,得到经过所述文件粒度级数据整合的文件交互记录。
可选的,本申请通过对文件交互记录的文件名称和传输时间进行分析,对连续时间段内文件名称相近(例如abc01.dat与abc02.dat)的记录进行整合,形成以文件级别为单位的文本交互对象,并将结果存储于数据库中。
为了能够准确得对文件交互记录进行数据整合,在本申请的系统间交互关系确定方法的一实施例中,还可以具体包含如下内容:
对所述目标系统的节点名称与关联系统的节点名称符合预设节点名相似度的多个所述文件交互记录进行模块粒度级数据整合,得到经过所述模块粒度级数据整合的文件交互记录。
可选的,本申请可以通过在上述文件级粒度整合的基础上,根据同一系统中本节点、对方节点名称相近(例如SYSNM01与SYSNM02\192.168.1.1与192.168.1.2)进行整合,形成以模块为单位进行文本交互对象的存储。
为了能够准确得对文件交互记录进行数据整合,在本申请的系统间交互关系确定方法的一实施例中,还可以具体包含如下内容:
根据所述文件交互记录中目标系统与关联系统各自对应的文件发送接收状态进行系统粒度级数据整合,得到经过所述系统粒度级数据整合的文件交互记录。
可选的,由于进行模块级粒度整合后的不同的对象记录是互相隔离的,一个模块对应多条文本交互对象,包括发送和接受,而未形成发送到的对方节点和接受来自的对方节点对应关注,本申请还可以对此级别进行整合,从而形成系统间文本交互的对应关系。
最终将形成对象格式的文件交互记录存储于数据库中,多种级别可共存,分别存储。以系统粒度级数据整合后的文件交互记录如表1所示:
表1系统粒度级数据整合后的文件交互记录
为了能够有效、便捷及准确得确定系统间的交互关系,进而提升系统的整体运维能力,本申请提供一种用于实现所述系统间交互关系确定方法的全部或部分内容的系统间交互关系确定装置的实施例,参见图2,所述系统间交互关系确定装置具体包含有如下内容:
文本传输记录确定模块10,用于采集目标系统传输文本时产生的日志文件,根据所述目标系统的日志传输方式和操作系统类型对所述日志文件进行分类,得到文本传输记录。
文件交互记录确定模块20,用于根据与所述文本传输记录的类型对应的解析方式进行关键元素信息提取,得到文件交互记录。
交互关系确定模块30,用于根据所述文件交互记录中的系统交互信息,确定所述目标系统与关联系统之间的交互关系。
从上述描述可知,本申请实施例提供的系统间交互关系确定装置,能够通过采集目标系统传输文本时产生的日志文件,并根据所述目标系统的日志传输方式和操作系统类型对所述日志文件进行分类,以此得到各个类型的文本传输记录,并采用与所述文本传输记录的类型对应的解析方式进行关键元素信息提取,得到文件交互记录,由此准确、灵活得对不同数据格式的日志文件进行统一格式化处理,进而根据所述文件交互记录中的系统交互信息,便捷得确定所述目标系统与关联系统之间的交互关系,提升了系统的整体运维能力。
为了能够提高从日志文件中获取特定信息时的准确性和便捷性,在本申请的系统间交互关系确定装置的一实施例中,参见图3,还具体包含有如下内容:
数据整合模块40,用于根据预设整合粒度对所述文件交互记录进行数据整合,并将经过所述数据整合后的文件交互记录按照预设封装规则封装为对象格式。
为了能够准确得对文件交互记录进行数据整合,在本申请的系统间交互关系确定装置的一实施例中,参见图3,所述数据整合模块40包括:
文件粒度级数据整合单元41,用于对在设定文件传输时间段内文件名称符合预设文件名相似度的多个所述文件交互记录进行文件粒度级数据整合,得到经过所述文件粒度级数据整合的文件交互记录。
为了能够准确得对文件交互记录进行数据整合,在本申请的系统间交互关系确定装置的一实施例中,参见图3,所述数据整合模块40包括:
模块粒度级数据整合单元42,用于对所述目标系统的节点名称与关联系统的节点名称符合预设节点名相似度的多个所述文件交互记录进行模块粒度级数据整合,得到经过所述模块粒度级数据整合的文件交互记录。
为了能够准确得对文件交互记录进行数据整合,在本申请的系统间交互关系确定装置的一实施例中,参见图3,所述数据整合模块40包括:
系统粒度级数据整合单元43,用于根据所述文件交互记录中目标系统与关联系统各自对应的文件发送接收状态进行系统粒度级数据整合,得到经过所述系统粒度级数据整合的文件交互记录。
为了更进一步说明本方案,本申请还提供一种应用上述系统间交互关系确定装置实现系统间交互关系确定方法的具体应用实例,具体包含有:参数配置模块、日志信息收集模块、日志数据挖掘模块、整合模块以及展示模块。
具体的,所述参数配置模块:该模块接受使用者的个性化设置,对后续的文本交互关联关系进行限定、定制,也可根据具体的环境内容配置与环境相匹配的工作模块,包括时间段限制、传输工具范围、对端阶段IP范围、文本大小等等的参数配置。
所述日志信息收集模块:根据传输工具范围在系统中对相应的日志进行获取,该模块实现了对多样化的日志的逻辑分析实现,对相对无规律的日志内容形成统一的标准,能够收集到有效的文本交互传输形成的记录段内容。同时对获取的日志内容进行分类,以便后续模块的使用。
可以理解的是,目前主流交互方式采用的传输工具为FTP和CD,该模块首先根据配置的传输方式和操作系统类型(WINDOWS\LINUX\UNIX)在文件系统中获取传输文本产生的日志文件,通过读取日志文件中内容识别出真正进行文本传输记录的日志段,这些日志段记录了一个文本传输开始到结束的过程,对所有收集到的日志按照传输方式、操作系统类型进行分类,形成统一的文件格式存储,输出称为文本传输记录。
所述日志数据挖掘模块:对收集到的文本传输记录挖掘其发生本交互的开始截止时间、对端节点、获取还是发送文本、大小、周期等有效信息,筛选出有效数据、不同粒度的拆分合并、合并相同模块内容、属性信息的核实等工作。
可以理解的是,日志收集模块得到的记录通常包括了时间、文件名、文件大小、发送方向,对方地址等元素,但由于传输方式和操作系统的差异此时的记录中的各元素在顺序、格式上是不同的,且还包含了非关键元素的过程信息。该模块实现对已分类的文本传输记录按照不同方式分别进行挖掘,筛选出关键元素信息,包括本节点、对方地址、开始时间、结束时间、文本大小、交互方向是发送还是接受、文件名称、文件存放路径,形成关键元素内容、顺序、格式一致的记录,一次传输为一条记录,输出为全部的文件交互记录。
所述整合模块:对挖掘到的文件交互记录行整合寻找合适的粒度封装成面向对象的格式,并存储于文件或数据库中。
具体的,上一模块形成的文件交互记录中每一次传输对应一条记录,对于某一个系统来说,由于该系统又多个模块组成,同时每个模块可能会与多个对方阶段存在交互,且交互的文本数量通常从几个到几百个不等,因此一个系统将会产品较多的记录条数。本模块对这些文件交互记录进行整合,根据配置的整合粒度(文件级、节点级、系统级)形成更方便人员查阅的对象格式。
其中,文件级:该级别对文件交互记录的文件名称和传输时间进行分析,在,对连续时间段内文件名称相近(例如abc01.dat与abc02.dat)的记录进行整合,形成以文件级别为单位的文本交互对象,并将结果存储于数据库中。
模块级:在文件级整合的基础上,该级别同一系统中本节点、对方节点名称相近(例如SYSNM01与SYSNM02\192.168.1.1与192.168.1.2)进行整合,形成以模块为单位进行文本交互对象的存储。
系统级:进行模块级整合后的不同的对象记录是互相隔离的,一个模块对应多条文本交互对象,包括发送和接受,而未形成发送到的对方节点和接受来自的对方节点对应关注,本阶段对此级别进行整合,从而形成系统间文本交互的对应关系。
所述展示模块:读取格式化的内容输出,通过表格、图表等格式展示。
有上述内容可知,本申请至少还可以实现如下技术效果:
1)用户通过参数配置模块设置个性化的内容,作为日志信息收集模块和日志数据收集模块的某些功能实现的配置参数。可以不做设置默认执行全部内容。
2)根据参数配置项或默认选项,日志信息收集模块识别文本传输工具的日志记录并进行处理,获取包含文本交互有效信息的日志记录段并按照日志类型进行分类。传递给日志数据收集模块。
3)日志数据挖掘模块的输入为上一步骤的输出,进行挖掘分析处理、粒度划分,识别出有效的文本交互数据项,形成数据记录组合,输出给整合模块。
4)整合模块根据日志数据挖掘模块提供的输入,多多样的数据记录组合进行分类、对应逻辑处理,形成面向对象的结果类型,新增、删除或更新关联关系结果,并存储于文件或数据库中。同时也可直接提供给展示模块。
5)展示模块跟进格式化模块形成的对象,采用图表的发送展示给用户。
从硬件层面来说,为了能够有效、便捷及准确得确定系统间的交互关系,进而提升系统的整体运维能力,本申请提供一种用于实现所述系统间交互关系确定方法中的全部或部分内容的电子设备的实施例,所述电子设备具体包含有如下内容:
处理器(processor)、存储器(memory)、通信接口(Communications Interface)和总线;其中,所述处理器、存储器、通信接口通过所述总线完成相互间的通信;所述通信接口用于实现系统间交互关系确定装置与核心业务系统、用户终端以及相关数据库等相关设备之间的信息传输;该逻辑控制器可以是台式计算机、平板电脑及移动终端等,本实施例不限于此。在本实施例中,该逻辑控制器可以参照实施例中的系统间交互关系确定方法的实施例,以及系统间交互关系确定装置的实施例进行实施,其内容被合并于此,重复之处不再赘述。
可以理解的是,所述用户终端可以包括智能手机、平板电子设备、网络机顶盒、便携式计算机、台式电脑、个人数字助理(PDA)、车载设备、智能穿戴设备等。其中,所述智能穿戴设备可以包括智能眼镜、智能手表、智能手环等。
在实际应用中,系统间交互关系确定方法的部分可以在如上述内容所述的电子设备侧执行,也可以所有的操作都在所述客户端设备中完成。具体可以根据所述客户端设备的处理能力,以及用户使用场景的限制等进行选择。本申请对此不作限定。若所有的操作都在所述客户端设备中完成,所述客户端设备还可以包括处理器。
上述的客户端设备可以具有通信模块(即通信单元),可以与远程的服务器进行通信连接,实现与所述服务器的数据传输。所述服务器可以包括任务调度中心一侧的服务器,其他的实施场景中也可以包括中间平台的服务器,例如与任务调度中心服务器有通信链接的第三方服务器平台的服务器。所述的服务器可以包括单台计算机设备,也可以包括多个服务器组成的服务器集群,或者分布式装置的服务器结构。
图4为本申请实施例的电子设备9600的系统构成的示意框图。如图4所示,该电子设备9600可以包括中央处理器9100和存储器9140;存储器9140耦合到中央处理器9100。值得注意的是,该图4是示例性的;还可以使用其他类型的结构,来补充或代替该结构,以实现电信功能或其他功能。
一实施例中,系统间交互关系确定方法功能可以被集成到中央处理器9100中。其中,中央处理器9100可以被配置为进行如下控制:
步骤S101:采集目标系统传输文本时产生的日志文件,根据所述目标系统的日志传输方式和操作系统类型对所述日志文件进行分类,得到文本传输记录。
步骤S102:根据与所述文本传输记录的类型对应的解析方式进行关键元素信息提取,得到文件交互记录。
步骤S103:根据所述文件交互记录中的系统交互信息,确定所述目标系统与关联系统之间的交互关系。
从上述描述可知,本申请实施例提供的电子设备,通过采集目标系统传输文本时产生的日志文件,并根据所述目标系统的日志传输方式和操作系统类型对所述日志文件进行分类,以此得到各个类型的文本传输记录,并采用与所述文本传输记录的类型对应的解析方式进行关键元素信息提取,得到文件交互记录,由此准确、灵活得对不同数据格式的日志文件进行统一格式化处理,进而根据所述文件交互记录中的系统交互信息,便捷得确定所述目标系统与关联系统之间的交互关系,提升了系统的整体运维能力。
在另一个实施方式中,系统间交互关系确定装置可以与中央处理器9100分开配置,例如可以将系统间交互关系确定装置配置为与中央处理器9100连接的芯片,通过中央处理器的控制来实现系统间交互关系确定方法功能。
如图4所示,该电子设备9600还可以包括:通信模块9110、输入单元9120、音频处理器9130、显示器9160、电源9170。值得注意的是,电子设备9600也并不是必须要包括图4中所示的所有部件;此外,电子设备9600还可以包括图4中没有示出的部件,可以参考现有技术。
如图4所示,中央处理器9100有时也称为控制器或操作控件,可以包括微处理器或其他处理器装置和/或逻辑装置,该中央处理器9100接收输入并控制电子设备9600的各个部件的操作。
其中,存储器9140,例如可以是缓存器、闪存、硬驱、可移动介质、易失性存储器、非易失性存储器或其它合适装置中的一种或更多种。可储存上述与失败有关的信息,此外还可存储执行有关信息的程序。并且中央处理器9100可执行该存储器9140存储的该程序,以实现信息存储或处理等。
输入单元9120向中央处理器9100提供输入。该输入单元9120例如为按键或触摸输入装置。电源9170用于向电子设备9600提供电力。显示器9160用于进行图像和文字等显示对象的显示。该显示器例如可为LCD显示器,但并不限于此。
该存储器9140可以是固态存储器,例如,只读存储器(ROM)、随机存取存储器(RAM)、SIM卡等。还可以是这样的存储器,其即使在断电时也保存信息,可被选择性地擦除且设有更多数据,该存储器的示例有时被称为EPROM等。存储器9140还可以是某种其它类型的装置。存储器9140包括缓冲存储器9141(有时被称为缓冲器)。存储器9140可以包括应用/功能存储部9142,该应用/功能存储部9142用于存储应用程序和功能程序或用于通过中央处理器9100执行电子设备9600的操作的流程。
存储器9140还可以包括数据存储部9143,该数据存储部9143用于存储数据,例如联系人、数字数据、图片、声音和/或任何其他由电子设备使用的数据。存储器9140的驱动程序存储部9144可以包括电子设备的用于通信功能和/或用于执行电子设备的其他功能(如消息传送应用、通讯录应用等)的各种驱动程序。
通信模块9110即为经由天线9111发送和接收信号的发送机/接收机9110。通信模块(发送机/接收机)9110耦合到中央处理器9100,以提供输入信号和接收输出信号,这可以和常规移动通信终端的情况相同。
基于不同的通信技术,在同一电子设备中,可以设置有多个通信模块9110,如蜂窝网络模块、蓝牙模块和/或无线局域网模块等。通信模块(发送机/接收机)9110还经由音频处理器9130耦合到扬声器9131和麦克风9132,以经由扬声器9131提供音频输出,并接收来自麦克风9132的音频输入,从而实现通常的电信功能。音频处理器9130可以包括任何合适的缓冲器、解码器、放大器等。另外,音频处理器9130还耦合到中央处理器9100,从而使得可以通过麦克风9132能够在本机上录音,且使得可以通过扬声器9131来播放本机上存储的声音。
本申请的实施例还提供能够实现上述实施例中的执行主体为服务器或客户端的系统间交互关系确定方法中全部步骤的一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述实施例中的执行主体为服务器或客户端的系统间交互关系确定方法的全部步骤,例如,所述处理器执行所述计算机程序时实现下述步骤:
步骤S101:采集目标系统传输文本时产生的日志文件,根据所述目标系统的日志传输方式和操作系统类型对所述日志文件进行分类,得到文本传输记录。
步骤S102:根据与所述文本传输记录的类型对应的解析方式进行关键元素信息提取,得到文件交互记录。
步骤S103:根据所述文件交互记录中的系统交互信息,确定所述目标系统与关联系统之间的交互关系。
从上述描述可知,本申请实施例提供的计算机可读存储介质,通过采集目标系统传输文本时产生的日志文件,并根据所述目标系统的日志传输方式和操作系统类型对所述日志文件进行分类,以此得到各个类型的文本传输记录,并采用与所述文本传输记录的类型对应的解析方式进行关键元素信息提取,得到文件交互记录,由此准确、灵活得对不同数据格式的日志文件进行统一格式化处理,进而根据所述文件交互记录中的系统交互信息,便捷得确定所述目标系统与关联系统之间的交互关系,提升了系统的整体运维能力。
本领域内的技术人员应明白,本发明的实施例可提供为方法、装置、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(装置)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
本发明中应用了具体实施例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (12)
1.一种系统间交互关系确定方法,其特征在于,所述方法包括:
采集目标系统传输文本时产生的日志文件,根据所述目标系统的日志传输方式和操作系统类型对所述日志文件进行分类,得到文本传输记录;
根据与所述文本传输记录的类型对应的解析方式进行关键元素信息提取,得到文件交互记录;
根据所述文件交互记录中的系统交互信息,确定所述目标系统与关联系统之间的交互关系。
2.根据权利要求1所述的系统间交互关系确定方法,其特征在于,在所述根据所述文件交互记录中的系统交互信息,确定所述目标系统与关联系统之间的交互关系之前,包括:
根据预设整合粒度对所述文件交互记录进行数据整合,并将经过所述数据整合后的文件交互记录按照预设封装规则封装为对象格式。
3.根据权利要求2所述的系统间交互关系确定方法,其特征在于,所述根据预设整合粒度对所述文件交互记录进行数据整合,包括:
对在设定文件传输时间段内文件名称符合预设文件名相似度的多个所述文件交互记录进行文件粒度级数据整合,得到经过所述文件粒度级数据整合的文件交互记录。
4.根据权利要求2所述的系统间交互关系确定方法,其特征在于,所述根据预设整合粒度对所述文件交互记录进行数据整合,包括:
对所述目标系统的节点名称与关联系统的节点名称符合预设节点名相似度的多个所述文件交互记录进行模块粒度级数据整合,得到经过所述模块粒度级数据整合的文件交互记录。
5.根据权利要求2所述的系统间交互关系确定方法,其特征在于,所述根据预设整合粒度对所述文件交互记录进行数据整合,包括:
根据所述文件交互记录中目标系统与关联系统各自对应的文件发送接收状态进行系统粒度级数据整合,得到经过所述系统粒度级数据整合的文件交互记录。
6.一种系统间交互关系确定装置,其特征在于,包括:
文本传输记录确定模块,用于采集目标系统传输文本时产生的日志文件,根据所述目标系统的日志传输方式和操作系统类型对所述日志文件进行分类,得到文本传输记录;
文件交互记录确定模块,用于根据与所述文本传输记录的类型对应的解析方式进行关键元素信息提取,得到文件交互记录;
交互关系确定模块,用于根据所述文件交互记录中的系统交互信息,确定所述目标系统与关联系统之间的交互关系。
7.根据权利要求6所述的系统间交互关系确定装置,其特征在于,还包括:
数据整合模块,用于根据预设整合粒度对所述文件交互记录进行数据整合,并将经过所述数据整合后的文件交互记录按照预设封装规则封装为对象格式。
8.根据权利要求7所述的系统间交互关系确定装置,其特征在于,所述数据整合模块包括:
文件粒度级数据整合单元,用于对在设定文件传输时间段内文件名称符合预设文件名相似度的多个所述文件交互记录进行文件粒度级数据整合,得到经过所述文件粒度级数据整合的文件交互记录。
9.根据权利要求7所述的系统间交互关系确定装置,其特征在于,所述数据整合模块包括:
模块粒度级数据整合单元,用于对所述目标系统的节点名称与关联系统的节点名称符合预设节点名相似度的多个所述文件交互记录进行模块粒度级数据整合,得到经过所述模块粒度级数据整合的文件交互记录。
10.根据权利要求7所述的系统间交互关系确定装置,其特征在于,所述数据整合模块包括:
系统粒度级数据整合单元,用于根据所述文件交互记录中目标系统与关联系统各自对应的文件发送接收状态进行系统粒度级数据整合,得到经过所述系统粒度级数据整合的文件交互记录。
11.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现权利要求1至5任一项所述的系统间交互关系确定方法的步骤。
12.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该计算机程序被处理器执行时实现权利要求1至5任一项所述的系统间交互关系确定方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010914337.9A CN112052026B (zh) | 2020-09-03 | 2020-09-03 | 系统间交互关系确定方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010914337.9A CN112052026B (zh) | 2020-09-03 | 2020-09-03 | 系统间交互关系确定方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112052026A true CN112052026A (zh) | 2020-12-08 |
CN112052026B CN112052026B (zh) | 2024-04-19 |
Family
ID=73607998
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010914337.9A Active CN112052026B (zh) | 2020-09-03 | 2020-09-03 | 系统间交互关系确定方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112052026B (zh) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108628918A (zh) * | 2017-09-29 | 2018-10-09 | 南京途牛科技有限公司 | 系统部署与依赖关系自动绘制系统及方法 |
CN109324996A (zh) * | 2018-10-12 | 2019-02-12 | 平安科技(深圳)有限公司 | 日志文件处理方法、装置、计算机设备及存储介质 |
CN109614433A (zh) * | 2018-12-13 | 2019-04-12 | 杭州数梦工场科技有限公司 | 业务系统间数据血缘的识别方法、装置、设备及存储介质 |
CN111245642A (zh) * | 2019-12-31 | 2020-06-05 | 北京奇才天下科技有限公司 | 一种获取多系统之间的依赖关系的方法、装置和电子设备 |
-
2020
- 2020-09-03 CN CN202010914337.9A patent/CN112052026B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108628918A (zh) * | 2017-09-29 | 2018-10-09 | 南京途牛科技有限公司 | 系统部署与依赖关系自动绘制系统及方法 |
CN109324996A (zh) * | 2018-10-12 | 2019-02-12 | 平安科技(深圳)有限公司 | 日志文件处理方法、装置、计算机设备及存储介质 |
CN109614433A (zh) * | 2018-12-13 | 2019-04-12 | 杭州数梦工场科技有限公司 | 业务系统间数据血缘的识别方法、装置、设备及存储介质 |
CN111245642A (zh) * | 2019-12-31 | 2020-06-05 | 北京奇才天下科技有限公司 | 一种获取多系统之间的依赖关系的方法、装置和电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN112052026B (zh) | 2024-04-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110109899B (zh) | 物联网数据填补方法、装置及系统 | |
US10387370B2 (en) | Collecting test results in different formats for storage | |
CN111078930A (zh) | 音频文件数据处理方法及装置 | |
CN111782470A (zh) | 分布式容器日志数据处理方法及装置 | |
CN112540996B (zh) | 一种业务数据的校验方法、装置、电子设备及存储介质 | |
CN109358904B (zh) | 应用程序分析的集中分发 | |
CN111680016A (zh) | 分布式服务器集群日志数据处理方法、装置及系统 | |
CN112799925A (zh) | 数据采集方法、装置、电子设备和可读存储介质 | |
CN113672748A (zh) | 多媒体信息播放方法及装置 | |
CN111324576B (zh) | 一种录音数据保存的方法、装置、存储介质及终端设备 | |
CN113626624B (zh) | 一种资源识别方法和相关装置 | |
CN113360413A (zh) | 一种代码测试方法及装置 | |
CN113076417A (zh) | 政策文件数据处理方法及装置 | |
CN112463527A (zh) | 一种数据处理方法、装置、设备、系统及存储介质 | |
CN112506887A (zh) | 车辆终端can总线数据处理方法及装置 | |
CN112052026B (zh) | 系统间交互关系确定方法及装置 | |
CN112052391A (zh) | 数据推送方法、装置及系统 | |
KR101584286B1 (ko) | 사용자 위치 기반 스마트 여행 기록 시스템 | |
CN113505076A (zh) | 文件覆盖检测方法及装置 | |
CN115640349A (zh) | 数据处理方法、装置、设备及存储介质 | |
CN115309802A (zh) | 用户分布热力图获取方法、装置、电子设备及存储介质 | |
CN110955709B (zh) | 一种数据的处理方法、装置及电子设备 | |
CN114510305A (zh) | 模型训练方法、装置、存储介质及电子设备 | |
CN113672488A (zh) | 日志文本处理方法及装置 | |
CN112860456A (zh) | 日志处理方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |