CN116384921A - 运维事件的执行方法、装置、存储介质以及电子设备 - Google Patents
运维事件的执行方法、装置、存储介质以及电子设备 Download PDFInfo
- Publication number
- CN116384921A CN116384921A CN202310345308.9A CN202310345308A CN116384921A CN 116384921 A CN116384921 A CN 116384921A CN 202310345308 A CN202310345308 A CN 202310345308A CN 116384921 A CN116384921 A CN 116384921A
- Authority
- CN
- China
- Prior art keywords
- execution
- maintenance
- action
- actions
- sequence
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012423 maintenance Methods 0.000 title claims abstract description 292
- 238000000034 method Methods 0.000 title claims abstract description 73
- 238000003860 storage Methods 0.000 title claims abstract description 32
- 230000009471 action Effects 0.000 claims abstract description 277
- 230000000712 assembly Effects 0.000 claims abstract description 10
- 238000000429 assembly Methods 0.000 claims abstract description 10
- 238000013145 classification model Methods 0.000 claims description 27
- 238000012549 training Methods 0.000 claims description 9
- 238000005516 engineering process Methods 0.000 abstract description 9
- 238000013473 artificial intelligence Methods 0.000 abstract description 4
- 238000010586 diagram Methods 0.000 description 11
- 238000004590 computer program Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 8
- 238000012545 processing Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 5
- 230000000694 effects Effects 0.000 description 3
- 238000012163 sequencing technique Methods 0.000 description 3
- 230000005856 abnormality Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000007635 classification algorithm Methods 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 230000032683 aging Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000004801 process automation Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000013515 script Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/10—Office automation; Time management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/901—Indexing; Data structures therefor; Storage structures
- G06F16/9024—Graphs; Linked lists
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/903—Querying
- G06F16/90335—Query processing
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y04—INFORMATION OR COMMUNICATION TECHNOLOGIES HAVING AN IMPACT ON OTHER TECHNOLOGY AREAS
- Y04S—SYSTEMS INTEGRATING TECHNOLOGIES RELATED TO POWER NETWORK OPERATION, COMMUNICATION OR INFORMATION TECHNOLOGIES FOR IMPROVING THE ELECTRICAL POWER GENERATION, TRANSMISSION, DISTRIBUTION, MANAGEMENT OR USAGE, i.e. SMART GRIDS
- Y04S10/00—Systems supporting electrical power generation, transmission or distribution
- Y04S10/50—Systems or methods supporting the power network operation or management, involving a certain degree of interaction with the load-side end user applications
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Computational Linguistics (AREA)
- Strategic Management (AREA)
- Human Resources & Organizations (AREA)
- Entrepreneurship & Innovation (AREA)
- Quality & Reliability (AREA)
- Tourism & Hospitality (AREA)
- Operations Research (AREA)
- General Business, Economics & Management (AREA)
- Marketing (AREA)
- Economics (AREA)
- Software Systems (AREA)
- Debugging And Monitoring (AREA)
Abstract
本申请公开了一种运维事件的执行方法、装置、存储介质以及电子设备。涉及人工智能领域。该方法包括:获取目标运维事件的运行日志数据,并从运行日志数据中获取执行模组日志;获取执行模组日志中的N个运维动作的执行时刻,得到N个执行时刻,并根据N个执行时刻的先后顺序生成N个运维动作的执行顺序;确定执行每个运维动作的执行组件,得到N个执行组件,并从执行模组日志中获取每个运维动作的预设执行参数,得到N个预设执行参数;将N个预设执行参数添加至对应的执行组件中,得到N个目标组件,并按照执行顺序运行N个目标组件。通过本申请,解决了相关技术中通过人工编排的方式生成运维流程的效率较低的问题。
Description
技术领域
本申请涉及人工智能领域,具体而言,涉及一种运维事件的执行方法、装置、存储介质以及电子设备。
背景技术
企业的数字化转型和降本增效成为一种共识,机器人流程自动化技术(RoboticProcess Automation,RPA)是一种用于企业规则化、重复性工作替代的有效技术。在现有使用RPA技术来实现自动运维的时候,RPA技术的使用方法侧重于自动运维,运维流程多使用手工编排流程,而编排工作需要专业运维人员参与,耗时且专业要求度高,缺乏灵活性。
针对相关技术中通过人工编排的方式生成运维流程的效率较低的问题,目前尚未提出有效的解决方案。
发明内容
本申请提供一种运维事件的执行方法、装置、存储介质以及电子设备,以解决相关技术中通过人工编排的方式生成运维流程的效率较低的问题。
根据本申请的一个方面,提供了一种运维事件的执行方法。该方法包括:获取目标运维事件的运行日志数据,并从运行日志数据中获取执行模组日志,其中,执行模组日志中包括目标运维事件的N个执行步骤,执行步骤中包括执行时刻、运维动作;获取执行模组日志中的N个运维动作的执行时刻,得到N个执行时刻,并根据N个执行时刻的先后顺序生成N个运维动作的执行顺序;确定执行每个运维动作的执行组件,得到N个执行组件,并从执行模组日志中获取每个运维动作的预设执行参数,得到N个预设执行参数;将N个预设执行参数添加至对应的执行组件中,得到N个目标组件,并按照执行顺序运行N个目标组件。
可选地,确定执行每个运维动作的执行组件包括:将运维动作输入动作分类模型中,得到运维动作的动作类型,其中,动作分类模型通过样本训练得到,样本包括多个样本运维动作和每个样本运维动作的动作类型;将动作类型下的执行组件确定为运维动作的执行组件,其中,每种动作类型关联至少一个执行组件。
可选地,在将运维动作输入动作分类模型中,得到运维动作的动作类型之前,该方法还包括:判断数据库中是否存在执行模组的对照表,其中,对照表中包括多个预设运维动作以及每个预设运维动作的动作类型;在数据库中存在对照表的情况下,判断对照表中是否存在运维动作;在对照表中存在运维动作的情况下,从对照表中获取运维动作的动作类型;在对照表中不存在运维动作的情况下,执行将运维动作输入动作分类模型中,得到运维动作的动作类型的步骤,得到运维动作的动作类型,并将运维动作和动作类型存储至对照表中。
可选地,在将运维动作和动作类型存储至对照表中之后,该方法还包括:确定对照表中的每个运维动作的入表时刻,得到多个入表时刻;获取入表时刻早于预设时刻的运维动作,得到至少一个超时运维动作,并从对照表中删除至少一个超时运维动作。
可选地,在根据N个执行时刻的先后顺序生成N个运维动作的执行顺序之后,该方法还包括:将每个运维动作确定为一个节点,得到N个节点;根据执行顺序生成N个节点的有向图;判断有向图是否为有向无环图,并在有向图为有向无环图的情况下,发出告警信息,其中,告警信息用于告知运维人员对有向图进行调整;在有向图不是有向无环图的情况下,根据有向图执行按照执行顺序运行N个目标组件的步骤。
可选地,在按照执行顺序运行N个目标组件之前,该方法还包括:判断运行日志数据中是否存在多个执行模组日志;在运行日志数据中存在M个执行模组日志的情况下,确定每个执行模组日志对应的执行模组,得到M个执行模组;确定M个执行模组之间的执行顺序,得到模组执行顺序,并根据模组执行顺序依次执行M个执行模组。
可选地,根据模组执行顺序依次执行M个执行模组包括:确定M个执行模组中的任意两个执行模组之间是否存在关联关系;在两个执行模组之间不存在关联关系,并且两个执行模组的前项执行模组已完成执行的情况下,并行执行两个执行模组。
根据本申请的另一方面,提供了一种运维事件的执行装置。该装置包括:第一获取单元,用于获取目标运维事件的运行日志数据,并从运行日志数据中获取执行模组日志,其中,执行模组日志中包括目标运维事件的N个执行步骤,执行步骤中包括执行时刻、运维动作;第一生成单元,用于获取执行模组日志中的N个运维动作的执行时刻,得到N个执行时刻,并根据N个执行时刻的先后顺序生成N个运维动作的执行顺序;第二获取单元,用于确定执行每个运维动作的执行组件,得到N个执行组件,并从执行模组日志中获取每个运维动作的预设执行参数,得到N个预设执行参数;运行单元,用于将N个预设执行参数添加至对应的执行组件中,得到N个目标组件,并按照执行顺序运行N个目标组件。
根据本发明实施例的另一方面,还提供了一种计算机存储介质,计算机存储介质用于存储程序,其中,程序运行时控制计算机存储介质所在的设备执行一种运维事件的执行方法。
根据本发明实施例的另一方面,还提供了一种电子设备,包含一个或多个处理器和存储器;存储器中存储有计算机可读指令,处理器用于运行计算机可读指令,其中,计算机可读指令运行时执行一种运维事件的执行方法。
通过本申请,采用以下步骤:获取目标运维事件的运行日志数据,并从运行日志数据中获取执行模组日志,其中,执行模组日志中包括目标运维事件的N个执行步骤,执行步骤中包括执行时刻、运维动作;获取执行模组日志中的N个运维动作的执行时刻,得到N个执行时刻,并根据N个执行时刻的先后顺序生成N个运维动作的执行顺序;确定执行每个运维动作的执行组件,得到N个执行组件,并从执行模组日志中获取每个运维动作的预设执行参数,得到N个预设执行参数;将N个预设执行参数添加至对应的执行组件中,得到N个目标组件,并按照执行顺序运行N个目标组件。解决了相关技术中通过人工编排的方式生成运维流程的效率较低的问题。根据运行日志确定执行目标运维事件所用的执行模组的日志,并根据日志确定执行动作之间的执行顺序,并确定每个运维动作在执行时所需的执行组件以及执行组件中的执行参数,并根据执行顺序将目标组件进行排序,从而得到目标运维事件的自动执行流程,进而达到了准确生成自动运维流程的效果。
附图说明
构成本申请的一部分的附图用来提供对本申请的进一步理解,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
图1是根据本申请实施例提供的运维事件的执行方法的流程图;
图2是根据本申请实施例提供的动作分类模型的训练流程图;
图3是根据本申请实施例提供的确定运维动作类型的方法流程图;
图4是根据本申请实施例提供的可选的有向图的示意图;
图5是根据本申请实施例提供的运维事件的执行装置的示意图;
图6为根据本申请实施例提供的一种电子设备的示意图。
具体实施方式
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分的实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本申请保护的范围。
需要说明的是,本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
需要说明的是,本公开所涉及的相关信息(包括但不限于用户设备信息、用户个人信息等)和数据(包括但不限于用于展示的数据、分析的数据等),均为经用户授权或者经过各方充分授权的信息和数据。例如,本系统和相关用户或机构间设置有接口,在获取相关信息之前,需要通过接口向前述的用户或机构发送获取请求,并在接收到前述的用户或机构反馈的同意信息后,获取相关信息。
需要说明的是,本公开所确定的运维事件的执行方法、装置、存储介质以及电子设备可用于人工智能领域,也可用于除人工智能领域之外的任意领域,本公开所确定的运维事件的执行方法、装置、存储介质以及电子设备的应用领域不做限定。
为了便于描述,以下对本申请实施例涉及的部分名词或术语进行说明:
标准化持续集成与交付:标准化是持续交付的工具模式,通过对发布单元的种类、构建部署规则、源码管理、流水线定义等进行标准化和规范化,将巨石架构应用中复杂且差异化的构建部署过程转化为对标准化发布单元组合的持续交付过程。
发布单元:在应用接入持续交付标准化后,标准化持续集成与交付以发布单元为粒度进行运维,每个发布单元对应一个独立的代码库。以信用卡额度与结算系统的发布单元划分为例,从技术上层面可以划分为DB(database数据库)发布单元、Maven发布单元、批量作业发布单元等。从业务角度划分,Maven发布单元又可以分为接入层发布单元、业务处理层发布单元、公共IO(公共输入输出)发布单元等;其中接入层,业务层等公共单元均依赖公共IO层发布单元。
根据本申请的实施例,提供了一种运维事件的执行方法。
图1是根据本申请实施例提供的运维事件的执行方法的流程图。如图1所示,该方法包括以下步骤:
步骤S101,获取目标运维事件的运行日志数据,并从运行日志数据中获取执行模组日志,其中,执行模组日志中包括目标运维事件的N个执行步骤,执行步骤中包括执行时刻、运维动作。
具体的,目标运维事件可以为某个需要进行自动运维的事件,例如信用卡额度结算系统的运维、后台人员管理系统运维等事件。运行日志数据可以为历史时刻下通过人工编排的方式执行了目标运维事件后的运行日志数据,运行日志数据中的每条数据可以为由发布单元,操作时间,目标元素,操作类型,操作结果等信息构成的多元组序列。
由于每个目标运维事件中可能包括多个发布单元(上述执行模组),例如,以信用卡额度与结算系统的发布单元划分为例,从技术上层面可以划分为DB(database数据库)发布单元、Maven发布单元、批量作业发布单元等。因此,可以先对每个发布单元,也即执行模组中的多个运维动作的执行流程进行确定,之后在确定多个发布单元之间的执行流程,从而得到目标运维事件的标准化持续集成交付自动运维流程。
步骤S102,获取执行模组日志中的N个运维动作的执行时刻,得到N个执行时刻,并根据N个执行时刻的先后顺序生成N个运维动作的执行顺序。
具体的,首先,可以根据发布单元将日志数据进行分组,形成包括<发布单元,操作时间,{运维动作}>等序列的多元组,从而先对每个发布单元中的运维动作的执行流程进行确定。
进一步的,将分组后的日志数据按照操作的时间进行排序,按照发布单元进行分块,得到各个发布单元在时间上连续的运维动作数据。
例如,某发布单元中存在三个运维动作A、B、C,其中,A的操作时间为10:00,B的操作时间为10:05,C的操作时间为10:10,则运维动作之间的执行顺序则为A-B-C。
步骤S103,确定执行每个运维动作的执行组件,得到N个执行组件,并从执行模组日志中获取每个运维动作的预设执行参数,得到N个预设执行参数。
具体的,由于每个运维动作对应一个执行组件,其中,执行组件可以为流程组件模板,例如:创建日志组件模板、环境初始化组件模板、创建代码仓库模板等,在确定了一个运维动作后,则需要确定该运维动作对应的执行组件,并确定运维动作在日志中的执行参数,例如,环境初始化动作对应的执行参数可以为初始化至A环境。
步骤S104,将N个预设执行参数添加至对应的执行组件中,得到N个目标组件,并按照执行顺序运行N个目标组件。
具体的,在确定了每个运行动作对应的执行组件和执行参数后,可以由执行组件和执行参数组合得到目标组件,从而可以根据执行顺序依次执行每个目标组件,从而完成一个发布单元的运行,并根据上述流程执行完全部发布单元后,完成目标运维事件的执行。
本申请实施例提供的运维事件的执行方法,通过获取目标运维事件的运行日志数据,并从运行日志数据中获取执行模组日志,其中,执行模组日志中包括目标运维事件的N个执行步骤,执行步骤中包括执行时刻、运维动作;获取执行模组日志中的N个运维动作的执行时刻,得到N个执行时刻,并根据N个执行时刻的先后顺序生成N个运维动作的执行顺序;确定执行每个运维动作的执行组件,得到N个执行组件,并从执行模组日志中获取每个运维动作的预设执行参数,得到N个预设执行参数;将N个预设执行参数添加至对应的执行组件中,得到N个目标组件,并按照执行顺序运行N个目标组件。解决了相关技术中通过人工编排的方式生成运维流程的效率较低的问题。根据运行日志确定执行目标运维事件所用的执行模组的日志,并根据日志确定执行动作之间的执行顺序,并确定每个运维动作在执行时所需的执行组件以及执行组件中的执行参数,并根据执行顺序将目标组件进行排序,从而得到目标运维事件的自动执行流程,进而达到了准确生成自动运维流程的效果。
可选地,在本申请实施例提供的运维事件的执行方法中,确定执行每个运维动作的执行组件包括:将运维动作输入动作分类模型中,得到运维动作的动作类型,其中,动作分类模型通过样本训练得到,样本包括多个样本运维动作和每个样本运维动作的动作类型;将动作类型下的执行组件确定为运维动作的执行组件,其中,每种动作类型关联至少一个执行组件。
具体的,利用机器学习的分类算法,生成运维动作分类模型。输入运维动作,匹配运维动作的动作类型,并确定该动作类型对应的执行组件,从而确定每个运维动作的执行组件。
例如,图2是根据本申请实施例提供的动作分类模型的训练流程图,如图2所示,首先,获取多个样本运维动作和每个样本运维动作的动作类型,将进行预处理后的样本运维动作划分为训练集和测试集,从训练集中提取出运维对象、运维行为等属性(属性例如:发布单元,动作名等)作为特征,再将所有的特征转换为分类算法的输入,进行训练,建立RPA动作分类模型,并使用测试集的验证结果。
在得到完成训练的动作分类模型后,即可根据动作分类模型确定么每个运维动作的动作类型,进而可以根据动作类型确定执行该动作类型的动作的执行组件。
可选地,在本申请实施例提供的运维事件的执行方法中,在将运维动作输入动作分类模型中,得到运维动作的动作类型之前,该方法还包括:判断数据库中是否存在执行模组的对照表,其中,对照表中包括多个预设运维动作以及每个预设运维动作的动作类型;在数据库中存在对照表的情况下,判断对照表中是否存在运维动作;在对照表中存在运维动作的情况下,从对照表中获取运维动作的动作类型;在对照表中不存在运维动作的情况下,执行将运维动作输入动作分类模型中,得到运维动作的动作类型的步骤,得到运维动作的动作类型,并将运维动作和动作类型存储至对照表中。
需要说明的是,对照表中包含两种不同时效的存储结构:KV内存键值对和关系数据库二维表。
具体的,由于每个运维动作可能会多次出现在一个或多个发布单元中,为了避免每次都使用运维动作分类模型确定运维动作的动作类型,因此,可以使用缓存技术来降低重复运维动作对RPA动作分类模型的依赖。其包含两种不同时效的存储结构,KV内存键值对和关系数据库二维表,其中KV内存键值对具备时效性,以key-value形式存储在内存的运维动作与流程组件模板的关系,提高RPA运维工作流脚本转换效率。关系数据库二维表也即对照表,可以长时间存储运维动作和运维动作类型之间的对应关系,因此,可以通过上述两种方式进行运维动作和运维动作类型之间的对应关系的存储,从而降低重复运维动作对RPA动作分类模型的依赖。
例如,图3是根据本申请实施例提供的确定运维动作类型的方法流程图,如图3所示,通过对照表确定运维动作类型的流程如下所示:
步骤S301,首先查找key-value形式的存储结构,若匹配到运维动作类型,则结束。
步骤S302,若查找失败,则查找二维表。若匹配到运维动作类型,则同步到key-value形式的存储结构中并设置失效时间,结束。
步骤S303,若数据表无记录,再调用动作分类模型预测其运维动作类型,并将其结果更新到key-value形式的存储结构和数据表中。key-value形式的存储结构和数据表使用锁保证其数据一致性。
步骤S304,若步骤S303中使用动作分类模型预测失败,则邮件通知运维人员人工确定运维动作类型。
进一步的,在通过动作分类模型得到运维动作类型的情况下,需要通过运维动作的数据进行哈希计算,得到不同分类运维动作的哈希值,并通过唯一哈希值记录运维动作和运维动作类型,从而保证对照表中的每个运维动作的唯一性。
可选地,在本申请实施例提供的运维事件的执行方法中,在将运维动作和动作类型存储至对照表中之后,该方法还包括:确定对照表中的每个运维动作的入表时刻,得到多个入表时刻;获取入表时刻早于预设时刻的运维动作,得到至少一个超时运维动作,并从对照表中删除至少一个超时运维动作。
具体的,由于对照表中包含两种不同时效的存储结构:KV内存键值对和关系数据库二维表,因此,需要确定两种存储结果中存储的运维动作的入表时间,并根据入表时间确定运维动作和运维动作类型的存储时长,从而可以在超时的情况下,将超时的存储信息进行删除,从而保证了存储的数据的时效性。
可选地,在本申请实施例提供的运维事件的执行方法中,在根据N个执行时刻的先后顺序生成N个运维动作的执行顺序之后,该方法还包括:将每个运维动作确定为一个节点,得到N个节点;根据执行顺序生成N个节点的有向图;判断有向图是否为有向无环图,并在有向图为有向无环图的情况下,发出告警信息,其中,告警信息用于告知运维人员对有向图进行调整;在有向图不是有向无环图的情况下,根据有向图执行按照执行顺序运行N个目标组件的步骤。
具体的,在得到执行顺序后,可以将每个运维动作作为一个节点,并根据运维动作之间的调用关系和执行顺序生成包含全部节点的有向图。
由于日志中可能存在错误步骤和冗余步骤,为了筛选出有向图中的有效依赖关系和有效步骤,可以确定有向图中是否存在有向环,并在有环的情况下,需要发出告警信息告知工作人员运维流程存在异常,需要对有向图进行修正,在无环的情况下,表征运维流程无异常,则可以正常执行。
可选地,在本申请实施例提供的运维事件的执行方法中,在按照执行顺序运行N个目标组件之前,该方法还包括:判断运行日志数据中是否存在多个执行模组日志;在运行日志数据中存在M个执行模组日志的情况下,确定每个执行模组日志对应的执行模组,得到M个执行模组;确定M个执行模组之间的执行顺序,得到模组执行顺序,并根据模组执行顺序依次执行M个执行模组。
具体的,在存在多个执行模组日志的情况下,也即存在多个发布单元的情况下,可以确定多个发布单元之间的执行顺序以及调用关系,并根据执行顺序和调用关系确定发布单元的运行流程,从而完成目标运维事件的执行。
可选地,在本申请实施例提供的运维事件的执行方法中,根据模组执行顺序依次执行M个执行模组包括:确定M个执行模组中的任意两个执行模组之间是否存在关联关系;在两个执行模组之间不存在关联关系,并且两个执行模组的前项执行模组已完成执行的情况下,并行执行两个执行模组。
具体的,在两个发布单元之间不存在关联关系的情况下,可以并行执行两个发布单元,同样的,在一个发布单元中的两个执行组件之间不存在关联关系的情况下,也可以并行执行这两个执行组件,从而提高目标运维事件的执行效率。
图4是根据本申请实施例提供的可选的有向图的示意图,如图4所示,图中每个虚线框中的节点可以并行执行,并且图4中不存在有向环,因此图4中的有向图无异常。
需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
本申请实施例还提供了一种运维事件的执行装置,需要说明的是,本申请实施例的运维事件的执行装置可以用于执行本申请实施例所提供的用于运维事件的执行方法。以下对本申请实施例提供的运维事件的执行装置进行介绍。
图5是根据本申请实施例提供的运维事件的执行装置的示意图。如图5所示,该装置包括:第一获取单元51,第一生成单元52,第二获取单元53,运行单元54。
第一获取单元51,用于获取目标运维事件的运行日志数据,并从运行日志数据中获取执行模组日志,其中,执行模组日志中包括目标运维事件的N个执行步骤,执行步骤中包括执行时刻、运维动作。
第一生成单元52,用于获取执行模组日志中的N个运维动作的执行时刻,得到N个执行时刻,并根据N个执行时刻的先后顺序生成N个运维动作的执行顺序。
第二获取单元53,用于确定执行每个运维动作的执行组件,得到N个执行组件,并从执行模组日志中获取每个运维动作的预设执行参数,得到N个预设执行参数。
运行单元54,用于将N个预设执行参数添加至对应的执行组件中,得到N个目标组件,并按照执行顺序运行N个目标组件。
本申请实施例提供的运维事件的执行装置,通过第一获取单元51获取目标运维事件的运行日志数据,并从运行日志数据中获取执行模组日志,其中,执行模组日志中包括目标运维事件的N个执行步骤,执行步骤中包括执行时刻、运维动作;第一生成单元52获取执行模组日志中的N个运维动作的执行时刻,得到N个执行时刻,并根据N个执行时刻的先后顺序生成N个运维动作的执行顺序;第二获取单元53确定执行每个运维动作的执行组件,得到N个执行组件,并从执行模组日志中获取每个运维动作的预设执行参数,得到N个预设执行参数;运行单元54将N个预设执行参数添加至对应的执行组件中,得到N个目标组件,并按照执行顺序运行N个目标组件。解决了相关技术中通过人工编排的方式生成运维流程的效率较低的问题。根据运行日志确定执行目标运维事件所用的执行模组的日志,并根据日志确定执行动作之间的执行顺序,并确定每个运维动作在执行时所需的执行组件以及执行组件中的执行参数,并根据执行顺序将目标组件进行排序,从而得到目标运维事件的自动执行流程,进而达到了准确生成自动运维流程的效果。
可选地,在本申请实施例提供的运维事件的执行装置中,第二获取单元53包括:输入模块,用于将运维动作输入动作分类模型中,得到运维动作的动作类型,其中,动作分类模型通过样本训练得到,样本包括多个样本运维动作和每个样本运维动作的动作类型;第一确定模块,用于将动作类型下的执行组件确定为运维动作的执行组件,其中,每种动作类型关联至少一个执行组件。
可选地,在本申请实施例提供的运维事件的执行装置中,该装置还包括:第一判断单元,用于判断数据库中是否存在执行模组的对照表,其中,对照表中包括多个预设运维动作以及每个预设运维动作的动作类型;第二判断单元,用于在数据库中存在对照表的情况下,判断对照表中是否存在运维动作;第三获取单元,用于在对照表中存在运维动作的情况下,从对照表中获取运维动作的动作类型;第一执行单元,用于在对照表中不存在运维动作的情况下,执行将运维动作输入动作分类模型中,得到运维动作的动作类型的步骤,得到运维动作的动作类型,并将运维动作和动作类型存储至对照表中。
可选地,在本申请实施例提供的运维事件的执行装置中,该装置还包括:第一确定单元,用于确定对照表中的每个运维动作的入表时刻,得到多个入表时刻;第四获取单元,用于获取入表时刻早于预设时刻的运维动作,得到至少一个超时运维动作,并从对照表中删除至少一个超时运维动作。
可选地,在本申请实施例提供的运维事件的执行装置中,该装置还包括:第二确定单元,用于将每个运维动作确定为一个节点,得到N个节点;第二生成单元,用于根据执行顺序生成N个节点的有向图;第三判断单元,用于判断有向图是否为有向无环图,并在有向图为有向无环图的情况下,发出告警信息,其中,告警信息用于告知运维人员对有向图进行调整;第二执行单元,用于在有向图不是有向无环图的情况下,根据有向图执行按照执行顺序运行N个目标组件的步骤。
可选地,在本申请实施例提供的运维事件的执行装置中,该装置还包括:第四判断单元,用于判断运行日志数据中是否存在多个执行模组日志;第三确定单元,用于在运行日志数据中存在M个执行模组日志的情况下,确定每个执行模组日志对应的执行模组,得到M个执行模组;第三执行单元,用于确定M个执行模组之间的执行顺序,得到模组执行顺序,并根据模组执行顺序依次执行M个执行模组。
可选地,在本申请实施例提供的运维事件的执行装置中,第三执行单元包括:第二确定模块,用于确定M个执行模组中的任意两个执行模组之间是否存在关联关系;执行模块,用于在两个执行模组之间不存在关联关系,并且两个执行模组的前项执行模组已完成执行的情况下,并行执行两个执行模组。
上述运维事件的执行装置包括处理器和存储器,上述第一获取单元51,第一生成单元52,第二获取单元53,运行单元54等均作为程序单元存储在存储器中,由处理器执行存储在存储器中的上述程序单元来实现相应的功能。
处理器中包含内核,由内核去存储器中调取相应的程序单元。内核可以设置一个或以上,通过调整内核参数来解决了相关技术中通过人工编排的方式生成运维流程的效率较低的问题。
存储器可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM),存储器包括至少一个存储芯片。
本发明实施例提供了一种计算机可读存储介质,其上存储有程序,该程序被处理器执行时实现所述运维事件的执行方法。
本发明实施例提供了一种处理器,所述处理器用于运行程序,其中,所述程序运行时执行所述运维事件的执行方法。
如图6所示,本发明实施例提供了一种电子设备,电子设备60包括处理器、存储器及存储在存储器上并可在处理器上运行的程序,处理器执行程序时实现以下步骤:获取目标运维事件的运行日志数据,并从运行日志数据中获取执行模组日志,其中,执行模组日志中包括目标运维事件的N个执行步骤,执行步骤中包括执行时刻、运维动作;获取执行模组日志中的N个运维动作的执行时刻,得到N个执行时刻,并根据N个执行时刻的先后顺序生成N个运维动作的执行顺序;确定执行每个运维动作的执行组件,得到N个执行组件,并从执行模组日志中获取每个运维动作的预设执行参数,得到N个预设执行参数;将N个预设执行参数添加至对应的执行组件中,得到N个目标组件,并按照执行顺序运行N个目标组件。本文中的设备可以是服务器、PC、PAD、手机等。
本申请还提供了一种计算机程序产品,当在数据处理设备上执行时,适于执行初始化有如下方法步骤的程序:获取目标运维事件的运行日志数据,并从运行日志数据中获取执行模组日志,其中,执行模组日志中包括目标运维事件的N个执行步骤,执行步骤中包括执行时刻、运维动作;获取执行模组日志中的N个运维动作的执行时刻,得到N个执行时刻,并根据N个执行时刻的先后顺序生成N个运维动作的执行顺序;确定执行每个运维动作的执行组件,得到N个执行组件,并从执行模组日志中获取每个运维动作的预设执行参数,得到N个预设执行参数;将N个预设执行参数添加至对应的执行组件中,得到N个目标组件,并按照执行顺序运行N个目标组件。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中,计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
存储器可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。存储器是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。
以上仅为本申请的实施例而已,并不用于限制本申请。对于本领域技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本申请的权利要求范围之内。
Claims (10)
1.一种运维事件的执行方法,其特征在于,包括:
获取目标运维事件的运行日志数据,并从所述运行日志数据中获取执行模组日志,其中,所述执行模组日志中包括所述目标运维事件的N个执行步骤,所述执行步骤中包括执行时刻、运维动作;
获取所述执行模组日志中的N个运维动作的执行时刻,得到N个执行时刻,并根据所述N个执行时刻的先后顺序生成所述N个运维动作的执行顺序;
确定执行每个运维动作的执行组件,得到N个执行组件,并从所述执行模组日志中获取每个运维动作的预设执行参数,得到N个预设执行参数;
将所述N个预设执行参数添加至对应的执行组件中,得到N个目标组件,并按照所述执行顺序运行所述N个目标组件。
2.根据权利要求1所述的方法,其特征在于,确定执行每个运维动作的执行组件包括:
将所述运维动作输入动作分类模型中,得到所述运维动作的动作类型,其中,所述动作分类模型通过样本训练得到,所述样本包括多个样本运维动作和每个样本运维动作的动作类型;
将所述动作类型下的执行组件确定为所述运维动作的执行组件,其中,每种动作类型关联至少一个执行组件。
3.根据权利要求2所述的方法,其特征在于,在将所述运维动作输入动作分类模型中,得到所述运维动作的动作类型之前,所述方法还包括:
判断数据库中是否存在所述执行模组的对照表,其中,所述对照表中包括多个预设运维动作以及每个预设运维动作的动作类型;
在所述数据库中存在所述对照表的情况下,判断所述对照表中是否存在所述运维动作;
在所述对照表中存在所述运维动作的情况下,从所述对照表中获取所述运维动作的动作类型;
在所述对照表中不存在所述运维动作的情况下,执行所述将所述运维动作输入动作分类模型中,得到所述运维动作的动作类型的步骤,得到所述运维动作的动作类型,并将所述运维动作和所述动作类型存储至所述对照表中。
4.根据权利要求3所述的方法,其特征在于,在将所述运维动作和所述动作类型存储至所述对照表中之后,所述方法还包括:
确定所述对照表中的每个运维动作的入表时刻,得到多个入表时刻;
获取入表时刻早于预设时刻的运维动作,得到至少一个超时运维动作,并从所述对照表中删除所述至少一个超时运维动作。
5.根据权利要求1所述的方法,其特征在于,在根据所述N个执行时刻的先后顺序生成所述N个运维动作的执行顺序之后,所述方法还包括:
将每个运维动作确定为一个节点,得到N个节点;
根据所述执行顺序生成所述N个节点的有向图;
判断所述有向图是否为有向无环图,并在所述有向图为有向无环图的情况下,发出告警信息,其中,所述告警信息用于告知运维人员对所述有向图进行调整;
在所述有向图不是有向无环图的情况下,根据所述有向图执行所述按照所述执行顺序运行所述N个目标组件的步骤。
6.根据权利要求1所述的方法,其特征在于,在按照所述执行顺序运行所述N个目标组件之前,所述方法还包括:
判断所述运行日志数据中是否存在多个执行模组日志;
在所述运行日志数据中存在M个执行模组日志的情况下,确定每个执行模组日志对应的执行模组,得到M个执行模组;
确定所述M个执行模组之间的执行顺序,得到模组执行顺序,并根据所述模组执行顺序依次执行所述M个执行模组。
7.根据权利要求6所述的方法,其特征在于,根据所述模组执行顺序依次执行所述M个执行模组包括:
确定所述M个执行模组中的任意两个执行模组之间是否存在关联关系;
在两个执行模组之间不存在关联关系,并且所述两个执行模组的前项执行模组已完成执行的情况下,并行执行所述两个执行模组。
8.一种运维事件的执行装置,其特征在于,包括:
第一获取单元,用于获取目标运维事件的运行日志数据,并从所述运行日志数据中获取执行模组日志,其中,所述执行模组日志中包括所述目标运维事件的N个执行步骤,所述执行步骤中包括执行时刻、运维动作;
第一生成单元,用于获取所述执行模组日志中的N个运维动作的执行时刻,得到N个执行时刻,并根据所述N个执行时刻的先后顺序生成所述N个运维动作的执行顺序;
第二获取单元,用于确定执行每个运维动作的执行组件,得到N个执行组件,并从所述执行模组日志中获取每个运维动作的预设执行参数,得到N个预设执行参数;
运行单元,用于将所述N个预设执行参数添加至对应的执行组件中,得到N个目标组件,并按照所述执行顺序运行所述N个目标组件。
9.一种计算机存储介质,其特征在于,所述计算机存储介质用于存储程序,其中,所述程序运行时控制所述计算机存储介质所在的设备执行权利要求1至7中任意一项所述的运维事件的执行方法。
10.一种电子设备,其特征在于,包括一个或多个处理器和存储器,所述存储器用于存储一个或多个程序,其中,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现权利要求1至7中任意一项所述的运维事件的执行方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310345308.9A CN116384921A (zh) | 2023-03-31 | 2023-03-31 | 运维事件的执行方法、装置、存储介质以及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310345308.9A CN116384921A (zh) | 2023-03-31 | 2023-03-31 | 运维事件的执行方法、装置、存储介质以及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116384921A true CN116384921A (zh) | 2023-07-04 |
Family
ID=86978276
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310345308.9A Pending CN116384921A (zh) | 2023-03-31 | 2023-03-31 | 运维事件的执行方法、装置、存储介质以及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116384921A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116560722A (zh) * | 2023-07-12 | 2023-08-08 | 腾讯科技(深圳)有限公司 | 运维流程处理方法、装置、电子设备及存储介质 |
-
2023
- 2023-03-31 CN CN202310345308.9A patent/CN116384921A/zh active Pending
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116560722A (zh) * | 2023-07-12 | 2023-08-08 | 腾讯科技(深圳)有限公司 | 运维流程处理方法、装置、电子设备及存储介质 |
CN116560722B (zh) * | 2023-07-12 | 2024-01-02 | 腾讯科技(深圳)有限公司 | 运维流程处理方法、装置、电子设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10678683B2 (en) | System and method for automated service layer testing and regression | |
US20210149668A1 (en) | System and method for generating documentation for microservice based applications | |
US20130024167A1 (en) | Computer-Implemented Systems And Methods For Large Scale Automatic Forecast Combinations | |
US20200201744A1 (en) | Real time application error identification and mitigation | |
AU2021273796B2 (en) | Dynamic automation of selection of pipeline artifacts | |
AU2019253836A1 (en) | Processing data utilizing a corpus | |
US10430270B2 (en) | System for migrating data using dynamic feedback | |
US20210304073A1 (en) | Method and system for developing a machine learning model | |
US11972382B2 (en) | Root cause identification and analysis | |
CN116384921A (zh) | 运维事件的执行方法、装置、存储介质以及电子设备 | |
CN114626807A (zh) | 核电场景管理方法、系统、装置、计算机设备和存储介质 | |
CN110865806B (zh) | 代码处理方法、装置、服务器及存储介质 | |
US20200410387A1 (en) | Minimizing Risk Using Machine Learning Techniques | |
CN117235527A (zh) | 端到端容器化的大数据模型构建方法、装置、设备及介质 | |
US20210041991A1 (en) | System and method for implementing a self service machine learning framework | |
CN116383055A (zh) | 金融场景的测试方法和装置、处理器及电子设备 | |
CN117763024A (zh) | 一种数据分片抽取方法及装置 | |
US20150242786A1 (en) | Integrating process context from heterogeneous workflow containers to optimize workflow performance | |
Yaremchuck et al. | Search of similar programs using code metrics and big data-based assessment of software reliability | |
CN114168569B (zh) | 数据迁移方法、数据迁移装置、计算机设备及存储介质 | |
Al Qausar et al. | Software Metrics for Container-Based Applications: Systematic Literature Review | |
US20210224644A1 (en) | Artificial intelligence-driven method and system for simplified software deployments | |
Łuczak et al. | A Model of a Parallel Design Environment for the Development of Decision-Making IoT Systems | |
US20230139459A1 (en) | Optimization Engine for Dynamic Resource Provisioning | |
US20240086379A1 (en) | System and method for implementing a data quality framework and engine |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |