CN112541746A - 一种全栈自动化编排方法及系统 - Google Patents

一种全栈自动化编排方法及系统 Download PDF

Info

Publication number
CN112541746A
CN112541746A CN202011557765.7A CN202011557765A CN112541746A CN 112541746 A CN112541746 A CN 112541746A CN 202011557765 A CN202011557765 A CN 202011557765A CN 112541746 A CN112541746 A CN 112541746A
Authority
CN
China
Prior art keywords
host
task
threshold value
arranging
resources
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011557765.7A
Other languages
English (en)
Inventor
葛丁佳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Jingkun Computer Technology Co ltd
Original Assignee
Shanghai Jingkun Computer Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Jingkun Computer Technology Co ltd filed Critical Shanghai Jingkun Computer Technology Co ltd
Priority to CN202011557765.7A priority Critical patent/CN112541746A/zh
Publication of CN112541746A publication Critical patent/CN112541746A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • G06Q10/103Workflow collaboration or project management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063Operations research, analysis or management
    • G06Q10/0631Resource planning, allocation, distributing or scheduling for enterprises or organisations
    • G06Q10/06311Scheduling, planning or task assignment for a person or group
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/20Administration of product repair or maintenance

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Human Resources & Organizations (AREA)
  • Strategic Management (AREA)
  • Theoretical Computer Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Economics (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Tourism & Hospitality (AREA)
  • Quality & Reliability (AREA)
  • Operations Research (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Development Economics (AREA)
  • Educational Administration (AREA)
  • Game Theory and Decision Science (AREA)
  • Human Computer Interaction (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了一种全栈自动化编排方法及系统,包括创建主机云资源,对主机的资源进行管理和操作;对服务器的操作脚本进行管理、收集、创建和集成;创建巡检模板,将操作脚本集成到巡检模板中,将巡检模板输出至可视化界面,根据巡检模板设定的阈值对主机及中间件进行业务指标的审查;巡检任务关联巡检模板,执行巡检任务并判断是否超过阈值,若超过则发送告警邮件;对操作任务进行编排、资源创建流程编排和CI、CD的流程编排;对工作流程的运行数据进行统一展示。采用上述技术方案,能够快速完成脚本、应用和资源的混合编排,自动化配置和执行,能够减少日常交付部署时需要的工作量,解决因手动流程降低应用交付的速度,运维人员超负荷的问题。

Description

一种全栈自动化编排方法及系统
技术领域
本发明涉及云资源技术领域,特别涉及一种全栈自动化编排方法及系统。
背景技术
随着互联网的趋势,大数据等众多前沿技术的发展,企业内的服务器数量逐渐增加。传统运维方式也面临着巨大的挑战,运维技术急需变革改进。在一些大型企业内,服务器数量巨大,而服务器数量加速的增多,带来的最直接后果就是繁杂重复性运维任务的增加。之前的传统运维思维已难满足现实需求。在企业日常运维工作中利用自动化运维技术能够大大的减少运维人员的工作量,自动化运维是帮助运维提高工作效率的有效方式,但是有些工具单单是批量执行一个命令或脚本,这样是无法实现自动化运维减少运维人员工作量的。企业业务系统的扩大且复杂使得运维人员也会相应的面临更加复杂的运维工作,运维人员如何快速高效的完成运维工作,就是自动化编排系统出现的必要性。
目前云资源可视化编排功能在云平台系统中的应用越来越重要。现有的智能化编排模块自动化程度较低,需要操作人员自行调用云平台的工具自行创建云资源,再调用云资源运维工具对创建的云资源进行系统部署。创建过程与运维过程都需要操作人员干预,对人工的依赖度较大,浪费了大量的人力资源,且编排效率很低。
发明内容
针对现有技术的上述不足,本发明提供一种全栈自动化编排方法及系统,以解决上述技术问题。
一种全栈自动化编排方法,包括:
创建主机云资源,对主机的资源进行管理和操作;
对服务器的操作脚本进行管理、收集、创建和集成;
创建巡检模板,将操作脚本集成到巡检模板中,将巡检模板输出至可视化界面,根据巡检模板设定的阈值对主机及中间件进行业务指标的审查;巡检任务关联巡检模板,执行巡检任务并判断是否超过阈值,若超过则发送告警邮件;
对上述步骤的操作任务进行编排、资源创建流程编排和CI、CD的流程编排;
对上述工作流程的运行数据进行统一展示。
上述方案中,还包括记录和获取主机的操作历史信息。
上述方案中,还包括设置定时作业,设定周期执行和单次执行,用户可以通过设定时间点指定任务何时进行。
上述方案中,所述对操作任务进行编排包括设置分支控制条件,在每个节点设定触发条件,如全部满足时执行或任意一个满足时执行,执行过程中任何一个节点执行失败,将标记为该任务失败,终止本次任务流程的运行。
一种全栈自动化编排系统,包括:
资源管理单元,用于根据可视化界面输入的配置参数,创建主机云资源并且对主机的资源进行管理;
操作管理单元,用于服务器的操作脚本进行管理、收集、创建和集成;
巡检管理单元,创建巡检模板,将操作脚本集成到巡检模板中,集成操作任务设定阈值,根据巡检模板设定的阈值对主机及中间件进行业务指标的审查;巡检任务关联巡检模板,执行巡检任务并判断是否超过阈值,若超过则发送告警邮件;
工作流单元,用于对上述步骤的操作任务进行编排、资源创建流程编排和CI、CD的流程编排;
应用管理单元,用于对上述工作流程的运行数据进行统一展示。
上述方案中,所述资源管理单元包括资源管理功能模块,用于记录和获取主机的操作历史记录信息。
上述方案中,所述工作流单元包括定时作业模块,设定周期执行和单次执行,用户可以通过设定时间点指定任务何时进行。
上述方案中,所述工作流单元还包括分支控制模块,用于在每个节点设定触发条件,如全部满足时执行或任意一个满足时执行,执行过程中任何一个节点执行失败,将标记为该任务失败,终止本次任务流程的运行。
本发明的优点和有益效果在于:本发明提供一种全栈自动化编排方法及系统,采用图形化设计通过拖拽基础服务元素,快速完成脚本、应用和资源的混合编排,一键式自动化配置和执行,能够减少日常交付部署时需要的工作量,解决因手动流程降低应用交付的速度,从而解决运维人员超负荷的问题。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明一个实施例的方法的示意性流程图。
图2是本发明一个实施例的系统的示意性框图。
具体实施方式
下面结合附图和实施例,对本发明的具体实施方式作进一步描述。以下实施例仅用于更加清楚地说明本发明的技术方案,而不能以此来限制本发明的保护范围。
下面对本发明中出现的关键术语进行解释。
CI持续集成(CONTINUOUS INTEGRATION),在持续集成环境中,开发人员将会频繁的提交代码到主干。这些新提交在最终合并到主线之前,都需要通过编译和自动化测试流进行验证。这样做是基于之前持续集成过程中很重视自动化测试验证结果,以保障所有的提交在合并主线之后的质量问题,对可能出现的一些问题进行预警。
CD持续交付(CONTINUOUS DELIVERY),持续交付就是我们的应用发布出去的过程。这个过程可以确保我们尽可能快的实现交付。这就意味着除了自动化测试,我们还需要有自动化的发布流,以及通过一个按键就可以随时随地实现应用的部署上线。通过持续交付,可以决定每天,每周,每两周发布一次,这完全可以根据自己的业务进行设置。但是,如果真的希望体验持续交付的优势,就需要先进行小批量发布,尽快部署到生产线,以便在出现问题时方便进行故障排除。
如图1所示,本发明是一种全栈自动化编排方法,该方法包括:
步骤110:创建主机云资源,对主机的资源进行管理和操作;
步骤120:对服务器的操作脚本进行管理、收集、创建和集成;
脚本类型支持输入Shell、Python、Bat多种语言,系统内部会内置日常使用的脚本,方便用户使用,也可将日常使用运维脚本进行收集创建操作脚本,对脚本进行服务化即作业。
步骤130:创建巡检模板,将操作脚本集成到巡检模板中,将巡检模板输出至可视化界面,根据巡检模板设定的阈值对主机及中间件进行业务指标的审查;巡检任务关联巡检模板,执行巡检任务并判断是否超过阈值,若超过则发送告警邮件;
步骤140:对上述步骤的操作任务进行编排、资源创建流程编排和CI、CD的流程编排;
步骤150:对上述工作流程的运行数据进行统一展示。
为了便于对本发明的理解,下面以本发明云资源自动编排方法的原理,结合实施例中对云资源进行创建运维的过程,对本发明提供的云资源编排方法做进一步的描述。
S1、创建主机云资源包括记录和获取主机的操作历史信息。
用户可以手动添加主机资源,同时支持追溯查看每台主机的操作历史记录信息,并支持远程桌面操作。可自定义编排创建主机资源模板,实现点击即创建,同时支持用户在线进行资源主机的管理操作。
S2、设置定时作业,设定周期执行和单次执行,用户可以通过设定时间点指定任务何时进行。
这样像定期的巡检任务,只需设置好执行的时间和业务场景,即可自动执行。工作流模块可将操作任务编排串联起来,组合编排而成的自动化任务流程,可以实现一些复杂的运维场景。
S3、设置分支控制条件包括在每个节点设定触发条件,如全部满足时执行或任意一个满足时执行,执行过程中任何一个节点执行失败,将标记为该任务失败,终止本次任务流程的运行。
用户可自定义服务发布,适应各种场景的业务关系,简化运维工作,提高工作效率。自动化编排系统打通CI、CD组件,执行包括了构建、打包、部署等步骤,对相同类型或相同场景应用进行自动化批量部署。尽可能的减少日常交付部署时需要的工作量,解决因手动流程降低应用交付的速度,从而解决运维人员超负荷的问题。CI/CD就是将重复的工作用自动化来代替、减少时间成本、缩短版本发布时间,完成多环境应用的交付及版本可持续交付部署,通过托拉拽方式自定义将各个步骤编排打通,并生成执行流程。同时自动化编排系统支持创建多种云资源,用户可自定义编排创建主机资源模板,实现点击即创建,同时支持用户在线进行资源主机的管理操作。
一种全栈自动化编排系统,其特征在于,包括:
资源管理单元210,用于创建主机云资源并且对主机的资源进行管理;
操作管理单元220,用于对服务器的操作脚本进行收集、创建和集成;
巡检管理单元230,用于创建巡检模板,将操作脚本集成到巡检模板中,集成操作任务设定阈值,根据巡检模板设定的阈值对主机及中间件进行业务指标的审查;巡检任务关联巡检模板,执行巡检任务并判断是否超过阈值,若超过则发送告警邮件;
工作流单元240,用于对上述步骤的操作任务进行编排、资源创建流程编排和CI、CD的流程编排
应用管理单元250,用于对上述工作流程的运行数据进行统一展示。
可选地,资源管理单元包括资源管理功能模块,用于记录和获取主机的操作历史记录信息。
可选地,工作流单元包括定时作业模块,设定周期执行和单次执行,用户可以通过设定时间点指定任务何时进行。
可选地,工作流单元还包括分支控制模块,用于在每个节点设定触发条件,如全部满足时执行或任意一个满足时执行,执行过程中任何一个节点执行失败,将标记为该任务失败,终止本次任务流程的运行。
上述技术方案的自动化编排系统将日常使用运维脚本进行集成,对脚本进行服务化即作业,可进行不同场景使用编排及不同的使用策略,包括定时执行、批量执行,不需要在应用主机上手动执行,同时结合任务编排将流程节点根据部署需求进行编排,即可交付组合部署任务,对于相同类型或相同场景应用可进行自动化批量执行。集成多种云资源API,通过编排流程完成云资源的自动化创建及管理。自动化编排系统打通CI、CD组件,执行包括了构建、打包、部署等步骤,对相同类型或相同场景应用可进行自动化批量重复部署,自动化编排系统集成多类型组件,实现应用发布一键化部署。
上述技术方案的优点:
自动化编排系统减少日常交付部署时需要的工作量,解决因手动流程降低应用交付的速度,从而解决运维人员超负荷的问题。将重复的工作用自动化来代替、减少时间成本,缩短版本发布时间,完成多环境应用的交付及版本可持续交付部署;拥有完善的用户权限控制,系统用户不可越界操作资源;图形化拖拽模式的自定义混合编排脚本可打通各个步骤,一键执行。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (8)

1.一种全栈自动化编排方法,其特征在于,包括:
创建主机云资源,对主机的资源进行管理和操作;
对服务器的操作脚本进行管理、收集、创建和集成;
创建巡检模板,将操作脚本集成到巡检模板中,将巡检模板输出至可视化界面,根据巡检模板设定的阈值对主机及中间件进行业务指标的审查;巡检任务关联巡检模板,执行巡检任务并判断是否超过阈值,若超过则发送告警邮件;
对上述步骤的操作任务进行编排、资源创建流程编排和CI、CD的流程编排;
对上述工作流程的运行数据进行统一展示。
2.根据权利要求1所述的全栈自动化编排方法,其特征在于,还包括记录和获取主机的操作历史信息。
3.根据权利要求1所述的全栈自动化编排方法,其特征在于,还包括设置定时作业,设定周期执行和单次执行,用户可以通过设定时间点指定任务何时进行。
4.根据权利要求1所述的全栈自动化编排方法,其特征在于,所述对操作任务进行编排包括设置分支控制条件,在每个节点设定触发条件,如全部满足时执行或任意一个满足时执行,执行过程中任何一个节点执行失败,将标记为该任务失败,终止本次任务流程的运行。
5.一种根据权利要求1所述全栈自动化编排方法的系统,其特征在于,包括:
资源管理单元,用于创建主机云资源并且对主机的资源进行管理;
操作管理单元,用于服务器的操作脚本进行管理、收集、创建和集成;
巡检管理单元,用于创建巡检模板,将操作脚本集成到巡检模板中,集成操作任务设定阈值,根据巡检模板设定的阈值对主机及中间件进行业务指标的审查;巡检任务关联巡检模板,执行巡检任务并判断是否超过阈值,若超过则发送告警邮件;
工作流单元,用于对上述步骤的操作任务进行编排、资源创建流程编排和CI、CD的流程编排;
应用管理单元,用于对上述工作流程的运行数据进行统一展示。
6.根据权利要求5所述的全栈自动化编排系统,其特征在于,所述资源管理单元包括资源管理功能模块,用于记录和获取主机的操作历史记录信息。
7.根据权利要求5所述的全栈自动化编排系统,其特征在于,所述工作流单元包括定时作业模块,设定周期执行和单次执行,用户可以通过设定时间点指定任务何时进行。
8.根据权利要求7所述的全栈自动化编排系统,其特征在于,所述工作流单元还包括分支控制模块,用于在每个节点设定触发条件,如全部满足时执行或任意一个满足时执行,执行过程中任何一个节点执行失败,将标记为该任务失败,终止本次任务流程的运行。
CN202011557765.7A 2020-12-25 2020-12-25 一种全栈自动化编排方法及系统 Pending CN112541746A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011557765.7A CN112541746A (zh) 2020-12-25 2020-12-25 一种全栈自动化编排方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011557765.7A CN112541746A (zh) 2020-12-25 2020-12-25 一种全栈自动化编排方法及系统

Publications (1)

Publication Number Publication Date
CN112541746A true CN112541746A (zh) 2021-03-23

Family

ID=75017498

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011557765.7A Pending CN112541746A (zh) 2020-12-25 2020-12-25 一种全栈自动化编排方法及系统

Country Status (1)

Country Link
CN (1) CN112541746A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113726744A (zh) * 2021-08-02 2021-11-30 南京南瑞信息通信科技有限公司 基于任务编排的可视化安全告警处置系统与方法
CN115801611A (zh) * 2022-11-14 2023-03-14 浪潮通信信息系统有限公司 传输资源巡检任务自动下发方法及设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101043692A (zh) * 2007-04-30 2007-09-26 华为技术有限公司 巡检方法及巡检服务器
CN108055165A (zh) * 2017-12-12 2018-05-18 浙江齐治科技股份有限公司 设备巡检的方法以及设备巡检装置
CN109213658A (zh) * 2018-09-20 2019-01-15 郑州云海信息技术有限公司 一种巡检方法和装置
CN111158708A (zh) * 2019-12-25 2020-05-15 上海精鲲计算机科技有限公司 一种任务编排引擎系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101043692A (zh) * 2007-04-30 2007-09-26 华为技术有限公司 巡检方法及巡检服务器
CN108055165A (zh) * 2017-12-12 2018-05-18 浙江齐治科技股份有限公司 设备巡检的方法以及设备巡检装置
CN109213658A (zh) * 2018-09-20 2019-01-15 郑州云海信息技术有限公司 一种巡检方法和装置
CN111158708A (zh) * 2019-12-25 2020-05-15 上海精鲲计算机科技有限公司 一种任务编排引擎系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113726744A (zh) * 2021-08-02 2021-11-30 南京南瑞信息通信科技有限公司 基于任务编排的可视化安全告警处置系统与方法
CN115801611A (zh) * 2022-11-14 2023-03-14 浪潮通信信息系统有限公司 传输资源巡检任务自动下发方法及设备

Similar Documents

Publication Publication Date Title
CN111443940B (zh) 一种基于DevOps的完整软件生命周期管理方法及系统
CN107291565B (zh) 运维可视化自动化作业平台及实现方法
CN111158708B (zh) 一种任务编排引擎系统
CN110928772B (zh) 一种测试方法及装置
CN104021080B (zh) 基于自定义脚本的自动化测试系统
CN107508722B (zh) 一种业务监控方法和装置
US8234633B2 (en) Incident simulation support environment and business objects associated with the incident
CN106708740B (zh) 脚本测试方法及装置
US20190361766A1 (en) System and Method for Failure Management Using Distributed Execution Traces
CN111984390A (zh) 任务调度方法、装置、设备及存储介质
CN104778124A (zh) 一种软件应用自动化测试方法
CN111400011B (zh) 一种实时任务调度方法、系统、设备及可读存储介质
CN112541746A (zh) 一种全栈自动化编排方法及系统
CN105653401A (zh) 应用系统灾备、运维、监控和应急启停调度方法及装置
CN111782534A (zh) 一种业务流程的监控方法、装置及系统
CN104123397A (zh) Web页面的自动化测试装置及方法
JP5989194B1 (ja) テスト管理システムおよびプログラム
CN109800081A (zh) 一种大数据任务的管理方法及相关设备
CN108399095B (zh) 支持动态管理定时任务的方法、系统、设备和存储介质
CN111124642A (zh) 一种云管理平台可自定义的自动化流程方法及系统
CN106874290B (zh) 一种数据清洗方法及设备
CN113919158A (zh) 一种用于飞行控制面板的仿真方法、装置及存储介质
CN110011827A (zh) 面向医联体的多用户大数据分析服务系统和方法
CN113742228A (zh) 测试、数据回放及录制方法、系统、装置、设备及介质
CN112199273A (zh) 一种虚拟机压力/性能测试方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20210323