CN112035352B - 一种基于云生命周期管理的快速自动化编译部署的方法 - Google Patents

Abstract

本发明公开一种基于云生命周期管理的快速自动化编译部署的方法，涉及云平台部署技术领域；部署自动触发流水线，将流水线与Git操作关联，触发git的webhook操作，调用流水线Api接口，启动流水线，通过流水线调用执行脚本来自动触发镜像制作、组件版本制作过程，通过流水线调用云生命周期管理的站点查询query接口、站点site接口及站点deploy接口进行自动化站点部署，流水线启动自动化测试脚本，测试通过后利用Git获得发布版本号并调用自动化发布工具进行版本发布。

Description

一种基于云生命周期管理的快速自动化编译部署的方法

技术领域

本发明公开一种自动化编译部署的方法，涉及云平台部署技术领域，具体地说是一种基于云生命周期管理的快速自动化编译部署的方法。

背景技术

云的生命周期管理，从云站点的声明、构建、打包，到部署云平台集群环境，管理云平台设施。云站点集群设施的编译、部署，在研发过程中需要人工介入操作，现有流水线对组成私有云集群设施的直接部署存在困难，过程中仍然需要人工执行脚本进行操作，部署云平台集群环境的效率较低，比如对Openstack、Kubenetes虚拟机及集群管理工具的研发过程自动化支持等仍有不足。

发明内容

本发明针对现有技术的问题，提供一种基于云生命周期管理的快速自动化编译部署的方法，充分结合流水线与私有云生命周期管理平台，实现了私有云平台站点设施研发过程的编译、测试、部署的自动化。

本发明提出的具体方案是：

一种基于云生命周期管理的快速自动化编译部署的方法：部署自动触发流水线，将流水线与Git操作关联，触发git的webhook操作，调用流水线Api接口，启动流水线，

通过流水线调用生命周期管理任务，通过流水线调用执行脚本来自动触发镜像制作、组件版本制作过程，通过流水线调用云生命周期管理的站点查询query接口、站点site接口及站点deploy接口进行自动化站点部署，

通过流水线启动自动化测试脚本，进行功能测试，测试通过后利用Git获得发布版本号并调用自动化发布工具进行版本发布。

所述的一种基于云生命周期管理的快速自动化编译部署的方法中配置Git的webhook，关联Open merge事件，在流水线中过滤目标分支为master分支，响应git事件，通过git提交merge master请求时，触发git的webhook操作。

所述的一种基于云生命周期管理的快速自动化编译部署的方法中通过流水线启动单元测试脚本，根据测试通过情况调用生命周期管理任务。

所述的一种基于云生命周期管理的快速自动化编译部署的方法中镜像制作过程：在编译环境镜像中，执行下载源码操作，复制源码到指定目录，执行编译命令，将编译结果复制到运行环境镜像中，对运行环境镜像打时间戳tag，并将时间戳tag版本的运行环境镜像推向远程register仓库，并将镜像对应的组件打相同时间戳版本tag，确保站点组件版本与镜像版本一致。

所述的一种基于云生命周期管理的快速自动化编译部署的方法中自动化站点部署：流水线调用生命周期管理提供的query接口，查询站点信息；流水线调用生命周期管理提供的站点site接口，更新站点的组件版本信息；流水线调用生命周期管理提供的deploy接口，将组件对应时间戳版本部署更新到站点中。

所述的一种基于云生命周期管理的快速自动化编译部署的方法中若站点部署失败和/或功能测试失败，通过流水线调用生命周期管理提供的rollback接口执行站点回滚操作。

所述的一种基于云生命周期管理的快速自动化编译部署的方法中站点部署失败时站点回滚过程：

通过流水线调用生命周期管理提供的rollback接口；

根据生命周期管理接到rollback请求后，读取已存储的上一次站点组件版本信息，调用lcm-swift-api服务，部署上一次站点组件版本，实现回滚操作。

所述的一种基于云生命周期管理的快速自动化编译部署的方法中版本发布过程：

流水线启动自动化版本发布脚本，触发版本发布过程；

访问Git版本文件，获得本次发布版本号；

依据发布版本号给源码所在Git打版本Tag；

依据发布版本号给文档所在Git打版本Tag；

依据发布版本号给组件所在Git打版本Tag；

依据发布版本号给对应镜像打版本Tag，并将版本push到镜像仓库；

依据生命周期管理，更新站点中组件对应的版本号为发布版本号；

启动版本发布同步工具，打包介质，将打包后的介质推向中心仓库，完成当前发布版本发布。

所述的一种基于云生命周期管理的快速自动化编译部署的方法中通过流水线调用云平台API接口，自动申请创建虚拟机资源。

一种基于云生命周期管理的快速自动化编译部署的系统，包括部署模块、测试模块及发布模块，

部署模块部署自动触发流水线，将流水线与Git操作关联，触发git的webhook操作，调用流水线Api接口，启动流水线，

通过流水线调用生命周期管理任务，通过流水线调用执行脚本来自动触发镜像制作、组件版本制作过程，以及通过流水线调用云生命周期管理的站点查询query接口、站点site接口及站点deploy接口进行自动化站点部署；

测试模块通过流水线启动自动化测试脚本，进行功能测试，测试通过后发布模块利用Git获得发布版本号并调用自动化发布工具进行版本发布。

本发明的有益之处是：

本发明提供一种基于云生命周期管理的快速自动化编译部署的方法，基于云生命周期管理，通过CI/CD流水线有效快速的研发、部署私有云平台基础设施，减少了开发、测试人员人工干预操作，避免了人工操作出错的情况，降低了部署的复杂度，有力提高了私有云平台环境部署效率和健壮性，提高了私有云平台研发效率。

附图说明

图1是本发明方法研发部署流程示意图；

图2是本发明方法测试阶段流程示意图；

图3是本发明方法发布阶段流程示意图。

具体实施方式

下面结合附图和具体实施例对本发明作进一步说明，以使本领域的技术人员可以更好地理解本发明并能予以实施，但所举实施例不作为对本发明的限定。

本发明提供一种基于云生命周期管理的快速自动化编译部署的方法：部署自动触发流水线，将流水线与Git操作关联，触发git的webhook操作，调用流水线Api接口，启动流水线，

通过流水线调用生命周期管理任务，通过流水线调用执行脚本来自动触发镜像制作、组件版本制作过程，通过流水线调用云生命周期管理的站点查询query接口、站点site接口及站点deploy接口进行自动化站点部署，

通过流水线启动自动化测试脚本，进行功能测试，测试通过后利用Git获得发布版本号并调用自动化发布工具进行版本发布。

生命周期管理，是用于管理云平台站点生命周期的，包含构建站点、生成站点、部署站点及站点管理。

在云平台站点设施及应用组件研发过程中，无法完整使用流水线实现开发、测试、部署自动化过程。

本方法基于自主研发的生命周期管理，使用生命周期管理提供的操作服务，模块化定义操作方法，结合流水线特性，完成云平台开发提交代码到代码管理仓库，触发流水线，合并分支代码，向生命周期管理服务中心注册任务，可进行多任务Job处理，多架构并行编译，多镜像构建，通过生命周期管理提供的接口，对云平台站点组件设施及应用进行更新、部署操作。

利用本方法可利用一次操作进行多个平台(x86、arm64、mips)编译，一次操作多个镜像部署，过程操作快速自动化进行，减少了开发、测试人员人工干预操作，有效避免了人工操作出错的情况，降低了部署的复杂度，有力提高了云平台环境部署效率和健壮性，提高了云平台研发效率，从而间接降低了研发成本。

在本发明的一个具体实施例中，将流水线与Git操作关联，通过配置Git的webhook，关联Open merge事件，在流水线中过滤目标分支为master分支，响应git事件。开发人员通过git提交merge master请求时，触发git的webhook操作，调用流水线Api接口，启动流水线，

并在后续部署中，流水线自动调用Git操作，对站点中镜像及对应的组件打时间戳版本tag，并在版本发布时，流水线自动调用Git操作对当前源码版本、文档版本、组件版本、镜像版本进行版本打Tag标记，执行发布操作。利用本发明实施例进行流程操作上的自动化，可快速进行部署。

在上述实施例基础上，另一实施例具体说明了镜像制作过程，其中镜像制作基于Dockerfile镜像技术基础上，增加了在编译环境镜像中执行编译源码过程和运行环境镜像制作过程。具体过程是在编译环境镜像中，执行下载源码操作，复制源码到指定目录操作，执行编译命令。编译完成后，将编译结果复制到运行环境镜像中，对运行环境镜像打时间戳tag，并将该时间戳tag版本的运行环境镜像推向远程register仓库，完成镜像制作过程。编译环境镜像，支持多个编程语言编译。

镜像制作完成后，流水线自动调用Git操作，对站点中镜像对应的组件打相同时间戳版本tag，确保站点组件版本与镜像版本一致。

在上述实施例基础上，本发明进一步说明自动化站点部署情况，基于生命周期管理实现的。生命周期管理在站点集群环境运行了Manager服务，用于对外提供接口操作。站点内运用了lcm-swift-api服务，用于自动执行站点组件部署、更新、删除等操作。流水线通过调用生命周期管理提供的站点查询query接口、站点site接口、站点deploy接口等实现自动化站点部署。

其中自动化站点部署具体实现过程为：

流水线调用生命周期管理提供的query接口，查询站点信息；

流水线调用生命周期管理提供的站点site接口，更新站点的组件版本信息；

流水线调用生命周期管理提供的deploy接口，将组件对应时间戳版本部署更新到站点中，实现了自动化站点部署过程。

同时若站点部署失败，利用本发明方法还可在站点集群环境通过Manager服务对外进行回滚操作，其中站点回滚具体实现过程为：

流水线调用生命周期管理提供的register接口，注册当前操作；

生命周期管理接到register请求后，检查站点可以用性，记录站点当前镜像、组件版本信息并存储，接口返回register结果信息；

流水线调用生命周期管理的自动化站点部署功能，实现部署组件新版本；

测试不通过，触发回滚流程，流水线调用生命周期管理提供的rollback接口；

生命周期管理接到rollback请求后，读取已存储的上一次站点组件版本信息，调用lcm-swift-api服务，部署上一次站点组件版本，实现回滚操作。

回滚操作使站点恢复到执行部署之前的环境，有助于系统进行修复。

在本发明方法另一实施例中，具体介绍了自动化版本发布过程，在集成测试通过后，对当前源码版本、文档版本、组件版本、镜像版本进行版本打Tag标记，执行发布操作，打包归档文档、组件、镜像这些介质，通过同步工具同步发布到中心仓库，完成自动化版本发布过程。

自动化版本发布具体实现过程为：

流水线启动自动化版本发布脚本，触发版本发布过程；

访问Git版本文件，获得本次发布版本号；

依据发布版本号给源码所在Git打版本Tag；

依据发布版本号给文档所在Git打版本Tag；

依据发布版本号给组件所在Git打版本Tag；

依据发布版本号给对应镜像打版本Tag，并将版本push到镜像仓库；

通过生命周期管理，更新站点中组件对应的版本号为发布版本号；

启动版本发布同步工具，打包归档文档、组件、镜像等介质；

将打包后的介质推向中心仓库，完成当前发布版本发布过程。

以私有云平台设施Openstack虚拟机的nova模块为例，具有说明本发明方法的应用。

其中研发部署中步骤1：触发nova流水线，执行单元测试脚本，形成报告，邮件发送报告结果给相关人员，

步骤2：通过流水线调用生命周期管理任务服务job接口，注册当前任务，信息包含：时间戳、镜像、组件、站点等，

步骤3：通过私有云生命周期管理平台收到任务注册register请求后，检查站点健壮性、可用性，记录目标站点中的当前镜像、组件信息和版本等，作为回滚操作的基础信息，

步骤4：流水线调用生命周期管理查询query接口，获得构建站点资源信息，启动x86环境构建nova镜像脚本，支持并行操作，

步骤5：x86环境下nova镜像构建完成后，脚本操作自动push镜像到镜像管理仓库Registry，通知生命周期管理平台，更新job任务状态为准备部署，

步骤6：流水线调用生命周期管理站点site接口，修改站点配置信息，例如时间戳版本等，

步骤7：流水线调用生命周期管理部署deploy接口，部署nova到研发环境目标站点中，若部署失败，生命周期管理会依据步骤4记录的信息，job执行回滚操作，恢复站点到执行部署之前的环境，

对于多架构构建需求，例如同时构建x86、arm、mips三种类型，1个架构对应一个任务，并行执行上述步骤2至步骤7，不同架构部署站点不同，例如x86部署到x86环境的私有云站点；

测试阶段中：

步骤8：研发环境站点部署成功后，流水线启动自动化测试脚本，形成自动化测试报告，并邮件通知相关人员，

步骤9：测试人员在研发环境站点进行功能测试，测试不通过，流水线调用生命周期管理回滚Rollback接口，研发环境站点执行回滚操作，研发人员继续修改代码，

步骤10：功能测试通过，流水线调用生命周期管理站点site接口，修改集成环境站点配置信息，

步骤11：流水线调用生命周期管理站点deploy接口，部署nova到集成环境站点，

步骤12：通过集成环境测试，流水线邮件通知相关人员，进入发布阶段；

发布阶段：

步骤13：版本发布，通过git获得发布版本号，将通过测试的时间戳镜像、组件、源码、文档打发布版本号，镜像发布版本push到镜像仓库，

步骤14：调用生命周期管理提供的自动化发布工具，打包文档、组件、镜像等介质，并将打包后的介质推向中心仓库，

步骤15：至此结束，完成编译部署。

本发明还提供一种基于云生命周期管理的快速自动化编译部署的系统，包括部署模块、测试模块及发布模块，

部署模块部署自动触发流水线，将流水线与Git操作关联，触发git的webhook操作，调用流水线Api接口，启动流水线，

通过流水线调用生命周期管理任务，通过流水线调用执行脚本来自动触发镜像制作、组件版本制作过程，以及通过流水线调用云生命周期管理的站点查询query接口、站点site接口及站点deploy接口进行自动化站点部署；

测试模块通过流水线启动自动化测试脚本，进行功能测试，测试通过后发布模块利用Git获得发布版本号并调用自动化发布工具进行版本发布。

上述系统内的各模块之间的信息交互、执行过程等内容，由于与本发明方法实施例基于同一构思，具体内容可参见本发明方法实施例中的叙述，此处不再赘述。

需要说明的是，上述各流程和各系统结构中不是所有的步骤和模块都是必须的，可以根据实际的需要忽略某些步骤或模块。各步骤的执行顺序不是固定的，可以根据需要进行调整。上述各实施例中描述的系统结构可以是物理结构，也可以是逻辑结构，即，有些模块可能由同一物理实体实现，或者，有些模块可能分由多个物理实体实现，或者，可以由多个独立设备中的某些部件共同实现。

以上所述实施例仅是为充分说明本发明而所举的较佳的实施例，本发明的保护范围不限于此。本技术领域的技术人员在本发明基础上所作的等同替代或变换，均在本发明的保护范围之内。本发明的保护范围以权利要求书为准。

Claims (5)

1.一种基于云生命周期管理的快速自动化编译部署的方法，其特征是部署自动触发流水线，将流水线与Git操作关联，触发git的webhook操作，调用流水线Api接口，启动流水线，

通过流水线调用生命周期管理任务，通过流水线调用执行脚本来自动触发镜像制作、组件版本制作过程，通过流水线调用云生命周期管理的站点查询query接口、站点site接口及站点deploy接口进行自动化站点部署，

所述镜像制作过程：在编译环境镜像中，执行下载源码操作，复制源码到指定目录，执行编译命令，将编译结果复制到运行环境镜像中，对运行环境镜像打时间戳tag，并将时间戳tag版本的运行环境镜像推向远程register仓库，并将镜像对应的组件打相同时间戳版本tag，确保站点组件版本与镜像版本一致，

所述自动化站点部署：流水线调用生命周期管理提供的query接口，查询站点信息；流水线调用生命周期管理提供的站点site接口，更新站点的组件版本信息；流水线调用生命周期管理提供的deploy接口，将组件对应时间戳版本部署更新到站点中，

若站点部署失败和/或功能测试失败，通过流水线调用生命周期管理提供的rollback接口执行站点回滚操作，站点部署失败时站点回滚过程：通过流水线调用生命周期管理提供的rollback接口，根据生命周期管理接到rollback请求后，读取已存储的上一次站点组件版本信息，调用lcm-swift-api服务，部署上一次站点组件版本，实现回滚操作；

通过流水线启动自动化测试脚本，进行功能测试，测试通过后利用Git获得发布版本号并调用自动化发布工具进行版本发布，

所述版本发布过程：流水线启动自动化版本发布脚本，触发版本发布过程，访问Git版本文件，获得本次发布版本号，依据发布版本号给源码所在Git打版本Tag，依据发布版本号给文档所在Git打版本Tag，依据发布版本号给组件所在Git打版本Tag，依据发布版本号给对应镜像打版本Tag，并将版本push到镜像仓库，

依据生命周期管理，更新站点中组件对应的版本号为发布版本号，

启动版本发布同步工具，打包介质，将打包后的介质推向中心仓库，完成当前发布版本发布。

2.根据权利要求1所述的一种基于云生命周期管理的快速自动化编译部署的方法，其特征是配置Git的webhook，关联Open merge事件，在流水线中过滤目标分支为master分支，响应git事件，通过git提交merge master请求时，触发git的webhook操作。

3.根据权利要求1或2所述的一种基于云生命周期管理的快速自动化编译部署的方法，其特征是通过流水线启动单元测试脚本，根据测试通过情况调用生命周期管理任务。

4.根据权利要求1所述的一种基于云生命周期管理的快速自动化编译部署的方法，其特征是通过流水线调用云平台API接口，自动申请创建虚拟机资源。

5.一种基于云生命周期管理的快速自动化编译部署的系统，其特征是包括部署模块、测试模块及发布模块，

部署模块部署自动触发流水线，将流水线与Git操作关联，触发git的webhook操作，调用流水线Api接口，启动流水线，

通过流水线调用生命周期管理任务，通过流水线调用执行脚本来自动触发镜像制作、组件版本制作过程，以及通过流水线调用云生命周期管理的站点查询query接口、站点site接口及站点deploy接口进行自动化站点部署，所述部署模块进行镜像制作过程：在编译环境镜像中，执行下载源码操作，复制源码到指定目录，执行编译命令，将编译结果复制到运行环境镜像中，对运行环境镜像打时间戳tag，并将时间戳tag版本的运行环境镜像推向远程register仓库，并将镜像对应的组件打相同时间戳版本tag，确保站点组件版本与镜像版本一致，

所述部署模块进行自动化站点部署：流水线调用生命周期管理提供的query接口，查询站点信息；流水线调用生命周期管理提供的站点site接口，更新站点的组件版本信息；流水线调用生命周期管理提供的deploy接口，将组件对应时间戳版本部署更新到站点中，

若站点部署失败和/或功能测试失败，通过流水线调用生命周期管理提供的rollback接口执行站点回滚操作，站点部署失败时站点回滚过程：通过流水线调用生命周期管理提供的rollback接口，根据生命周期管理接到rollback请求后，读取已存储的上一次站点组件版本信息，调用lcm-swift-api服务，部署上一次站点组件版本，实现回滚操作；

测试模块通过流水线启动自动化测试脚本，进行功能测试，测试通过后发布模块利用Git获得发布版本号并调用自动化发布工具进行版本发布，

所述测试模块进行版本发布过程：流水线启动自动化版本发布脚本，触发版本发布过程，访问Git版本文件，获得本次发布版本号，依据发布版本号给源码所在Git打版本Tag，依据发布版本号给文档所在Git打版本Tag，依据发布版本号给组件所在Git打版本Tag，依据发布版本号给对应镜像打版本Tag，并将版本push到镜像仓库，

依据生命周期管理，更新站点中组件对应的版本号为发布版本号，

启动版本发布同步工具，打包介质，将打包后的介质推向中心仓库，完成当前发布版本发布。