CN117519733B - 一种项目部署方法、装置、存储介质及电子设备 - Google Patents

一种项目部署方法、装置、存储介质及电子设备 Download PDF

Info

Publication number
CN117519733B
CN117519733B CN202311534998.9A CN202311534998A CN117519733B CN 117519733 B CN117519733 B CN 117519733B CN 202311534998 A CN202311534998 A CN 202311534998A CN 117519733 B CN117519733 B CN 117519733B
Authority
CN
China
Prior art keywords
environment
program
dependency
package
packages
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202311534998.9A
Other languages
English (en)
Other versions
CN117519733A (zh
Inventor
郑新千
李超
宫禄齐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Lab
Original Assignee
Zhejiang Lab
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Lab filed Critical Zhejiang Lab
Priority to CN202311534998.9A priority Critical patent/CN117519733B/zh
Publication of CN117519733A publication Critical patent/CN117519733A/zh
Application granted granted Critical
Publication of CN117519733B publication Critical patent/CN117519733B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/60Software deployment
    • G06F8/61Installation
    • G06F8/63Image based installation; Cloning; Build to order
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/30Creation or generation of source code
    • G06F8/31Programming languages or programming paradigms
    • G06F8/315Object-oriented languages
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/40Transformation of program code
    • G06F8/41Compilation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/40Transformation of program code
    • G06F8/41Compilation
    • G06F8/42Syntactic analysis
    • G06F8/427Parsing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/70Software maintenance or management
    • G06F8/71Version control; Configuration management

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Stored Programmes (AREA)

Abstract

本说明书公开了一种项目部署方法、装置、存储介质及电子设备。所述项目部署方法包括:获取待部署项目程序,对待部署项目程序中包含的代码进行解析,确定待部署项目程序中包含的各基础依赖环境程序包,针对每个基础依赖环境程序包,根据预先构建的总体环境依赖图,确定出该基础依赖环境程序包所依赖的其他环境程序包,在总体环境依赖图中,不同项目程序下的不同的环境程序包对应不同的节点,针对每个节点,该节点与该节点对应的环境程序包所依赖的其他环境程序包对应的节点之间相连,根据每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包,生成轻量化镜像,并将轻量化镜像部署到指定设备中。

Description

一种项目部署方法、装置、存储介质及电子设备
技术领域
本说明书涉及计算机技术领域,尤其涉及一种项目部署方法、装置、存储介质及电子设备。
背景技术
随着计算机技术的发展,Python作为目前最受欢迎的编程项目语言被越来越多的开发者所使用。
但是,由于Python项目往往涉及多个依赖库,并且多个依赖库之间存在大量的冗余,进而使得在将Python项目难以部署到计算、存储等资源受限的设置中。
因此,如何提升需要部署的Python项目的轻量化程度,则是一个亟待解决的问题。
发明内容
本说明书提供一种项目部署方法、装置、存储介质及电子设备,以部分的解决现有技术存在的上述问题。
本说明书采用下述技术方案:
本说明书提供了一种项目部署方法,所述方法包括:
获取待部署项目程序;
对所述待部署项目程序中包含的代码进行解析,确定所述待部署项目程序中包含的各基础依赖环境程序包;
针对每个基础依赖环境程序包,根据预先构建的总体环境依赖图,确定出该基础依赖环境程序包所依赖的其他环境程序包,在所述总体环境依赖图中,不同项目程序下的不同的环境程序包对应不同的节点,针对每个节点,该节点与该节点对应的环境程序包所依赖的其他环境程序包对应的节点之间相连;
根据每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包,生成轻量化镜像,并将所述轻量化镜像部署到指定设备中。
可选地,对所述待部署项目程序中包含的代码进行解析,确定所述待部署项目程序中包含的各基础依赖环境程序包,具体包括:
递归遍历所述待部署项目程序中包含的每个程序文件,以从所述待部署项目程序中包含的各程序文件中筛选出文件类型为指定类型的各程序文件,作为各目标程序文件;
根据每个目标程序文件中包含的指定关键字,确定所述待部署项目程序中包含的各基础依赖环境程序包。
可选地,构建所述总体环境依赖图,具体包括:
获取各项目程序下的各环境程序包;
针对每个环境程序包,确定该环境程序包与其他环境程序包之间的依赖关系;
根据各环境程序包,以及各环境程序包之间的依赖关系,构建总体环境依赖图。
可选地,根据各环境程序包,以及各环境程序包之间的依赖关系,构建总体环境依赖图,具体包括:
针对所述各环境程序包中的至少部分环境程序包,在预设的主机上安装编译所述至少部分环境程序包,以在所述主机上构建总体环境;
根据所述总体环境中包含的各环境程序包,以及所述总体环境中包含的各环境程序包之间的依赖关系,构建总体环境依赖图。
可选地,针对每个基础依赖环境程序包,根据预先构建的总体环境依赖图,确定出该基础依赖环境程序包所依赖的其他环境程序包,具体包括:
针对每个基础依赖环境程序包,从所述总体环境依赖图的各节点中,确定出该基础依赖环境程序包对应的节点,作为目标节点;
对每个目标节点进行广度优先遍历,确定每个目标节点对应的各关联节点;
根据各关联节点,确定该基础依赖环境程序包所依赖的其他环境程序包。
可选地,根据每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包,生成轻量化镜像,具体包括:
根据每个基础依赖环境程序包在所述总体环境依赖图中对应的节点,以及,每个基础依赖环境程序包所依赖的其他环境程序包在所述总体环境依赖图中对应的节点,生成环境依赖子图;
根据所述环境依赖子图,确定每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包之间的部署顺序;以及
根据所述环境依赖子图,确定每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包所属的部署层级;
针对每个部署层级,从预设的基础镜像包含的各级子镜像中确定出与该部署层级对应的子镜像,作为该部署层级对应的目标子镜像;
按照每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包所属的部署层级之间的先后顺序,逐层将每个部署层级所属的各基础依赖环境程序包和/或各基础依赖环境程序包所依赖的其他环境程序包,按照每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包之间的部署顺序,部署到每个部署层级对应的目标子镜像中,得到轻量化镜像。
可选地,根据每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包,生成轻量化镜像,具体包括:
获取所述主机安装编译每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包后生成的每个基础依赖环境程序包对应的指定格式的压缩文件包以及每个基础依赖环境程序包所依赖的其他环境程序包对应的指定格式的压缩文件包,作为各目标压缩文件包;
根据所述各目标压缩文件包,生成轻量化镜像。
本说明书提供了一种项目部署装置,包括:
获取模块,用于获取待部署项目程序;
解析模块,用于对所述待部署项目程序中包含的代码进行解析,确定所述待部署项目程序中包含的各基础依赖环境程序包;
确定模块,用于针对每个基础依赖环境程序包,根据预先构建的总体环境依赖图,确定出该基础依赖环境程序包所依赖的其他环境程序包,在所述总体环境依赖图中,不同项目程序下的不同的环境程序包对应不同的节点,针对每个节点,该节点与该节点对应的环境程序包所依赖的其他环境程序包对应的节点之间相连;
部署模块,用于根据每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包,生成轻量化镜像,并将所述轻量化镜像部署到指定设备中。
提供了一种计算机可读存储介质,所述存储介质存储有计算机程序,所述计算机程序被处理器执行时实现上述项目部署方法。
本说明书提供了一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现上述项目部署方法。
本说明书采用的上述至少一个技术方案能够达到以下有益效果:
在本说明书提供的项目部署方法中,获取待部署项目程序,对待部署项目程序中包含的代码进行解析,确定待部署项目程序中包含的各基础依赖环境程序包,针对每个基础依赖环境程序包,根据预先构建的总体环境依赖图,确定出该基础依赖环境程序包所依赖的其他环境程序包,在总体环境依赖图中,不同项目程序下的不同的环境程序包对应不同的节点,针对每个节点,该节点与该节点对应的环境程序包所依赖的其他环境程序包对应的节点之间相连,根据每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包,生成轻量化镜像,并将轻量化镜像部署到指定设备中。
从上述方法可以看出,可以基于预先构建的包含有所有依赖环境程序包之间的依赖关系的总体环境依赖图,确定出与待部署项目程序运行所必须依赖的各依赖环境程序包,进而可以根据确定出的与待部署项目程序运行所必须依赖的各依赖环境程序包,生成轻量化镜像部署到指定设备中,从而可以避免部署重复的依赖环境程序包,以及不必要的依赖环境程序包,进而可以提升需要部署的项目的轻量化程度。
附图说明
此处所说明的附图用来提供对本说明书的进一步理解,构成本说明书的一部分,本说明书的示意性实施例及其说明用于解释本说明书,并不构成对本说明书的不当限定。在附图中:
图1为本说明书中提供的一种项目部署方法的流程示意图;
图2为本说明书中提供的主机与指定设备的示意图;
图3为本说明书中提供的环境依赖子图的示意图;
图4为本说明书提供的一种项目部署装置的示意图;
图5为本说明书提供的一种对应于图1的电子设备示意图。
具体实施方式
为使本说明书的目的、技术方案和优点更加清楚,下面将结合本说明书具体实施例及相应的附图对本说明书技术方案进行清楚、完整地描述。显然,所描述的实施例仅是本说明书一部分实施例,而不是全部的实施例。基于本说明书中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本说明书保护的范围。
以下结合附图,详细说明本说明书各实施例提供的技术方案。
图1为本说明书中提供的一种项目部署方法的流程示意图,包括以下步骤:
S101:获取待部署项目程序。
在本说明书中,业务平台可以通过预先构建总体环境依赖图,为需要进行部署的每个项目程序,确定出运行该项目程序所必须的各依赖环境程序包,并生成轻量化镜像部署到指定设备中,以使得指定设备加载该轻量化镜像完成部署,并运行该项目程序。
而在此之前,业务平台需要先获取到需要安装到指定设备中的项目程序,作为待部署项目程序,其中,这里的项目程序可以是指软件包等项目程序。
上述的依赖环境程序包可以是指包含一个代码库所有文件的包,Python项目可以通过加载该包,调用这个代码库中包含的用于实现不同功能的代码。
在本说明书中,用于实现项目部署方法的执行主体,可以是指服务器等设置于业务平台中指定设备,也可以是指笔记本电脑、台式电脑、手机等终端设备,下面仅以服务器是执行主体为例,对本说明书提供的项目部署方法进行说明。
S102:对所述待部署项目程序中包含的代码进行解析,确定所述待部署项目程序中包含的各基础依赖环境程序包。
服务器可以递归遍历待部署项目程序中包含的每个程序文件,以从待部署项目程序中包含的各程序文件中筛选出文件类型为指定类型的各程序文件,作为各目标程序文件,上述的待部署项目中包含的各程序文件包括:缓存文件、数据文件、Python文件等文件,上述的指定类型的各程序文件可以是指Python文件。
进一步地,服务器通过代码自动解析算法,筛选出的每个Python文件中包含的代码进行解析,以根据每个目标程序文件中包含的指定关键字,确定待部署项目程序中包含的各基础依赖环境程序包,其中,上述的指定关键字可以为import关键字,这里的import关键字在诸如Python,Java等编程语言中用于引用不同的环境程序包。
需要说明的是,由于根据每个目标程序文件中包含的指定关键字,确定出的各基础依赖环境程序包中通常包含有大量重复的环境程序包,另外,还存在部分基础依赖环境程序包需要自主编译等情况,因此,服务器还可以根据各基础依赖环境程序包的相关信息,对各基础依赖环境程序包进行合并以及筛选,从而得到最终的各基础依赖环境程序包,这里的相关信息可以为各基础依赖环境程序包的包名、类型等信息。
S103:针对每个基础依赖环境程序包,根据预先构建的总体环境依赖图,确定出该基础依赖环境程序包所依赖的其他环境程序包,在所述总体环境依赖图中,不同项目程序下的不同的环境程序包对应不同的节点,针对每个节点,该节点与该节点对应的环境程序包所依赖的其他环境程序包对应的节点之间相连。
进一步地,服务器可以针对每个基础依赖环境程序包,从总体环境依赖图的各节点中,确定出该基础依赖环境程序包对应的节点,作为目标节点,对每个目标节点进行广度优先遍历,确定每个目标节点对应的各关联节点,根据各关联节点,确定该基础依赖环境程序包所依赖的其他环境程序包。
其中,上述的总体环境依赖图的构建方法可以为预先获取各项目程序所涉及各环境程序包,针对每个环境程序包,确定该环境程序包与其他环境程序包之间的依赖关系,根据各环境程序包,以及各环境程序包之间的依赖关系,构建总体环境依赖图。
在实际应用场景中,不同的系统架构下针对同一个环境程序包的实现方式不同,可以理解为,名称相同,但是包内内容不同,从而导致根据总体环境依赖图确定出的基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包不能部署到指定设备中,或者部署到指定设备中之后无法运行等问题。
因此,服务器还可以在构建总体环境依赖图时,针对指定设备对应的系统架构,通过预设的采用该系统架构的主机,安装编译各环境程序包,以在该主机上构建各环境程序包构成的总体的Python环境,作为总体环境,进而可以在确定各环境程序包在主机上均能部署安装后,可以根据上述总体环境中包含的各环境程序包,以及上述总体环境中包含的各环境程序包之间的依赖关系,构建总体环境依赖图,具体如图2所示。
图2为本说明书中提供的主机与指定设备的示意图。
结合图2可以看出,服务器可以通过在与指定设备所采用的系统架构一致的主机上安装编译各环境程序包后,再根据主机上生成总体环境,生成总体环境依赖图,进而可以保证在后续根据总体环境依赖图确定出的待部署项目程序对应的各基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包均能部署在指定设备中。
S104:根据每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包,生成轻量化镜像,并将所述轻量化镜像部署到指定设备中。
进一步地,服务器可以根据每个目标节点以及每个目标节点对应的各关联节点,生成环境依赖子图,进而可以根据环境依赖子图,生成轻量化镜像。
具体地,服务器可以根据环境依赖子图,确定每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包之间的部署顺序,以及,根据环境依赖子图,确定每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包所属的部署层级,其中,这里的部署层级可以是例如:系统级、基础环境级、基础软件级、中级软件级、高级软件级等。
进而可以针对每个部署层级,从预设的基础镜像包含的各级子镜像中确定出与该部署层级对应的子镜像,作为该部署层级对应的目标子镜像,按照每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包所属的部署层级之间的先后顺序,逐层将每个部署层级所属的各基础依赖环境程序包和/或各基础依赖环境程序包所依赖的其他环境程序包,按照每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包之间的部署顺序,部署到每个部署层级对应的目标子镜像中,得到轻量化镜像。
为了便于理解,以下将对通过上述根据环境依赖子图,生成轻量化镜像的过程进行详细说明,如图3所示。
图3为本说明书中提供的环境依赖子图的示意图。
结合图3可以看出,服务器确定出的每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包之间的部署顺序,以及,根据环境依赖子图,确定每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包所属的部署层级可以为:第1部署层级包含:软件包six,第2部署层级包含:软件包python-dateutil、numpy、pytz、joblib、threadpoolctl,第3部署层级包含:软件包pandas、scikit-learn、opencv-python-headless、scipy。
进一步地,服务器可以按照上述每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包所属的部署层级之间的先后顺序,逐层将每个部署层级所属的各基础依赖环境程序包和/或各基础依赖环境程序包所依赖的其他环境程序包,按照每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包之间的部署顺序,部署到每个部署层级对应的目标子镜像中,得到轻量化镜像。
进一步地,服务器可以获取主机安装编译每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包后生成的每个基础依赖环境程序包对应的指定格式的压缩文件包以及每个基础依赖环境程序包所依赖的其他环境程序包对应的指定格式的压缩文件包,作为各目标压缩文件包,根据各目标压缩文件包,生成轻量化镜像。
通过上述内容可以看出,服务器可以根据上述每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包所属的部署层级之间的先后顺序,进行逐层部署,其中,针对每个部署层级,服务器可以直接从总体环境下包含的各层级中,确定出与该部署层级相对应的层级,并从该部署层级相对应的层级中,获取主机安装编译每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包后生成的每个基础依赖环境程序包对应的目标压缩文件包以及每个基础依赖环境程序包所依赖的其他环境程序包对应的目标压缩文件包,并可以通过将获取到的目标压缩文件包拷贝到目标子镜像中,以生成轻量化镜像,从而可以提升生成轻量化镜像的效率。
需要说明的是,上述指定格式的压缩文件包可以是指(Wheel,WHL)文件,这里的WHL文件是以Python的Wheel格式保存的分发包文件,它可以以Python发行版的标准格式安装,并且包含有安装所需的所有文件和元数据,服务器可以通过上述方法将每个基础依赖环境程序包对应的WHL文件以及每个基础依赖环境程序包所依赖的其他环境程序包对应的WHL文件复制到基础镜像中,从而可以降低生成的轻量化镜像的体积,并且可以提升轻量化镜像部署到指定设备时的效率。
从上述内容中可以看出,服务器基于预先构建的包含有所有依赖环境程序包之间的依赖关系的总体环境依赖图,确定出与待部署项目程序运行所必须依赖的各依赖环境程序包,进而可以根据确定出的与待部署项目程序运行所必须依赖的各依赖环境程序包,生成轻量化镜像部署到指定设备中,从而可以避免部署重复的依赖环境程序包,以及不必要的依赖环境程序包,进而可以提升需要部署的项目的轻量化程度。
以上为本说明书的一个或多个实施项目部署方法,基于同样的思路,本说明书还提供了相应的项目部署装置,如图4所示。
图4为本说明书提供的一种项目部署装置的示意图,包括:
获取模块401,用于获取待部署项目程序;
解析模块402,用于对所述待部署项目程序中包含的代码进行解析,确定所述待部署项目程序中包含的各基础依赖环境程序包;
确定模块403,用于针对每个基础依赖环境程序包,根据预先构建的总体环境依赖图,确定出该基础依赖环境程序包所依赖的其他环境程序包,在所述总体环境依赖图中,不同项目程序下的不同的环境程序包对应不同的节点,针对每个节点,该节点与该节点对应的环境程序包所依赖的其他环境程序包对应的节点之间相连;
部署模块404,用于根据每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包,生成轻量化镜像,并将所述轻量化镜像部署到指定设备中。
可选地,所述解析模块402具体用于,递归遍历所述待部署项目程序中包含的每个程序文件,以从所述待部署项目程序中包含的各程序文件中筛选出文件类型为指定类型的各程序文件,作为各目标程序文件;根据每个目标程序文件中包含的指定关键字,确定所述待部署项目程序中包含的各基础依赖环境程序包。
可选地,所述装置还包括:构建模块405;
所述构建模块405具体用于,获取各项目程序下的各环境程序包;针对每个环境程序包,确定该环境程序包与其他环境程序包之间的依赖关系;根据各环境程序包,以及各环境程序包之间的依赖关系,构建总体环境依赖图。
可选地,所述构建模块405具体用于,针对所述各环境程序包中的至少部分环境程序包,在预设的主机上安装编译所述至少部分环境程序包,以在所述主机上构建总体环境;根据所述总体环境中包含的各环境程序包,以及所述总体环境中包含的各环境程序包之间的依赖关系,构建总体环境依赖图。
可选地,所述确定模块403具体用于,针对每个基础依赖环境程序包,从所述总体环境依赖图的各节点中,确定出该基础依赖环境程序包对应的节点,作为目标节点;对每个目标节点进行广度优先遍历,确定每个目标节点对应的各关联节点;根据各关联节点,确定该基础依赖环境程序包所依赖的其他环境程序包。
可选地,所述部署模块404具体用于,根据每个基础依赖环境程序包在所述总体环境依赖图中对应的节点,以及,每个基础依赖环境程序包所依赖的其他环境程序包在所述总体环境依赖图中对应的节点,生成环境依赖子图;根据所述环境依赖子图,确定每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包之间的部署顺序;以及根据所述环境依赖子图,确定每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包所属的部署层级;针对每个部署层级,从预设的基础镜像包含的各级子镜像中确定出与该部署层级对应的子镜像,作为该部署层级对应的目标子镜像;按照每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包所属的部署层级之间的先后顺序,逐层将每个部署层级所属的各基础依赖环境程序包和/或各基础依赖环境程序包所依赖的其他环境程序包,按照每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包之间的部署顺序,部署到每个部署层级对应的目标子镜像中,得到轻量化镜像。
可选地,所述部署模块404具体用于,获取所述主机安装编译每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包后生成的每个基础依赖环境程序包对应的指定格式的压缩文件包以及每个基础依赖环境程序包所依赖的其他环境程序包对应的指定格式的压缩文件包,作为各目标压缩文件包;根据所述各目标压缩文件包,生成轻量化镜像。
本说明书还提供了一种计算机可读存储介质,该存储介质存储有计算机程序,计算机程序可用于执行上述图1提供的一种项目部署方法。
本说明书还提供了图5所示的一种对应于图1的电子设备的示意结构图。如图5所述,在硬件层面,该电子设备包括处理器、内部总线、网络接口、内存以及非易失性存储器,当然还可能包括其他业务所需要的硬件。处理器从非易失性存储器中读取对应的计算机程序到内存中然后运行,以实现上述图1所述的项目部署方法。当然,除了软件实现方式之外,本说明书并不排除其他实现方式,比如逻辑器件抑或软硬件结合的方式等等,也就是说以下处理流程的执行主体并不限定于各个逻辑单元,也可以是硬件或逻辑器件。
对于一个技术的改进可以很明显地区分是硬件上的改进(例如,对二极管、晶体管、开关等电路结构的改进)还是软件上的改进(对于方法流程的改进)。然而,随着技术的发展,当今的很多方法流程的改进已经可以视为硬件电路结构的直接改进。设计人员几乎都通过将改进的方法流程编程到硬件电路中来得到相应的硬件电路结构。因此,不能说一个方法流程的改进就不能用硬件实体模块来实现。例如,可编程逻辑器件(ProgrammableLogic Device,PLD)(例如现场可编程门阵列(Field Programmable Gate Array,FPGA))就是这样一种集成电路,其逻辑功能由用户对器件编程来确定。由设计人员自行编程来把一个数字系统“集成”在一片PLD上,而不需要请芯片制造厂商来设计和制作专用的集成电路芯片。而且,如今,取代手工地制作集成电路芯片,这种编程也多半改用“逻辑编译器(logiccompiler)”软件来实现,它与程序开发撰写时所用的软件编译器相类似,而要编译之前的原始代码也得用特定的编程语言来撰写,此称之为硬件描述语言(Hardware DescriptionLanguage,HDL),而HDL也并非仅有一种,而是有许多种,如ABEL(Advanced BooleanExpression Language)、AHDL(Altera Hardware Description Language)、Confluence、CUPL(Cornell University Programming Language)、HDCal、JHDL(Java HardwareDescription Language)、Lava、Lola、MyHDL、PALASM、RHDL(Ruby Hardware DescriptionLanguage)等,目前最普遍使用的是VHDL(Very-High-Speed Integrated CircuitHardware Description Language)与Verilog。本领域技术人员也应该清楚,只需要将方法流程用上述几种硬件描述语言稍作逻辑编程并编程到集成电路中,就可以很容易得到实现该逻辑方法流程的硬件电路。
控制器可以按任何适当的方式实现,例如,控制器可以采取例如微处理器或处理器以及存储可由该(微)处理器执行的计算机可读程序代码(例如软件或固件)的计算机可读介质、逻辑门、开关、专用集成电路(Application Specific Integrated Circuit,ASIC)、可编程逻辑控制器和嵌入微控制器的形式,控制器的例子包括但不限于以下微控制器:ARC 625D、Atmel AT91SAM、Microchip PIC18F26K20以及Silicone Labs C8051F320,存储器控制器还可以被实现为存储器的控制逻辑的一部分。本领域技术人员也知道,除了以纯计算机可读程序代码方式实现控制器以外,完全可以通过将方法步骤进行逻辑编程来使得控制器以逻辑门、开关、专用集成电路、可编程逻辑控制器和嵌入微控制器等的形式来实现相同功能。因此这种控制器可以被认为是一种硬件部件,而对其内包括的用于实现各种功能的装置也可以视为硬件部件内的结构。或者甚至,可以将用于实现各种功能的装置视为既可以是实现方法的软件模块又可以是硬件部件内的结构。
上述实施例阐明的系统、装置、模块或单元,具体可以由计算机芯片或实体实现,或者由具有某种功能的产品来实现。一种典型的实现设备为计算机。具体的,计算机例如可以为个人计算机、膝上型计算机、蜂窝电话、相机电话、智能电话、个人数字助理、媒体播放器、导航设备、电子邮件设备、游戏控制台、平板计算机、可穿戴设备或者这些设备中的任何设备的组合。
为了描述的方便,描述以上装置时以功能分为各种单元分别描述。当然,在实施本说明书时可以把各单元的功能在同一个或多个软件和/或硬件中实现。
本领域内的技术人员应明白,本说明书的实施例可提供为方法、系统、或计算机程序产品。因此,本说明书可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本说明书可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本说明书是参照根据本说明书实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中,计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。
本领域技术人员应明白,本说明书的实施例可提供为方法、系统或计算机程序产品。因此,本说明书可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且,本说明书可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本说明书可以在由计算机执行的计算机可执行指令的一般上下文中描述,例如程序模块。一般地,程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等等。也可以在分布式计算环境中实践本说明书,在这些分布式计算环境中,由通过通信网络而被连接的远程处理设备来执行任务。在分布式计算环境中,程序模块可以位于包括存储设备在内的本地和远程计算机存储介质中。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本说明书的实施例而已,并不用于限制本说明书。对于本领域技术人员来说,本说明书可以有各种更改和变化。凡在本说明书的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本说明书的权利要求范围之内。

Claims (7)

1.一种项目部署方法,其特征在于,所述方法包括:
获取待部署项目程序;
递归遍历所述待部署项目程序中包含的每个程序文件,以从所述待部署项目程序中包含的各程序文件中筛选出文件类型为指定类型的各程序文件,作为各目标程序文件;
根据每个目标程序文件中包含的指定关键字,确定所述待部署项目程序中包含的各基础依赖环境程序包;
针对每个基础依赖环境程序包,根据预先构建的总体环境依赖图,确定出该基础依赖环境程序包所依赖的其他环境程序包,在所述总体环境依赖图中,不同项目程序下的不同的环境程序包对应不同的节点,针对每个节点,该节点与该节点对应的环境程序包所依赖的其他环境程序包对应的节点之间相连,其中,所述总体环境依赖图是通过获取各项目程序下的各环境程序包,针对每个环境程序包,确定该环境程序包与其他环境程序包之间的依赖关系,根据各环境程序包以及各环境程序包之间的依赖关系构建的;
根据每个基础依赖环境程序包在所述总体环境依赖图中对应的节点,以及,每个基础依赖环境程序包所依赖的其他环境程序包在所述总体环境依赖图中对应的节点,生成环境依赖子图;
根据所述环境依赖子图,确定每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包之间的部署顺序;以及
根据所述环境依赖子图,确定每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包所属的部署层级;
针对每个部署层级,从预设的基础镜像包含的各级子镜像中确定出与该部署层级对应的子镜像,作为该部署层级对应的目标子镜像;
按照每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包所属的部署层级之间的先后顺序,逐层将每个部署层级所属的各基础依赖环境程序包和/或各基础依赖环境程序包所依赖的其他环境程序包,按照每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包之间的部署顺序,部署到每个部署层级对应的目标子镜像中,得到轻量化镜像,并将所述轻量化镜像部署到指定设备中。
2.如权利要求1所述的方法,其特征在于,根据各环境程序包,以及各环境程序包之间的依赖关系,构建总体环境依赖图,具体包括:
针对所述各环境程序包中的至少部分环境程序包,在预设的主机上安装编译所述至少部分环境程序包,以在所述主机上构建总体环境;
根据所述总体环境中包含的各环境程序包,以及所述总体环境中包含的各环境程序包之间的依赖关系,构建总体环境依赖图。
3.如权利要求2所述的方法,其特征在于,针对每个基础依赖环境程序包,根据预先构建的总体环境依赖图,确定出该基础依赖环境程序包所依赖的其他环境程序包,具体包括:
针对每个基础依赖环境程序包,从所述总体环境依赖图的各节点中,确定出该基础依赖环境程序包对应的节点,作为目标节点;
对每个目标节点进行广度优先遍历,确定每个目标节点对应的各关联节点;
根据各关联节点,确定该基础依赖环境程序包所依赖的其他环境程序包。
4.如权利要求2所述的方法,其特征在于,根据每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包,生成轻量化镜像,具体包括:
获取所述主机安装编译每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包后生成的每个基础依赖环境程序包对应的指定格式的压缩文件包以及每个基础依赖环境程序包所依赖的其他环境程序包对应的指定格式的压缩文件包,作为各目标压缩文件包;
根据所述各目标压缩文件包,生成轻量化镜像。
5.一种项目部署装置,其特征在于,包括:
获取模块,用于获取待部署项目程序;
解析模块,用于递归遍历所述待部署项目程序中包含的每个程序文件,以从所述待部署项目程序中包含的各程序文件中筛选出文件类型为指定类型的各程序文件,作为各目标程序文件,根据每个目标程序文件中包含的指定关键字,确定所述待部署项目程序中包含的各基础依赖环境程序包;
确定模块,用于针对每个基础依赖环境程序包,根据预先构建的总体环境依赖图,确定出该基础依赖环境程序包所依赖的其他环境程序包,在所述总体环境依赖图中,不同项目程序下的不同的环境程序包对应不同的节点,针对每个节点,该节点与该节点对应的环境程序包所依赖的其他环境程序包对应的节点之间相连,其中,所述总体环境依赖图是通过获取各项目程序下的各环境程序包,针对每个环境程序包,确定该环境程序包与其他环境程序包之间的依赖关系,根据各环境程序包以及各环境程序包之间的依赖关系构建的;
部署模块,用于根据每个基础依赖环境程序包在所述总体环境依赖图中对应的节点,以及,每个基础依赖环境程序包所依赖的其他环境程序包在所述总体环境依赖图中对应的节点,生成环境依赖子图,根据所述环境依赖子图,确定每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包之间的部署顺序,以及,根据所述环境依赖子图,确定每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包所属的部署层级,针对每个部署层级,从预设的基础镜像包含的各级子镜像中确定出与该部署层级对应的子镜像,作为该部署层级对应的目标子镜像,按照每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包所属的部署层级之间的先后顺序,逐层将每个部署层级所属的各基础依赖环境程序包和/或各基础依赖环境程序包所依赖的其他环境程序包,按照每个基础依赖环境程序包以及每个基础依赖环境程序包所依赖的其他环境程序包之间的部署顺序,部署到每个部署层级对应的目标子镜像中,得到轻量化镜像,并将所述轻量化镜像部署到指定设备中。
6.一种计算机可读存储介质,其特征在于,所述存储介质存储有计算机程序,所述计算机程序被处理器执行时实现上述权利要求1~4任一项所述的方法。
7.一种电子设备,包括存储器、处理器及存储在存储器上并能够在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现上述权利要求1~4任一项所述的方法。
CN202311534998.9A 2023-11-16 2023-11-16 一种项目部署方法、装置、存储介质及电子设备 Active CN117519733B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202311534998.9A CN117519733B (zh) 2023-11-16 2023-11-16 一种项目部署方法、装置、存储介质及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202311534998.9A CN117519733B (zh) 2023-11-16 2023-11-16 一种项目部署方法、装置、存储介质及电子设备

Publications (2)

Publication Number Publication Date
CN117519733A CN117519733A (zh) 2024-02-06
CN117519733B true CN117519733B (zh) 2024-05-28

Family

ID=89741536

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202311534998.9A Active CN117519733B (zh) 2023-11-16 2023-11-16 一种项目部署方法、装置、存储介质及电子设备

Country Status (1)

Country Link
CN (1) CN117519733B (zh)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017162085A1 (zh) * 2016-03-25 2017-09-28 阿里巴巴集团控股有限公司 数据分析方法及装置
WO2019076369A1 (zh) * 2017-10-19 2019-04-25 北京金山云网络技术有限公司 一种云平台部署方法、装置、电子设备及可读存储介质
CN115113972A (zh) * 2021-03-23 2022-09-27 华为云计算技术有限公司 应用改造方法、系统、集群、介质及程序产品
CN115599400A (zh) * 2022-08-25 2023-01-13 麒麟软件有限公司(Cn) 一种Docker镜像快速构建方法、系统及介质
CN116594978A (zh) * 2023-05-12 2023-08-15 上海一谈网络科技有限公司 基于用户态文件系统的前端模块管理器、管理方法及系统
CN116679930A (zh) * 2023-06-14 2023-09-01 北京有竹居网络技术有限公司 一种前端项目的构建方法、装置、电子设备及存储介质
CN116719533A (zh) * 2023-05-06 2023-09-08 特斯联科技集团有限公司 环境自动部署方法、部署装置、电子设备及存储介质
CN116774989A (zh) * 2023-08-23 2023-09-19 国网信息通信产业集团有限公司 一种软件构建发布装置的设计和实现方法、系统及终端

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017162085A1 (zh) * 2016-03-25 2017-09-28 阿里巴巴集团控股有限公司 数据分析方法及装置
WO2019076369A1 (zh) * 2017-10-19 2019-04-25 北京金山云网络技术有限公司 一种云平台部署方法、装置、电子设备及可读存储介质
CN115113972A (zh) * 2021-03-23 2022-09-27 华为云计算技术有限公司 应用改造方法、系统、集群、介质及程序产品
CN115599400A (zh) * 2022-08-25 2023-01-13 麒麟软件有限公司(Cn) 一种Docker镜像快速构建方法、系统及介质
CN116719533A (zh) * 2023-05-06 2023-09-08 特斯联科技集团有限公司 环境自动部署方法、部署装置、电子设备及存储介质
CN116594978A (zh) * 2023-05-12 2023-08-15 上海一谈网络科技有限公司 基于用户态文件系统的前端模块管理器、管理方法及系统
CN116679930A (zh) * 2023-06-14 2023-09-01 北京有竹居网络技术有限公司 一种前端项目的构建方法、装置、电子设备及存储介质
CN116774989A (zh) * 2023-08-23 2023-09-19 国网信息通信产业集团有限公司 一种软件构建发布装置的设计和实现方法、系统及终端

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Accelerating Continuous Integration by Caching Environments and Inferring Dependencies;K. Gallaba 等;《IEEE Transactions on Software Engineering》;20201231;第48卷(第06期);2040-2052 *
基于线索抽象语法树的程序依赖图自动生成算法;易世界 等;《武汉大学学报(理学版)》;20150511;第61卷(第02期);112-116 *

Also Published As

Publication number Publication date
CN117519733A (zh) 2024-02-06

Similar Documents

Publication Publication Date Title
CN107045438B (zh) 一种应用顶层视图处理方法、装置及组件
CN116126365B (zh) 一种模型部署的方法、系统、存储介质及电子设备
CN116185532B (zh) 一种任务执行系统、方法、存储介质及电子设备
CN111400681B (zh) 数据权限处理方法、装置及设备
CN116225669B (zh) 一种任务执行方法、装置、存储介质及电子设备
CN117075930B (zh) 一种计算框架管理系统
CN114547024A (zh) 一种sql语句风险检测方法、装置、设备及介质
CN116483859A (zh) 数据查询方法及装置
CN111273965B (zh) 一种容器应用启动方法、系统、装置及电子设备
CN111459573B (zh) 一种智能合约执行环境的启动方法以及装置
CN110941443B (zh) 修改sdk中文件名的方法、装置及电子设备
CN117519733B (zh) 一种项目部署方法、装置、存储介质及电子设备
CN110874322B (zh) 一种用于应用程序的测试方法及测试服务器
CN110244964B (zh) 一种基于运维应用的运维方法、运维方法、装置及设备
CN111797387A (zh) 拦截外挂插件的方法及装置
CN111209022A (zh) 资源发布及获取方法、装置及设备
CN111338655A (zh) 一种安装包分发方法和系统
CN116304704A (zh) 一种模型训练方法、装置、存储介质及电子设备
CN116382713A (zh) 构建应用镜像的方法、系统、设备和存储介质
CN107402749B (zh) 实现图片加载库的方法及装置
CN115390852A (zh) 一种生成统一抽象语法树与程序分析的方法和装置
CN111090425B (zh) 一种程序封装方法、装置及电子设备
CN115269562B (zh) 一种数据库管理方法、装置、存储介质及电子设备
CN113590490B (zh) 一种自动化测试方法、装置以及设备
CN117648175B (zh) 一种基于动态算法选择的业务执行方法、装置及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant