CN112000696B

CN112000696B - 一种多架构云平台镜像仓库的镜像列表查询的架构

Info

Publication number: CN112000696B
Application number: CN202010786150.5A
Authority: CN
Inventors: 徐玉超; 刘正伟
Original assignee: Suzhou Inspur Intelligent Technology Co Ltd
Current assignee: Suzhou Inspur Intelligent Technology Co Ltd
Priority date: 2020-08-06
Filing date: 2020-08-06
Publication date: 2023-01-06
Anticipated expiration: 2040-08-06
Also published as: US20230289351A1; CN112000696A; WO2022028056A1

Abstract

本发明公开的多架构云平台镜像仓库的镜像列表查询的架构是在运行核心组件的pod中添加两个容器，在两个容器中分别配置请求分流组件和拓展核心组件，将核心组件的pod的svc中的targetPort指定为所述请求分流组件所监听的端口；所述请求分流组件从端口获取请求，并将查询镜像请求传递给所述拓展核心组件，将除查询镜像请求外的请求传递给所述核心组件处理。所述拓展核心组件读取所述数据库组件中镜像数据，执行查询请求中的查询指令，对镜像数据筛选；根据筛选结果调用所述注册组件接口，返回符合筛选结果的镜像的信息。本发明公开的多架构云平台镜像仓库的镜像列表查询的架构解决harbor镜像查询受限于项目的问题，并能自动配置架构标签方便镜像按架构查询。

Description

一种多架构云平台镜像仓库的镜像列表查询的架构

技术领域

本发明涉及镜像查询领域，尤其涉及一种多架构云平台镜像仓库的镜像列表查询的架构。

背景技术

本发明主要应用于国产化多架构云平台镜像仓库的镜像列表的架构，通过本方法实现的镜像仓库的镜像列表，支持从系统架构级别，镜像分类级别对镜像进行查询，支持查询不同架构，不同分类镜像。

在云计算时代，越来越多的公司和个人使用容器技术，不同架构与不同分类的镜像变得越来越多，镜像的查找与查询变成一个繁重的工作。目前，用的最多的镜像管理工具是harbor，harbor主要是通过项目与标签对镜像进行分类，用户在查询镜像的过程中只能在指定的项目中查询某个镜像，按标签查询也只能在指定的项目中查询，无法实现跨项目查询镜像，而镜像的架构往往是跨项目的，导致在使用harbor时无法便捷地实现系统架构级别的分类与查询。

发明内容

本发明提供多架构云平台镜像仓库的镜像列表查询的架构，旨在解决 harbor中无法便捷的查询镜像的问题。

为实现上述目的，本发明提供一种多架构云平台镜像仓库的镜像列表查询的架构，在kubernetes上部署harbor，将harbor的队列组件、注册组件、核心组件、数据库组件、工作服务组件部署在不同的pod中，包括，

在运行核心组件的pod中添加两个容器，在两个容器中分别配置请求分流组件和拓展核心组件，将核心组件的pod的svc中的targetPort指定为所述请求分流组件所监听的端口；

所述请求分流组件从所监听的端口接收请求，并判断请求是否为查询镜像请求，是则将请求传给所述拓展核心组件，不是则将请求传递给所述核心组件；

所述核心组件对镜像添加标签；

所述拓展核心组件读取所述数据库组件中镜像数据，并根据所述查询镜像请求对镜像数据进行筛选；根据筛选结果调用所述注册组件，返回符合筛选结果的镜像的信息。

更进一步地，在请求数据包中配置校验位，根据所述请求数据包是否为镜像查询数据包，在所述校验位配置不同的值。

更进一步地，所述请求分流组件接收请求的数据包读取所述校验位的值判断请求是否为查询镜像请求。

更进一步地，在所述数据库组件中配置第一数据表、第二数据表以及第三数据表，所述第一数据表中包括镜像版本与架构标签组合的字段和项目号，所述第二数据表中包括自定义标签字段与项目号，所述第三数据表包括镜像名字段与项目号。

更进一步地，所述拓展核心组件join连接所述第一数据表、第二数据表和第三数据表获取所述镜像数据。

更进一步地，所述核心组件对镜像添加标签包括：

在注册组件与所述拓展核心组件之间配置webhook，当所述注册组件中增加镜像时，所述webhook向所述拓展核心组件发送镜像名字与版本并调用所述拓展核心组件获取所述镜像的架构信息；

所述拓展核心组件将所述架构信息传递给所述核心组件，所述核心组件根据所述架构信息生成架构标签，并通过执行第一指令将所述架构标签添加到所述镜像。

更进一步地，所述核心组件对镜像添加标签还包括：通过UI创建自定义标签，所述UI将自定义标签输送到所述核心组件，或者通过UI控制所述核心组件获取已经定义的自定义标签；所述核心组件执行第二指令将自定义标签添加到镜像上。

更进一步地，创建自定义标签时，所述核心组件调用所述第二数据表中的数据，对比自定义标签判断自定义标签是否已存在于所述第二数据表中，如果已存在，则所述核心组件通过所述UI反馈标签已存在，如果不存在，则在所述自定义标签被添加到镜像之后所述核心组件将自定义标签添加到所述第二数据表对应的单元格。

更进一步地，所述核心组件将提交到注册组件的镜像的名字与该镜像所对应的项目号添加到所述第三数据表，添加成功后，所述核心组件按照所述第三数据表除镜像名字和项目号字段外的其他字段来调用相应接口，以获取管理内容，所述核心组件将获取的管理内容添加到第三数据表。

更进一步地，所述核心组件将提交到注册组件的镜像的版本与架构标签的组合与所对应的项目号添加到所述第一数据表中，添加成功后，所述核心组件按照所述第一数据表除版本与架构标签和项目号字段外的其他字段来调用相应接口，以获取管理内容，所述核心组件将获取的管理内容添加到第三数据表。

本申请提出的一种多架构云平台镜像仓库的镜像列表查询的架构具体有以下有益效果：

本申请提出的一种多架构云平台镜像仓库的镜像列表查询的架构通过配置新的拓展核心组件来对数据库组件中的镜像数据检索，所述拓展核心组件直接检索数据库组件中的镜像数据，分别建立项目号与镜像的名称、版本、架构标签以及自定义标签的联系，对所述第一数据表、第二数据表以及第三数据表做join连接来筛选需要查询的镜像，从而突破harbor自身无法跨项目查询镜像的问题；而且能通过所述拓展核心组件与所述webhook配合自动获取通过根据镜像的架构信息，所述拓展组件将架构信息传递给所述核心组件，由所述核心组件提取架构信息中的关键字生成架构标签，对镜像添加固定的架构标签，方便按架构信息对镜像进行查询。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图示出的结构获得其他的附图。

图1是本发明实施例中的多架构云平台镜像仓库的镜像列表查询的实现架构示意图；

图2是本发明实施例中第一数据表示意图；

图3是本发明实施例中第二数据表示意图；

图4是本发明实施例中第三数据表示意图；

图5是本发明实施例中分流组件读取查询镜像请求数据包校验位示意图；

图6是本发明实施例中分流组件读取其他请求数据包校验位示意图；

图7是本发明实施例中分流组件分流流程示意图。

本发明目的实现、功能特点及优点将结合实施例，参照附图做进一步说明。

具体实施方式

应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

参阅图1所示，本发明提供一种多架构云平台镜像仓库的镜像列表查询的架构，在kubernetes上部署1.10版本以上的harbor，将harbor的队列组件、注册组件、核心组件、数据库组件、工作服务组件部署在不同的pod中。

所述请求分流组件从所监听的端口接收请求，所述请求分流组件判断请求是否为查询镜像请求，是则将传给所述拓展核心组件，不是则将请求传递给所述核心组件；具体的，将请求数据包的其中一个空闲位域中配置为校验位，请求如果是查询镜像请求，则将所述校验位设置为1，否则所述校验位设置为0，所述请求分流组件接收请求的数据包读取所述校验位的值，如果检验位的数值为1，判断请求是查询镜像请求，所述请求分流组件将查询镜像请求发送给所述拓展核心组件；如果校验位的数值为0，所述请求分流组件判断请求不是查询镜像请求，所述请求分流组件将请求发送给所述核心组件处理。

通过一种多架构云平台镜像仓库的镜像列表查询的架构的所述核心组件对镜像添加标签，方便根据所述标签配置镜像查询请求；

具体的，所述核心组件对镜像添加标签包括添加架构标签和添加自定义标签。

其中添加架构标签为所述核心组件自动添加，具体的，把webhook监听端口配置在所述注册组件上，把webhook终端配置在所述拓展核心组件，当所述webhook监听端口监听到有镜像上传到所述注册组件时，则所述webhook 终端调用所述拓展核心组件并向所述拓展核心组件传输上传到所述注册组件的所述镜像的名称与版本；被所述webhook终端调用的所述拓展核心组件调用注册组件接口并向所述注册组件接口发送所述镜像的名称与版本，所述注册组件接口根据镜像的名称与版本返回所述镜像的架构信息。具体实施过程中，所述注册组件接口通过docker inspect命令获取镜像信息。所述拓展核心组件接收到镜像的架构信息之后，所述拓展核心组件调用所述核心组件并将所述架构信息传递给所述核心组件，所述核心组件根据所述架构信息提取架构信息中的关键字生成架构标签，并通过执行第一指令将所述架构标签添加到所述镜像，所述第一指令为tag镜像名称:架构标签xxxx/project-test/镜像名称:镜像版本。

向镜像添加自定义标签为手动添加。具体的，新制定自定义标签时，用户根据需求通过UI创建自定义标签，所述UI将自定义标签输送到所述核心组件；或者用户通过所述UI控制所述核心组件获取已经制定的自定义标签(存储于所述第二数据表)；所述核心组件获取自定义标签之后，所述核心组件执行第二指令将自定义标签添加到镜像上，所述第二指令为tag镜像名称:自定义标签xxxx/project-test/镜像名称:镜像版本。

具体实施过程中，在UI界面配置检索接口，自定义标签添加接口以及架构标签与自定义标签展示栏。方便用户根据UI展示的镜像标签制定镜像查询策略。

制定查询策略，生成查询镜像的请求；查询镜像的请求经过所述请求分流组件传递给所述拓展核心组件处理；所述拓展核心组件获取镜像查询组件的请求后读取镜像查询请求的数据包中的查询指令，所述拓展核心组件读取所述数据库组件中镜像数据，具体的，所述镜像数据包括在所述数据库组件中配置第一数据表、第二数据表以及第三数据表中的数据。

参阅图2所示，所述第一数据表中字段包括编号、project_id(项目号)、 tag(版本与架构标签组合)以及repo(镜像名称)、digest(汇编)、kind(镜像种类)、creation_time(镜像创建时间)、pull_time(镜像拉取时间)和push_time (镜像推送时间)。具体实施过程中，由所述核心组件将提交到注册组件的镜像的版本与架构与该镜像所对应的项目号添加到所述第一数据表，添加成功后，所述核心组件按照所述第一数据表除版本与架构标签组合和项目号字段外的其他字段来调用相应接口，以获取管理内容，所述核心组件将获取的管理内容添加到第一数据表。如对于第一数据表的creation_time字段，所述核心组件通过调用日志接口读取镜像创建时间，将所述镜像创建时间添加到所述第一数据表creation_time字段下的单元格中。

参阅图3所示，所述第二数据表中字段包括编号、labelname(自定义标签名)、description(自定义标签描述)、color、level、scope、project_id(项目号)、creation_time(镜像创建时间)、update_time(镜像更新时间)、deleted。具体实施过程中，创建自定义标签时，所述核心组件调用所述第二数据表中的数据，对比自定义标签判断自定义标签是否已存在于所述第二数据表中，如果已存在，则所述核心组件通过所述UI反馈标签已存在，如果不存在，在用户将自定义标签添加到镜像之后，则所述核心组件将自定义标签添加到所述第二数据表对应的单元格。所述核心组件按照所述第二数据表除镜像名字和项目号字段外的其他字段来调用相应接口，以获取管理内容。如对于第二数据表update_time字段，所述核心组件通过调用日志接口读取镜像更新时间，将所述镜像更新时间添加到所述第二数据表update_time字段下的单元格中。

参阅图4所示，所述第三数据表的字段包括编号、name(镜像名称)、 project_id(项目号)、description(镜像描述)、pull_count(镜像拉取计数)、 star_count(镜像启动计数)、creation_time(镜像创建时间)、update_time(镜像更新创建时间)。具体实施过程中，由所述核心组件将提交到注册组件的镜像的名称与所对应的项目号添加到所述第三数据表中，添加成功后，所述核心组件按照所述第三数据表除名称和项目号字段外的其他字段来调用相应接口，以获取管理内容，所述核心组件将获取的管理内容添加到第三数据表。如对于第三数据表中的creation_time字段，所述核心组件通过调用日志接口读取镜像创建时间，将所述镜像创建时间添加到所述第三数据表creation_time 字段下的单元格中。

执行查询请求中的查询指令，所述拓展核心组件根据查询镜像请求对所述第一数据表、第二数据表以及第三数据表做join连接来筛选需要查询的镜像。具体的，join连接方式包括：

通过select column_name(s)

from table 1

inner join table 2

ON table 1.column_name＝table 2.column_name

对table1与table2按照特定字段取交集生成新的表。如果想要根据自定义标签来对镜像检索，可以将所述第一数据表与第二数据表通过project_id合并，会得到包含自定义标签的镜像的数据表，这个表的字段数多于第二数据表；通过这个表按照自定义标签检索之后，按照这个表中字段的内容调用所述注册组件接口，获取详细的镜像信息。

select column_name(s)

from table 1

leftjoin table 2

ON table 1.column_name＝table 2.column_name，

将产生table1的完全集，而table2中匹配的则有值，没有匹配的则以null 值取代，生成新的表；

通过select column_name(s)

from table 1

rightjoin table 2

ON table 1.column_name＝table 2.column_name

将产生table2的完全集，而table1中有匹配的则有值，没有匹配的则以 null值取代，生成新的表。

通过join连接获得新的数据表，根据镜像查询请求中的SQL查询指令对数据表进行筛选，根据数据表筛选后的字段与记录调用所述注册组件接口，返回符合筛选结果的镜像的信息。

应当注意的是，在权利要求中，不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的部件或步骤。位于部件之前的单词“一”或“一个”不排除存在多个这样的部件。本发明可以借助于包括有若干不同部件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中，这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。

尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims

1.一种多架构云平台镜像仓库的镜像列表查询的方法，在kubernetes上部署harbor，将harbor的队列组件、注册组件、核心组件、数据库组件、工作服务组件部署在不同的pod中，其特征在于，包括：

所述核心组件对镜像添加标签；其中，在注册组件与所述拓展核心组件之间配置webhook，当所述注册组件中增加镜像时，所述webhook向所述拓展核心组件发送镜像名字与版本并调用所述拓展核心组件获取所述镜像的架构信息，且使所述拓展核心组件将所述架构信息传递给所述核心组件，所述核心组件根据所述架构信息生成架构标签，并通过执行第一指令将所述架构标签添加到所述镜像；

所述拓展核心组件读取所述数据库组件中镜像数据，并根据所述查询镜像请求对镜像数据进行筛选，其中，所述拓展核心组件join连接所述数据库组件中的第一数据表、第二数据表和第三数据表获取所述镜像数据，所述第一数据表中包括镜像版本与架构标签组合的字段和项目号，所述第二数据表中包括自定义标签字段与项目号，所述第三数据表包括镜像名字段与项目号；根据筛选结果调用所述注册组件，返回符合筛选结果的镜像的信息。

2.根据权利要求1所述的多架构云平台镜像仓库的镜像列表查询的方法，其特征在于，在请求数据包中配置校验位，根据所述请求数据包是否为镜像查询数据包，在所述校验位配置不同的值。

3.根据权利要求2所述的多架构云平台镜像仓库的镜像列表查询的方法，其特征在于，所述请求分流组件接收请求的数据包读取所述校验位的值判断请求是否为查询镜像请求。

4.根据权利要求1所述的多架构云平台镜像仓库的镜像列表查询的方法，其特征在于，所述核心组件对镜像添加标签还包括：通过UI创建自定义标签，所述UI将自定义标签输送到所述核心组件，或者通过UI控制所述核心组件获取已经定义的自定义标签；所述核心组件执行第二指令将自定义标签添加到镜像上。

5.根据权利要求4所述的多架构云平台镜像仓库的镜像列表查询的方法，其特征在于，创建自定义标签时，所述核心组件调用第二数据表中的数据，对比自定义标签判断自定义标签是否已存在于所述第二数据表中，如果已存在，则所述核心组件通过所述UI反馈标签已存在，如果不存在，则在所述自定义标签被添加到镜像之后所述核心组件将自定义标签添加到所述第二数据表对应的单元格。

6.根据权利要求4所述的多架构云平台镜像仓库的镜像列表查询的方法，其特征在于，所述核心组件将提交到注册组件的镜像的名字与该镜像所对应的项目号添加到第三数据表，添加成功后，所述核心组件按照所述第三数据表除镜像名字和项目号字段外的其他字段来调用相应接口，以获取管理内容，所述核心组件将获取的管理内容添加到第三数据表。

7.根据权利要求1所述的多架构云平台镜像仓库的镜像列表查询的方法，其特征在于，所述核心组件将提交到注册组件的镜像的版本与架构标签的组合与所对应的项目号添加到所述第一数据表中，添加成功后，所述核心组件按照所述第一数据表除版本与架构标签和项目号字段外的其他字段来调用相应接口，以获取管理内容，所述核心组件将获取的管理内容添加到第三数据表。