CN113849450A - 一种信息处理方法和信息处理装置 - Google Patents

Abstract

本申请实施例公开了一种信息处理方法，该方法包括：若节点集群中的第一节点获取到镜像拉取请求，接收第一节点上报的待拉取镜像标识关联的所有镜像层的层信息；其中，镜像拉取请求携带有待拉取镜像标识；基于所有镜像层的层信息，确定每一镜像层所在的候选节点；其中，节点集群包括候选节点；基于节点集群的网络拓扑结构，从每一镜像层所在的候选节点中定位每一镜像层所在的第一目标节点；通知第一节点每一镜像层所在的第一目标节点的第一节点标识，以使得第一节点基于第一节点标识从每一第一目标节点中拉取对应的每一镜像层。本申请的实施例同时还公开了一种信息处理装置。

Description

一种信息处理方法和信息处理装置

技术领域

本申请涉及但不限于信息技术领域，尤其涉及一种信息处理方法和信息处理装置。

背景技术

应用容器引擎(Docker)是一个开源的业务容器引擎，可以让开发者将应用程序及该应用程序所依赖的环境打包成Docker镜像，并预存在镜像仓库中，当用户需要使用该应用程序时便可通过下载镜像来创建一个可运行该应用程序的业务容器。相关技术中，Docker镜像下载流程为：集群环境中任一节点获取到镜像拉取请求时，从镜像仓库拉取镜像。

发明内容

本申请实施例期望提供一种信息处理方法和信息处理装置。

本申请的技术方案是这样实现的：

一种信息处理方法，所述方法包括：

若节点集群中的第一节点获取到镜像拉取请求，接收所述第一节点上报的待拉取镜像标识关联的所有镜像层的层信息；其中，所述镜像拉取请求携带有所述待拉取镜像标识；

基于所述所有镜像层的层信息，确定每一镜像层所在的候选节点；其中，所述节点集群包括所述候选节点；

基于所述节点集群的网络拓扑结构，从所述每一镜像层所在的候选节点中定位每一镜像层所在的第一目标节点；

通知所述第一节点所述每一镜像层所在的第一目标节点的第一节点标识，以使得所述第一节点基于所述第一节点标识从每一所述第一目标节点中拉取对应的所述每一镜像层。

一种信息处理装置，所述信息处理装置包括：

接收模块，用于若节点集群中的第一节点获取到镜像拉取请求，接收所述第一节点上报的待拉取镜像标识关联的所有镜像层的层信息；其中，所述镜像拉取请求携带有所述待拉取镜像标识；

处理模块，用于基于所述所有镜像层的层信息，确定每一镜像层所在的候选节点；其中，所述节点集群包括所述候选节点；

所述处理模块，用于基于所述节点集群的网络拓扑结构，从所述每一镜像层所在的候选节点中定位每一镜像层所在的第一目标节点；

发送模块，用于通知所述第一节点所述每一镜像层所在的第一目标节点的第一节点标识，以使得所述第一节点基于所述第一节点标识从每一所述第一目标节点中拉取对应的所述每一镜像层。

一种电子设备，所述电子设备包括：处理器、存储器和通信总线；

所述通信总线用于实现处理器和存储器之间的通信连接；

所述处理器用于执行存储器中存储的信息处理程序，以实现上述的信息处理方法的步骤。

一种计算机存储介质，所述计算机存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现如上述的信息处理方法的步骤。

本申请实施例所提供的信息处理方法和信息处理装置，若节点集群中的第一节点获取到镜像拉取请求，接收第一节点上报的待拉取镜像标识关联的所有镜像层的层信息；其中，镜像拉取请求携带有待拉取镜像标识；基于所有镜像层的层信息，确定每一镜像层所在的候选节点；其中，节点集群包括候选节点；基于节点集群的网络拓扑结构，从每一镜像层所在的候选节点中定位每一镜像层所在的第一目标节点；通知第一节点每一镜像层所在的第一目标节点的第一节点标识，以使得第一节点基于第一节点标识从每一第一目标节点中拉取对应的每一镜像层。也就是说，根据节点的拉取需求，在节点集群的管理平台的管理下，基于节点集群的网络拓扑结构实现最佳匹配到每一镜像层所在的第一目标节点，进而由第一节点从每一镜像层所在的第一目标节点拉取镜像层，如此，节省了拉取时间。

附图说明

图1为本申请的实施例提供的一种可选的信息处理方法的流程示意图；

图2为本申请的实施例提供的一种节点集群的管理平台与节点之间交互的场景示意图；

图3为本申请的实施例提供的一种可选的信息处理方法的流程示意图；

图4为本申请的实施例提供的一种可选的信息处理方法的流程示意图；

图5为本申请的实施例提供的一种可选的信息处理方法的流程示意图；

图6为本申请的实施例提供的一种可选的信息处理方法的流程示意图；

图7为本申请的实施例提供的另一种节点集群的管理平台与节点之间交互的场景示意图；

图8为本申请的实施例提供的一种可选的信息处理方法的流程示意图；

图9为本申请的实施例提供的一种可选的信息处理方法的流程示意图；

图10为本申请的实施例提供的一种信息处理装置的结构示意图；

图11为本申请的实施例提供的一种节点集群的管理平台的结构示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述。

除非另有定义，本文所使用的所有的技术和科学术语与属于本申请的技术领域的技术人员通常理解的含义相同。本文中所使用的术语只是为了描述本申请实施例的目的，不是旨在限制本申请。

对本申请实施例进行进一步详细说明之前，对本申请实施例中涉及的名词和术语进行说明，本申请实施例中涉及的名词和术语适用于如下的解释。

(1)镜像(Mirroring)，是一种文件存储形式，一个磁盘上的数据在另一个磁盘上存在一个完全相同的副本即为镜像，即一个镜像可以把许多相同的文件做成一个镜像文件。

(2)镜像层，镜像通常是以分层的结构方式来进行保存，而每层对应的镜像结构即为镜像层。

本申请的实施例提供一种信息处理方法，该信息处理方法可以应用于节点集群的管理平台。参照图1所示，该方法包括以下步骤：

步骤101、若节点集群中的第一节点获取到镜像拉取请求，接收第一节点上报的待拉取镜像标识关联的所有镜像层的层信息。

其中，镜像拉取请求携带有待拉取镜像标识。

在一个可实现的应用场景中，本申请提供的信息处理方法可以应用于如下的集群环境，该集群环境包括节点集群、节点集群的管理平台和镜像仓库(image store)。其中，节点集群包括多个节点，多个节点包括上述的第一节点，每一节点代表一台设备。可以理解地，这里的设备可以为物理主机、设备也可以为物理主机内设置的虚拟机。示例性的，每一节点中部署有Agent(代理模块)用于与上述的节点集群的管理平台和镜像仓库进行通信，以及创建运行容器。节点集群的管理平台为用于控制、管理该节点集群中所有节点的一个控制设备，该控制设备可以为该节点集群之外的一个单独设备，也可以为该节点集群中的任意一个节点，本申请实施例中节点集群的管理平台可以用master node表示。镜像仓用于存储至少一个应用程序、该应用程序所依赖的环境打包成的镜像以及该镜像的所有镜像层信息，以及为镜像的镜像层提供不同的获取方式。

示例性的，本申请实施例中的节点集群的管理平台可以为服务器、物理机等设备。本申请实施例中的节点可以为服务器、个人计算机(Personal Computer，PC)、物理机等用于处理业务消息的设备。

示例的，若本申请实施例中的业务容器的镜像以Docker镜像为例，Docker镜像通常以分层的结构方式组织保存，下一层的镜像称为上一层镜像的父镜像，没有父镜像的镜像称之为基础镜像。示例性的，每个镜像层包含两部分内容：一部分是json文件，描述了镜像层的标识(Identity document，id)、大小、父镜像层的id等信息，另一部分是镜像层文件系统的内容，可以为空。

本申请实施例中，镜像层的层信息包括但不限于镜像层的id、镜像层的标签(tag)；当然，镜像层的层信息还可以包括其他信息，例如镜像层的大小、父镜像层的id。

节点集群中的每一节点(worker node)可以看作监控机(watcher)，如前，节点集群的管理平台可以用master node表示，参见图2，在一个可实现的场景中，节点集群的管理平台11提供的拓扑(topology)服务，通过抓取工具抓取信息以获取节点集群的网络拓扑结构，抓取工具包括但不限于lldpd。当然，节点集群的管理平台还可以通过其他方式获取节点集群的网络拓扑结构，例如节点集群的管理平台通过开源网络操作系统(Ryu)的拓扑发现功能获取集群的网络拓扑结构。watcher监控本地镜像和镜像层信息，并上传到masternode，master node中的管理模块(manager)将每一节点的镜像层信息存储到数据库(database，DB)中。当有镜像拉取(docker pull)请求发出时，watcher拦截docker pull请求，获取docker pull请求携带的需要拉取的docker镜像的标识，即待拉取镜像标识，解析该docker镜像的属性信息，从只读的镜像层(LowDirs)、可读可写的镜像层(UpperDirs)以及roofts中获取当前镜像的所有镜像层的层信息，并上报给master node。此时，master node接收到第一节点上报的待拉取镜像标识关联的所有镜像层的层信息。

步骤102、基于所有镜像层的层信息，确定每一镜像层所在的候选节点。

其中，节点集群包括候选节点。

本申请实施例中，master node接收到第一节点上报的待拉取镜像标识关联的所有镜像层的层信息的情况下，基于所有镜像层的层信息，确定每一镜像层所在的候选节点，即查找各镜像层所在的候选节点。

步骤103、基于节点集群的网络拓扑结构，从每一镜像层所在的候选节点中定位每一镜像层所在的第一目标节点。

本申请实施例中，master node基于节点集群的网络拓扑结构，从每一镜像层所在的候选节点中定位每一镜像层所在的第一目标节点，每一镜像层所在的第一目标节点就是第一节点拉取对应的每一镜像层时的数据来源。

步骤104、通知第一节点每一镜像层所在的第一目标节点的第一节点标识，以使得第一节点基于第一节点标识从每一第一目标节点中拉取对应的每一镜像层。

本申请实施例中，master node基于节点集群的网络拓扑结构，为第一节点定位待拉取镜像标识关联的每一镜像层所在的第一目标节点，并将第一目标节点的第一节点标识通知给第一节点，这样，第一节点便可以基于第一节点标识从每一第一目标节点中拉取到对应的每一镜像层。如此，本申请提供的信息处理方法，在第一节点需要拉取镜像时，master node基于节点集群的网络拓扑结构为第一节点定位存在有待拉取镜像的各镜像层的第一目标节点，进而第一节点从每一第一目标节点中拉取对应的每一镜像层，从而节点集群中任一节点在拉取镜像时不再是都从镜像仓库拉取。此外，相关技术中在拉取镜像时，采用提前将可能用到的镜像拉取到本地的方法，该方法不能覆盖到所有的可能用到的镜像，仍然存在使用时再去拉取的情况；而且提前拉取的镜像如果没有被用到，会占据服务器的存储空间。本申请提供的方法，根据节点的拉取需求，在master node的管理下，基于节点集群的网络拓扑结构实现最佳匹配到每一镜像层所在的第一目标节点，如此，节省了拉取时间。

本申请实施例所提供的信息处理方法，若节点集群中的第一节点获取到镜像拉取请求，接收第一节点上报的待拉取镜像标识关联的所有镜像层的层信息；其中，镜像拉取请求携带有待拉取镜像标识；基于所有镜像层的层信息，确定每一镜像层所在的候选节点；其中，节点集群包括候选节点；基于节点集群的网络拓扑结构，从每一镜像层所在的候选节点中定位每一镜像层所在的第一目标节点；通知第一节点每一镜像层所在的第一目标节点的第一节点标识，以使得第一节点基于第一节点标识从每一第一目标节点中拉取对应的每一镜像层；也就是说，根据节点的拉取需求，在节点集群的管理平台的管理下，基于节点集群的网络拓扑结构实现最佳匹配到每一镜像层所在的第一目标节点，进而由第一节点从每一镜像层所在的第一目标节点拉取镜像层，如此，节省了拉取时间。

本申请的实施例提供一种信息处理方法，该信息处理方法可以应用于节点集群的管理平台。参照图3所示，该方法包括以下步骤：

步骤301、若节点集群中的第一节点获取到镜像拉取请求，接收第一节点上报的待拉取镜像标识关联的所有镜像层的层信息。

其中，镜像拉取请求携带有待拉取镜像标识。

步骤302、基于所有镜像层的层信息，确定每一镜像层所在的候选节点。

其中，节点集群包括候选节点。

步骤303、获取每一镜像层的优先级。

本申请实施例中，每一镜像层的优先级取决于该镜像层的大小，例如，镜像层越大，优先级越高；镜像层越小，优先级越小。当然，每一镜像层的优先级还可以取决于其他因素，例如多个镜像层中，父镜像的优先级最高。这里，每一镜像层的优先级作为从候选节点中选定第一目标节点的一个重要参考因素。

步骤304、基于网络拓扑结构，确定第一节点到每一镜像层所在的候选节点的每一第一距离。

本申请实施例中，第一节点到每一镜像层所在的候选节点的每一第一距离，影响拉取时间。示例性的，第一节点到某一镜像层所在的第一候选节点的第一距离，小于第一节点到该镜像层所在的第二候选节点的第一距离，则第一节点从该镜像层所在的第一候选节点拉取该镜像层的时间，小于第一节点从该镜像层所在的第二候选节点拉取该镜像层的时间。这里，第一节点到每一镜像层所在的候选节点的每一第一距离，作为从候选节点中选定第一目标节点的另一个重要参考因素。

步骤305、基于每一镜像层的优先级和每一第一距离，从每一镜像层所在的候选节点中定位每一镜像层所在的第一目标节点。

其中，所有镜像层中镜像层的优先级越高，第一节点到定位出的第一目标节点的距离越近。

本申请实施例中，master node基于每一镜像层的优先级和每一第一距离综合分析，从每一镜像层所在的候选节点中定位每一镜像层所在的第一目标节点，确保所有镜像层中镜像层的优先级越高，第一节点到定位出的第一目标节点的距离越近。从而，在拉取各镜像层时，较大的镜像层可以从距离较近的第一目标节点处拉取，较小的镜像层可以从距离相对远一点的第一目标节点处拉取，实现各镜像层拉取时的合理规划，进一步提高拉取效率。

步骤306、通知第一节点每一镜像层所在的第一目标节点的第一节点标识，以使得第一节点基于第一节点标识从每一第一目标节点中拉取对应的每一镜像层。

进一步地，本申请其他实施例中，步骤305基于每一镜像层的优先级和每一第一距离，从每一镜像层所在的候选节点中定位每一镜像层所在的第一目标节点，可以通过如图4所示的步骤实现：

步骤3051、获取每一镜像层所在的候选节点的节点总数和同时向一节点传送镜像层的节点数量阈值。

本申请实施例中，每一镜像层所在的候选节点的节点总数用k表示，k为正整数；可以理解地，k指的是存储镜像层的节点总数；只要存储有待拉取镜像的一个镜像层，都会被统计到。同时向一节点传送镜像层的节点数量阈值用p表示，p为正整数。

步骤3052、基于每一镜像层的优先级、每一第一距离、节点总数和节点数量阈值，从每一镜像层所在的候选节点中定位每一镜像层所在的第一目标节点。

其中，所有镜像层对应的第一目标节点的总数等于节点总数或者节点数量阈值。

本申请实施例中，master node基于每一镜像层的优先级、每一第一距离、节点总数和节点数量阈值，从每一镜像层所在的候选节点中定位每一镜像层所在的第一目标节点，确保将待拉取镜像的各镜像层尽量多的分散到不同的节点上，而且，镜像层大的分配到跳数少的节点，进一步提高传输速率。

一些实施例中，master node提供的topology服务，通过lldpd抓取信息以获取节点集群的网络拓扑结构时，可以通过如下步骤实现：

首先，获取节点集群中每一节点连接的交换机的端口信息；

其次，基于每一节点和每一节点连接的交换机的端口信息，生成网络拓扑结构。本申请实施例中，网络拓扑结构便于master node快速确定第一节点到每一镜像层所在的候选节点的每一第一距离。

在一个可实现的场景中，对master node寻找最优第一目标节点的过程进行说明，

Step1、master node确定待拉取镜像的每一镜像层的优先级，例如将各镜像层按照从大到小的顺序进行排序。

Step2、master node统计存储镜像层的节点总数k。

Step3、master node分别统计出每一镜像层所在的节点，并将每一镜像层所在的节点按照拓扑结构从近到远即跳数从小到大进行排序。

Step4、master node设定允许同时向一节点传送镜像层的节点数量阈值p。

Step5、master node循环对各镜像层进行分配，例如按照镜像层从大到小进行循环，保证尽量将镜像层平均的分配到f个节点上，f为正整数。

需要说明的是，如果k>p，则f的值等于p。如果k≤p，则f的值等于k。如此，确保master node根据节点集群的网络拓扑结构，选取距离最近跳数最少且存有目标镜像层的节点互相传输镜像层，从而可以同时利用多个节点的网络带宽来提高镜像传输速度。

本申请的实施例提供一种信息处理方法，该信息处理方法可以应用于节点集群的管理平台。该方法包括以下步骤A11-A15或者A11-A12和A16：

A11、若节点集群中的第一节点获取到镜像拉取请求，接收第一节点上报的待拉取镜像标识关联的所有镜像层的层信息。

其中，镜像拉取请求携带有待拉取镜像标识。

A12、基于镜像层链表确定每一镜像层的层信息对应的镜像层的使用信息。

其中，使用信息表征每一镜像层的层信息对应的镜像层一段时间内是否被使用。

A13、若使用信息表征镜像层的层信息对应的镜像层从未被使用过，确定每一镜像层所在的候选节点。

这里，使用信息表征镜像层的层信息对应的镜像层从未被使用过，说明镜像层链表中不存在该镜像层的层信息。

A14、基于节点集群的网络拓扑结构，从每一镜像层所在的候选节点中定位每一镜像层所在的第一目标节点；通知第一节点每一镜像层所在的第一目标节点的第一节点标识，以使得第一节点基于第一节点标识从每一第一目标节点中拉取对应的每一镜像层。

A15、基于节点集群的网络拓扑结构，从每一镜像层所在的候选节点中定位每一镜像层所在的第二目标节点；通知第二节点每一镜像层所在的第二目标节点的第二节点标识，以使得第二节点基于第二节点标识从每一第二目标节点中拉取对应的每一镜像层。

由上述内容可知，master node确定镜像层链表中不存在待拉取的镜像层的层信息时，即初次使用这一镜像，master node通知节点集群中不存在该镜像层的所有节点提前缓存该镜像层。

A16、若使用信息表征镜像层的部分层信息对应的镜像层在一段时间内的指定时长内未被使用，通知第一节点和第二节点部分层信息，以使得第一节点和第二节点清除部分层信息对应的部分镜像层。

这里，master node基于镜像层链表确定每一镜像层的层信息对应的镜像层的使用信息，即一段时间内是否被使用来确定是否清除该镜像层。master node确定使用信息表征镜像层的部分层信息对应的镜像层在一段时间内的指定时长内未使用该镜像层，则通知第一节点和第二节点部分层信息删除该镜像层以释放存储空间。其中，一段时间内的指定时长内未使用该镜像层包括最近最久未使用该镜像层。

本申请的实施例提供一种信息处理方法，该信息处理方法可以应用于节点集群的管理平台。参照图5所示，该方法包括以下步骤：

步骤501、若节点集群中的第一节点获取到镜像拉取请求，接收第一节点上报的待拉取镜像标识关联的所有镜像层的层信息。

其中，镜像拉取请求携带有待拉取镜像标识

步骤502、将每一镜像层的层信息插入镜像层哈希表，得到第一节点是否存在每一镜像层的检测结果。

本申请实施例中，镜像层哈希表是master node维护的用于快速查找镜像层是否存在的表。

步骤503、若检测结果表征第一节点不存在每一镜像层，确定每一镜像层所在的候选节点。

其中，节点集群包括候选节点。

本申请实施例中，待拉取镜像即待缓存镜像，在master node确定第一节点不存在待缓存镜像的镜像层时，master node从节点集群中确定每一镜像层所在的候选节点。

步骤504、基于节点集群的网络拓扑结构，从每一镜像层所在的候选节点中定位每一镜像层所在的第一目标节点。

步骤505、通知第一节点每一镜像层所在的第一目标节点的第一节点标识，以使得第一节点基于第一节点标识从每一第一目标节点中拉取对应的每一镜像层。

需要说明的是，本申请实施例中，在缓存镜像时，可以采用前述实施例提供的方法，master node根据节点集群的网络拓扑结构，选取距离最近跳数最少且存有目标镜像层的节点互相传输镜像层，从而可以同时利用多个节点的网络带宽来提高镜像传输速度，实现快速缓存。

本申请其他实施例中，master node还可以基于镜像层哈希表和镜像层链表，来统计每个镜像层最近是否被使用过来确定该镜像层是否需要提前缓存或者是否需要被清理。

本申请其他实施例中，在步骤502将每一镜像层的层信息插入镜像层哈希表，得到第一节点是否存在每一镜像层的检测结果之后，还可以执行如图6所示的步骤：

步骤601、若检测结果表征第一节点不存在每一镜像层，从节点集群中确定第二节点。

其中，第二节点不存在每一镜像层。

本申请实施例中，master node确定检测结果表征第一节点不存在每一镜像层，则表征上述每一镜像层是第一次被第一节点使用到，则该镜像层被再次使用的概率非常大，可以提前通知节点集群中所有不存在该镜像层的节点行自动缓存，防止再次使用时花费长时间等待。

步骤602、基于网络拓扑结构，确定第二节点到每一镜像层所在的候选节点的每一第二距离。

步骤603、基于每一镜像层的优先级和每一第二距离，从每一镜像层所在的候选节点中定位每一镜像层所在的第二目标节点。

步骤604、通知第二节点每一镜像层所在的第二目标节点的第二节点标识，以使得第二节点基于第二节点标识从每一第二目标节点中拉取对应的每一镜像层。

由上述可知，针对节点集群中任一不存在该镜像层的第二节点，master node仍旧根据节点集群的网络拓扑结构，选取距离最近跳数最少且存有目标镜像层的节点互相传输镜像层，从而针对任一第二节点而言，可以同时利用多个节点的网络带宽来提高镜像传输速度，实现快速缓存。

示例性的，参见图7所示，在节点集群的管理平台11确定第一节点12不存在每一镜像层的情况下，从节点集群中确定第二节点，这里以第二节点为一个节点举例，节点集群的管理平台11通知第二节点13每一镜像层所在的第二目标节点的第二节点标识，以使得第二节点调用应用容器引擎进程(docker daemon)，基于第二节点标识从每一第二目标节点中拉取对应的每一镜像层。

本申请其他实施例中，在步骤104、步骤306或步骤505通知第一节点每一镜像层所在的第一目标节点的第一节点标识，以使得第一节点基于第一节点标识从每一第一目标节点中拉取对应的每一镜像层之后，还可以执行如图8所示的步骤：

步骤801、将所有镜像层的层信息存入镜像层链表。

其中，镜像层链表中各镜像层的层信息处于不同的位置。本申请实施例中，镜像层链表中各镜像层所处的位置代表镜像层一段时间内被使用情况的排序。示例性的，从镜像层链表的首部到镜像层链表的尾部，代表最短时间间隔内被使用到最长时间间隔内被使用，也就是说，尾部的镜像层是最近最久未被使用到的镜像层对应的层信息。当然，还可以采用其他的排序方式，例如，从镜像层链表的尾部到镜像层链表的首部，代表最短时间间隔内被使用到最长时间间隔内被使用，也就是说，首部的镜像层是最近最久未被使用到的镜像层对应的层信息。这里，master node可以基于最近最少使用(Least Recently Used)算法，统计最近最少使用即最近最久未使用的镜像层。

步骤802、若第一节点的存储空间的可存储区域的大小小于阈值，接收第一节点上报的空间清除请求。

本申请实施例中，第一节点确定自身的存储空间的可存储区域的大小小于阈值，则通过watcher向manager发送空间清除请求，以获取可以清除的镜像层信息并清除第一节点上的该镜像层。

当然，本申请实施例中，还可以基于其他条件触发镜像层的自动清除，例如，master node基于镜像层链表的排序情况，定期通知节点集群中的各节点清除最近最少使用的镜像层。

步骤803、响应空间清除请求，基于镜像层链表中存储的各镜像层的层信息的位置，确定第一节点中存储的各镜像层中的待清除的部分镜像层的层信息。

本申请实施例中，待清除的部分镜像层包括但不限于最近最少使用的镜像层。例如，尾部的镜像层信息对应的镜像层是最近最久未被使用到的镜像层，master node响应空间清除请求，基于镜像层链表中存储的各镜像层的层信息的位置，确定镜像层链表的尾部的镜像层的层信息对应的镜像层为待清除的对象，进而将其层信息通知给第一节点和其他节点，以使得第一节点和其他节点自动清除。当然，master node还可以根据空间管理需求，清除镜像层链表的后几位的镜像层的层信息对应的镜像层为待清除的对象。

步骤804、通知第一节点部分镜像层的层信息，以使得第一节点清除部分镜像层的层信息对应的部分镜像层。

进一步地，这里结合镜像层哈希表和镜像层链表，对镜像层的自动缓存和清除进行说明，参见图9所示，

步骤901、当有docker运行请求(docker运行请求对应于docker pull请求)发出时，以第一节点通过watcher拦截请求为例，第一节点获取用到的docker镜像标识如镜像名称，解析镜像的属性信息从LowDirs、UpperDirs和roofts中获取当前镜像的层信息，并上报给master node，master node通过manager将镜像层的层信息插入镜像层哈希表。

步骤902、master node检查镜像层哈希表中是否存在镜像层的层信息。

步骤903、master node确定镜像层哈希表中不存在镜像层的层信息，master node确定第一节点的存储空间的可存储区域的大小是否小于阈值，即确定是否超出存储阈值。

步骤904、master node确定超出存储阈值，通知节点集群中所有节点清除镜像层链表尾部的镜像层的层信息对应的镜像层。

示例性的，镜像层链表的尾部的镜像层的层信息对应的镜像层是最近最久未被使用到的镜像层。

步骤905、master node将当前镜像的层信息加入镜像层链表的首部，并且记录到镜像层哈希表中。

步骤906、master node通知所有节点拉取并插入当前镜像的层信息对应的镜像层即新的镜像层。

这里的所有节点指的是不存在新的镜像层的节点，master node管控节点集群中的所有节点，能获知每一节点的信息。

步骤907、master node确定镜像层哈希表中存在镜像层的层信息，将镜像层的层信息插入到镜像层链表的首部。

由上述可知，master node通过统计每个镜像层最近是否被使用过来确定该镜像层是否需要提前缓存或者是否需要被清理。如果发现某个镜像层是第一次被使用到，则该镜像被再次使用的概率非常大，可以提前通知所有节点进行缓存，防止再次使用时花费长时间等待。如果发现节点上存储空间不足，可以清除掉长时间没有被使用的镜像层来释放空间。

本申请其他实施例中，在步骤104、步骤306或步骤505通知第一节点每一镜像层所在的第一目标节点的第一节点标识，以使得第一节点基于第一节点标识从每一第一目标节点中拉取对应的每一镜像层之后，还可以执行如下步骤，实现对镜像层链表中层信息的排序进行更新：

首先、将所有镜像层的层信息存入镜像层链表；其中，镜像层链表中各镜像层的层信息处于不同的位置；

其次、确定预设时段内镜像层链表中，各镜像层的层信息对应的各镜像层被使用的次数；

最后、基于各镜像层被使用的次数，对镜像层链表中的各镜像层的层信息所处的位置进行更新。

需要说明的是，镜像层链表中层信息的排序的更新，在自动缓存或者自动清除的情况下都可以进行。不同之处在于，自动缓存是新加入层信息，自动清除是删除层信息，以上都会导致镜像层链表中至少部分层信息的排序发生变化。

本申请的实施例提供一种信息处理装置，该信息处理装置可以应用于图1、3、5对应的实施例提供的一种信息处理方法中，参照图10所示，该信息处理装置10包括：

接收模块1001，用于若节点集群中的第一节点获取到镜像拉取请求，接收第一节点上报的待拉取镜像标识关联的所有镜像层的层信息；其中，镜像拉取请求携带有待拉取镜像标识；

处理模块1002，用于基于所有镜像层的层信息，确定每一镜像层所在的候选节点；其中，节点集群包括候选节点；

处理模块1002，用于基于节点集群的网络拓扑结构，从每一镜像层所在的候选节点中定位每一镜像层所在的第一目标节点；

发送模块1003，用于通知第一节点每一镜像层所在的第一目标节点的第一节点标识，以使得第一节点基于第一节点标识从每一第一目标节点中拉取对应的每一镜像层。

在本申请其他实施例中，处理模块1002，用于获取每一镜像层的优先级；基于网络拓扑结构，确定第一节点到每一镜像层所在的候选节点的每一第一距离；基于每一镜像层的优先级和每一第一距离，从每一镜像层所在的候选节点中定位每一镜像层所在的第一目标节点；其中，所有镜像层中镜像层的优先级越高，第一节点到定位出的第一目标节点的距离越近。

在本申请其他实施例中，处理模块1002，用于获取每一镜像层所在的候选节点的节点总数和同时向一节点传送镜像层的节点数量阈值；基于每一镜像层的优先级、每一第一距离、节点总数和节点数量阈值，从每一镜像层所在的候选节点中定位每一镜像层所在的第一目标节点；其中，所有镜像层对应的第一目标节点的总数等于节点总数或者节点数量阈值。

在本申请其他实施例中，处理模块1002，用于获取节点集群中每一节点连接的交换机的端口信息；基于每一节点和每一节点连接的交换机的端口信息，生成网络拓扑结构。

在本申请其他实施例中，处理模块1002，用于将每一镜像层的层信息插入镜像层哈希表，得到第一节点是否存在每一镜像层的检测结果；若检测结果表征第一节点不存在每一镜像层，确定每一镜像层所在的候选节点。

在本申请其他实施例中，处理模块1002，用于若检测结果表征第一节点不存在每一镜像层，从节点集群中确定第二节点；其中，第二节点不存在每一镜像层；基于网络拓扑结构，确定第二节点到每一镜像层所在的候选节点的每一第二距离；基于每一镜像层的优先级和每一第二距离，从每一镜像层所在的候选节点中定位每一镜像层所在的第二目标节点；发送模块1003，用于通知第二节点每一镜像层所在的第二目标节点的第二节点标识，以使得第二节点基于第二节点标识从每一第二目标节点中拉取对应的每一镜像层。

在本申请其他实施例中，处理模块1002，用于将所有镜像层的层信息存入镜像层链表；其中，镜像层链表中各镜像层的层信息处于不同的位置；若第一节点的存储空间的可存储区域的大小小于阈值，接收第一节点上报的空间清除请求；响应空间清除请求，基于镜像层链表中存储的各镜像层的层信息的位置，确定第一节点中存储的各镜像层中的待清除的部分镜像层的层信息；发送模块1003，用于通知第一节点部分镜像层的层信息，以使得第一节点清除部分镜像层的层信息对应的部分镜像层。

在本申请其他实施例中，处理模块1002，用于将所有镜像层的层信息存入镜像层链表；其中，镜像层链表中各镜像层的层信息处于不同的位置；确定预设时段内镜像层链表中，各镜像层的层信息对应的各镜像层被使用的次数；基于各镜像层被使用的次数，对镜像层链表中的各镜像层的层信息所处的位置进行更新。

本申请实施例所提供的信息处理装置，若节点集群中的第一节点获取到镜像拉取请求，接收第一节点上报的待拉取镜像标识关联的所有镜像层的层信息；其中，镜像拉取请求携带有待拉取镜像标识；基于所有镜像层的层信息，确定每一镜像层所在的候选节点；其中，节点集群包括候选节点；基于节点集群的网络拓扑结构，从每一镜像层所在的候选节点中定位每一镜像层所在的第一目标节点；通知第一节点每一镜像层所在的第一目标节点的第一节点标识，以使得第一节点基于第一节点标识从每一第一目标节点中拉取对应的每一镜像层；也就是说，根据节点的拉取需求，在节点集群的管理平台的管理下，基于节点集群的网络拓扑结构实现最佳匹配到每一镜像层所在的第一目标节点，进而由第一节点从每一镜像层所在的第一目标节点拉取镜像层，如此，节省了拉取时间。

本申请的实施例提供一种节点集群的管理平台，该节点集群的管理平台可以应用于图1、3、5对应的实施例提供的一种信息处理方法中，参照图11所示，该节点集群的管理平台11包括：处理器1101、存储器1102和通信总线1103，其中：

通信总线1103用于实现处理器1101和存储器1102之间的通信连接。

处理器1101用于执行存储器1102中存储的信息处理程序，以实现以下步骤：

若节点集群中的第一节点获取到镜像拉取请求，接收第一节点上报的待拉取镜像标识关联的所有镜像层的层信息；其中，镜像拉取请求携带有待拉取镜像标识；

基于所有镜像层的层信息，确定每一镜像层所在的候选节点；其中，节点集群包括候选节点；

基于节点集群的网络拓扑结构，从每一镜像层所在的候选节点中定位每一镜像层所在的第一目标节点；

通知第一节点每一镜像层所在的第一目标节点的第一节点标识，以使得第一节点基于第一节点标识从每一第一目标节点中拉取对应的每一镜像层。

在本申请的其他实施例中，处理器1101用于执行存储器1102中存储的信息处理程序，以实现以下步骤：

获取每一镜像层的优先级；

基于网络拓扑结构，确定第一节点到每一镜像层所在的候选节点的每一第一距离；

基于每一镜像层的优先级和每一第一距离，从每一镜像层所在的候选节点中定位每一镜像层所在的第一目标节点；其中，所有镜像层中镜像层的优先级越高，第一节点到定位出的第一目标节点的距离越近。

在本申请的其他实施例中，处理器1101用于执行存储器1102中存储的信息处理程序，以实现以下步骤：

获取每一镜像层所在的候选节点的节点总数和同时向一节点传送镜像层的节点数量阈值；

基于每一镜像层的优先级、每一第一距离、节点总数和节点数量阈值，从每一镜像层所在的候选节点中定位每一镜像层所在的第一目标节点；其中，所有镜像层对应的第一目标节点的总数等于节点总数或者节点数量阈值。

在本申请的其他实施例中，处理器1101用于执行存储器1102中存储的信息处理程序，以实现以下步骤：

获取节点集群中每一节点连接的交换机的端口信息；

基于每一节点和每一节点连接的交换机的端口信息，生成网络拓扑结构。

在本申请的其他实施例中，处理器1101用于执行存储器1102中存储的信息处理程序，以实现以下步骤：

将每一镜像层的层信息插入镜像层哈希表，得到第一节点是否存在每一镜像层的检测结果；

若检测结果表征第一节点不存在每一镜像层，确定每一镜像层所在的候选节点。

在本申请的其他实施例中，处理器1101用于执行存储器1102中存储的信息处理程序，以实现以下步骤：

若检测结果表征第一节点不存在每一镜像层，从节点集群中确定第二节点；其中，第二节点不存在每一镜像层；

基于网络拓扑结构，确定第二节点到每一镜像层所在的候选节点的每一第二距离；

基于每一镜像层的优先级和每一第二距离，从每一镜像层所在的候选节点中定位每一镜像层所在的第二目标节点；

通知第二节点每一镜像层所在的第二目标节点的第二节点标识，以使得第二节点基于第二节点标识从每一第二目标节点中拉取对应的每一镜像层。

在本申请的其他实施例中，处理器1101用于执行存储器1102中存储的信息处理程序，以实现以下步骤：

将所有镜像层的层信息存入镜像层链表；其中，镜像层链表中各镜像层的层信息处于不同的位置；

若第一节点的存储空间的可存储区域的大小小于阈值，接收第一节点上报的空间清除请求；

响应空间清除请求，基于镜像层链表中存储的各镜像层的层信息的位置，确定第一节点中存储的各镜像层中的待清除的部分镜像层的层信息；

通知第一节点部分镜像层的层信息，以使得第一节点清除部分镜像层的层信息对应的部分镜像层。

在本申请的其他实施例中，处理器1101用于执行存储器1102中存储的信息处理程序，以实现以下步骤：

将所有镜像层的层信息存入镜像层链表；其中，镜像层链表中各镜像层的层信息处于不同的位置；

确定预设时段内镜像层链表中，各镜像层的层信息对应的各镜像层被使用的次数；

基于各镜像层被使用的次数，对镜像层链表中的各镜像层的层信息所处的位置进行更新。

作为示例，处理器可以是一种集成电路芯片，具有信号的处理能力，例如通用处理器、数字信号处理器(DSP，Digital Signal Processor)，或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等，其中，通用处理器可以是微处理器或者任何常规的处理器等。

本申请的实施例提供一种计算机可读存储介质，该计算机可读存储介质存储有一个或者多个程序，该一个或者多个程序可被一个或者多个处理器执行，以实现如图1、3、5对应的实施例提供的信息处理方法中的实现过程，此处不再赘述。

本申请实施例所提供的计算机可读存储介质，若节点集群中的第一节点获取到镜像拉取请求，接收第一节点上报的待拉取镜像标识关联的所有镜像层的层信息；其中，镜像拉取请求携带有待拉取镜像标识；基于所有镜像层的层信息，确定每一镜像层所在的候选节点；其中，节点集群包括候选节点；基于节点集群的网络拓扑结构，从每一镜像层所在的候选节点中定位每一镜像层所在的第一目标节点；通知第一节点每一镜像层所在的第一目标节点的第一节点标识，以使得第一节点基于第一节点标识从每一第一目标节点中拉取对应的每一镜像层；也就是说，根据节点的拉取需求，在节点集群的管理平台的管理下，基于节点集群的网络拓扑结构实现最佳匹配到每一镜像层所在的第一目标节点，进而由第一节点从每一镜像层所在的第一目标节点拉取镜像层，如此，节省了拉取时间。

本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用硬件实施例、软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。

本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

以上所述，仅为本申请的较佳实施例而已，并非用于限定本申请的保护范围。

Claims (10)

1.一种信息处理方法，所述方法包括：

若节点集群中的第一节点获取到镜像拉取请求，接收所述第一节点上报的待拉取镜像标识关联的所有镜像层的层信息；其中，所述镜像拉取请求携带有所述待拉取镜像标识；

基于所述所有镜像层的层信息，确定每一镜像层所在的候选节点；其中，所述节点集群包括所述候选节点；

基于所述节点集群的网络拓扑结构，从所述每一镜像层所在的候选节点中定位每一镜像层所在的第一目标节点；

通知所述第一节点所述每一镜像层所在的第一目标节点的第一节点标识，以使得所述第一节点基于所述第一节点标识从每一所述第一目标节点中拉取对应的所述每一镜像层。

2.根据权利要求1所述的方法，所述基于所述节点集群的网络拓扑结构，从所述每一镜像层所在的候选节点中定位每一镜像层所在的第一目标节点，包括：

获取所述每一镜像层的优先级；

基于所述网络拓扑结构，确定所述第一节点到所述每一镜像层所在的候选节点的每一第一距离；

基于所述每一镜像层的优先级和所述每一第一距离，从所述每一镜像层所在的候选节点中定位所述每一镜像层所在的第一目标节点；其中，所述所有镜像层中镜像层的优先级越高，所述第一节点到定位出的第一目标节点的距离越近。

3.根据权利要求2所述的方法，所述基于所述每一镜像层的优先级和所述每一第一距离，从所述每一镜像层所在的候选节点中定位所述每一镜像层所在的第一目标节点，包括：

获取所述每一镜像层所在的候选节点的节点总数和同时向一节点传送镜像层的节点数量阈值；

基于所述每一镜像层的优先级、所述每一第一距离、所述节点总数和所述节点数量阈值，从所述每一镜像层所在的候选节点中定位所述每一镜像层所在的第一目标节点；其中，所述所有镜像层对应的第一目标节点的总数等于所述节点总数或者所述节点数量阈值。

4.根据权利要求1所述的方法，所述方法还包括：

获取所述节点集群中每一节点连接的交换机的端口信息；

基于所述每一节点和所述每一节点连接的交换机的端口信息，生成所述网络拓扑结构。

5.根据权利要求1至4中任一项所述的方法，所述基于所述所有镜像层的层信息，确定每一镜像层所在的候选节点，包括：

将所述每一镜像层的层信息插入镜像层哈希表，得到所述第一节点是否存在所述每一镜像层的检测结果；

若所述检测结果表征所述第一节点不存在所述每一镜像层，确定所述每一镜像层所在的候选节点。

6.根据权利要求5所述的方法，所述方法还包括：

若所述检测结果表征所述第一节点不存在所述每一镜像层，从所述节点集群中确定第二节点；其中，所述第二节点不存在所述每一镜像层；

基于所述网络拓扑结构，确定所述第二节点到所述每一镜像层所在的候选节点的每一第二距离；

基于所述每一镜像层的优先级和所述每一第二距离，从所述每一镜像层所在的候选节点中定位所述每一镜像层所在的第二目标节点；

通知所述第二节点所述每一镜像层所在的第二目标节点的第二节点标识，以使得所述第二节点基于所述第二节点标识从每一所述第二目标节点中拉取对应的所述每一镜像层。

7.根据权利要求1至4中任一项所述的方法，所述基于所述所有镜像层的层信息，确定每一镜像层所在的候选节点，包括：

基于镜像层链表确定每一镜像层的层信息对应的镜像层的使用信息；所述使用信息表征所述每一镜像层的层信息对应的镜像层一段时间内是否被使用；

若所述使用信息表征镜像层的层信息对应的镜像层从未被使用过，确定所述每一镜像层所在的候选节点；

基于所述节点集群的网络拓扑结构，从所述每一镜像层所在的候选节点中定位每一镜像层所在的第二目标节点，通知第二节点所述每一镜像层所在的第二目标节点的第二节点标识，以使得所述第二节点基于所述第二节点标识从每一所述第二目标节点中拉取对应的所述每一镜像层；

若所述使用信息表征镜像层的部分层信息对应的镜像层在所述一段时间内的指定时长内未被使用，通知所述第一节点和所述第二节点所述部分层信息，以使得所述第一节点和所述第二节点清除所述部分层信息对应的部分镜像层。

8.根据权利要求1至4中任一项所述的方法，所述通知所述第一节点所述每一镜像层所在的第一目标节点的第一节点标识，以使得所述第一节点基于所第一述节点标识从每一所述第一目标节点中拉取对应的所述每一镜像层之后，所述方法还包括：

将所述所有镜像层的层信息存入镜像层链表；其中，所述镜像层链表中各镜像层的层信息处于不同的位置；

若所述第一节点的存储空间的可存储区域的大小小于阈值，接收所述第一节点上报的空间清除请求；

响应所述空间清除请求，基于所述镜像层链表中存储的各镜像层的层信息的位置，确定所述第一节点中存储的各镜像层中的待清除的部分镜像层的层信息；

通知所述第一节点所述部分镜像层的层信息，以使得所述第一节点清除所述部分镜像层的层信息对应的部分镜像层。

9.根据权利要求1至4中任一项所述的方法，所述通知所述第一节点所述每一镜像层所在的第一目标节点的第一节点标识，以使得所述第一节点基于所第一述节点标识从每一所述第一目标节点中拉取对应的所述每一镜像层之后，所述方法还包括：

将所述所有镜像层的层信息存入镜像层链表；其中，所述镜像层链表中各镜像层的层信息处于不同的位置；

确定预设时段内所述镜像层链表中，所述各镜像层的层信息对应的各镜像层被使用的次数；

基于所述各镜像层被使用的次数，对所述镜像层链表中的所述各镜像层的层信息所处的位置进行更新。

10.一种信息处理装置，包括：

接收模块，用于若节点集群中的第一节点获取到镜像拉取请求，接收所述第一节点上报的待拉取镜像标识关联的所有镜像层的层信息；其中，所述镜像拉取请求携带有所述待拉取镜像标识；

处理模块，用于基于所述所有镜像层的层信息，确定每一镜像层所在的候选节点；其中，所述节点集群包括所述候选节点；

所述处理模块，用于基于所述节点集群的网络拓扑结构，从所述每一镜像层所在的候选节点中定位每一镜像层所在的第一目标节点；

发送模块，用于通知所述第一节点所述每一镜像层所在的第一目标节点的第一节点标识，以使得所述第一节点基于所述第一节点标识从每一所述第一目标节点中拉取对应的所述每一镜像层。

Images