CN112068953A - 一种云资源精细化管理溯源系统及方法 - Google Patents

一种云资源精细化管理溯源系统及方法 Download PDF

Info

Publication number
CN112068953A
CN112068953A CN202010775958.3A CN202010775958A CN112068953A CN 112068953 A CN112068953 A CN 112068953A CN 202010775958 A CN202010775958 A CN 202010775958A CN 112068953 A CN112068953 A CN 112068953A
Authority
CN
China
Prior art keywords
information
cloud
hardware equipment
hardware
resource
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010775958.3A
Other languages
English (en)
Other versions
CN112068953B (zh
Inventor
窦锐元
荆楠
杨华南
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fiberhome Telecommunication Technologies Co Ltd
Original Assignee
Fiberhome Telecommunication Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fiberhome Telecommunication Technologies Co Ltd filed Critical Fiberhome Telecommunication Technologies Co Ltd
Priority to CN202010775958.3A priority Critical patent/CN112068953B/zh
Publication of CN112068953A publication Critical patent/CN112068953A/zh
Application granted granted Critical
Publication of CN112068953B publication Critical patent/CN112068953B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5061—Partitioning or combining of resources
    • G06F9/5077—Logical partitioning of resources; Management or configuration of virtualized resources
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21—Design, administration or maintenance of databases
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23—Updating
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25—Integrating or interfacing systems involving database management systems
    • G06F16/252—Integrating or interfacing systems involving database management systems between a Database Management System and a front-end application
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5061—Partitioning or combining of resources
    • G06F9/5072—Grid computing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/133—Protocols for remote procedure calls [RPC]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Mathematical Physics (AREA)
  • Computer And Data Communications (AREA)

Abstract

本发明公开了一种云资源精细化管理溯源系统，包括云平台、云资源、硬件设备和底层信息管理组件，其中，所述底层信息管理组件用于收集硬件设备信息；所述底层信息管理组件用于解析收集的硬件设备信息并存储硬件设备信息之间的关联关系；所述底层信息管理组件用于对外提供管理硬件设备信息的接口，管理待收集硬件设备的接口，以及查询虚拟资源相关硬件设备信息的接口；所述云平台用于在展示云资源时，调用底层信息管理组件接口查询并展示关联的硬件设备信息。本发明还提供了相应的云资源精细化管理溯源方法。本发明在传统的云计算平台架构基础之上，打通了上层云资源和下层硬件设备之间的联系，实现了云资源的快速溯源。

Description

一种云资源精细化管理溯源系统及方法
技术领域
本发明属于云计算计算领域，更具体地，涉及一种云资源精细化管理溯源系统与方法。
背景技术
云计算从提出概念到今天的10多年间，取得了飞速的发展，也带来了翻天覆地的变化，社会的工作方式和商业模式都在发生着巨大的改变。云计算的可贵之处在于高灵活性、可扩展性和高性价比等，这些都得益于它的实现架构和设计理念。
如图1所示，云计算基于新兴的计算、存储、网络虚拟化技术，在它们之上构筑了一套灵活完善的自动化调度管理体系，涵盖了用户界面、服务目录、管理系统、部署工具、云资源监控等，从管理的资源层级和对外提供的服务区分，云计算从下到上，又分化出了基础设施即服务(Infrastructure as a Service，IaaS)、平台即服务(Platform as a Service，PaaS)和软件即服务(Software as a Service，SaaS)三种类型，这样通过虚拟化层、IaaS、PaaS、SaaS的分层治理，实现了功能的解耦，各层都能专注于自身逻辑的进化，而不用过多关注底层技术差异，从而达到最大化的场景兼容，推动了云技术的快速扩张。
但是底层的技术复杂性和硬件差异性实际并没有消失，只是暂时性地被上层的光芒所掩盖，随着云计算的大规模应用和覆盖场景的复杂性进一步提升，越来越多的云产品进入了一个相对稳定的服务提供期，这时前期快速发展带来的问题也慢慢开始显现。
在实际的应用场景中，一个云平台往往需要对接许多不同厂商不同规格配置的服务器设备、存储设备、网络设备等，而这些多种多样的设备之间都存在着或大或小的功能、性能差异，但是由于被虚拟化层屏蔽，现有的云平台技术对底层的硬件状态无感知。这就导致应用层出现的功能或者性能问题，往往要经过多个组件层层向下排查，才能发现底层的某个设备问题，在实际生产局点中，还必须面临跨部门、跨产品、跨供应商的协调沟通问题，处理周期不可控。而一旦面临暂时性停机维护或者替换某些硬件的场景，也无法快速明确影响的业务范围和程度，没办法应对大规模应用场景下的精细运维管理和抽象资源快速溯源需求。
鉴于以上情况，目前的云计算迫切需要一种能够拉通上下层级，提供云资源快速精确定位溯源能力的技术。
发明内容
本发明的目的是为了克服上述背景技术的不足，提供一种通用的云资源精细化管理溯源方案，可以对云资源整个生命周期内涉及的底层抽象或实体信息进行快速精确定位，提升上层应用对底层资源的感知和管理精度，使得云平台管理人员通过简单的操作就可以快速追溯定位底层的硬件问题，极大地提升云计算的客户服务质量，适用于各种云平台及计算、存储、网络虚拟化应用程序。
为实现上述目的，按照本发明的一个方面，提供了一种云资源精细化管理溯源系统，包括云平台、云资源、硬件设备和底层信息管理组件，其中：
所述底层信息管理组件用于收集硬件设备信息；
所述底层信息管理组件用于解析收集的硬件设备信息并存储硬件设备信息之间的关联关系；
所述底层信息管理组件用于对外提供管理硬件设备信息的接口，管理待收集硬件设备的接口，以及查询虚拟资源相关硬件设备信息的接口；
所述云平台用于在展示云资源时，调用底层信息管理组件接口查询并展示关联的硬件设备信息。
本发明的一个实施例中，所述云平台为提供云服务的云计算平台，是直接管理虚拟化层的基础设施即服务云平台，或者是更上层的平台即服务云平台或软件即服务云平台，所述云平台用于管理云资源，并通过调用底层信息管理组件接口展示云资源关联的硬件设备详情。
本发明的一个实施例中，所述云资源是指所述云平台对外提供的服务实体，包括虚拟计算资源、虚拟存储资源、虚拟网络资源、各类开发中间件或各种软件服务，所述云资源直接被用户使用。
本发明的一个实施例中，所述硬件设备是指上述云平台运行所需的硬件载体，包括各类服务器设备、各类存储设备或各类网络设备，所述硬件设备为云平台提供底层运算能力和运行环境支持，或直接向底层信息管理组件上报自身资源，或提供接口/远程命令供底层信息管理组件调用。
本发明的一个实施例中，所述底层信息管理组件用于给云平台提供关联底层信息的能力，包括API模块、权限管理模块、特征分析模块、关联分析模块以及信息收集模块，其中：
所述API模块，用于提供对外API接口，包括对收集到的硬件设备信息的增删改查接口，对待收集的硬件设备的增删改查接口，以及查询虚拟资源相关硬件设备信息的接口；
所述权限管理模块，用于提供身份认证及鉴权功能；
所述特征分析模块，用于从云平台提供的云资源地址，按特征分析算法找出相关的硬件设备信息后返回给用户；
所述关联分析模块，用于分析收集到的硬件设备信息建立关联关系并保存；
所述信息收集模块，用于收集并维护从注册的硬件设备列表收集上来的硬件设备信息。
按照本发明的另一方面，还提供了一种基于上述系统的云资源精细化管理溯源方法，包括：
硬件设备注册流程：根据配置文件，通过API模块将硬件配置信息存入数据库；
硬件设备信息收集流程：根据硬件配置信息，通过信息收集模块实现硬件设备信息的收集；
硬件设备信息关联流程：根据收集的硬件设备信息，通过关联分析模块实现硬件设备的关联；
资源查询流程：通过API模块实现硬件设备信息的关联查询；
虚拟化资源关联流程：所述特征分析模块根据虚拟资源地址特征值实现虚拟化资源的关联。
本发明的一个实施例中，所述硬件设备注册流程包括：
S101、接收配置文件，所述配置文件中包含底层硬件配置信息，以及对应的设备类型；
S102、通过所述底层信息管理组件的API模块，导入硬件配置信息的配置文件；
S103、所述底层信息管理组件的API模块访问权限管理模块，鉴权通过后，解析配置文件的内容，将硬件配置信息存入数据库。
本发明的一个实施例中，所述硬件设备信息收集流程包括：
S201、所述信息收集模块启动时，根据配置文件里的收集周期时间设置，初始化周期收集任务；
S202、收集周期时间到达时，所述信息收集模块访问API模块获取已注册的硬件设备列表，遍历进行下一步处理；
S203、所述信息收集模块根据硬件设备的设备类型、厂家、产品型号，调用对应的计算、存储、网络信息收集驱动插件；
S204、驱动插件根据硬件设备的设备管理地址建立远程连接，按各驱动的不同逻辑，直接调用接口或执行远程命令收集硬件设备信息；
S205、所述信息收集模块检查数据库中记录，如果数据库已有该节点记录，且和本次收集信息一致，则继续处理下一个硬件；
S206、所述信息收集模块检查数据库中记录，如果无记录或信息不一致，则信息收集模块将新信息写入或更新到数据库；
S207、所述信息收集模块发送消息通知关联分析模块刷新关联信息。
本发明的一个实施例中，所述硬件设备信息关联流程包括：
S301、所述关联分析模块启动时监听消息队列；
S302、所述关联分析模块收到信息收集模块发来的消息后，启动新进程进行分析处理；
S303、所述关联分析模块遍历获取待分析的硬件设备信息列表；
S304、所述关联分析模块解析硬件设备信息包含的所有子资源，分析硬件设备信息的层级关系，按最小可用子资源为单位建立资源模型；
S305、所述关联分析模块将分析后的所有资源模型及父子资源模型的关联关系存储于数据库。
本发明的一个实施例中，所述资源查询流程包括：
S401、用户访问所述API模块的硬件设备信息查询接口，将虚拟资源地址以参数形式传入；
S402、所述API模块从数据库的虚拟资源关联表，按虚拟资源地址检索匹配的硬件设备信息关联记录；
S403、如果所述API模块查询无记录或记录已过期，则发送同步消息到消息队列，调用特征分析模块执行虚拟化资源关联流程后，再次检索关联记录；
S404、返回关联的全部硬件设备信息。
本发明的一个实施例中，所述虚拟化资源关联流程包括：
S501、所述特征分析模块启动时监听消息队列；
S502、所述特征分析模块接收到API模块发来的消息后，提取虚拟资源地址特征值；
S503、所述特征分析模块按协议和硬件设备类型对应关系，在数据库的硬件设备信息记录中，查询匹配度最高的硬件设备记录；
S504、所述特征分析模块获取该记录所有的父子资源模型；
S505、所述特征分析模块将所有资源模型，按父子关联关系，重组成树形文件后，填入资源模型详细信息，并和虚拟化资源关联，存入数据库虚拟资源关联表。
总体而言，通过本发明所构思的以上技术方案与现有技术相比，具有如下有益效果：
(1)在传统的云计算平台架构基础之上，打通了上层云资源和下层硬件设备之间的联系，实现了云资源的快速溯源；
(2)底层信息管理组件(UIM)独立运作，通过API(Application ProgrammingInterface，应用程序接口)和RPC(Remote Procedure Call，远程过程调用)与其他组件松耦合，不影响已有云平台运行；
(3)底层信息管理组件(UIM)针API对不同类型设备，分别实现基于不同特征分析算法的统计驱动，实现各类型物理信息之间的关联分析，架构灵活可扩展；
(4)底层信息管理组件(UIM)自动维护检测硬件变动，更新关联信息；
(5)底层信息管理组件(UIM)各个模块均为单独服务，独立运行，相互之间通过RPC消息通信，可根据平台规模及负载横向扩展，提供处理大规模场景的能力。
附图说明
图1是本发明实施例中一种云计算服务平台的结构示意图；
图2是本发明实施例中云资源精细化管理溯源系统的结构示意图；
图3是本发明实施例中云资源精细化管理溯源系统的底层信息管理组件的结构示意图；
图4是本发明实施例中云资源精细化管理溯源的原理示意图；
图5是本发明实施例中云资源精细化管理溯源系统的硬件设备注册流程示意图；
图6是本发明实施例中云资源精细化管理溯源系统的硬件设备信息收集流程示意图；
图7是本发明实施例中云资源精细化管理溯源系统的硬件设备信息关联流程示意图；
图8是本发明实施例中云资源精细化管理溯源系统的资源模型示意图；
图9是本发明实施例中云资源精细化管理溯源系统的资源查询流程示意图；
图10是本发明实施例中云资源精细化管理溯源系统的虚拟化资源关联流程示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。此外，下面所描述的本发明各个实施方式中所涉及到的技术特征只要彼此之间未构成冲突就可以相互组合。
实施例1
本发明提供一种云资源精细化管理溯源系统，如图2所示，包括云平台、云资源、硬件设备、底层信息管理组件(Underlying Info Manager，UIM)，底层信息管理组件(UIM)主动或被动定时收集硬件设备信息；底层信息管理组件(UIM)通过特征分析算法解析收集上来的信息并存储信息关联关系；所述底层信息管理组件用于对外提供管理硬件设备信息的接口，管理待收集硬件设备的接口，以及查询虚拟资源相关硬件设备信息的接口；云平台在建立或更新云资源时，调用底层信息管理组件(UIM)接口查询并关联硬件设备信息；云平台在展示云资源时，显示关联的硬件设备信息链接入口供用户查询。
所述云平台指提供云服务的云计算平台，可以是直接管理虚拟化层的基础设施即服务(IaaS)云平台，也可以是更上层的平台即服务(PaaS)云平台或软件即服务(SaaS)云平台，可以是私有云也可以是公有云。云平台主要负责管理云资源，并调用底层信息管理组件(UIM)接口更新云资源详情。
所述云资源指上述云平台对外提供的服务实体，包括但不限于虚拟计算资源、虚拟存储资源、虚拟网络资源、各类开发中间件、各种软件服务。云资源直接被用户使用。
所述硬件设备指上述云平台运行所需的硬件载体，包括但不限于各类服务器设备、各类存储设备、各类网络设备。硬件设备为云平台提供底层运算能力和运行环境支持，按类型不同，或直接向底层信息管理组件(UIM)上报自身资源，或提供接口、远程命令供底层信息管理组件(UIM)调用，硬件设备需要先注册到底层信息管理组件以后才能被本系统识别。
所述底层信息管理组件(UIM)给云平台提供了关联底层信息的能力，主要包括以下几部分功能：1.负责接收、收集、存储、更新底层硬件设备信息；2.负责分析、建立、保存硬件设备信息间的关联关系；3.提供硬件设备信息管理查询接口。
具体地，如图3所示，上述底层信息管理组件(UIM)包括以下几个模块：1.API模块：提供对外REST API接口，包括对收集到的硬件设备信息的增删改查接口，对待收集的硬件设备的增删改查接口，以及查询虚拟资源相关硬件设备信息的接口；2.权限管理模块：提供身份认证及鉴权功能；3.特征分析模块：从云平台提供的云资源地址，按特征分析算法找出相关的硬件设备信息后返回给用户；4.关联分析模块：用于分析收集到的硬件设备信息建立关联关系并保存；5.信息收集模块：用于收集并维护从注册的硬件设备列表收集上来的硬件设备信息。
另外，本发明还涉及到数据库及消息队列，其中数据库用于存储信息记录的中间件，消息队列用于组件之间同步/异步调用的消息中间件。
实施例2
本发明实施例提供一种云资源精细化溯源系统，其中硬件设备包括各厂商服务器、存储设备(分布式存储、SAN存储、对象存储等)、网络设备(交换机、路由器等)，软件层面包括云平台、底层信息管理组件(UIM)、数据库中间件、消息中间件。软件层面的各个组件完全独立，相互之间通过IP协议通信，可以在相同或不同的服务器上灵活部署。
在实际环境应用中，本发明云资源精细化溯源系统的构建和运行包括以下五个主要流程：
硬件设备注册流程：根据配置文件，通过API模块将硬件配置信息存入数据库；
硬件设备信息收集流程：根据硬件配置信息，通过信息收集模块实现硬件设备信息的收集；
硬件设备信息关联流程：根据收集的硬件设备信息，通过关联分析模块实现硬件设备的关联；
资源查询流程：通过API模块实现硬件设备信息的关联查询；
虚拟化资源关联流程：所述特征分析模块根据虚拟资源地址特征值实现虚拟化资源的关联。
如图4所示，本发明方案在传统的云计算平台架构基础之上，打通了上层云资源和下层硬件设备之间的联系，实现了云资源的快速溯源。
实施例3
如图5所示，为本发明实施例中云资源精细化管理溯源系统的硬件设备注册流程步骤如下：
S101、接收配置文件，所述配置文件中包含底层硬件配置信息，以及对应的设备类型；
具体地，在系统部署完成后，管理员收集底层硬件配置信息，加入对应的设备类型后整理成Excel文件。整理后的硬件设备Excel文件至少包括以下六个关键字段：设备类型、厂家、产品型号、设备管理地址、设备用户名、设备密码；其中设备类型的值包括：服务器、存储、路由器、交换机；厂家为硬件设备厂商名；产品型号为具体的硬件型号；
S102、通过所述底层信息管理组件的API模块，导入硬件配置信息的配置文件(Excel文件)；
S103、所述底层信息管理组件的API模块访问权限管理模块，鉴权通过后，解析配置文件(Excel文件)的内容，将硬件配置信息存入数据库。
实施例4
如图6所示，为本发明实施例中云资源精细化管理溯源系统的硬件设备信息收集流程步骤如下：
S201、所述信息收集模块启动时，根据配置文件里的收集周期时间设置，初始化周期收集任务；
S202、收集周期时间到达时，所述信息收集模块访问API模块获取已注册的硬件设备列表，遍历进行下一步处理；
S203、所述信息收集模块根据硬件设备的设备类型、厂家、产品型号，调用对应的计算、存储、网络信息收集驱动插件；
S204、驱动插件根据硬件设备的设备管理地址建立远程连接，按各驱动的不同逻辑，直接调用接口或执行远程命令收集硬件设备信息，收集到的信息以JSON格式封装。信息按设备类型具体分为以下三种：
服务器信息：服务器软件及硬件信息，包括操作系统版本，CPU、内存、硬盘、网卡规格厂商，RAID信息，文件系统组织关系，MOUNT信息；
网络信息：虚拟化及物理网络信息，包括交换机配置信息，交换机和服务器拓补关系，VLAN、VXLAN网络配置、SDN设备信息；
存储信息：存储系统信息，包括存储设备硬件信息，存储管理软件信息，存储池信息，RAID信息，硬盘信息；
S205、所述信息收集模块检查数据库中记录，如果数据库已有该节点记录，且和本次收集信息一致，则继续处理下一个硬件；
S206、所述信息收集模块检查数据库中记录，如果无记录或信息不一致，则信息收集模块将新信息写入或更新到数据库；
S207、所述信息收集模块发送消息(发送RPC异步消息到消息队列)通知关联分析模块刷新关联信息。
实施例5
如图7所示，为本发明实施例中云资源精细化管理溯源系统的硬件信息关联流程步骤如下：
S301、所述关联分析模块启动时监听消息队列；
S302、所述关联分析模块收到信息收集模块发来的消息后，启动新进程进行分析处理；
S303、所述关联分析模块遍历获取待分析的硬件设备信息列表；
S304、所述关联分析模块解析硬件设备信息包含的所有子资源，分析JSON层级关系，按最小可用子资源为单位建立资源模型。资源模型的类图如图8所示，资源模型分为：存储、计算、网络三大类，每一大类下又分为若干小类，各类型资源模型在实例化后均可以相互建立关联关系；
如：某一服务器设备信息为{server:{distribution:centos,devices：{sda:{vendor:LSI,size:100G}},memory:{free:184623,total:257395,used:72772},processor:[GenuineIntel,Intel(R)Xeon(R)CPU E5-2618L v3@2.30GHz]}}，关联分析模块解析JSON信息后，先建立服务器资源模型，再将内部组成信息进一步拆分为硬盘、内存、cpu等子资源模型。
S305、所述关联分析模块将分析后的所有资源模型及父子资源模型的关联关系存储于数据库。
实施例6
如图9所示，为本发明实施例中云资源精细化管理溯源系统的资源查询流程步骤如下：
S401、用户访问所述API模块的硬件设备信息查询接口，将虚拟资源地址以参数形式传入；虚拟资源地址格式为：(协议://虚拟化ID/设备路径)
如：某一型云硬盘的虚拟资源地址：rbd://16f50098-c979-42b5-a19b-aa3487ca4025/vms/9561658f-eb6e-4de6-99c7-66454558d9f2，协议为rbd，虚拟化ID为16f50098-c979-42b5-a19b-aa3487ca4025，设备路径为vms/9561658f-eb6e-4de6-99c7-66454558d9f2。
S402、所述API模块从数据库的虚拟资源关联表，按虚拟资源地址检索匹配的的硬件设备信息关联记录；
S403、如果所述API模块查询无记录或记录已过期，则发送同步消息到消息队列，调用特征分析模块执行虚拟化资源关联流程后，再次检索关联记录；
S404、以JSON格式返回关联的全部硬件设备信息。
实施例7
如图10所示，为本发明实施例中云资源精细化管理溯源系统的虚拟化资源关联流程步骤如下：
S501、所述特征分析模块启动时监听消息队列；
S502、所述特征分析模块接收到API模块发来的消息后，提取虚拟资源地址特征值，包括协议、虚拟化ID、设备路径等；
S503、所述特征分析模块按协议和硬件设备类型对应关系，在数据库的硬件设备信息记录中，查询匹配度最高的硬件设备记录；
协议和硬件设备类型对应关系包括：
·存储类设备对应协议名：fc、iscsi、rbd、object等
·服务器设备对应协议名：kvm、zen、vmware、ovirt等
·网络类设备对应协议名：switch、router、firewall、gateway、ovs、bridge、eth等
S504、所述特征分析模块获取该记录所有的父子资源模型；
S505、所述特征分析模块将所有资源模型，按父子关联关系，重组成树形JSON后，填入资源模型详细信息，并和虚拟化资源关联，存入数据库虚拟资源关联表。
本领域的技术人员容易理解，以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

Claims (11)

1.一种云资源精细化管理溯源系统，其特征在于，包括云平台、云资源、硬件设备和底层信息管理组件，其中：
所述底层信息管理组件用于收集硬件设备信息；
所述底层信息管理组件用于解析收集的硬件设备信息并存储硬件设备信息之间的关联关系；
所述底层信息管理组件用于对外提供管理硬件设备信息的接口，管理待收集硬件设备的接口，以及查询虚拟资源相关硬件设备信息的接口；
所述云平台用于在展示云资源时，调用底层信息管理组件接口查询并展示关联的硬件设备信息。
2.如权利要求1所述的云资源精细化管理溯源系统，其特征在于，所述云平台为提供云服务的云计算平台，是直接管理虚拟化层的基础设施即服务云平台，或者是更上层的平台即服务云平台或软件即服务云平台，所述云平台用于管理云资源，并通过调用底层信息管理组件接口展示云资源关联的硬件设备详情。
3.如权利要求1或2所述的云资源精细化管理溯源系统，其特征在于，所述云资源是指所述云平台对外提供的服务实体，包括虚拟计算资源、虚拟存储资源、虚拟网络资源、各类开发中间件或各种软件服务，所述云资源直接被用户使用。
4.如权利要求1或2所述的云资源精细化管理溯源系统，其特征在于，所述硬件设备是指上述云平台运行所需的硬件载体，包括各类服务器设备、各类存储设备或各类网络设备，所述硬件设备为云平台提供底层运算能力和运行环境支持，或直接向底层信息管理组件上报自身资源，或提供接口/远程命令供底层信息管理组件调用。
5.如权利要求1或2所述的云资源精细化管理溯源系统，其特征在于，所述底层信息管理组件用于给云平台提供关联底层信息的能力，包括API模块、权限管理模块、特征分析模块、关联分析模块以及信息收集模块，其中：
所述API模块，用于提供对外API接口，包括对收集到的硬件设备信息的增删改查接口，对待收集的硬件设备的增删改查接口，以及查询虚拟资源相关硬件设备信息的接口；
所述权限管理模块，用于提供身份认证及鉴权功能；
所述特征分析模块，用于从云平台提供的云资源地址，按特征分析算法找出相关的硬件设备信息后返回给用户；
所述关联分析模块，用于分析收集到的硬件设备信息建立关联关系并保存；
所述信息收集模块，用于收集并维护从注册的硬件设备列表收集上来的硬件设备信息。
6.基于权利要求5所述系统的云资源精细化管理溯源方法，其特征在于，包括：
硬件设备注册流程：根据配置文件，通过API模块将硬件配置信息存入数据库；
硬件设备信息收集流程：根据硬件配置信息，通过信息收集模块实现硬件设备信息的收集；
硬件设备信息关联流程：根据收集的硬件设备信息，通过关联分析模块实现硬件设备的关联；
资源查询流程：通过API模块实现硬件设备信息的关联查询；
虚拟化资源关联流程：所述特征分析模块根据虚拟资源地址特征值实现虚拟化资源的关联。
7.如权利要求6所述的云资源精细化管理溯源方法，其特征在于，所述硬件设备注册流程包括：
S101、接收配置文件，所述配置文件中包含底层硬件配置信息，以及对应的设备类型；
S102、通过所述底层信息管理组件的API模块，导入硬件配置信息的配置文件；
S103、所述底层信息管理组件的API模块访问权限管理模块，鉴权通过后，解析配置文件的内容，将硬件配置信息存入数据库。
8.如权利要求6所述的云资源精细化管理溯源方法，其特征在于，所述硬件设备信息收集流程包括：
S201、所述信息收集模块启动时，根据配置文件里的收集周期时间设置，初始化周期收集任务；
S202、收集周期时间到达时，所述信息收集模块访问API模块获取已注册的硬件设备列表，遍历进行下一步处理；
S203、所述信息收集模块根据硬件设备的设备类型、厂家、产品型号，调用对应的计算、存储、网络信息收集驱动插件；
S204、驱动插件根据硬件设备的设备管理地址建立远程连接，按各驱动的不同逻辑，直接调用接口或执行远程命令收集硬件设备信息；
S205、所述信息收集模块检查数据库中记录，如果数据库已有该节点记录，且和本次收集信息一致，则继续处理下一个硬件；
S206、所述信息收集模块检查数据库中记录，如果无记录或信息不一致，则信息收集模块将新信息写入或更新到数据库；
S207、所述信息收集模块发送消息通知关联分析模块刷新关联信息。
9.如权利要求6所述的云资源精细化管理溯源方法，其特征在于，所述硬件设备信息关联流程包括：
S301、所述关联分析模块启动时监听消息队列；
S302、所述关联分析模块收到信息收集模块发来的消息后，启动新进程进行分析处理；
S303、所述关联分析模块遍历获取待分析的硬件设备信息列表；
S304、所述关联分析模块解析硬件设备信息包含的所有子资源，分析硬件设备信息的层级关系，按最小可用子资源为单位建立资源模型；
S305、所述关联分析模块将分析后的所有资源模型及父子资源模型的关联关系存储于数据库。
10.如权利要求6所述的云资源精细化管理溯源方法，其特征在于，所述资源查询流程包括：
S401、用户访问所述API模块的硬件设备信息查询接口，将虚拟资源地址以参数形式传入；
S402、所述API模块从数据库的虚拟资源关联表，按虚拟资源地址检索匹配的硬件设备信息关联记录；
S403、如果所述API模块查询无记录或记录已过期，则发送同步消息到消息队列，调用特征分析模块执行虚拟化资源关联流程后，再次检索关联记录；
S404、返回关联的全部硬件设备信息。
11.如权利要求6所述的云资源精细化管理溯源方法，其特征在于，所述虚拟化资源关联流程包括：
S501、所述特征分析模块启动时监听消息队列；
S502、所述特征分析模块接收到API模块发来的消息后，提取虚拟资源地址特征值；
S503、所述特征分析模块按协议和硬件设备类型对应关系，在数据库的硬件设备信息记录中，查询匹配度最高的硬件设备记录；
S504、所述特征分析模块获取该记录所有的父子资源模型；
S505、所述特征分析模块将所有资源模型，按父子关联关系，重组成树形文件后，填入资源模型详细信息，并和虚拟化资源关联，存入数据库虚拟资源关联表。
CN202010775958.3A 2020-08-05 2020-08-05 一种云资源精细化管理溯源系统及方法 Active CN112068953B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010775958.3A CN112068953B (zh) 2020-08-05 2020-08-05 一种云资源精细化管理溯源系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010775958.3A CN112068953B (zh) 2020-08-05 2020-08-05 一种云资源精细化管理溯源系统及方法

Publications (2)

Publication Number Publication Date
CN112068953A true CN112068953A (zh) 2020-12-11
CN112068953B CN112068953B (zh) 2022-06-03

Family

ID=73656989

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010775958.3A Active CN112068953B (zh) 2020-08-05 2020-08-05 一种云资源精细化管理溯源系统及方法

Country Status (1)

Country Link
CN (1) CN112068953B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115712778A (zh) * 2022-11-29 2023-02-24 四川虹魔方网络科技有限公司 一种精细化分组运营优化方法及系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120078948A1 (en) * 2010-09-29 2012-03-29 Jeffrey Darcy Systems and methods for searching a cloud-based distributed storage resources using a set of expandable probes
CN107613020A (zh) * 2017-10-16 2018-01-19 北京东土科技股份有限公司 一种设备管理方法及装置
US20180159735A1 (en) * 2016-12-02 2018-06-07 Hewlett Packard Enterprise Development Lp Managing hardware resources
CN109144821A (zh) * 2018-09-05 2019-01-04 山东浪潮云投信息科技有限公司 一种云计算数据中心内物理服务器自动管理方法
CN109327553A (zh) * 2018-12-06 2019-02-12 郑州云海信息技术有限公司 一种面向IaaS云平台的运营管理系统及方法
CN110472124A (zh) * 2019-08-16 2019-11-19 中国联合网络通信集团有限公司 客户服务系统的数据管理方法、装置及存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120078948A1 (en) * 2010-09-29 2012-03-29 Jeffrey Darcy Systems and methods for searching a cloud-based distributed storage resources using a set of expandable probes
US20180159735A1 (en) * 2016-12-02 2018-06-07 Hewlett Packard Enterprise Development Lp Managing hardware resources
CN107613020A (zh) * 2017-10-16 2018-01-19 北京东土科技股份有限公司 一种设备管理方法及装置
CN109144821A (zh) * 2018-09-05 2019-01-04 山东浪潮云投信息科技有限公司 一种云计算数据中心内物理服务器自动管理方法
CN109327553A (zh) * 2018-12-06 2019-02-12 郑州云海信息技术有限公司 一种面向IaaS云平台的运营管理系统及方法
CN110472124A (zh) * 2019-08-16 2019-11-19 中国联合网络通信集团有限公司 客户服务系统的数据管理方法、装置及存储介质

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115712778A (zh) * 2022-11-29 2023-02-24 四川虹魔方网络科技有限公司 一种精细化分组运营优化方法及系统
CN115712778B (zh) * 2022-11-29 2023-09-01 四川虹魔方网络科技有限公司 一种精细化分组运营优化方法及系统

Also Published As

Publication number Publication date
CN112068953B (zh) 2022-06-03

Similar Documents

Publication Publication Date Title
WO2021017301A1 (zh) 基于Kubernetes集群的管理方法、装置及计算机可读存储介质
CN110535831B (zh) 基于Kubernetes和网络域的集群安全管理方法、装置及存储介质
US9930007B2 (en) IP address and domain name automation of virtual infrastructure
US10963282B2 (en) Computing service with configurable virtualization control levels and accelerated launches
WO2020253347A1 (zh) 一种容器集群管理方法、装置及系统
CN107181808B (zh) 一种私有云系统及运行方法
CN106489251B (zh) 应用拓扑关系发现的方法、装置和系统
US9973439B2 (en) Internet protocol address management (IPAM) integration with a plurality of virtualization tiers in the virtual cloud using infrastructure metadata
US11789802B2 (en) System and method of mapping and diagnostics of data center resources
CN109314724A (zh) 云计算系统中虚拟机访问物理服务器的方法、装置和系统
JP2017107555A (ja) ソフトウェア・コンテナ中のソフトウェアの識別を決定するための方法、システム、およびプログラム
CN103051710A (zh) 一种虚拟云平台管理系统及方法
CN103685608A (zh) 一种自动配置安全虚拟机ip地址的方法及装置
WO2019001312A1 (zh) 实现告警关联的方法、装置以及计算机可读存储介质
CN108509254A (zh) Docker Container的监控方法及系统
WO2019057055A1 (zh) 一种任务处理方法、装置、电子设备及存储介质
CN110516076B (zh) 一种基于知识图谱的云计算管理方法及系统
CN112417051A (zh) 容器编排引擎资源管理方法及装置、可读介质及电子设备
CN112256439B (zh) 一种基于云计算资源池的服务目录动态更新系统及方法
JP2015156168A (ja) データセンタのリソース配分システム及びデータセンタのリソース配分方法
US20230342183A1 (en) Management method and apparatus for container cluster
JP2014219936A (ja) 移行支援装置、移行支援方法およびプログラム
CN112068953B (zh) 一种云资源精细化管理溯源系统及方法
US11336502B2 (en) Deriving network device and host connection
CN114816665B (zh) 混合编排系统及超融合架构下虚拟机容器资源混合编排方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant