CN111641676B - 一种第三方云监控服务的构建方法及装置 - Google Patents

一种第三方云监控服务的构建方法及装置 Download PDF

Info

Publication number
CN111641676B
CN111641676B CN202010354172.4A CN202010354172A CN111641676B CN 111641676 B CN111641676 B CN 111641676B CN 202010354172 A CN202010354172 A CN 202010354172A CN 111641676 B CN111641676 B CN 111641676B
Authority
CN
China
Prior art keywords
cloud
data
monitoring
cloud monitoring
interface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010354172.4A
Other languages
English (en)
Other versions
CN111641676A (zh
Inventor
郑桂创
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Sendi Computer System Co ltd
Original Assignee
Guangzhou Sendi Computer System Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Sendi Computer System Co ltd filed Critical Guangzhou Sendi Computer System Co ltd
Priority to CN202010354172.4A priority Critical patent/CN111641676B/zh
Publication of CN111641676A publication Critical patent/CN111641676A/zh
Application granted granted Critical
Publication of CN111641676B publication Critical patent/CN111641676B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/60—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06—Management of faults, events, alarms or notifications
    • H04L41/069—Management of faults, events, alarms or notifications using logs of notifications; Post-processing of notifications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/50—Network service management, e.g. ensuring proper service fulfilment according to agreements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/51—Discovery or management thereof, e.g. service location protocol [SLP] or web services
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer And Data Communications (AREA)

Abstract

本发明公开了一种第三方云监控服务的构建方法及装置，所述方法包括：通过云监控处理层调用私有云平台的RESTFul接口进行适配，获取私有云平台对应的云资源数据，并通过调度管理从而采集和监控私有云平台对应的云性能数据；通过云监控存储层存储私有云平台对应的配置数据，存储所述云监控处理层采集的私有云平台的云资源数据和云性能数据，并存储云监控处理层进行云资源采集和云性能采集时对应的日志数据；通过云监控应用层查询云监控存储层存储的云监控数据，对所述云监控数据进行管理和应用。本发明通过采用统一的RESTFul接口方式，提高对不同厂商私有云管理平台采集监控的通用性和效率，降低对私有云管理平台接口进行二次开发的难度和成本。

Description

一种第三方云监控服务的构建方法及装置
技术领域
本发明涉及计算机信息技术领域，尤其是涉及一种第三方云监控服务的构建方法及装置。
背景技术
在云计算技术领域中，随着云平台发展越来越快，各大厂商陆续推出自己的云产品，并且自带云平台管理工具；而通过云管平台对外提供接口服务，通常是以SDK或者API的方式，因此各类云监控系统一般基于私有云的SDK或者原生的API接口，进行二次开发来采集监控私有云的资源数据和性能数据。
但是，在对现有技术的研究与实践过程中，本发明的发明人发现，由于各大厂商私有云管理平台接口各不相同，导致云监控系统需要根据不同私有云管理平台的情况进行适配，并且开发语言受限于厂商提供的SDK，接口调用受限于厂商提供的接口协议，不仅增加了云监控系统的开发难度和工作量，还降低了云监控系统对私有云平台数据的采集适配效率。因此，亟需一种能够降低对私有云管理平台接口进行二次开发的难度并提高对私有云资源采集监控的效率的方法。
发明内容
本发明实施例所要解决的技术问题在于，提供一种第三方云监控服务的构建方法及装置，能够通过采用统一的RESTFul接口方式，提高对不同厂商私有云管理平台采集监控的通用性和效率，降低对私有云管理平台接口进行二次开发的难度和成本。
为解决上述问题，本发明的一个实施例提供了一种第三方云监控服务的构建方法，至少包括如下步骤：
通过云监控处理层调用私有云平台的RESTFul接口进行适配，获取私有云平台对应的云资源数据，并通过调度管理从而采集和监控所述私有云平台对应的云性能数据；
通过云监控存储层存储所述私有云平台对应的配置数据，存储所述云监控处理层采集的私有云平台的云资源数据和云性能数据，并存储所述云监控处理层进行云资源采集和云性能采集时对应的日志数据；
通过云监控应用层查询所述云监控存储层存储的云监控数据，对所述云监控数据进行管理和应用。
进一步地，所述第三方云监控服务的构建方法，还包括：
通过融合不同厂商的私有云平台的RESTFul接口，封装为统一的RESTFul接口，以使当外部调用方调用统一封装的RESTFul接口时，云监控处理层根据私有云平台对应的接口信息进行适配。
进一步地，所述云资源采集，具体为：
通过所述云监控处理层访问所述云监控存储层，加载私有云平台对应的配置数据；
通过所述云监控处理层根据所述配置数据，轮询调用所述私有云平台的RESTFul接口进行云资源数据的采集；
若采集失败，则记录采集日志至所述云监控存储层；
若采集成功，则记录采集日志至所述云监控存储层，并通过所述云监控处理层将采集到的云资源数据进行数据格式转换处理后，保存至所述云监控存储层。
进一步地，所述云性能采集，具体为：
通过所述云监控处理层访问所述云监控存储层，加载私有云平台对应的配置数据；
通过所述云监控处理层根据所述配置数据，轮询调用所述私有云平台的RESTFul接口进行云性能数据的采集；
若采集失败，则记录采集日志至所述云监控存储层；
若采集成功，则记录采集日志至所述云监控存储层，并通过所述云监控处理层将采集到的云性能数据进行数据格式转换处理后，保存至所述云监控存储层。
进一步地，所述通过云监控应用层查询所述云监控存储层的云监控数据，对所述云监控数据进行管理和应用，具体为：
通过所述云监控应用层访问所述云监控存储层中的云监控数据库，获取云监控数据；
若访问失败，则记录采集日志至所述云监控存储层；
若访问成功，则记录采集日志至所述云监控存储层，并对云监控数据进行数据展现、数据统计、数据管理和数据开放。
进一步地，所述数据格式转换处理，具体为：
对JSON和XML格式的数据进行拆解转换，转换为二维数组结构的数据，并按照顺序逐行存放在包含对应信息的数据中，保存至云监控存储层。
进一步地，所述当外部调用方调用统一封装的RESTFul接口时，云监控处理层根据私有云平台对应的接口信息进行适配，具体为：
当接收到外部调用方调用统一封装的RESTFul接口请求时，获取私有云平台版本号、接口IP、接口账号、接口密码、调用数据类型和云主机ID；
根据调用请求的信息，通过私有云平台版本号、接口IP和调用数据类型构建私有云平台原生的调用地址，并通过接口账号、接口密码和云主机ID，调用私有云平台原生的RESTFul接口，采集得到对应的云资源数据和云性能数据；
对采集得到的云资源数据和云性能数据进行拆解转换，转换为二维数组结构的数据，按照顺序逐行存放包含对应信息的数据，并保存至云监控存储层；
对通过所述云监控存储层查询得到的云资源数据和云性能数据进行JSON格式封装，封装完成后返回至外部调用方。
本发明的一个实施例提供了一种第三方云监控服务的构建装置，包括：
云监控处理层模块，用于调用私有云平台的RESTFul接口进行适配，获取私有云平台对应的云资源数据，并通过调度管理从而采集和监控所述私有云平台对应的云性能数据；
云监控存储层模块，用于存储所述私有云平台对应的配置数据，存储所述云监控处理层模块采集的私有云平台的云资源数据和云性能数据，并存储所述云监控处理层进行云资源采集和云性能采集时对应的日志数据；
云监控应用层模块，用于查询所述云监控存储层模块存储的云监控数据，对所述云监控数据进行管理和应用。
本发明的一个实施例还提供了一种第三方云监控服务的构建终端设备，包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序，所述处理器执行所述计算机程序时实现如上述的第三方云监控服务的构建方法。
本发明的一个实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质包括存储的计算机程序，其中，在所述计算机程序运行时控制所述计算机可读存储介质所在设备执行如上述的第三方云监控服务的构建方法。
实施本发明实施例，具有如下有益效果：
本发明实施例提供的一种第三方云监控服务的构建方法及装置，所述方法包括：通过云监控处理层调用私有云平台的RESTFul接口进行适配，获取私有云平台对应的云资源数据，并通过调度管理从而采集和监控私有云平台对应的云性能数据；通过云监控存储层存储私有云平台对应的配置数据，存储所述云监控处理层采集的私有云平台的云资源数据和云性能数据，并存储云监控处理层进行云资源采集和云性能采集时对应的日志数据；通过云监控应用层查询云监控存储层存储的云监控数据，对所述云监控数据进行管理和应用。
与现有技术相比，本发明通过采用统一的RESTFul接口方式，提高对不同厂商私有云管理平台采集监控的通用性和效率，降低对私有云管理平台接口进行二次开发的难度和成本，支持使用各种开发语言进行接口调用，实现对不同厂商私有云管理平台的采集监控；通过对不同厂商的私有云数据的统一采集封装和开放，节省了与不同厂商的私有云管理平台进行对接和数据匹配的时间。
附图说明
图1为本发明第一实施例提供的一种第三方云监控服务的构建方法的流程示意图；
图2为本发明第一实施例提供的云监控处理层适配接口的流程示意图；
图3为本发明第一实施例提供的另一种第三方云监控服务构建方法的流程示意图；
图4为本发明第二实施例提供的一种第三方云监控服务的构建装置的结构示意图；
图5为本发明第二实施例提供的另一种第三方云监控服务的构建装置的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
在本申请的描述中，需要理解的是，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本申请的描述中，除非另有说明，“多个”的含义是两个或两个以上。
首先介绍本发明可以提供的应用场景，如采用统一的RESTFul接口对不同厂商私有云管理平台的接口进行适配。
本发明第一实施例：
请参阅图1-3。
如图1所示，本实施例提供了一种第三方云监控服务的构建方法，至少包括如下步骤：
S101、通过云监控处理层调用私有云平台的RESTFul接口进行适配，获取私有云平台对应的云资源数据，并通过调度管理从而采集和监控所述私有云平台对应的云性能数据。
具体的，对于步骤S101，包括云资源采集和云性能采集，所述云资源采集具体包括如下步骤：由所述云监控处理层执行采集任务，云监控处理层通过访问云监控存储层加载私有云平台的配置数据；云监控处理层根据配置数据，轮询调用私有云平台的RESTFul接口，采集云平台资源数据；如果采集失败，记录采集日志到存储层，然后结束；如果采集成功，记录采集日志并往下执行；云监控处理层将采集回来的云资源数据进行处理，保存到云监控存储层。
所述云性能采集，具体包括：由云监控处理层继续执行采集任务，云监控处理层根据配置数据，轮询调用私有云平台的RESTFul接口，采集云平台性能数据；如果采集失败，记录采集日志到存储层，然后结束；如果采集成功，记录采集日志并往下执行；云监控处理层将采集回来的云性能数据进行处理，保存到云监控存储层。
其中，云资源数据包括虚机的列表信息，以及每台虚机的IP地址、名称、ID等信息；云性能数据包括虚机的各项指标运行数据，包括虚机的运行时刻、CPU利用率、内存利用率、存储利用率和网络吞吐量等。
S102、通过云监控存储层存储所述私有云平台对应的配置数据，存储所述云监控处理层采集的私有云平台的云资源数据和云性能数据，并存储所述云监控处理层进行云资源采集和云性能采集时对应的日志数据。
具体的，对于步骤S102，主要通过云监控存储层保存私有云平台的配置数据，存储处理层采集回来的云资源数据和云性能数据，以及云监控处理层和云监控应用层运行过程中产生的日志数据。将采集回来的云性能数据处理后保存至存储层是为了在后续对外开放性能接口时，通过统一的RESTFul接口协议对外提供性能数据的调用，供外部系统使用。并通过记录采集失败日志是为了后续的问题定位和分析。其中，所述配置数据包括私有云平台提供的RESTFul接口地址和账号密码。
S103、通过云监控应用层查询所述云监控存储层存储的云监控数据，对所述云监控数据进行管理和应用。
具体的，对于步骤S103，由云监控应用层提供应用功能，通过云监控应用层访问云监控存储层，获取云监控数据；如果访问失败，记录采集日志到存储层，然后结束；如果访问成功，往下执行；云监控应用层提供数据展现、数据统计、数据管理和数据开放的功能。其中数据开放功能具体为：由云监控应用层提供数据开放功能，通过统一封装的RESTFul接口，对外部系统提供调用服务；对内部系统根据私有云平台的接口情况，进行适配。
在优选的实施例中，所述第三方云监控服务的构建方法，还包括：
S100、通过融合不同厂商的私有云平台的RESTFul接口，封装为统一的RESTFul接口，以使当外部调用方调用统一封装的RESTFul接口时，云监控处理层根据私有云平台对应的接口信息进行适配。
在优选的实施例中，如图2所示，所述当外部调用方调用统一封装的RESTFul接口时，云监控处理层根据私有云平台对应的接口信息进行适配，具体为：
当接收到外部调用方调用统一封装的RESTFul接口请求时，获取私有云平台版本号、接口IP、接口账号、接口密码、调用数据类型和云主机ID；
根据调用请求的信息，通过私有云平台版本号、接口IP和调用数据类型构建私有云平台原生的调用地址，并通过接口账号、接口密码和云主机ID，调用私有云平台原生的RESTFul接口，采集得到对应的云资源数据和云性能数据；
对采集得到的云资源数据和云性能数据进行拆解转换，转换为二维数组结构的数据，按照顺序逐行存放包含对应信息的数据，并保存至云监控存储层；
对通过所述云监控存储层查询得到的云资源数据和云性能数据进行JSON格式封装，封装完成后返回至外部调用方。
具体的，对于步骤S100，对不同厂商私有云管理平台的接口进行适配，将各个厂商的接口调用参数和接口返回数据格式进行转换，统一封装成标准的数据格式。与现有技术的比较，不需要根据不同厂商的接口规范进行单独的适配开发。
其中，本实施例还提供了当外系统调用统一封装的RESTFul接口时，内部根据私有云平台的接口情况进行适配的方法，具体步骤如下：第一步：接收外部的调用请求，获取私有云平台版本号，接口IP，接口账号，接口密码，调用数据类型(资源/性能)和云主机ID(-1表示所有云主机ID)。第二步：根据调用请求的信息，由私有云平台版本号、接口IP、调用数据类型，构造私有云平台原生的调用地址，由接口账号、接口密码、云主机ID，调用私有云平台原生的RESTFul接口，获取采集回来的云主机资源/性能数据(JSON/XML格式的文本内容)。第三步：对采集回来的JSON/XML格式的资源/性能数据进行拆解转换，转换成二维数组结构的数据，按照顺序逐行存放包含对应信息的数据；然后将数据保存到存储层。第四步：从存储层查询资源/性能数据，进行JSON格式封装，返回给外部调用方。
本实施例还提供了具体的调用接口步骤，通过融合各个私有云平台原本具备的RESTFul接口，将其封装成统一的RESTFul接口，对外提供标准的调用服务，调用参数和返回数据格式保持一致。
RESTFUL是一种网络应用程序的设计风格和开发方式，基于HTTP，可以使用XML格式定义或JSON格式定义。RESTFUL适用于移动互联网厂商作为业务使能接口的场景，实现第三方OTT调用移动网络资源的功能，动作类型为新增、变更、删除所调用资源。REST指的是一组架构约束条件和原则。满足这些约束条件和原则的应用程序或设计就是RESTful。
Web应用程序最重要的REST原则是，客户端和服务器之间的交互在请求之间是无状态的。从客户端到服务器的每个请求都必须包含理解请求所必需的信息。如果服务器在请求之间的任何时间点重启，客户端不会得到通知。此外，无状态请求可以由任何可用服务器回答，这十分适合云计算之类的环境。客户端可以缓存数据以改进性能。
在服务器端，应用程序状态和功能可以分为各种资源。资源是一个有趣的概念实体，它向客户端公开。资源的例子有：应用程序对象、数据库记录、算法等等。每个资源都使用URI(Universal Resource Identifier)得到一个唯一的地址。所有资源都共享统一的接口，以便在客户端和服务器之间传输状态。使用的是标准的HTTP方法，比如GET、PUT、POST和DELETE。Hypermedia是应用程序状态的引擎，资源表示通过超链接互联。
RESTFUL特点包括：1、每一个URI代表1种资源；2、客户端使用GET、POST、PUT、DELETE4个表示操作方式的动词对服务端资源进行操作：GET用来获取资源，POST用来新建资源(也可以用于更新资源)，PUT用来更新资源，DELETE用来删除资源；3、通过操作资源的表现形式来操作资源；4、资源的表现形式是XML或者HTML；5、客户端与服务端之间的交互在请求之间是无状态的，从客户端到服务端的每个请求都必须包含理解请求所必需的信息。
如图3所示，本实施例还提供了另一种第三方云监控服务的构建方法，包括云资源采集、云性能采集和云数据应用三个过程，其中从左到右分别是私有云平台、云监控处理层、云监控存储层和云监控应用层四个部分；从上到下分别是云资源采集、云性能采集和云数据应用三个过程。
在优选的实施例中，所述云资源采集，具体为：
通过所述云监控处理层访问所述云监控存储层，加载私有云平台对应的配置数据；
通过所述云监控处理层根据所述配置数据，轮询调用所述私有云平台的RESTFul接口进行云资源数据的采集；
若采集失败，则记录采集日志至所述云监控存储层；
若采集成功，则记录采集日志至所述云监控存储层，并通过所述云监控处理层将采集到的云资源数据进行数据格式转换处理后，保存至所述云监控存储层。
在优选的实施例中，所述云性能采集，具体为：
通过所述云监控处理层访问所述云监控存储层，加载私有云平台对应的配置数据；
通过所述云监控处理层根据所述配置数据，轮询调用所述私有云平台的RESTFul接口进行云性能数据的采集；
若采集失败，则记录采集日志至所述云监控存储层；
若采集成功，则记录采集日志至所述云监控存储层，并通过所述云监控处理层将采集到的云性能数据进行数据格式转换处理后，保存至所述云监控存储层。
在优选的实施例中，所述通过云监控应用层查询所述云监控存储层的云监控数据，对所述云监控数据进行管理和应用，具体为：
通过所述云监控应用层访问所述云监控存储层中的云监控数据库，获取云监控数据；
若访问失败，则记录采集日志至所述云监控存储层；
若访问成功，则记录采集日志至所述云监控存储层，并对云监控数据进行数据展现、数据统计、数据管理和数据开放。
在优选的实施例中，所述数据格式转换处理，具体为：
对JSON和XML格式的数据进行拆解转换，转换为二维数组结构的数据，并按照顺序逐行存放在包含对应信息的数据中，保存至云监控存储层。
数据格式转换包括云资源数据和云性能数据，支持JSON/XML格式的文本内容，对其进行拆解转换，转换成二维数组结构的数据，按照顺序逐行存放包含对应信息的数据，最终存储至云监控存储层。
本实施例提供的一种第三方云监控服务的构建方法，包括：通过云监控处理层调用私有云平台的RESTFul接口进行适配，获取私有云平台对应的云资源数据，并通过调度管理从而采集和监控私有云平台对应的云性能数据；通过云监控存储层存储私有云平台对应的配置数据，存储所述云监控处理层采集的私有云平台的云资源数据和云性能数据，并存储云监控处理层进行云资源采集和云性能采集时对应的日志数据；通过云监控应用层查询云监控存储层存储的云监控数据，对所述云监控数据进行管理和应用。
本实施例通过提供一种标准的RESTFul接口方式，采集监控不同厂商私有云平台的资源和性能情况。与现有技术比较，不需要根据厂商提供的SDK、以及厂商限定的开发语言进行开发；不需要根据不同厂商提供的API，逐个去对接联调接口；只需要通过统一的RESTFul接口通道进行采集监控，再对采集回来的数据进行封装和开放。不仅提高对不同厂商私有云管理平台采集监控的通用性，降低了采集监控云平台的难度，通过采用统一的RESTFul接口方式，支持使用各种开发语言进行接口调用，进而实现对不同厂商私有云管理平台的采集监控；通过对不同厂商的私有云数据的统一采集封装和开放，还能够节省了跟不同厂商的私有云管理平台进行对接和数据匹配的时间，通过对不同厂商的私有云数据的统一采集封装和开放来实现。
本发明第二实施例：
请参阅图4-5。
如图4所示，本实施例提供了一种第三方云监控服务的构建装置，包括：
云监控处理层模块100，用于调用私有云平台的RESTFul接口进行适配，获取私有云平台对应的云资源数据，并通过调度管理从而采集和监控所述私有云平台对应的云性能数据。
具体的，对于云监控处理层模块100，主要用于云资源采集和云性能采集，所述云资源采集具体包括如下步骤：由所述云监控处理层执行采集任务，云监控处理层通过访问云监控存储层加载私有云平台的配置数据；云监控处理层根据配置数据，轮询调用私有云平台的RESTFul接口，采集云平台资源数据；如果采集失败，记录采集日志到存储层，然后结束；如果采集成功，记录采集日志并往下执行；云监控处理层将采集回来的云资源数据进行处理，保存到云监控存储层。
所述云性能采集，具体包括：由云监控处理层继续执行采集任务，云监控处理层根据配置数据，轮询调用私有云平台的RESTFul接口，采集云平台性能数据；如果采集失败，记录采集日志到存储层，然后结束；如果采集成功，记录采集日志并往下执行；云监控处理层将采集回来的云性能数据进行处理，保存到云监控存储层。
云监控存储层模块200，用于存储所述私有云平台对应的配置数据，存储所述云监控处理层模块采集的私有云平台的云资源数据和云性能数据，并存储所述云监控处理层进行云资源采集和云性能采集时对应的日志数据。
具体的，对于云监控存储层模块200，主要通过云监控存储层保存私有云平台的配置数据，存储处理层采集回来的云资源数据和云性能数据，以及云监控处理层和云监控应用层运行过程中产生的日志数据。将采集回来的云性能数据处理后保存至存储层是为了在后续对外开放性能接口时，通过统一的RESTFul接口协议对外提供性能数据的调用，供外部系统使用。并通过记录采集失败日志是为了后续的问题定位和分析。
云监控应用层模块300，用于查询所述云监控存储层模块存储的云监控数据，对所述云监控数据进行管理和应用。
具体的，对于云监控应用层模块300，由云监控应用层提供应用功能，通过云监控应用层访问云监控存储层，获取云监控数据；如果访问失败，记录采集日志到存储层，然后结束；如果访问成功，往下执行；云监控应用层提供数据展现、数据统计、数据管理和数据开放的功能。其中数据开放功能具体为：由云监控应用层提供数据开放功能，通过统一封装的RESTFul接口，对外部系统提供调用服务；对内部系统根据私有云平台的接口情况，进行适配。
在优选的实施例中，所述第三方云监控服务的构建装置，还包括：
统一RESTFul接口模块，用于通过融合不同厂商的私有云平台的RESTFul接口，封装为统一的RESTFul接口，以使当外部调用方调用统一封装的RESTFul接口时，云监控处理层根据私有云平台对应的接口信息进行适配。
具体的，对于统一RESTFul接口模块，对不同厂商私有云管理平台的接口进行适配，将各个厂商的接口调用参数和接口返回数据格式进行转换，统一封装成标准的数据格式。与现有技术的比较，不需要根据不同厂商的接口规范进行单独的适配开发。其中，本实施例还提供了当外系统调用统一封装的RESTFul接口时，内部根据私有云平台的接口情况进行适配的方法，具体步骤如下：第一步：接收外部的调用请求，获取私有云平台版本号，接口IP，接口账号，接口密码，调用数据类型(资源/性能)和云主机ID(-1表示所有云主机ID)第二步：根据调用请求的信息，由私有云平台版本号、接口IP、调用数据类型，构造私有云平台原生的调用地址，由接口账号、接口密码、云主机ID，调用私有云平台原生的RESTFul接口，获取采集回来的云主机资源/性能数据(JSON/XML格式的文本内容)第三步：对采集回来的JSON/XML格式的资源/性能数据进行拆解转换，转换成二维数组结构的数据，按照顺序逐行存放包含对应信息的数据；然后将数据保存到存储层。第四步：从存储层查询资源/性能数据，进行JSON格式封装，返回给外部调用方。本实施通过融合各个私有云平台原本具备的RESTFul接口，将其封装成统一的RESTFul接口，对外提供标准的调用服务，调用参数和返回数据格式保持一致。
如图5所示，本实施例还提供了另一种第三方云监控服务的构建装置的结构示意图，从下往上分别是私有云平台、RESTFul通道、云监控服务装置；其中，云监控服务装置包含云监控处理层、云监控存储层和云监控应用层；各层的功能说明如下：
私有云平台：云监控的对象，包括主流的私有云平台，包括但不限于：华为云、华三云、Vmware云，私有云平台提供RESTFul接口对外提供服务，通过该接口可以实现对云平台的管理。
RESTFul通道：私有云平台提供的RESTFul通道，包括但不限于：华为云的FusionCloud、华三云的H3C CAS WS API、Vmware云的Vcenter接口，通过私有云提供的RESTFul接口通道，获取云平台的资源数据和性能数据。
云监控服务装置：基于私有云各类平台RESTFul应用程序编程接口的第三方云监控服务装置，包含以下三个部分：
云监控处理层：通过调度管理加载私有云平台的配置数据，逐一进行轮询调用，实现对私有云平台的资源数据和性能数据的采集、处理和封装。
云监控存储层：保存私有云平台的配置数据，存储处理层采集回来的资源数据和性能数据，以及处理层和应用层运行过程中产生的日志数据。
云监控应用层：查询存储层的云监控数据，提供数据展现、统计、管理和开放服务。
本实施例提供的一种第三方云监控服务的构建装置，包括：云监控处理层模块100，用于调用私有云平台的RESTFul接口进行适配，获取私有云平台对应的云资源数据，并通过调度管理从而采集和监控所述私有云平台对应的云性能数据；云监控存储层模块200，用于存储所述私有云平台对应的配置数据，存储所述云监控处理层模块采集的私有云平台的云资源数据和云性能数据，并存储所述云监控处理层进行云资源采集和云性能采集时对应的日志数据；云监控应用层模块300，用于查询所述云监控存储层模块存储的云监控数据，对所述云监控数据进行管理和应用。
与现有技术相比，本实施例通过采用统一的RESTFul接口方式，提高对不同厂商私有云管理平台采集监控的通用性和效率，降低对私有云管理平台接口进行二次开发的难度和成本，支持使用各种开发语言进行接口调用，实现对不同厂商私有云管理平台的采集监控；通过对不同厂商的私有云数据的统一采集封装和开放，节省了与不同厂商的私有云管理平台进行对接和数据匹配的时间。
本发明的一个实施例提供了一种第三方云监控服务的构建终端设备，包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序，所述处理器执行所述计算机程序时实现如上述的第三方云监控服务的构建方法。
本发明的一个实施例提供了一种计算机可读存储介质，所述计算机可读存储介质包括存储的计算机程序，其中，在所述计算机程序运行时控制所述计算机可读存储介质所在设备执行如上述的第三方云监控服务的构建方法。
在本发明的上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中，应该理解到，所揭露的技术内容，可通过其它的方式实现。其中，以上所描述的装置实施例仅仅是示意性的，例如所述模块的划分，可以为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个模块或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，单元或模块的间接耦合或通信连接，可以是电性或其它的形式。
所述作为分离部件说明的模块可以是或者也可以不是物理上分开的，作为模块显示的部件可以是或者也可以不是物理模块，即可以位于一个地方，或者也可以分布到多个模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能模块可以集成在一个处理模块中，也可以是各个模块单独物理存在，也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。
以上所述是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和变形，这些改进和变形也视为本发明的保护范围。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)或随机存储记忆体(Random AccessMemory，RAM)等。

Claims (8)

1.一种第三方云监控服务的构建方法，其特征在于，至少包括如下步骤：
通过云监控处理层调用私有云平台的RESTFul接口进行适配，获取私有云平台对应的云资源数据，并通过调度管理从而采集和监控所述私有云平台对应的云性能数据；
通过云监控存储层存储所述私有云平台对应的配置数据，存储所述云监控处理层采集的私有云平台的云资源数据和云性能数据，并存储所述云监控处理层进行云资源采集和云性能采集时对应的日志数据；
通过云监控应用层查询所述云监控存储层存储的云监控数据，对所述云监控数据进行管理和应用；
通过融合不同厂商的私有云平台的RESTFul接口，封装为统一的RESTFul接口，以使当外部调用方调用统一封装的RESTFul接口时，云监控处理层根据私有云平台对应的接口信息进行适配；
所述当外部调用方调用统一封装的RESTFul接口时，云监控处理层根据私有云平台对应的接口信息进行适配，具体为：
当接收到外部调用方调用统一封装的RESTFul接口请求时，获取私有云平台版本号、接口IP、接口账号、接口密码、调用数据类型和云主机ID；
根据调用请求的信息，通过私有云平台版本号、接口IP和调用数据类型构建私有云平台原生的调用地址，并通过接口账号、接口密码和云主机ID，调用私有云平台原生的RESTFul接口，采集得到对应的云资源数据和云性能数据；
对采集得到的云资源数据和云性能数据进行拆解转换，转换为二维数组结构的数据，按照顺序逐行存放包含对应信息的数据，并保存至云监控存储层；
对通过所述云监控存储层查询得到的云资源数据和云性能数据进行JSON格式封装，封装完成后返回至外部调用方。
2.根据权利要求1所述的第三方云监控服务的构建方法，其特征在于，所述云资源采集，具体为：
通过所述云监控处理层访问所述云监控存储层，加载私有云平台对应的配置数据；
通过所述云监控处理层根据所述配置数据，轮询调用所述私有云平台的RESTFul接口进行云资源数据的采集；
若采集失败，则记录采集日志至所述云监控存储层；
若采集成功，则记录采集日志至所述云监控存储层，并通过所述云监控处理层将采集到的云资源数据进行数据格式转换处理后，保存至所述云监控存储层。
3.根据权利要求1所述的第三方云监控服务的构建方法，其特征在于，所述云性能采集，具体为：
通过所述云监控处理层访问所述云监控存储层，加载私有云平台对应的配置数据；
通过所述云监控处理层根据所述配置数据，轮询调用所述私有云平台的RESTFul接口进行云性能数据的采集；
若采集失败，则记录采集日志至所述云监控存储层；
若采集成功，则记录采集日志至所述云监控存储层，并通过所述云监控处理层将采集到的云性能数据进行数据格式转换处理后，保存至所述云监控存储层。
4.根据权利要求1所述的第三方云监控服务的构建方法，其特征在于，所述通过云监控应用层查询所述云监控存储层的云监控数据，对所述云监控数据进行管理和应用，具体为：
通过所述云监控应用层访问所述云监控存储层中的云监控数据库，获取云监控数据；
若访问失败，则记录采集日志至所述云监控存储层；
若访问成功，则记录采集日志至所述云监控存储层，并对云监控数据进行数据展现、数据统计、数据管理和数据开放。
5.根据权利要求2所述的第三方云监控服务的构建方法，其特征在于，所述数据格式转换处理，具体为：
对JSON和XML格式的数据进行拆解转换，转换为二维数组结构的数据，并按照顺序逐行存放在包含对应信息的数据中，保存至云监控存储层。
6.一种第三方云监控服务的构建装置，其特征在于，包括：
云监控处理层模块，用于调用私有云平台的RESTFul接口进行适配，获取私有云平台对应的云资源数据，并通过调度管理从而采集和监控所述私有云平台对应的云性能数据；
云监控存储层模块，用于存储所述私有云平台对应的配置数据，存储所述云监控处理层模块采集的私有云平台的云资源数据和云性能数据，并存储所述云监控处理层进行云资源采集和云性能采集时对应的日志数据；
云监控应用层模块，用于查询所述云监控存储层模块存储的云监控数据，对所述云监控数据进行管理和应用；
统一RESTFul接口模块，用于通过融合不同厂商的私有云平台的RESTFul接口，封装为统一的RESTFul接口，以使当外部调用方调用统一封装的RESTFul接口时，云监控处理层根据私有云平台对应的接口信息进行适配；
所述统一RESTFul接口模块具体用于：
当接收到外部调用方调用统一封装的RESTFul接口请求时，获取私有云平台版本号、接口IP、接口账号、接口密码、调用数据类型和云主机ID；
根据调用请求的信息，通过私有云平台版本号、接口IP和调用数据类型构建私有云平台原生的调用地址，并通过接口账号、接口密码和云主机ID，调用私有云平台原生的RESTFul接口，采集得到对应的云资源数据和云性能数据；
对采集得到的云资源数据和云性能数据进行拆解转换，转换为二维数组结构的数据，按照顺序逐行存放包含对应信息的数据，并保存至云监控存储层；
对通过所述云监控存储层查询得到的云资源数据和云性能数据进行JSON格式封装，封装完成后返回至外部调用方。
7.一种第三方云监控服务的构建终端设备，其特征在于，包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序，所述处理器执行所述计算机程序时实现如权利要求1至5中任意一项所述的第三方云监控服务的构建方法。
8.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质包括存储的计算机程序，其中，在所述计算机程序运行时控制所述计算机可读存储介质所在设备执行如权利要求1至5中任意一项所述的第三方云监控服务的构建方法。
CN202010354172.4A 2020-04-28 2020-04-28 一种第三方云监控服务的构建方法及装置 Active CN111641676B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010354172.4A CN111641676B (zh) 2020-04-28 2020-04-28 一种第三方云监控服务的构建方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010354172.4A CN111641676B (zh) 2020-04-28 2020-04-28 一种第三方云监控服务的构建方法及装置

Publications (2)

Publication Number Publication Date
CN111641676A CN111641676A (zh) 2020-09-08
CN111641676B true CN111641676B (zh) 2023-04-18

Family

ID=72330956

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010354172.4A Active CN111641676B (zh) 2020-04-28 2020-04-28 一种第三方云监控服务的构建方法及装置

Country Status (1)

Country Link
CN (1) CN111641676B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112698820A (zh) * 2020-12-30 2021-04-23 平安证券股份有限公司 存储器和交换机统一监控管理方法、装置和计算机设备
CN113395275B (zh) * 2021-06-10 2022-05-24 杭州安恒信息技术股份有限公司 一种云平台安全防护功能管控方法、系统及存储介质
CN115225686A (zh) * 2022-07-13 2022-10-21 全通金信控股(广东)有限公司 一种基于云存储的代理客户端系统
CN115314403B (zh) * 2022-07-29 2024-05-28 郑州浪潮数据技术有限公司 一种混沌工程平台集成私有云的方法、系统及装置
CN115967657A (zh) * 2022-12-20 2023-04-14 浪潮云信息技术股份公司 一种基于sdwan云平台容量采集方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104113596A (zh) * 2014-07-15 2014-10-22 华侨大学 一种私有云的云监控系统及方法
CN104158881A (zh) * 2014-08-20 2014-11-19 哈尔滨工程大学 一种支持用户自定制的第三方云安全监控系统及方法
WO2018006872A1 (zh) * 2016-07-08 2018-01-11 腾讯科技（深圳）有限公司 一种混合云的接口调用方法及装置
CN107623591A (zh) * 2017-08-28 2018-01-23 北京云集智造科技有限公司 一种服务器通用监控方法及装置
CN108880943A (zh) * 2018-07-26 2018-11-23 广东浪潮大数据研究有限公司 一种异构云平台的监控系统
CN109165024A (zh) * 2018-07-26 2019-01-08 天讯瑞达通信技术有限公司 一种运维平台自动部署和监控服务器系统的方法
CN109981784A (zh) * 2019-04-01 2019-07-05 山东浪潮云信息技术有限公司 一种云服务监控系统数据访问方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104113596A (zh) * 2014-07-15 2014-10-22 华侨大学 一种私有云的云监控系统及方法
CN104158881A (zh) * 2014-08-20 2014-11-19 哈尔滨工程大学 一种支持用户自定制的第三方云安全监控系统及方法
WO2018006872A1 (zh) * 2016-07-08 2018-01-11 腾讯科技（深圳）有限公司 一种混合云的接口调用方法及装置
CN107623591A (zh) * 2017-08-28 2018-01-23 北京云集智造科技有限公司 一种服务器通用监控方法及装置
CN108880943A (zh) * 2018-07-26 2018-11-23 广东浪潮大数据研究有限公司 一种异构云平台的监控系统
CN109165024A (zh) * 2018-07-26 2019-01-08 天讯瑞达通信技术有限公司 一种运维平台自动部署和监控服务器系统的方法
CN109981784A (zh) * 2019-04-01 2019-07-05 山东浪潮云信息技术有限公司 一种云服务监控系统数据访问方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
Monitoring and Capacity Planning of Private Cloouds:The Challenges and the Solution;Geetha Adinarayan;《2012 IEEE International Conference on CLoud Computing in Emerging Markets》;20121120;全文 *
基于服务器集群的云监控系统设计与实现;沈青;《计算机工程与科学》;20121031;第34卷(第10期);73-77 *
基于私有云平台的云主机资源监控方案;张倩等;《计算机系统应用》;20170815(第08期);全文 *

Also Published As

Publication number Publication date
CN111641676A (zh) 2020-09-08

Similar Documents

Publication Publication Date Title
CN111641676B (zh) 一种第三方云监控服务的构建方法及装置
US11159411B2 (en) Distributed testing service
CN106131213B (zh) 一种服务管理方法和系统
WO2016184175A1 (zh) 数据库处理方法及装置
US10397051B1 (en) Configuration and testing of network-based service platform resources using a service platform specific language
CN111563018B (zh) 一种人机物融合云计算平台的资源管理和监控方法
CN113010818A (zh) 访问限流方法、装置、电子设备及存储介质
CN111045833A (zh) 接口调用的方法和装置
CN111786984B (zh) Pod通信连接方法、装置及电子设备、存储介质
CN113839977A (zh) 消息推送方法、装置、计算机设备及存储介质
CN114281263B (zh) 容器集群管理系统的存储资源处理方法、系统和设备
TWI356301B (en) Memory management system and method for open platf
CN112511591A (zh) 一种医院接口数据交互的实现方法、装置、设备和介质
CN110661780A (zh) 一种基于saas应用的无线城市数据共享方法与系统
CN113760562A (zh) 链路追踪方法、装置、系统、服务器和存储介质
WO2023134247A1 (zh) 容器管理方法及容器管理系统
WO2021093671A1 (zh) 任务处理方法、系统、装置、设备及计算机可读存储介质
CN112351079B (zh) 一种基于数据盒的空间应用和数据一体化封装系统及方法
CN115129708A (zh) 数据处理方法、装置和存储介质及电子设备
WO2015192497A1 (zh) 通信链路的发送方法、装置及终端
CN113760986A (zh) 一种数据查询方法、装置、设备及存储介质
CN113760693A (zh) 用于微服务系统的本地调试的方法和装置
KR100282616B1 (ko) 웹과 응용을 위한 멀티프로토콜 게이트웨이의 구조 및 처리방법
CN111352748B (zh) 接口调用方法、装置、电子设备及存储介质
CN112308431B (zh) 大数据指标管理方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant