CN112835768A - 一种基于ceilometer可实时监控资源测量数据的方法 - Google Patents
一种基于ceilometer可实时监控资源测量数据的方法 Download PDFInfo
- Publication number
- CN112835768A CN112835768A CN202110212398.5A CN202110212398A CN112835768A CN 112835768 A CN112835768 A CN 112835768A CN 202110212398 A CN202110212398 A CN 202110212398A CN 112835768 A CN112835768 A CN 112835768A
- Authority
- CN
- China
- Prior art keywords
- monitoring
- data
- message
- ceilometer
- service
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 85
- 238000000034 method Methods 0.000 title claims abstract description 18
- 238000005259 measurement Methods 0.000 title claims abstract description 16
- 238000004519 manufacturing process Methods 0.000 claims abstract description 5
- 230000002159 abnormal effect Effects 0.000 claims description 3
- 238000003860 storage Methods 0.000 claims description 3
- 238000013500 data storage Methods 0.000 abstract description 3
- 238000007726 management method Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 238000005457 optimization Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000000178 monomer Substances 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000004904 shortening Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
- G06F11/302—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system component is a software system
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3051—Monitoring arrangements for monitoring the configuration of the computing system or of the computing system component, e.g. monitoring the presence of processing resources, peripherals, I/O links, software programs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
- G06F9/45533—Hypervisors; Virtual machine monitors
- G06F9/45558—Hypervisor-specific management and integration aspects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/54—Interprogram communication
- G06F9/546—Message passing systems or structures, e.g. queues
Abstract
本发明提供了一种基于ceilometer可实时监控资源测量数据的方法，包括以下步骤：S1、在ceilometer中部署人员配置数据监控项，并设置监控项的采集后期和周期内的数据粒度；S2、监控项参数配置完成后，重启监控服务，根据服务运行日志检查是否正常运行；S3、监控服务根据配置的监控项，去数据源采集监控数据，并把数据以消息生产的方式发送给消息队列；S4、监控服务得到消息队列，并通过消息消费端将消息队列的消息进行消费，并重复步骤S3；S5、上层应用通过监控服务提供的接口，进行展示消费的消息。本发明所述的资源测量数据的方法可灵活调整的云资源监控数据采集项；可灵活配置的云资源监控数据采集周期；高可靠的快速的监控数据入库方式。
Description
技术领域
本发明属于云上业务技术领域，尤其是涉及一种基于ceilometer可实时监控资源测量数据的方法。
背景技术
当前市场环境下，随着云上业务覆盖范围越来越广，涉及领域的多元化，客户数量积累及客户需求越发的多样化，云资源类型及总数量越来越多。对于云资源的测量监控业务，带来一定的挑战。那么要解决云资源实时监控这个问题，我们就要有优秀的云资源测量监控架构来支撑。
目前，根据客户需求及实际业务需要，我们从两个维度涉及，一则是从监控数据采集端进行优化，着重考量客户优先关注的云资源监控数据。二则是在从监控数据入库端进行调整，降低系统资源占有率，提高数据处理能力。
该技术方案是在最初的开源openstack云管理系统的基础上，通过优化设计，来达成云资源监控测量数据的实时性。
本技术方案开发意义：
1、云管理系统上管理着一系列有限的云资源，随着用户增加，并不断分配给用户使用，云资源单体数量总是不断激增。该方案就能够快捷高可靠地解决云资源数量激增对监控业务带来的压力。
2、可支持灵活配置需监控的云资源类型以及对云资源监控粒度
发明内容
有鉴于此，本发明旨在提出一种基于ceilometer可实时监控资源测量数据的方法，一则是从监控数据采集端进行优化，着重考量客户优先关注的云资源监控数据，二是监控数据入库端进行调整，降低系统资源占有率，提高数据处理能力。
为达到上述目的，本发明的技术方案是这样实现的：
一种基于ceilometer可实时监控资源测量数据的方法，包括以下步骤：
S1、在ceilometer中部署人员配置监控项，并设置监控项的采集后期和周期内的数据粒度；
S2、监控项参数配置完成后，重启监控服务，根据服务运行日志检查是否正常运行；
S3、监控服务根据配置的监控项，去数据源采集监控数据，并把数据以消息生产的方式发送给消息队列；
S4、监控服务得到消息队列，并通过消息消费端将消息队列的消息进行消费，并重复步骤S3；
S5、上层应用通过监控服务提供的接口，进行展示消费的消息。
进一步的，步骤S1中的监控项包括：内存、内核使用、io情况，网络、存储读写。
进一步的，所述步骤S2中日志检查若非正常则显示error，提示部署人员错误，进行修改，若正常则进行步骤S2以下步骤。
进一步的，步骤S3中采集监控数据的采集方式如下：监控服务按照已配置的采集周期去按已配置粒度来采集监控项数据。
相对于现有技术，本发明所述的一种基于ceilometer可实时监控资源测量数据的方法具有以下有益效果：
(1)本发明所述的资源测量数据的方法中具有云资源监控项调整可简单灵活，一步到位，极大地提高调整部署效率。
(2)本发明所述的资源测量数据的方法中具有实际生产环境，可按照系统实时压力调整部署，丝毫不会影响已运行的用户业务，真正做到用户零感知。
(3)本发明所述的资源测量数据的方法中具有精简的云资源监控管理流程，减少出错，缩减用户需求响应周期，提升用户体验。
附图说明
构成本发明的一部分的附图用来提供对本发明的进一步理解，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：
图1为本发明实施例所述的监控数据采集样本简图；
图2为本发明实施例所述的优化监控数据采集处理简图。
具体实施方式
需要说明的是，在不冲突的情况下，本发明中的实施例及实施例中的特征可以相互组合。
在本发明的描述中，需要理解的是，术语“中心”、“纵向”、“横向”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。此外，术语“第一”、“第二”等仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”等的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明的描述中，除非另有说明，“多个”的含义是两个或两个以上。
在本发明的描述中，需要说明的是，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以通过具体情况理解上述术语在本发明中的具体含义。
下面将参考附图并结合实施例来详细说明本发明。
一种基于ceilometer可实时监控资源测量数据的方法，包括以下步骤：
S1、在ceilometer中部署人员配置监控项，并设置监控项的采集后期和周期内的数据粒度；
S2、监控项参数配置完成后，重启监控服务，根据服务运行日志检查是否正常运行；
S3、监控服务根据配置的监控项，去数据源采集监控数据，并把数据以消息生产的方式发送给消息队列；
S4、监控服务得到消息队列，并通过消息消费端将消息队列的消息进行消费，并重复步骤S3；
S5、上层应用通过监控服务提供的接口，进行展示消费的消息。
步骤S1中的监控项包括：内存、内核使用、io情况，网络、存储读写。
所述步骤S2中日志检查若非正常则显示error，提示部署人员错误，进行修改，若正常则进行步骤S2以下步骤。
步骤S3中采集监控数据的采集方式如下：监控服务按照已配置的采集周期去按已配置粒度来采集监控项数据。
以上步骤具有以下创新：
可视化的云资源监控数据项配置功能，部署人员可根据实际需要，轻松部署调整云资源监控项。
可灵活调整的数据采集周期，以便根据客户需要及系统实时压力，调整参数，优化系统能力。
异步数据处理方式，缓解系统的实时压力。
以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
Claims (4)
1.一种基于ceilometer可实时监控资源测量数据的方法，其特征在于包括以下步骤：
S1、在ceilometer中部署人员配置数据监控项，并设置监控项的采集后期和周期内的数据粒度；
S2、监控项参数配置完成后，重启监控服务，根据服务运行日志检查是否正常运行；
S3、监控服务根据配置的监控项，去数据源采集监控数据，并把数据以消息生产的方式发送给消息队列；
S4、监控服务得到消息队列，并通过消息消费端将消息队列的消息进行消费，并重复步骤S3；
S5、上层应用通过监控服务提供的接口，进行展示消费的消息。
2.根据权利要求1所述的一种基于ceilometer可实时监控资源测量数据的方法，其特征在于：步骤S1中的监控项包括：内存、内核使用、io情况，网络、存储读写。
3.根据权利要求1所述的一种基于ceilometer可实时监控资源测量数据的方法，其特征在于：所述步骤S2中日志检查若非正常则显示error，提示部署人员错误，进行修改，若正常则进行步骤S2以下步骤。
4.根据权利要求1所述的一种基于ceilometer可实时监控资源测量数据的方法，其特征在于：步骤S3中采集监控数据的采集方式如下：监控服务按照已配置的采集周期去按已配置粒度来采集监控项数据。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110212398.5A CN112835768A (zh) | 2021-02-25 | 2021-02-25 | 一种基于ceilometer可实时监控资源测量数据的方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110212398.5A CN112835768A (zh) | 2021-02-25 | 2021-02-25 | 一种基于ceilometer可实时监控资源测量数据的方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN112835768A true CN112835768A (zh) | 2021-05-25 |
Family
ID=75933565
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110212398.5A Pending CN112835768A (zh) | 2021-02-25 | 2021-02-25 | 一种基于ceilometer可实时监控资源测量数据的方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112835768A (zh) |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101013442A (zh) * | 2007-02-07 | 2007-08-08 | 浙江大学 | 数据库性能的无代理统一监控方法 |
| CN101090486A (zh) * | 2007-06-25 | 2007-12-19 | 中国联合通信有限公司 | 一种多媒体监控信息的监控装置及其监控方法 |
| CN102761454A (zh) * | 2011-04-28 | 2012-10-31 | 中兴通讯股份有限公司 | 一种物联网监控方法及系统 |
| CN104618163A (zh) * | 2015-02-03 | 2015-05-13 | 江苏辰云信息科技有限公司 | 基于消息队列的分布式机房监控系统及方法 |
| CN106961367A (zh) * | 2017-05-19 | 2017-07-18 | 济南浪潮高新科技投资发展有限公司 | 基于openstack的云资源监控系统和方法 |
| CN107294772A (zh) * | 2017-05-23 | 2017-10-24 | 甘肃万维信息技术有限责任公司 | 一种结合Docker实现动态管理监控服务系统 |
| CN110035117A (zh) * | 2019-03-15 | 2019-07-19 | 启迪云计算有限公司 | 一种基于可配置监控脚本监控系统及监控方法 |
| CN110555028A (zh) * | 2019-08-22 | 2019-12-10 | 上海数禾信息科技有限公司 | 数据展示方法以及装置 |
| WO2020038447A1 (zh) * | 2018-08-23 | 2020-02-27 | 比亚迪股份有限公司 | 一种轨道交通系统综合网管方法、装置及系统 |
| CN112311617A (zh) * | 2019-08-02 | 2021-02-02 | 中国移动通信有限公司政企客户分公司 | 一种配置化数据监控告警方法及系统 |
-
2021
- 2021-02-25 CN CN202110212398.5A patent/CN112835768A/zh active Pending
Patent Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101013442A (zh) * | 2007-02-07 | 2007-08-08 | 浙江大学 | 数据库性能的无代理统一监控方法 |
| CN101090486A (zh) * | 2007-06-25 | 2007-12-19 | 中国联合通信有限公司 | 一种多媒体监控信息的监控装置及其监控方法 |
| CN102761454A (zh) * | 2011-04-28 | 2012-10-31 | 中兴通讯股份有限公司 | 一种物联网监控方法及系统 |
| CN104618163A (zh) * | 2015-02-03 | 2015-05-13 | 江苏辰云信息科技有限公司 | 基于消息队列的分布式机房监控系统及方法 |
| CN106961367A (zh) * | 2017-05-19 | 2017-07-18 | 济南浪潮高新科技投资发展有限公司 | 基于openstack的云资源监控系统和方法 |
| CN107294772A (zh) * | 2017-05-23 | 2017-10-24 | 甘肃万维信息技术有限责任公司 | 一种结合Docker实现动态管理监控服务系统 |
| WO2020038447A1 (zh) * | 2018-08-23 | 2020-02-27 | 比亚迪股份有限公司 | 一种轨道交通系统综合网管方法、装置及系统 |
| CN110035117A (zh) * | 2019-03-15 | 2019-07-19 | 启迪云计算有限公司 | 一种基于可配置监控脚本监控系统及监控方法 |
| CN112311617A (zh) * | 2019-08-02 | 2021-02-02 | 中国移动通信有限公司政企客户分公司 | 一种配置化数据监控告警方法及系统 |
| CN110555028A (zh) * | 2019-08-22 | 2019-12-10 | 上海数禾信息科技有限公司 | 数据展示方法以及装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN102882745B (zh) | 一种用于监控业务服务器的方法和装置 | |
| CN110519661B (zh) | 通信过程、设备和系统 | |
| US20040083246A1 (en) | Method and system for performance management in a computer system | |
| CN106878064A (zh) | 数据监控方法和装置 | |
| CN105610648B (zh) | 一种运维监控数据的采集方法及服务器 | |
| KR20100126333A (ko) | 스마트 미터들을 관리하기 위한 관리 플랫폼 및 연관된 방법 | |
| US8516295B2 (en) | System and method of collecting and reporting exceptions associated with information technology services | |
| CN101430357B (zh) | 一种用电数据采集方法及系统和用电管理终端 | |
| CN113742066A (zh) | 一种用于服务器集群的负载均衡系统和方法 | |
| CN107993004A (zh) | 一种用电信息处理系统和方法 | |
| CN108540341A (zh) | 资源监控方法及装置 | |
| JP5833125B2 (ja) | システムパフォーマンスのリアルタイム測定方法及び装置 | |
| CN103312563A (zh) | 基于电力线载波通信的信息自动采集方法及其系统 | |
| CN105554320A (zh) | 呼叫中心话务量的监控方法及系统 | |
| CN113570277A (zh) | 一种电力容量管理方法及装置 | |
| CN109165045A (zh) | 一种调整服务器的硬件配置的方法和装置 | |
| CN112835768A (zh) | 一种基于ceilometer可实时监控资源测量数据的方法 | |
| CN109525036A (zh) | 一种通信设备的市电供应状态的监控方法、装置和系统 | |
| CN109032320A (zh) | 电池备份单元测试方法及相关设备 | |
| CN108064054B (zh) | 一种lte系统中的ftp文件传输监控方法及系统 | |
| CN112751722A (zh) | 数据传输质量监控方法和系统 | |
| CN110262917A (zh) | 宿主机自愈方法、装置、计算机设备及存储介质 | |
| JP4934660B2 (ja) | 通信帯域算出方法、装置、およびトラヒック管理方法 | |
| US9258717B2 (en) | Method and arrangement for detecting a malfunctioning terminal | |
| CN109819415A (zh) | 一种基于avc系统运行环境下的电压监测方法与系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210525 |