CN109120481B - 基于Zabbix开源组件监控DCOS容器和内部中间件的方法 - Google Patents

基于Zabbix开源组件监控DCOS容器和内部中间件的方法 Download PDF

Info

Publication number
CN109120481B
CN109120481B CN201811131696.6A CN201811131696A CN109120481B CN 109120481 B CN109120481 B CN 109120481B CN 201811131696 A CN201811131696 A CN 201811131696A CN 109120481 B CN109120481 B CN 109120481B
Authority
CN
China
Prior art keywords
container
dcos
monitoring
address
zabbixagent
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811131696.6A
Other languages
English (en)
Other versions
CN109120481A (zh
Inventor
程永新
谢涛
王贤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai New Torch Network Information Technology Ltd By Share Ltd
Original Assignee
Shanghai New Torch Network Information Technology Ltd By Share Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai New Torch Network Information Technology Ltd By Share Ltd filed Critical Shanghai New Torch Network Information Technology Ltd By Share Ltd
Priority to CN201811131696.6A priority Critical patent/CN109120481B/zh
Publication of CN109120481A publication Critical patent/CN109120481A/zh
Application granted granted Critical
Publication of CN109120481B publication Critical patent/CN109120481B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/12—Network monitoring probes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06—Management of faults, events, alarms or notifications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/14—Arrangements for monitoring or testing data switching networks using software, i.e. software packages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H04L67/025—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP] for remote control or remote monitoring of applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明公开了一种基于Zabbix开源组件监控DCOS容器和内部中间件的方法，包括：S1：将Zabbix开源组件ZabbixAgent部署在被监控主机上；S2：将JavaAgent部署在被监控主机或者服务器上；S3：将ZabbixServer部署在服务器上；S4：通过ZabbixAgent和JavaAgent监控DCOS容器和内部中间件，并将获取的监控数据发送至ZabbixServer；S5：ZabbixServer接受ZabbixAgent和JavaAgent发送的数据，将数据存储到数据库，发现异常则告警。本发明具有自更新、热部署、分布式快速功能扩展能力，为运维人员日常运维工作提供有力支撑。

Description

基于Zabbix开源组件监控DCOS容器和内部中间件的方法
技术领域
本发明涉及一种监控DCOS容器和内部中间件的方法，尤其涉及一种基于Zabbix开源组件监控DCOS容器和内部中间件的方法。
背景技术
在自动化运维领域，zabbix是一个主流的，众所周知的分布式系统监视和网络监视功能的企业级开源解决方案。zabbix server可以通过SNMP，zabbix agent，ping，端口监视等方法提供对远程服务器/网络状态的监视，数据收集等功能，它可以运行在LinuX，S0lariS，HP-UX，，AIX,Free BSD,Open BSD,OS X等平台上。zabbix安装与配置简单，学习成本低；支持多语言(包括中文)；免费开源；自动发现服务器与网络设备；分布式监视以及WEB集中管理功能；可以无agent监视；用户安全认证和柔软的授权方式；通过WEB界面设置或查看监视结果；email等通知功能等等。zabbix能监视各种网络参数，保证服务器系统的安全运营；并提供灵活的通知机制以让系统管理员快速定位/解决存在的各种问题。目前的技术方案存在如下问题：1、系统客户端自身不具备自更新的能力，部署后程序的更新耗费大量人力；2、系统客户端不具备热部署能力，需要停止客户端进行程序更新；3、系统功能固定，扩展能力弱，或者功能扩展步骤繁琐，例如需要登录客户端等。
发明内容
本发明要解决的技术问题是提供一种基于Zabbix开源组件监控DCOS容器和内部中间件的方法，具备自更新、热部署、分布式快速功能扩展能力，为运维人员日常运维工作提供有力支撑。
本发明为解决上述技术问题而采用的技术方案是提供一种基于Zabbix开源组件监控DCOS容器和内部中间件的方法，包括以下步骤：
S1：将Zabbix开源组件ZabbixAgent部署在被监控主机上，所述被监控主机部署有需要监控的DCOS容器和DCOS容器内部中间件；
S2：将JavaAgent部署在被监控主机或者服务器上，所述JavaAgent是开源组件ZabbixAgent的补充部分，可通过远程采集协议进行采集服务；
S3：将Zabbix开源组件ZabbixServer部署在服务器上；
S4：通过ZabbixAgent和JavaAgent监控DCOS容器和内部中间件，并将获取的监控数据发送至ZabbixServer；
S5：ZabbixServer接受ZabbixAgent和JavaAgent发送的数据，然后将数据存储到数据库，发现异常则告警。
进一步的，所述步骤S2中，JavaAgent部署在服务器上时使用二级代理通过http、ftp、socket或者jmx协议进行远程监控。
进一步的，所述步骤S4具体包括：S41：将ZabbixAgent和JavaAgent打入到DCOS容器Docker的镜像中，并将ZabbixAgent作为Docker的一个服务运行，然后将ZabbixAgent设置成自启动；S42：通过修改ZabbixAgent的源代码，将DCOS容器对外发布时随机分配的真实的IP地址转换成系统中自定义的固定的IP地址，并对主机进行监控；ZabbixAgent通过DCOS容器固定的IP地址找到Docker的真实的IP地址并发送到JavaAgent，JavaAgent监控当前容器中对外开放的Java管理扩展协议端口，采集容器的性能指标数据，同时获取容器内部中间件的生存状态，并监控当前容器中的数据库。
进一步的，所述步骤S42还包括：Docker启动时，ZabbixAgent同时启动，并且执行相应脚本获取到当前主机的固定的IP地址和容器名，并且发送到ZabbixServer，ZabbixServer根据固定的IP地址建立映射关系，把Docker的不固定的真实的IP地址映射成固定的IP地址并进行展现。
进一步的，所述步骤S5具体包括：S51：将ZabbixAgent采集的主机监控数据和JavaAgent采集的容器性能数据以及中间件状态数据发送到MQ或kafka队列中；S52：ZabbixServer从MQ或kafka队列中获取数据；然后对获取的数据经由zabbixServer根据已配置的告警表达式进行逻辑判断，发现异常则告警；S53：ZabbixServer将步骤S52中获取的数据存储到mysql、redis或者elasticsearch数据库中，同时将发现异常的告警数据存储于关系型数据库中；S54：ZabbixServer获取步骤S52中发现的异常容器或中间件的固定的IP地址，根据映射关系确认异常容器或中间件的真实的IP地址，定位异常容器或中间件。
进一步的，所述DCOS容器内部中间件包括Nginx、Tomcat和Weblogic。
进一步的，所述ZabbixServer获得的监控信息和告警信息显示在Web界面。
本发明对比现有技术有如下的有益效果：本发明提供的基于Zabbix开源组件监控DCOS容器和内部中间件的方法，具备自更新、热部署、分布式快速功能扩展能力，具有支持分布式监控能力，支持代理的监控方式，不因局部问题影响整个系统，具备横向扩展能力，可快速进行部署推广，为运维人员日常运维工作提供有力支撑。
附图说明
图1为本发明实施例中基于Zabbix开源组件监控DCOS容器和内部中间件的方法流程图。
具体实施方式
下面结合附图和实施例对本发明作进一步的描述。
图1为本发明实施例中基于Zabbix开源组件监控DCOS容器和内部中间件的方法结构示意图。
请参见图1，本发明提供的基于Zabbix开源组件监控DCOS容器和内部中间件的方法，包括以下步骤：
S1：将Zabbix开源组件ZabbixAgent部署在被监控主机上，所述被监控主机部署有需要监控的DCOS容器和DCOS容器内部中间件；
S2：将JavaAgent部署在被监控主机或者服务器上，所述JavaAgent是开源组件ZabbixAgent的补充部分，可通过远程采集协议进行采集服务；
S3：将Zabbix开源组件ZabbixServer部署在服务器上；
S4：通过ZabbixAgent和JavaAgent监控DCOS容器和内部中间件，并将获取的监控数据发送至ZabbixServer；
S5：ZabbixServer接受ZabbixAgent和JavaAgent发送的数据，然后将数据存储到数据库，发现异常则告警。
具体的，步骤S2中，JavaAgent部署在服务器上时使用二级代理通过http、ftp、socket或者jmx协议进行远程监控。
具体的，步骤S4包括：S41：将ZabbixAgent和JavaAgent打入到DCOS容器Docker的镜像中，并将ZabbixAgent作为Docker的一个服务运行，然后将ZabbixAgent设置成自启动；S42：通过修改ZabbixAgent的源代码，将DCOS容器对外发布时随机分配的真实的IP地址转换成系统中自定义的固定的IP地址，并对主机进行监控；ZabbixAgent通过DCOS容器固定的IP地址找到Docker的真实的IP地址并发送到JavaAgent，JavaAgent监控当前容器中对外开放的Java管理扩展协议端口，采集容器的性能指标数据，同时获取容器内部中间件的生存状态，并监控当前容器中的数据库。
具体的，步骤S42还包括：Docker启动时，ZabbixAgent同时启动，并且执行相应脚本获取到当前主机的固定的IP地址和容器名，并且发送到ZabbixServer，ZabbixServer根据固定的IP地址建立映射关系，把Docker的不固定的真实的IP地址映射成固定的IP地址并进行展现。
具体的，步骤S5包括：S51：将ZabbixAgent采集的主机监控数据和JavaAgent采集的容器性能数据以及中间件状态数据发送到MQ或kafka队列中；
S52：ZabbixServer从MQ或kafka队列中获取数据；然后对获取的数据经由zabbixServer根据已配置的告警表达式进行逻辑判断，发现异常则告警；
S53：ZabbixServer将步骤S52中获取的数据存储到mysql、redis或者elasticsearch数据库中，同时将发现异常的告警数据存储于关系型数据库中。
S54：ZabbixServer获取步骤S52中发现的异常容器或中间件的固定的IP地址，根据映射关系确认异常容器或中间件的真实的IP地址，定位异常容器或中间件。
本发明提供的基于Zabbix开源组件监控DCOS容器和内部中间件的方法，DCOS容器内部中间件包括Nginx、Tomcat和Weblogic；所述ZabbixServer获得的监控信息和告警信息显示在Web界面。
综上所述，本发明提供的基于Zabbix开源组件监控DCOS容器和内部中间件的方法，具备自更新、热部署、分布式快速功能扩展能力，具有支持分布式监控能力，支持代理的监控方式，不因局部问题影响整个系统，具备横向扩展能力，可快速进行部署推广，为运维人员日常运维工作提供有力支撑。
虽然本发明已以较佳实施例揭示如上，然其并非用以限定本发明，任何本领域技术人员，在不脱离本发明的精神和范围内，当可作些许的修改和完善，因此本发明的保护范围当以权利要求书所界定的为准。

Claims (6)

1.一种基于Zabbix开源组件监控DCOS容器和内部中间件的方法，其特征在于，包括以下步骤：
S1：将Zabbix开源组件ZabbixAgent部署在被监控主机上，所述被监控主机部署有需要监控的DCOS容器和DCOS容器内部中间件；
S2：将JavaAgent部署在被监控主机或者服务器上，所述JavaAgent是开源组件ZabbixAgent的补充部分，可通过远程采集协议进行采集服务；
S3：将Zabbix开源组件ZabbixServer部署在服务器上；
S4：通过ZabbixAgent和JavaAgent监控DCOS容器和内部中间件，并将获取的监控数据发送至ZabbixServer；
S5：ZabbixServer接受ZabbixAgent和JavaAgent发送的数据，然后将数据存储到数据库，发现异常则告警；
所述步骤S4具体包括：
S41：将ZabbixAgent和JavaAgent打入到DCOS容器Docker的镜像中，并将ZabbixAgent作为Docker的一个服务运行，然后将ZabbixAgent设置成自启动；
S42：通过修改ZabbixAgent的源代码，将DCOS容器对外发布时随机分配的真实的IP地址转换成系统中自定义的固定的IP地址，并对主机进行监控；ZabbixAgent通过DCOS容器固定的IP地址找到Docker的真实的IP地址并发送到JavaAgent，JavaAgent监控当前容器中对外开放的Java管理扩展协议端口，采集容器的性能指标数据，同时获取容器内部中间件的生存状态，并监控当前容器中的数据库。
2.如权利要求1所述的基于Zabbix开源组件监控DCOS容器和内部中间件的方法，其特征在于，所述步骤S2中，JavaAgent部署在服务器上时使用二级代理通过http、ftp、socket或者jmx协议进行远程监控。
3.如权利要求1所述的基于Zabbix开源组件监控DCOS容器和内部中间件的方法，其特征在于，所述步骤S42还包括： Docker启动时，ZabbixAgent同时启动，并且执行相应脚本获取到当前主机的固定的IP地址和容器名，并且发送到ZabbixServer，ZabbixServer 根据固定的IP地址建立映射关系，把Docker的不固定的真实的IP地址映射成固定的IP地址并进行展现。
4.如权利要求3所述的基于Zabbix开源组件监控DCOS容器和内部中间件的方法，其特征在于，所述步骤S5具体包括：
S51：将ZabbixAgent采集的主机监控数据和JavaAgent采集的容器性能数据以及中间件状态数据发送到MQ或kafka 队列中；
S52：ZabbixServer从MQ或kafka队列中获取数据；然后对获取的数据经由zabbixServer根据已配置的告警表达式进行逻辑判断，发现异常则告警；
S53：ZabbixServer将步骤S52中获取的数据存储到mysql、redis或者elasticsearch数据库中，同时将发现异常的告警数据存储于关系型数据库中；
S54：ZabbixServer获取步骤S52中发现的异常容器或中间件的固定的IP地址，根据映射关系确认异常容器或中间件的真实的IP地址，定位异常容器或中间件。
5.如权利要求1所述的基于Zabbix开源组件监控DCOS容器和内部中间件的方法，其特征在于，所述DCOS容器内部中间件包括Nginx、Tomcat和Weblogic。
6.如权利要求1所述的基于Zabbix开源组件监控DCOS容器和内部中间件的方法，其特征在于，所述ZabbixServer将获得的监控信息和告警信息显示在Web界面。
CN201811131696.6A 2018-09-27 2018-09-27 基于Zabbix开源组件监控DCOS容器和内部中间件的方法 Active CN109120481B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811131696.6A CN109120481B (zh) 2018-09-27 2018-09-27 基于Zabbix开源组件监控DCOS容器和内部中间件的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811131696.6A CN109120481B (zh) 2018-09-27 2018-09-27 基于Zabbix开源组件监控DCOS容器和内部中间件的方法

Publications (2)

Publication Number Publication Date
CN109120481A CN109120481A (zh) 2019-01-01
CN109120481B true CN109120481B (zh) 2021-06-04

Family

ID=64856800

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811131696.6A Active CN109120481B (zh) 2018-09-27 2018-09-27 基于Zabbix开源组件监控DCOS容器和内部中间件的方法

Country Status (1)

Country Link
CN (1) CN109120481B (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110048888A (zh) * 2019-04-16 2019-07-23 深圳市致宸信息科技有限公司 一种基于zabbix监控告警的方法、服务器、设备及存储介质
CN110213120B (zh) * 2019-04-24 2020-12-04 深圳智链物联科技有限公司 一种消息中间件的压测方法、装置及终端设备
CN110213125A (zh) * 2019-05-23 2019-09-06 南京维拓科技股份有限公司 一种云环境下基于时序数据的异常检测系统
CN112702233A (zh) * 2020-12-21 2021-04-23 北京首汽智行科技有限公司 一种Java虚拟机JVM集群监控方法
CN112711511B (zh) * 2020-12-29 2023-09-01 航天信息股份有限公司 一种基于脚本服务器对终端设备进行监控的方法及系统
CN112685260A (zh) * 2021-01-04 2021-04-20 浪潮云信息技术股份公司 一种实现对服务器监控的方法
CN112783723A (zh) * 2021-01-20 2021-05-11 北京首汽智行科技有限公司 一种Java虚拟机监控方法
CN113067719B (zh) * 2021-02-07 2021-12-07 杭州又拍云科技有限公司 一种基于ip协议可选字段的容器公网带宽限制方法
CN113778790A (zh) * 2021-08-19 2021-12-10 北京仿真中心 一种基于Zabbix的计算系统状态监控的方法和系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105763395A (zh) * 2016-04-01 2016-07-13 汉柏科技有限公司 云环境下用于虚拟机和容器的监控管理方法及系统
CN106059841A (zh) * 2016-08-10 2016-10-26 北京北信源软件股份有限公司 一种对部署的中间件进行监控的方法
CN106371974A (zh) * 2016-08-30 2017-02-01 中国民生银行股份有限公司 Docker容器内应用程序的监控方法和发布平台
CN106790595A (zh) * 2016-12-29 2017-05-31 上海理想信息产业（集团）有限公司 一种Docker容器主动负载均衡装置及方法
CN107483245A (zh) * 2017-08-14 2017-12-15 上海新炬网络信息技术股份有限公司 一种基于karaf_agent的主动采集实现装置
CN108512719A (zh) * 2018-03-02 2018-09-07 南京易捷思达软件科技有限公司 一种基于开源云平台的一体化资源监控系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10079719B2 (en) * 2016-06-29 2018-09-18 International Business Machines Corporation Automatically tuning middleware in a mobilefirst platform running in a docker container infrastructure

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105763395A (zh) * 2016-04-01 2016-07-13 汉柏科技有限公司 云环境下用于虚拟机和容器的监控管理方法及系统
CN106059841A (zh) * 2016-08-10 2016-10-26 北京北信源软件股份有限公司 一种对部署的中间件进行监控的方法
CN106371974A (zh) * 2016-08-30 2017-02-01 中国民生银行股份有限公司 Docker容器内应用程序的监控方法和发布平台
CN106790595A (zh) * 2016-12-29 2017-05-31 上海理想信息产业（集团）有限公司 一种Docker容器主动负载均衡装置及方法
CN107483245A (zh) * 2017-08-14 2017-12-15 上海新炬网络信息技术股份有限公司 一种基于karaf_agent的主动采集实现装置
CN108512719A (zh) * 2018-03-02 2018-09-07 南京易捷思达软件科技有限公司 一种基于开源云平台的一体化资源监控系统

Also Published As

Publication number Publication date
CN109120481A (zh) 2019-01-01

Similar Documents

Publication Publication Date Title
CN109120481B (zh) 基于Zabbix开源组件监控DCOS容器和内部中间件的方法
CN104731580B (zh) 基于Karaf与ActiveMQ的自动化运维系统及其实现方法
CN109857613B (zh) 一种基于采集集群的自动化运维系统
CN102480749B (zh) 一种远程采集主机进程信息的方法、装置和系统
CN106992903B (zh) 一种基于网络设备的数据采集系统及方法
CN109451021B (zh) 物联网边缘侧多异构网络接入系统与接入方法
WO2016045403A1 (zh) 运行环境的配置方法及装置、系统
CN104021078B (zh) 软件监控装置及方法
CN107483245A (zh) 一种基于karaf_agent的主动采集实现装置
CN110012088A (zh) 一种基于Kubernets的Redis主从集群自动化部署方案
CN106161119B (zh) 一种WebLogic中间件集群自动部署工具及方法
CN104506393A (zh) 一种基于云平台的系统监控方法
KR102328938B1 (ko) 전자 시스템들에서의 로그 데이터의 관리
CN110086664B (zh) 一种接入设备故障处理方法及装置
US11153376B2 (en) Systems and methods for an internet of things computing shell
CN103973484B (zh) 一种基于网络拓扑结构的运维管理系统
US20180324063A1 (en) Cloud-based system for device monitoring and control
JP2017536722A (ja) セルラーネットワークにおけるｗｌａｎアラーム通知の方法および装置
WO2015131665A1 (zh) 一种机架图展示方法和装置
CN106713507B (zh) 一种批量云终端设备的管理方法及管理系统
CN107943665A (zh) 一种系统主机监控方法及装置
CN111431749A (zh) 一种fpga云服务器管理平台及其使用方法
CN111352807A (zh) 服务器资源实时监控方法及装置
CN105490849B (zh) 应用系统的自动部署方法及系统
CN110569140A (zh) 一种运维方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant