CN114697232B - Skywalking探针的指标数据采集系统、方法及电子设备 - Google Patents
Skywalking探针的指标数据采集系统、方法及电子设备 Download PDFInfo
- Publication number
- CN114697232B CN114697232B CN202011567984.3A CN202011567984A CN114697232B CN 114697232 B CN114697232 B CN 114697232B CN 202011567984 A CN202011567984 A CN 202011567984A CN 114697232 B CN114697232 B CN 114697232B
- Authority
- CN
- China
- Prior art keywords
- probe
- skywalk
- acquisition
- agent
- service system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 239000000523 sample Substances 0.000 title claims abstract description 237
- 238000000034 method Methods 0.000 title claims abstract description 50
- 230000008569 process Effects 0.000 claims abstract description 15
- 238000012545 processing Methods 0.000 claims abstract description 6
- 230000001960 triggered effect Effects 0.000 claims abstract description 4
- 238000004590 computer program Methods 0.000 claims description 9
- 238000010200 validation analysis Methods 0.000 claims description 8
- 230000004044 response Effects 0.000 claims description 7
- 230000003247 decreasing effect Effects 0.000 claims 1
- 238000012423 maintenance Methods 0.000 description 15
- 238000013480 data collection Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 2
- 238000012351 Integrated analysis Methods 0.000 description 1
- 230000005856 abnormality Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000035800 maturation Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/04—Processing captured monitoring data, e.g. for logfile generation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/06—Management of faults, events, alarms or notifications
- H04L41/0654—Management of faults, events, alarms or notifications using network fault recovery
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/06—Management of faults, events, alarms or notifications
- H04L41/0677—Localisation of faults
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Data Mining & Analysis (AREA)
- Medical Treatment And Welfare Office Work (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请公开了一种Skywalking探针的指标数据采集系统、方法及电子设备,该系统包括:Skywalking代理在业务系统启动后,分别向配置服务器和Skywalking服务端发送注册信息;接收配置服务器返回的探针配置数据并配置探针及探针的采集指标项;在业务系统运行过程中,使被触发的探针根据对应配置的采集指标项采集业务系统中对应的指标数据,并发送给Skywalking服务端;配置服务器用于接收注册信息以与业务系统建立连接;配置探针配置数据并向Skywalking代理发送探针配置数据;Skywalking服务端用于接收注册信息以与业务系统建立连接;接收Skywalking代理发送的指标数据并进行保存处理。本申请实施例能够动态配置Skywalking代理的探针采集指标项范围,实现配置数据实时生效的同时还不影响业务的正常运行。
Description
技术领域
本申请涉及探针数据采集技术领域,尤其涉及一种Skywalking探针的指标数据采集系统、方法及电子设备、计算机可读存储介质。
背景技术
随着应用云技术的逐渐成熟,微服务架构和容器技术被越来越多的运用到复杂业务系统的升级改造中,使得系统可以支撑大并发量的业务需求,同时还可以根据业务需求进行弹性伸缩。服务云化也使得分布式系统变得日益复杂,众多的分布式组件如:微服务、分布式缓存、分布式数据库等构成了繁杂的应用生态,一个简单的业务场景可能需要几十上百个的服务组件相互调用才能完成。
如果在处理某个业务场景的时候由于需要调用多个服务才能实现,一旦出现异常或者响应慢的情况,很难在第一时间定位到具体是那个服务出现问题,需要花费大量的时间和精力登录相关服务器查看对应的服务日志才能分析出问题所在,此外在系统运行过程中,运维人员很难了解每个业务涉及的服务及其调用链路,这也导致了遇到故障是很难对业务场景进行复盘,因此引入Skywalking链路跟踪组件,不仅能够良好的展示整个调用链路的路径走向,同时很能清晰的查看每个服务所消耗的时间。
Skywalking链路跟踪中间件给调用链跟踪和问题定位带来了极大的便利,但是现有的Skywalking代理的采集指标数据的机制是固定的,提供的探针有限且采集范围有限造成采集的指标数据有限,因此给运维分析和定位问题造成了一定的不便。
如何提高运维基于Skywalking探针的指标数据采集解决业务服务存在问题的效率,是目前亟待解决的技术问题。
发明内容
本申请实施例的目的是提供一种Skywalking探针的指标数据采集系统、方法及电子设备、计算机可读存储介质,用以解决现有运维基于Skywalking探针的指标数据采集存在的解决业务服务故障效率低的问题。
为了解决上述技术问题,本说明书是这样实现的:
第一方面,提供了一种Skywalking探针的指标数据采集系统,包括Skywalking代理、Skywalking服务端和配置服务器,所述Skywalking代理,用于在对应嵌入的业务系统启动后,分别向所述配置服务器和所述Skywalking服务端发送注册信息;接收所述配置服务器返回的探针配置数据并配置探针及探针的采集指标项;在所述业务系统运行过程中,使被触发的探针根据对应配置的采集指标项采集所述业务系统中对应的指标数据;将采集的指标数据发送给所述Skywalking服务端;所述配置服务器,用于接收所述注册信息以与所述业务系统建立连接;配置探针配置数据并向所述Skywalking代理发送所述探针配置数据;所述Skywalking服务端,用于接收所述注册信息以与所述业务系统建立连接;接收所述Skywalking代理发送的所述指标数据并进行保存处理。
可选的,所述配置服务器包括:实例管理模块,用于接收所述Skywalking服务端发送注册信息,所述注册信息包括所述业务系统所在主机的IP地址、端口和心跳地址,所述实例管理模块根据所述IP地址、端口定位所述业务系统的位置,并根据所述心跳地址与所述业务系统保持心跳;探针管理模块,用于管理可提供给所述Skywalking代理执行指标数据采集的各种类型的探针;采集范围配置模块,用于配置所述探针管理模块管理的每个探针的采集指标项范围;配置生效模块,用于将包括所述探针和探针的采集指标项范围的探针配置数据发送到所述Skywalking代理并生效。
可选的,所述探针管理模块用于:根据所述业务系统的服务需求,增加或减少可提供给所述Skywalking代理执行指标数据采集的探针,以修改探针;所述采集范围配置模块还用于:根据所述业务系统的运行状态,开启或关闭预定探针的采集指标项,以动态修改探针的采集指标项范围;所述配置生效模块还用于:基于修改后的探针和/或探针的采集指标项范围,向所述Skywalking代理发送更新的探针配置数据。
可选的,所述采集范围配置模块根据所述业务系统的运行状态,开启或关闭预定探针的采集指标项,包括如下至少一种:
在所述业务系统繁忙时,关闭所述Skywalking代理中预定探针的至少部分的探针采集指标项;
在所述业务系统空闲时,开启所述Skywalking代理中预定探针的至少部分的探针采集指标项;
在所述业务系统的特定业务存在问题时,根据所述特定业务的调用链路径上的相关业务服务,开启所述Skywalking代理中所述相关业务服务对应的探针指标采集项。
可选的,所述各种类型的探针包括如下至少一种:
用于采集所述业务系统的URL、IP地址、请求头、报文体、响应码和响应内容中的至少一项的数据库探针;
用于采集所述业务系统的IP地址和/或SQL语句的HTTP探针;
用于采集所述业务系统的堆栈信息、环境信息、内存信息、CPU信息、IO信息、关键业务数据、Java虚拟机信息中的至少一项的探针。
可选的,所述Skywalking代理还用于:接收所述更新的探针配置数据,并更新对应的探针配置和/或探针的采集指标项范围;基于更新后的探针配置和/或探针的采集指标项范围,采集所述业务系统中对应的指标数据。
第二方面,提供了一种基于Skywalking探针的指标数据采集方法,执行在配置服务器,所述方法包括:接收Skywalking代理的注册信息,以定位所述Skywalking代理嵌入的业务系统的位置;配置探针配置数据并根据所述业务系统的位置向所述Skywalking代理发送探针配置数据,其中,所述探针配置数据包括可提供给所述Skywalking代理执行指标数据采集的探针和每个探针的采集指标项范围,以使得所述Skywalking代理根据所述探针配置数据配置探针及探针的采集指标项。
可选的,该方法还包括:根据所述业务系统的服务需求,增加或减少可提供给所述Skywalking代理执行指标数据采集的探针,以修改探针;根据所述业务系统的运行状态,开启或关闭预定探针的采集指标项,以动态修改探针的采集指标项范围;基于修改后的探针和/或探针的采集指标项范围,向所述Skywalking代理发送更新的探针配置数据,以使得所述Skywalking代理根据所述更新的探针配置数据动态配置探针及探针的采集指标项。
第三方面,提供了一种电子设备,包括处理器和与所述存储器电连接的处理器,所述存储器存储有可在所述处理器运行的计算机程序,该计算机程序被该处理器执行时实现如第二方面所述的方法的步骤。
第四方面,提供了一种计算机可读存储介质,该计算机可读存储介质上存储计算机程序,该计算机程序被处理器执行时实现如第二方面所述的方法的步骤。
在本申请实施例中,通过配置服务器实现了对Skywalking代理的探针指标项采集范围的配置,使得Skywalking代理根据配置服务器发送的探针配置数据,配置探针及探针的采集指标项,并基于配置的探针及探针的采集指标项采集业务系统中对应的指标数据,将采集的指标数据发送给Skywalking服务端进行保存处理。采集的指标数据可以用于运维人员分析和定位业务系统服务过程中存在的故障并及时解决,从而提高了运维解决问题的效率。
此外,通过配置服务器根据业务系统的服务需求和/或业务系统的运行状态,动态修改探针和/或探针的采集指标项范围,并发送给Skywalking代理进行实时配置更新,从而可以在配置实时生效的同时还不影响业务的正常运行。
附图说明
此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
图1是本申请实施例的Skywalking探针的指标数据采集系统架构图。
图2是本申请第一实施例的基于Skywalking探针的指标数据采集方法的流程示意图。
图3是本申请第二实施例的基于Skywalking探针的指标数据采集方法的流程示意图。
图4是本申请基于Skywalking探针的指标数据采集方法的业务流程示例。
图5是本申请实施例的电子设备的结构方框图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。本申请中附图编号仅用于区分方案中的各个步骤,不用于限定各个步骤的执行顺序,具体执行顺序以说明书中描述为准。
为了解决现有技术中存在的问题,本申请实施例提供一种Skywalking探针的指标数据采集系统,图1是本申请实施例的Skywalking探针的指标数据采集系统架构图。
如图1所示,指标数据采集系统包括Skywalking代理1200、Skywalking服务端1400和配置服务器1600。
Skywalking代理1200作为客户端以插件的形式嵌入在业务系统中运行起来,负责采集系统指标数据并发送到Skywalking服务端1400。用于在业务系统启动后分别向配置服务器1600和Skywalking服务端1400发送注册信息。Skywalking代理1200在业务系统每次启动时都会发送注册信息,期间注册信息中断时也会定期发送注册信息,注册信息包括业务系统所在主机的IP地址、端口和心跳地址等,注册信息能够分别建立配置服务器1600、Skywalking服务端1400与Skywalking代理1200建立连接,能快速定位到Skywalking代理1200所在业务系统的位置,并与其保持心跳。
Skywalking代理1200还通过注册信息向配置服务器1600进行实例注册,配置服务器1600用于接收Skywalking代理1200发送的注册信息以与业务系统建立连接,配置探针配置数据并向Skywalking代理1200发送所述探针配置数据。Skywalking代理1200接收配置服务器1600返回的探针配置数据,并配置探针及探针的采集指标项。在业务系统运行过程中,使被触发的探针根据对应配置的采集指标项采集所述业务系统中对应的指标数据,并将采集的指标数据发送给所述Skywalking服务端1400。
Skywalking服务端1400用于接收Skywalking代理1200发送的注册信息以与Skywalking代理1200所在的业务系统建立连接,接收Skywalking代理的配置探针采集的指标数据并进行保存处理。Skywalking服务端1400是对指标数据进行保存处理的链路数据收集器,对Skywalking代理1200传过来的指标数据进行整合分析处理并落入相关的数据存储中。
实例是指加上采集探针后的业务系统,通过Skywalking代理1200向配置服务器1600和Skywalking服务端1400发送注册信息,可以将Skywalking代理1200所在的业务系统分别在配置服务器1600和Skywalking服务端1400进行实例注册,并由配置服务器1600、Skywalking服务端1400分别对应注册的业务系统进行管理。
如图1所示,Skywalking代理1200中设置有配置数据、实例信息和采集探针。配置数据用于配置Skywalking代理1200中用于采集的探针及探针的采集指标项,配置数据由配置服务器1600下发提供给Skywalking代理1200。实例信息包括Skywalking代理1200所嵌入的业务系统的有关信息,Skywalking代理1200通过实例信息包括的注册信息等与配置服务器1600以及Skywalking服务端1400进行实例注册和心跳保持。
Skywalking代理1200配置的采集探针可扩展为包括如下至少一种:用于采集业务系统的URL(Uniform Resource Locator,统一资源定位符)、IP地址、请求头、报文体、响应码和响应内容中的至少一项的数据库探针;用于采集业务系统的IP地址和/或SQL语句的HTTP探针;用于采集业务系统的堆栈信息、环境信息、内存信息、CPU信息、输入/输出(I/O)信息、关键业务数据、Java虚拟机信息(JWM)中的至少一项的探针。
如图1示例所示,Skywalking代理1200配置的采集探针用于采集业务系统的JWM、主机信息、内存信息、I/O信息等。
基于上述实施例提供的方案,可选的,如图1所示,配置服务器1600包括:实例管理模块1620、探针管理模块1640、采集范围配置模块1660和配置生效模块1680。
实例管理模块1620用于接收Skywalking服务端1200发送注册信息,如上文所述,注册信息包括业务系统所在主机的IP地址、端口和心跳地址,所述实例管理模块1620根据所述IP地址、端口定位所述业务系统的位置,并根据所述心跳地址与所述业务系统保持心跳。
探针管理模块1640用于管理可提供给所述Skywalking代理1200执行指标数据采集的各种类型的探针,在一个实施例中,所述探针管理模块1640用于根据所述业务系统的服务需求,增加或减少可提供给所述Skywalking代理1200执行指标数据采集的探针,以修改探针。通过探针管理模块1640管理探针的类型和数量,从而配置可提供给Skywalking代理1200用于采集的探针。
采集范围配置模块1660用于配置所述探针管理模块管理1640的每个探针的采集指标项范围,例如对于配置可提供给Skywalking代理1200的采集探针,对每个采集探针所采集的指标项增加了开关项控制,根据动态配置每个探针的采集指标项范围,可开启或关闭其对应采集的指标项,由此配置服务器1600下发的配置数据动态开启Skywalking代理1200的对应探针指标项的采集。
配置生效模块1680用于将包括所述探针和探针的采集指标项范围的探针配置数据发送到所述Skywalking代理1200并生效。配置服务器1600还包括系统配置1690,用于管理配置服务器1600所在管理平台的基本配置。
所述采集范围配置模块1660还用于:根据所述业务系统的运行状态,开启或关闭预定探针的采集指标项,以动态修改探针的采集指标项范围。可选的,采集范围配置模块1660根据所述业务系统的运行状态,开启或关闭预定探针的采集指标项,包括如下至少一种:在所述业务系统繁忙时,关闭所述Skywalking代理1200中预定探针的至少部分的探针采集指标项;在所述业务系统空闲时,开启所述Skywalking代理1200中预定探针的至少部分的探针采集指标项;在所述业务系统的特定业务存在问题时,根据所述特定业务的调用链路径上的相关业务服务,开启所述Skywalking代理1200中所述相关业务服务对应的探针指标采集项。
配置生效模块1680还用于:基于修改后的探针和/或探针的采集指标项范围,向所述Skywalking代理1200发送更新的探针配置数据。
在配置生效模块1680向Skywalking代理1200下方更新的配置数据之后,相应地,Skywalking代理1200还用于:接收所述更新的探针配置数据,并更新对应的探针配置和/或探针的采集指标项范围;基于更新后的探针配置和/或探针的采集指标项范围,采集所述业务系统中对应的指标数据。
如此,例如对于可以采集堆栈、环境信息、内存使用情况、CPU使用情况、IO使用情况等的采集探针,通过配置服务器1600关于这个采集探针的配置页面,可通过控制采集堆栈、环境信息、内存使用情况、CPU使用情况、IO使用情况的采集指标项范围的开关,通过配置生效功能将对应的配置数据下发到嵌入业务系统的Skywalking代理1200中的探针插件,探针插件接收到该配置数据后立即更新本地的探针配置信息,并基于更新的探针对业务系统的相关指标项进行指标数据采集。
在本申请实施例中,通过配置服务器实现了对Skywalking代理的指标项采集范围的配置,使得Skywalking代理根据配置服务器发送的探针配置数据,配置探针及探针的采集指标项,并基于配置的探针及探针的采集指标项采集业务系统中对应的指标数据,将采集的指标数据发送给Skywalking服务端进行保存处理。采集的指标数据可以用于运维人员分析和定位业务系统服务过程中存在的故障并及时解决,从而提高了运维解决问题的效率。
本申请实施例可动态配置Skywalking代理的指标项采集范围配置,业务系统在繁忙时段适当减少探针采集指标项范围,减轻业务系统负载和运行压力。业务空闲时段适当增加采集指标项范围,为后续的运维工作提供数据基础,提升运维能力,避免类似传统服务因修改配置而重启整个业务系统,影响业务的正常操作。实现了指标数据获取的可配置,真正做到配置数据实时生效的同时还不影响业务的正常运行。
此外,平时业务系统正常运行状态时可以关闭不必要的探针采集指标项,在运维人员分析和定位问题时,可根据问题所经过的路径动态开启相关业务服务的探针采集指标项,迅速定位问题产生的来源及原因。可通过查看业务调用的整个调用链路径定位业务的数据走向,Skywalking服务端提供了调用链路径的查看页面。根据调用链路径上的相关服务适当增加指标采集范围,为快速处理和解决问题提供了更多的数据支持,提高运维效率,为快速定位问题提供了数据基础。
动态配置采集数据可以减少分布式系统在正常运行时的资源开销,在需要问题定位时可以采集到更全面的数据,直接通过链路上采集到的数据分析定位具体问题。本申请实施例可以对Skywalking代理的采集探针范围进行扩展,同时为了避免扩展的采集范围尽可能小的影响到业务系统,通过增加额外的配置服务器,可动态配置Skywalking代理的探针采集范围,实现业务系统在不重启状态下动态控制采集指标数据,方便运维人员在系统出现问题时通过动态配置采集范围,来快速定位问题发生的原因并快速解决。
在本申请的一个实施例中,还提供了一种基于Skywalking探针的指标数据采集方法,执行在配置服务器,图2为本申请第一实施例的基于Skywalking探针的指标数据采集方法的流程示意图。
如图2所述,该实施例的方法包括:
步骤102,接收Skywalking代理的注册信息,以定位所述Skywalking代理嵌入的业务系统的位置;
步骤104,配置探针配置数据并根据所述业务系统的位置向所述Skywalking代理发送探针配置数据,其中,所述探针配置数据包括可提供给所述Skywalking代理执行指标数据采集的探针和每个探针的采集指标项范围,以使得所述Skywalking代理根据所述探针配置数据配置探针及探针的采集指标项。
可选的,该实施例的方法还包括图3所示的步骤,图3是本申请第二实施例的基于Skywalking探针的指标数据采集方法的流程示意图。
如图3所示,该方法还包括:
步骤202,根据所述业务系统的服务需求,增加或减少可提供给所述Skywalking代理执行指标数据采集的探针,以修改探针;
步骤204,根据所述业务系统的运行状态,开启或关闭预定探针的采集指标项,以动态修改探针的采集指标项范围;
步骤206,基于修改后的探针和/或探针的采集指标项范围,向所述Skywalking代理发送更新的探针配置数据,以使得所述Skywalking代理根据所述更新的探针配置数据动态配置探针及探针的采集指标项。
图4给出了本申请基于Skywalking探针的指标数据采集方法的业务流程示例,如图4所示,该方法执行在业务系统、Skywalking代理、Skywalking服务端和配置服务器之间,包括以下步骤:
步骤302:业务系统的服务启动;
步骤304:业务系统启动,同时触发Skywalking代理启动;
步骤306:Skywalking代理启动成功后,向Skywalking服务端发送注册信息;
步骤308:Skywalking代理同时向配置服务器发送注册信息;
步骤310:配置服务器向Skywalking代理下发初始化配置数据;
步骤312:Skywalking代理接收到配置数据后,根据初始化配置数据进行本地的探针采集的初始化配置。
在指标数据获取循环阶段,包括:
步骤314:在业务系统的运行过程中,一旦拦截指标数据则触发Skywalking代理的采集探针;
步骤316:Skywalking代理的采集探针根据配置获取对应的指标数据;
步骤318:Skywalking代理采集探针最终获取到的指标数据向Skywalking服务端发送。
在配置更新循环阶段,包括:
步骤320:配置服务器可以实时修改Skywalking代理的探针采集配置;
步骤322:配置服务器向Skywalking代理下发修改后的配置数据;
步骤324:Skywalking代理接收到配置数据后,实时更新配置数据。
可选的,本申请实施例还提供一种电子设备,图5是本申请实施例的电子设备的结构方框图。
如图5所示,电子设备2000包括存储器2200和与所述存储器2200电连接的处理器2400,所述存储器2200存储有可在所述处理器2400运行的计算机程序,所述计算机程序被所述处理器执行时实现上述任意一种基于Skywalking探针的指标数据采集方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本申请实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述任意一种基于Skywalking探针的指标数据采集方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random Access Memory,简称RAM)、磁碟或者光盘等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。
Claims (8)
1.一种Skywalking探针的指标数据采集系统,其特征在于,包括Skywalking代理、Skywalking服务端和配置服务器,
所述Skywalking代理,用于在对应嵌入的业务系统启动后,分别向所述配置服务器和所述Skywalking服务端发送注册信息;接收所述配置服务器返回的探针配置数据并配置探针及探针的采集指标项;在所述业务系统运行过程中,使被触发的探针根据对应配置的采集指标项采集所述业务系统中对应的指标数据;将采集的指标数据发送给所述Skywalking服务端;
所述配置服务器,包括:实例管理模块,用于接收所述注册信息以与所述业务系统建立连接;探针管理模块,用于管理可提供给所述Skywalking代理执行指标数据采集的各种类型的探针,根据所述业务系统的服务需求,增加或减少可提供给所述Skywalking代理执行指标数据采集的探针,以修改探针;采集范围配置模块,用于配置所述探针管理模块管理的每个探针的采集指标项范围,根据所述业务系统的运行状态,开启或关闭预定探针的采集指标项,以动态修改探针的采集指标项范围;配置生效模块,用于将包括所述探针和探针的采集指标项范围的探针配置数据发送到所述Skywalking代理并生效,基于修改后的探针和/或探针的采集指标项范围,向所述Skywalking代理发送更新的探针配置数据;
所述Skywalking服务端,用于接收所述注册信息以与所述业务系统建立连接;接收所述Skywalking代理发送的所述指标数据并进行保存处理。
2.如权利要求1所述的系统,其特征在于,所述实例管理模块,具体用于接收所述Skywalking代理发送注册信息,所述注册信息包括所述业务系统所在主机的IP地址、端口和心跳地址,所述实例管理模块根据所述IP地址、端口定位所述业务系统的位置,并根据所述心跳地址与所述业务系统保持心跳。
3.如权利要求1所述的系统,其特征在于,所述采集范围配置模块根据所述业务系统的运行状态,开启或关闭预定探针的采集指标项,包括如下至少一种:
在所述业务系统繁忙时,关闭所述Skywalking代理中预定探针的至少部分的探针采集指标项;
在所述业务系统空闲时,开启所述Skywalking代理中预定探针的至少部分的探针采集指标项;
在所述业务系统的特定业务存在问题时,根据所述特定业务的调用链路径上的相关业务服务,开启所述Skywalking代理中所述相关业务服务对应的探针指标采集项。
4.如权利要求1所述的系统,其特征在于,所述各种类型的探针包括如下至少一种:
用于采集所述业务系统的URL、IP地址、请求头、报文体、响应码和响应内容中的至少一项的数据库探针;
用于采集所述业务系统的IP地址和/或SQL语句的HTTP探针;
用于采集所述业务系统的堆栈信息、环境信息、内存信息、CPU信息、IO信息、关键业务数据、Java虚拟机信息中的至少一项的探针。
5.如权利要求1所述的系统,其特征在于,所述Skywalking代理还用于:
接收所述更新的探针配置数据,并更新对应的探针配置和/或探针的采集指标项范围;
基于更新后的探针配置和/或探针的采集指标项范围,采集所述业务系统中对应的指标数据。
6.一种基于Skywalking探针的指标数据采集方法,其特征在于,执行在配置服务器,所述方法包括:
接收Skywalking代理的注册信息,以定位所述Skywalking代理嵌入的业务系统的位置;
配置探针配置数据并根据所述业务系统的位置向所述Skywalking代理发送探针配置数据,其中,所述探针配置数据包括可提供给所述Skywalking代理执行指标数据采集的探针和每个探针的采集指标项范围,以使得所述Skywalking代理根据所述探针配置数据配置探针及探针的采集指标项;
根据所述业务系统的服务需求,增加或减少可提供给所述Skywalking代理执行指标数据采集的探针,以修改探针;
根据所述业务系统的运行状态,开启或关闭预定探针的采集指标项,以动态修改探针的采集指标项范围;
基于修改后的探针和/或探针的采集指标项范围,向所述Skywalking代理发送更新的探针配置数据,以使得所述Skywalking代理根据所述更新的探针配置数据动态配置探针及探针的采集指标项。
7.一种电子设备,其特征在于,包括:存储器和与所述存储器电连接的处理器,所述存储器存储有可在所述处理器运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求6所述的方法的步骤。
8.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求6所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011567984.3A CN114697232B (zh) | 2020-12-25 | 2020-12-25 | Skywalking探针的指标数据采集系统、方法及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011567984.3A CN114697232B (zh) | 2020-12-25 | 2020-12-25 | Skywalking探针的指标数据采集系统、方法及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114697232A CN114697232A (zh) | 2022-07-01 |
CN114697232B true CN114697232B (zh) | 2024-02-23 |
Family
ID=82130187
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011567984.3A Active CN114697232B (zh) | 2020-12-25 | 2020-12-25 | Skywalking探针的指标数据采集系统、方法及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114697232B (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116016286A (zh) * | 2022-12-13 | 2023-04-25 | 启明信息技术股份有限公司 | 面向三流的全链路监控系统及方法 |
CN117056380B (zh) * | 2023-10-11 | 2024-01-30 | 广州嘉为科技有限公司 | 一种调用链数据的处理方法、装置及存储介质 |
CN117201292B (zh) * | 2023-10-30 | 2024-02-23 | 智业软件股份有限公司 | 能准确定位微服务间请求调用异常的方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7299277B1 (en) * | 2002-01-10 | 2007-11-20 | Network General Technology | Media module apparatus and method for use in a network monitoring environment |
CN102761454A (zh) * | 2011-04-28 | 2012-10-31 | 中兴通讯股份有限公司 | 一种物联网监控方法及系统 |
CN105786692A (zh) * | 2014-12-24 | 2016-07-20 | 远光软件股份有限公司 | 一种软件运行期性能分析方法 |
CN109067584A (zh) * | 2018-08-13 | 2018-12-21 | 海南宝通实业公司 | 一种基于终端单元的移动网络性能探测方法及系统 |
CN111158995A (zh) * | 2019-11-29 | 2020-05-15 | 武汉物易云通网络科技有限公司 | 基于skywalking、ELK平台实现跨系统日志跟踪查询的方法及系统 |
CN111541590A (zh) * | 2020-07-08 | 2020-08-14 | 广州市玄武无线科技股份有限公司 | 链路监控方法、告警方法、系统、终端及存储介质 |
-
2020
- 2020-12-25 CN CN202011567984.3A patent/CN114697232B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7299277B1 (en) * | 2002-01-10 | 2007-11-20 | Network General Technology | Media module apparatus and method for use in a network monitoring environment |
CN102761454A (zh) * | 2011-04-28 | 2012-10-31 | 中兴通讯股份有限公司 | 一种物联网监控方法及系统 |
CN105786692A (zh) * | 2014-12-24 | 2016-07-20 | 远光软件股份有限公司 | 一种软件运行期性能分析方法 |
CN109067584A (zh) * | 2018-08-13 | 2018-12-21 | 海南宝通实业公司 | 一种基于终端单元的移动网络性能探测方法及系统 |
CN111158995A (zh) * | 2019-11-29 | 2020-05-15 | 武汉物易云通网络科技有限公司 | 基于skywalking、ELK平台实现跨系统日志跟踪查询的方法及系统 |
CN111541590A (zh) * | 2020-07-08 | 2020-08-14 | 广州市玄武无线科技股份有限公司 | 链路监控方法、告警方法、系统、终端及存储介质 |
Non-Patent Citations (1)
Title |
---|
微服务故障诊断相关技术研究探讨;赵建涛;黄立松;;网络新媒体技术(01);全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN114697232A (zh) | 2022-07-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN114697232B (zh) | Skywalking探针的指标数据采集系统、方法及电子设备 | |
CN110535831B (zh) | 基于Kubernetes和网络域的集群安全管理方法、装置及存储介质 | |
RU2378689C2 (ru) | Система и способ для контроля сети | |
CN101605056B (zh) | 一种j2ee服务器监控装置及采用该装置的监控方法 | |
CN108965381A (zh) | 基于Nginx的负载均衡实现方法、装置、计算机设备和介质 | |
CN112925647B (zh) | 云边协同系统、集群资源的控制方法及装置 | |
CN110908879A (zh) | 埋点数据的上报方法、装置、终端和存储介质 | |
CN105262608B (zh) | 用于网络服务的监控方法和装置 | |
CN112040429B (zh) | 一种基于分布式存储的短信管理系统及方法 | |
CN110083391A (zh) | 调用请求监控方法、装置、设备及存储介质 | |
CN109471845A (zh) | 日志管理方法、服务器及计算机可读存储介质 | |
CN107809383A (zh) | 一种基于mvc的路径映射方法及装置 | |
CN113055421A (zh) | 一种服务网格治理方法及系统 | |
CN110022354A (zh) | 基于http协议的移动应用集成方法、装置、计算机设备及存储介质 | |
CN113658591B (zh) | 一种面向智能家居的语音交互适配系统 | |
CN113726566A (zh) | 一种服务网关装置 | |
CN113923200A (zh) | 海量api网关服务的实现方法及装置 | |
CN107463490B (zh) | 一种应用于平台开发中的集群日志集中收集方法 | |
CN109802842B (zh) | 应用拓扑的生成方法及相关设备 | |
CN116708266A (zh) | 一种云服务拓扑图实时更新方法、装置、设备及介质 | |
CN101056210B (zh) | 一种网络集中管理平台上的事件处理系统和方法 | |
US8224933B2 (en) | Method and apparatus for case-based service composition | |
CN101236510B (zh) | 一种ejb集群的失败恢复处理方法及系统 | |
CN109842691A (zh) | Cache系统与DNS服务器的域名同步方法及相关设备 | |
CN102831179A (zh) | 网页处理方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |