CN110890972A - 一种业务系统的健康度评估方法及装置 - Google Patents

一种业务系统的健康度评估方法及装置 Download PDF

Info

Publication number
CN110890972A
CN110890972A CN201811041388.4A CN201811041388A CN110890972A CN 110890972 A CN110890972 A CN 110890972A CN 201811041388 A CN201811041388 A CN 201811041388A CN 110890972 A CN110890972 A CN 110890972A
Authority
CN
China
Prior art keywords
service level
quality index
value
application
network
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811041388.4A
Other languages
English (en)
Other versions
CN110890972B (zh
Inventor
吴天东
郭岳
钟储建
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Mobile Communications Group Co Ltd
China Mobile Group Zhejiang Co Ltd
Original Assignee
China Mobile Communications Group Co Ltd
China Mobile Group Zhejiang Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Mobile Communications Group Co Ltd, China Mobile Group Zhejiang Co Ltd filed Critical China Mobile Communications Group Co Ltd
Priority to CN201811041388.4A priority Critical patent/CN110890972B/zh
Publication of CN110890972A publication Critical patent/CN110890972A/zh
Application granted granted Critical
Publication of CN110890972B publication Critical patent/CN110890972B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06Management of faults, events, alarms or notifications
    • H04L41/0677Localisation of faults
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/14Network analysis or design
    • H04L41/142Network analysis or design using statistical or mathematical methods
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/08Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/08Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0852Delays

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Environmental & Geological Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Algebra (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Optimization (AREA)
  • Mathematical Physics (AREA)
  • Probability & Statistics with Applications (AREA)
  • Pure & Applied Mathematics (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明实施例提供一种业务系统的健康度评估方法及装置,所述方法包括:获取业务系统中每个服务层级的网络质量指标和应用质量指标;根据每个服务层级的网络质量指标,获取该服务层级的网络健康值,并根据每个服务层级的应用质量指标,获取该服务层级的应用健康值;根据每个服务层级的网络健康值和应用健康值,确定所述业务系统的健康度。本发明实施例提高了业务系统健康度评估时的准确性。

Description

一种业务系统的健康度评估方法及装置
技术领域
本发明实施例涉及通信技术领域,尤其涉及一种业务系统的健康度评估方法及装置。
背景技术
现有的网络质量评估方式主要是通过采集设备自带的网元数据进行判断,例如网络带宽、延时和丢包率等。
其中,网络带宽指网络设备的端口转发速率,一般通过简单网络管理协议(SimpleNetwork Management Protocol,SNMP)实时探测带宽。但是传统的SNMP以独立设备网元为基准,周期性的获取数据,这导致所获取的数据很难作为一个应用链或者业务系统的网络质量判断依据。
延时指数据包从本地传输到对端之间需要的时间,常用控制报文协议(InternetControl Message Protocol,ICMP)来进行测试。但是延时计算采用主动探测的方式,探测源本身存在一对多的情况,且多数网络设备具有基于探测报文的保护规则,这导致探测结果并不能反映真实业务的延时与质量情况。
丢包率指数据包因队列拥塞缓冲区或远端无响应产生的数据包丢弃,通常通过主动的传输控制协议(Transmission Control Protocol,TCP)探测或ICMP采集指标。但是TCP无法将丢包等网络质量数据关联到真实的业务数据上,从而导致无法得知真实业务产生影响时的网络状态,进而导致无法有效定位故障的位置。
综上所述,现有技术中在评估业务系统的健康度时,存在评估结果不准确的问题。
发明内容
本发明实施例提供一种业务系统的健康度评估方法及装置,以解决现有技术中在评估业务系统的健康度时评估结果不准确的问题。
针对上述问题,第一方面,本发明实施例提供一种业务系统的健康度评估方法,所述方法包括:
获取业务系统中每个服务层级的网络质量指标和应用质量指标;
根据每个服务层级的网络质量指标,获取该服务层级的网络健康值,并根据每个服务层级的应用质量指标,获取该服务层级的应用健康值;
根据每个服务层级的网络健康值和应用健康值,确定所述业务系统的健康度。
第二方面,本发明实施例提供一种业务系统的健康度评估装置,所述装置包括:
第一获取模块,用于获取业务系统中每个服务层级的网络质量指标和应用质量指标;
第二获取模块,用于根据每个服务层级的网络质量指标,获取该服务层级的网络健康值,并根据每个服务层级的应用质量指标,获取该服务层级的应用健康值;
确定模块,用于根据每个服务层级的网络健康值和应用健康值,确定所述业务系统的健康度。
第三方面,本发明实施例提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现业务系统的健康度评估方法的步骤。
第四方面,本发明实施例提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现业务系统的健康度评估方法的步骤。
本发明实施例提供的业务系统的健康度评估方法及装置,通过获取业务系统中每个服务层级的网络质量指标和应用质量指标,并根据每个服务层级的网络质量指标,获取该服务层级的网络健康值,并根据每个服务层级的应用质量指标,获取该服务层级的应用健康值,最后根据每个服务层级的网络健康值和应用健康值,确定该业务系统的健康度,使得能够通过业务系统中每个服务层级的网络健康值和应用健康值,判断业务系统的健康状态,实现了在区分每个服务层级的基础上,从网络和应用两个维度进行健康度分析,并同时将健康度以分值的形式输出,提高了业务系统健康度评估时的准确性,并实现了快速直观的界定每个服务层级的网络边界和应用边界,从而实现了业务系统故障节点的快速定位和诊断,提高了网络的可视化能力和自动化水平。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1表示本发明实施例中业务系统的健康度评估方法的步骤流程图;
图2表示本发明实施例中业务系统的健康度评估装置的模块框图;
图3表示本发明实施例中电子设备的模块框图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
如图1所示,为本发明实施例中业务系统的健康度评估方法的步骤流程图,该方法包括如下步骤:
步骤101:获取业务系统中每个服务层级的网络质量指标和应用质量指标。
在本步骤中,具体的,业务系统可以包括网络层、应用层、中间服务层和数据库层四个服务层级。当然,在此需要说明的是,业务系统所包括的服务层级根据业务系统的实际需要而设定,在此并不具体限定业务系统具体包括的服务层级。
其中,在获取业务系统中每个服务层级的网络质量指标和应用质量指标时,可以获取在业务系统中每个服务层级传输的数据包;然后根据每个服务层级传输的数据包,获取每个服务层级的网络质量指标和应用质量指标;其中,所述网络质量指标包括:网络响应时延、建立连接成功率、TCP重传率和TCP空窗率;所述应用质量指标包括:服务响应时延、TCP重传率和TCP空窗率。
具体的,在根据每个服务层级传输的数据包,获取每个服务层级的网络质量指标和应用质量指标时,可以根据每个服务层级传输的数据包,得到每个服务层级的建立连接失败数、建立连接成功数、服务端响应时延、客户端响应时延、请求响应时延、数据传输时延、服务端传输数、客户端重传数、服务端空窗数和客户端空窗数;然后将建立连接成功数与包括建立失败数和建立成功数的建立连接数之间的比值记录为建立连接成功率,将服务端响应时延和客户端响应时延的和值记录为网络响应时延,将请求响应时延和数据传输时延的和值记录为服务响应时延,将包括服务端传输数和客户端重传数的重传数量与数据包总数的比值记录为TCP重传率,将包括服务端空窗数和客户端空窗数的空窗数量与数据包总数的比值记录为TCP空窗率。
此外,具体的,下面通过表格对各个指标的含义进行说明。其中,
Figure BDA0001792179360000041
Figure BDA0001792179360000051
这样通过获取业务系统中每个服务层级的网络质量指标和应用质量指标,使得在区分业务系统中的服务层级的基础上,进一步区分获取每个服务层级的网络质量指标和应用质量指标,实现了将业务系统各个服务层级间的网络访问质量从网络和应用两个维度进行分析,为网络状态的定位提供了便利。
步骤102:根据每个服务层级的网络质量指标,获取该服务层级的网络健康值,并根据每个服务层级的应用质量指标,获取该服务层级的应用健康值。
在本步骤中,具体的,在获取到业务系统中每个服务层级的网络质量指标和应用质量指标之后,可以根据每个服务层级的网络质量指标,获取该服务层级的网络健康值,并根据每个服务层级的应用质量指标,获取该服务层级的应用健康值。
例如,在获取到业务系统中服务层级A的网络质量指标和应用质量指标时,可以根据服务层级A的网络质量指标,获取该服务层级A的网络健康值,并根据服务层级A的应用质量指标,获取该服务层级A的应用健康值。
这样,通过获取每个服务层级的网络健康值和应用健康值,实现了从网络和应用两个维度对每个服务层级的健康状态进行分析,并且对应维度的健康状态以分值的形式显示,从而实现了快速直观的界定每个服务层级的网络与应用边界,进而实现了根据每个服务层级的网络健康值和应用健康值,快速定位故障节点。
步骤103:根据每个服务层级的网络健康值和应用健康值,确定业务系统的健康度。
在本步骤中,具体的,在获取每个服务层级的网络健康值和应用健康值之后,可以根据每个服务层级的网络健康值和应用健康值,确定业务系统的健康度,从而保证所确定的业务系统的健康度的准确性,并且为运维人员切入至业务系统的层级进行运维提供了便利。
其中,在根据每个服务层级的网络健康值和应用健康值,确定所述业务系统的健康度时,可以根据每个服务层级的网络健康值,确定业务系统中网络健康值为最小值的目标网络健康值;根据每个服务层级的应用健康值,确定业务系统中应用健康值为最小值的目标应用健康值;将所述目标网络健康值和所述目标应用健康值确定为所述业务系统的健康值。
这样,由于在具有多个服务层级的业务系统中,任一服务层级的异常均会影响业务系统的整体访问,因此,将多个服务层级中网络健康值为最小值的目标网络健康值和多个服务层级中应用健康值为最小值的目标应用健康值确定为业务系统的健康值,保证了业务系统健康状态评估的准确性。
此外,具体的,在确定目标网络健康值和目标应用健康值之后,可以确定目标网络健康值所对应的服务层级以及目标应用健康值对应的服务层级,从而实现网络健康状态以及应用健康状态最差的服务层级的快速定位,并且实现了网络运维人员切入至业务系统的服务层级进行运维,提高了业务系统的可视化能力和自动化水平。
此外,具体的,根据每个服务层级的网络质量指标,获取该服务层级的网络健康值,可以包括如下步骤:
步骤21:根据每个服务层级的每个网络质量指标,获取该服务层级中该网络质量指标的减分值。
在本步骤中,具体的,该服务层级中该网络质量指标的减分值表示该服务层级中该网络质量指标的不健康程度。
其中,具体的,在根据每个服务层级的每个网络质量指标,获取该服务层级中该网络质量指标的减分值时,可以基于该服务层级中该网络质量指标的异常触发阈值和权重值,得到减分值。比如在该服务层级中该网络质量指标超出对应的异常触发阈值的部分中,以Q为递增区间,以X为减分基础值,且每递增Q,则减分值递增Y。假设,可以在网络质量指标超出异常触发阈值的比例中,以5%为递增区间,以1.1为减分基础值,且每递增5%,则减分值递增10%。
在根据每个服务层级的每个网络质量指标,获取该服务层级中该网络质量指标的减分值时,具体过程可以如下:
根据每个服务层级的每个网络质量指标,获取该服务层级中该网络质量指标对应的异常触发阈值和权重值,并根据该服务层级中每个网络质量指标以及该网络质量指标所对应的异常触发阈值和权重值,通过下述公式,计算得到该服务层级中每个网络质量指标的减分值;
Figure BDA0001792179360000071
其中,
Di表示该服务层级中第i个网络质量指标的减分值;Ni表示该服务层级中第i个网络质量指标的值;Mi表示该服务层级中第i个网络质量指标对应的异常触发阈值;Ci表示该服务层级中第i个网络质量指标对应的权重值。
其中,在根据每个服务层级的每个网络质量指标,获取该服务层级中该网络质量指标对应的异常触发阈值和权重值时,可以根据每个服务层级的每个网络质量指标的历史值,获取该服务层级中该网络质量指标对应的正常标准值;根据该服务层级中该网络质量指标对应的正常标准值,获取该服务层级中该网络质量指标对应的异常触发阈值;根据预先设置的该服务层级中该网络质量指标的预设阈值溢出比与预设权重值之间的对应关系,获取得到该服务层级中该网络质量指标的阈值溢出比所对应的权重值,并将该服务层级中该网络质量指标的阈值溢出比所对应的权重值确定为该服务层级中该网络质量指标所对应的权重值;其中,所述阈值溢出比为该服务层级中该网络质量指标超出该网络质量指标所对应的异常触发阈值的比例。
具体的,在根据每个服务层级的每个网络质量指标的历史值,获取该服务层级中该网络质量指标对应的正常标准值时,可以根据每个服务层级的每个网络质量指标的历史值,计算该服务层级中该网络质量指标的平均值和标准差,并将该服务层级中该网络质量指标的平均值和标准差的和值确定为该服务层级中该网络质量指标对应的正常标准值。
例如,在此以数据库层中网络质量指标中的网络响应时延为例进行说明。
在计算数据库层中的网络响应时延时,可以提取该数据库层中网络响应时延的n个历史值,然后计算该n个历史值的平均值,并计算该n个历史值的标准差,最后将该n个历史值的平均值和标准差的和值,确定为该数据库层中网络响应时延的正常标准值。
此外,具体的,在根据该服务层级中该网络质量指标对应的正常标准值,获取该服务层级中该网络质量指标对应的异常触发阈值时,可以根据该服务层级中该网络质量指标对应的正常标准值,采用预设计算方式,获取该服务层级中该网络质量指标对应的异常触发阈值。
例如,网络质量指标中的建立连接成功率的异常触发阈值的预设计算方式可以为:Btc=(1-B1)+0.1,其中Btc表示在服务层级A中的建立连接成功率的异常触发阈值,B1表示在服务层级A中的建立连接成功率对应的正常标准值。
网络质量指标中的网络响应时延的异常触发阈值的预设计算方式可以为:Bts=5B2,其中,Bts表示在服务层级A中的网络响应时延的异常触发阈值,B2表示在服务层级A中的网络响应时延对应的正常标准值。
网络质量指标中的TCP重传率的异常触发阈值的预设计算方式可以为:Btr=(1-B3)+0.5,其中Btc表示在服务层级A中的TCP重传率的异常触发阈值,B3表示在服务层级A中的TCP重传率对应的正常标准值。
网络质量指标中的TCP空窗率的异常触发阈值的预设计算方式可以为:Btz=(1-B4)+0.5,其中Btz表示在服务层级A中的TCP空窗率的异常触发阈值,B4表示在服务层级A中的TCP空窗率对应的正常标准值。
另外,具体的,针对每个网络质量指标,均预先设置有预设阈值溢出比与预设权重值之间的对应关系,以使得能够根据所获取的在一服务层级中的该网络质量指标的阈值溢出比以及该对应关系,获取得到该网络质量指标在该服务层级的权重值。
例如,每个网络质量指标的预设阈值溢出比与预设权重值之间的对应关系可以如下表所示:
Figure BDA0001792179360000081
步骤22:计算得到该服务层级的预设总分值与该服务层级中所有网络质量指标的减分值之间的第一差值,将所述第一差值确定为该服务层级的网络健康值。
具体的,业务系统的每个服务层级预先设置有预设总分值,例如每个服务层级的预设总分值可以设置为100。
在本步骤中,在获取到该服务层级中所有网络质量指标的减分值之后,可以计算该服务层级的预设总分值与该服务层级中所有网络质量指标的减分值之间的第一差值,并将该第一差值记录为该服务层级的网络健康值。
例如,服务层级A的网络健康值=预设总分值-网络响应时延的减分值-建立连接成功率的减分值-TCP重传率的减分值-TCP空窗率的减分值。
这样,通过将每个服务层级的预设总分值与该服务层级中所有网络质量指标的减分值之间的第一差值记录为该服务层级的网络健康值,使得每个服务层级的网络健康值与该服务层级中的所有网络质量指标相关,从而提高了所计算得到的每个服务层级的网络健康值的准确性。
另外,进一步地,根据每个服务层级的应用质量指标,获取该服务层级的应用健康值的方式与根据每个服务层级的网络质量指标,获取该服务层级的网络健康值的方式相似,在此进行简要说明。
其中,根据每个服务层级的应用质量指标,获取该服务层级的应用健康值,包括如下步骤:
步骤31:根据每个服务层级的每个应用质量指标,获取该服务层级中该应用质量指标的减分值。
在本步骤中,具体的,该服务层级中该应用质量指标的减分值表示该服务层级中该应用质量指标的不健康程度。
其中,具体的,在根据每个服务层级的每个应用质量指标,获取该服务层级中该应用质量指标的减分值时,可以基于该服务层级中该应用质量指标的异常触发阈值和权重值,得到减分值。比如在该服务层级中该应用质量指标超出对应的异常触发阈值的部分中,以Q为递增区间,以X为减分基础值,且每递增Q,则减分值递增Y。假设,可以在应用质量指标超出异常触发阈值的比例中,以5%为递增区间,以1.1为减分基础值,且每递增5%,则减分值递增10%。
在根据每个服务层级的每个应用质量指标,获取该服务层级中该应用质量指标的减分值时,具体过程可以如下:
根据每个服务层级的每个应用质量指标,获取该服务层级中该应用质量指标对应的异常触发阈值和权重值;并根据该服务层级中每个应用质量指标以及该应用质量指标所对应的异常触发阈值和权重值,通过下述公式,计算得到该服务层级中每个应用质量指标的减分值;
Figure BDA0001792179360000101
其中,
Dj表示该服务层级中第j个应用质量指标的减分值;Nj表示该服务层级中第j个应用质量指标的值;Mj表示该服务层级中第j个应用质量指标对应的异常触发阈值;Cj表示该服务层级中第j个应用质量指标对应的权重值。
其中,在根据每个服务层级的每个应用质量指标,获取该服务层级中该应用质量指标对应的异常触发阈值和权重值时,可以根据每个服务层级的每个应用质量指标的历史值,获取该服务层级中该应用质量指标对应的正常标准值;根据该服务层级中该应用质量指标对应的正常标准值,获取该服务层级中该应用质量指标对应的异常触发阈值;根据预先设置的该服务层级中该应用质量指标的预设阈值溢出比与预设权重值之间的对应关系,获取该服务层级中该应用质量指标的阈值溢出比所对应的权重值,并将该服务层级中该应用质量指标的阈值溢出比所对应的权重值确定为该服务层级中该应用质量指标所对应的权重值;其中,所述阈值溢出比为该服务层级中该应用质量指标超出该应用质量指标所对应的异常触发阈值的比例。
具体的,在根据每个服务层级的每个应用质量指标的历史值,获取该服务层级中该应用质量指标对应的正常标准值时,可以根据每个服务层级的每个应用质量指标的历史值,计算该服务层级中该应用质量指标的平均值和标准差,并将该服务层级中该应用质量指标的平均值和标准差的和值确定为该服务层级中该应用质量指标对应的正常标准值。
此外,具体的,在根据该服务层级中该应用质量指标对应的正常标准值,获取该服务层级中该应用质量指标对应的异常触发阈值时,可以根据该服务层级中该应用质量指标对应的正常标准值,采用预设计算方式,获取该服务层级中该应用质量指标对应的异常触发阈值。
例如,应用质量指标中的服务响应时延的异常触发阈值的预设计算方式可以为:Btn=5×B5,其中Btn表示在服务层级A中的异常触发阈值的异常触发阈值,B5表示在服务层级A中的异常触发阈值对应的正常标准值。
另外,具体的,针对每个应用质量指标,均预先设置有预设阈值溢出比与预设权重值之间的对应关系,以使得能够根据所获取的在一服务层级中的该应用质量指标的阈值溢出比以及该对应关系,获取得到该应用质量指标在该服务层级的权重值。
例如,应用质量指标中的服务响应时延的预设阈值溢出比与预设权重值之间的对应关系可以如下表所示:
Figure BDA0001792179360000111
步骤32:计算得到该服务层级的预设总分值与该服务层级中所有应用质量指标的减分值之间的第二差值,将所述第二差值确定为该服务层级的应用健康值。
具体的,业务系统的每个服务层级预先设置有预设总分值,例如每个服务层级的预设总分值可以设置为100。
在本步骤中,在获取到该服务层级中所有应用质量指标的减分值之后,可以计算该服务层级的预设总分值与该服务层级中所有应用质量指标的减分值之间的第二差值,并将该第二差值记录为该服务层级的应用健康值。
例如,服务层级A的应用健康值=预设总分值-服务响应时延的减分值-TCP重传率的减分值-TCP空窗率的减分值。
这样,通过将每个服务层级的预设总分值与该服务层级中所有应用质量指标的减分值之间的第二差值记录为该服务层级的应用健康值,使得每个服务层级的应用健康值与该服务层级中的所有应用质量指标相关,从而提高了所计算得到的每个服务层级的应用健康值的准确性。
本实施例通过获取业务系统中每个服务层级的网络质量指标和应用质量指标,并根据每个服务层级的网络质量指标,获取该服务层级的网络健康值,并根据每个服务层级的应用质量指标,获取该服务层级的应用健康值,最后根据每个服务层级的网络健康值和应用健康值,确定该业务系统的健康度,使得能够通过业务系统中每个服务层级的网络健康值和应用健康值,判断业务系统的健康状态,实现了在区分每个服务层级的基础上,从网络和应用两个维度进行健康度分析,并同时将健康度以分值的形式输出,提高了业务系统健康度评估时的准确性,并实现了快速直观的界定每个服务层级的网络边界和应用边界,从而实现了业务系统故障节点的快速定位和诊断,提高了网络的可视化能力和自动化水平。
此外,如图2所示,为本发明实施例提供的业务系统的健康度评估装置的模块框图,该装置包括:
第一获取模块201,用于获取业务系统中每个服务层级的网络质量指标和应用质量指标;
第二获取模块202,用于根据每个服务层级的网络质量指标,获取该服务层级的网络健康值,并根据每个服务层级的应用质量指标,获取该服务层级的应用健康值;
确定模块203,用于根据每个服务层级的网络健康值和应用健康值,确定所述业务系统的健康度。
可选地,所述第一获取模块201包括:
第一获取单元,用于获取在业务系统中每个服务层级传输的数据包;
第二获取单元,用于根据每个服务层级传输的数据包,获取每个服务层级的网络质量指标和应用质量指标;其中,所述网络质量指标包括:网络响应时延、建立连接成功率、TCP重传率和TCP空窗率;所述应用质量指标包括:服务响应时延、TCP重传率和TCP空窗率。
可选地,所述第二获取模块202包括:
第三获取单元,用于根据每个服务层级的每个网络质量指标,获取该服务层级中该网络质量指标的减分值;
第四获取单元,用于计算得到该服务层级的预设总分值与该服务层级中所有网络质量指标的减分值之间的第一差值,将所述第一差值确定为该服务层级的网络健康值;
第五获取单元,用于根据每个服务层级的每个应用质量指标,获取该服务层级中该应用质量指标的减分值;
第六获取单元,用于计算得到该服务层级的预设总分值与该服务层级中所有应用质量指标的减分值之间的第二差值,将所述第二差值确定为该服务层级的应用健康值。
可选地,所述第三获取单元用于,根据每个服务层级的每个网络质量指标,获取该服务层级中该网络质量指标对应的异常触发阈值和权重值,并根据该服务层级中每个网络质量指标以及该网络质量指标所对应的异常触发阈值和权重值,通过下述公式,计算得到该服务层级中每个网络质量指标的减分值;
Figure BDA0001792179360000131
其中,
Di表示该服务层级中第i个网络质量指标的减分值;Ni表示该服务层级中第i个网络质量指标的值;Mi表示该服务层级中第i个网络质量指标对应的异常触发阈值;Ci表示该服务层级中第i个网络质量指标对应的权重值;
所述第五获取单元用于,根据每个服务层级的每个应用质量指标,获取该服务层级中该应用质量指标对应的异常触发阈值和权重值;并根据该服务层级中每个应用质量指标以及该应用质量指标所对应的异常触发阈值和权重值,通过下述公式,计算得到该服务层级中每个应用质量指标的减分值;
Figure BDA0001792179360000132
其中,
Dj表示该服务层级中第j个应用质量指标的减分值;Nj表示该服务层级中第j个应用质量指标的值;Mj表示该服务层级中第j个应用质量指标对应的异常触发阈值;Cj表示该服务层级中第j个应用质量指标对应的权重值。
可选地,所述第三获取单元包括:
第一获取子单元,用于根据每个服务层级的每个网络质量指标的历史值,获取该服务层级中该网络质量指标对应的正常标准值;
第二获取子单元,用于根据该服务层级中该网络质量指标对应的正常标准值,获取该服务层级中该网络质量指标对应的异常触发阈值;
第三获取子单元,用于根据预先设置的该服务层级中该网络质量指标的预设阈值溢出比与预设权重值之间的对应关系,获取得到该服务层级中该网络质量指标的阈值溢出比所对应的权重值,并将该服务层级中该网络质量指标的阈值溢出比所对应的权重值确定为该服务层级中该网络质量指标所对应的权重值;其中,所述阈值溢出比为该服务层级中该网络质量指标超出该网络质量指标所对应的异常触发阈值的比例;
第四获取子单元,用于根据每个服务层级的每个应用质量指标的历史值,获取该服务层级中该应用质量指标对应的正常标准值;
第五获取子单元,用于根据该服务层级中该应用质量指标对应的正常标准值,获取该服务层级中该应用质量指标对应的异常触发阈值;
第六获取子单元,用于根据预先设置的该服务层级中该应用质量指标的预设阈值溢出比与预设权重值之间的对应关系,获取该服务层级中该应用质量指标的阈值溢出比所对应的权重值,并将该服务层级中该应用质量指标的阈值溢出比所对应的权重值确定为该服务层级中该应用质量指标所对应的权重值;其中,所述阈值溢出比为该服务层级中该应用质量指标超出该应用质量指标所对应的异常触发阈值的比例。
可选地,所述确定模块203包括:
第一确定单元,用于根据每个服务层级的网络健康值,确定业务系统中网络健康值为最小值的目标网络健康值;
第二确定单元,用于根据每个服务层级的应用健康值,确定业务系统中应用健康值为最小值的目标应用健康值;
第三确定单元,用于将所述目标网络健康值和所述目标应用健康值确定为所述业务系统的健康值。
本实施例提供的业务系统的健康度评估装置,使得能够通过业务系统中每个服务层级的网络健康值和应用健康值,判断业务系统的健康状态,实现了在区分每个服务层级的基础上,从网络和应用两个维度进行健康度分析,并同时将健康度以分值的形式输出,提高了业务系统健康度评估时的准确性,并实现了快速直观的界定每个服务层级的网络边界和应用边界,从而实现了业务系统故障节点的快速定位,提高了网络的可视化能力和自动化水平。
在此需要说明的是,本发明实施例中可以通过硬件处理器(hardware processor)来实现相关功能模块,并能达到相同的技术效果,在此不在进行赘述。
在本发明的又一实施例中,提供了一种电子设备,如图3所示,所述电子设备包括存储器(memory)301、处理器(processor)302以及存储在存储器301上并可在处理器302上运行的计算机程序。其中,所述存储器301、处理器302通过总线303完成相互间的通信。所述处理器302用于调用所述存储器301中的程序指令,以执行如下方法:获取业务系统中每个服务层级的网络质量指标和应用质量指标;根据每个服务层级的网络质量指标,获取该服务层级的网络健康值,并根据每个服务层级的应用质量指标,获取该服务层级的应用健康值;根据每个服务层级的网络健康值和应用健康值,确定所述业务系统的健康度。
本发明实施例提供的电子设备,可执行业务系统的健康度评估方法中的具体步骤,并能够达到相同的技术效果,在此不再对此进行具体介绍。
此外,上述的存储器301中的程序指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
在本发明的又一实施例中,提供了一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时以执行如下方法:获取业务系统中每个服务层级的网络质量指标和应用质量指标;根据每个服务层级的网络质量指标,获取该服务层级的网络健康值,并根据每个服务层级的应用质量指标,获取该服务层级的应用健康值;根据每个服务层级的网络健康值和应用健康值,确定所述业务系统的健康度。
本发明实施例提供的非暂态计算机可读存储介质,可执行业务系统的健康度评估方法中的具体步骤,并能够达到相同的技术效果,在此不再对此进行具体介绍。
在本发明的又一实施例中,提供了一种计算机程序产品,所述计算机程序产品包括存储在非暂态计算机可读存储介质上的计算机程序,所述计算机程序包括程序指令,当所述程序指令被计算机执行时以执行如下方法:获取业务系统中每个服务层级的网络质量指标和应用质量指标;根据每个服务层级的网络质量指标,获取该服务层级的网络健康值,并根据每个服务层级的应用质量指标,获取该服务层级的应用健康值;根据每个服务层级的网络健康值和应用健康值,确定所述业务系统的健康度。
本发明实施例提供的计算机程序产品,可执行业务系统的健康度评估方法中的具体步骤,并能够达到相同的技术效果,在此不再对此进行具体介绍。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (9)

1.一种业务系统的健康度评估方法,其特征在于,所述方法包括:
获取业务系统中每个服务层级的网络质量指标和应用质量指标;
根据每个服务层级的网络质量指标,获取该服务层级的网络健康值,并根据每个服务层级的应用质量指标,获取该服务层级的应用健康值;
根据每个服务层级的网络健康值和应用健康值,确定所述业务系统的健康度。
2.根据权利要求1所述的方法,其特征在于,所述获取业务系统中每个服务层级的网络质量指标和应用质量指标,包括:
获取在业务系统中每个服务层级传输的数据包;
根据每个服务层级传输的数据包,获取每个服务层级的网络质量指标和应用质量指标;其中,所述网络质量指标包括:网络响应时延、建立连接成功率、TCP重传率和TCP空窗率;所述应用质量指标包括:服务响应时延、TCP重传率和TCP空窗率。
3.根据权利要求1所述的方法,其特征在于,
所述根据每个服务层级的网络质量指标,获取该服务层级的网络健康值,包括:
根据每个服务层级的每个网络质量指标,获取该服务层级中该网络质量指标的减分值;
计算得到该服务层级的预设总分值与该服务层级中所有网络质量指标的减分值之间的第一差值,将所述第一差值确定为该服务层级的网络健康值;
所述根据每个服务层级的应用质量指标,获取该服务层级的应用健康值,包括:
根据每个服务层级的每个应用质量指标,获取该服务层级中该应用质量指标的减分值;
计算得到该服务层级的预设总分值与该服务层级中所有应用质量指标的减分值之间的第二差值,将所述第二差值确定为该服务层级的应用健康值。
4.根据权利要求3所述的方法,其特征在于,
所述根据每个服务层级的每个网络质量指标,获取该服务层级中该网络质量指标的减分值,包括:
根据每个服务层级的每个网络质量指标,获取该服务层级中该网络质量指标对应的异常触发阈值和权重值,并根据该服务层级中每个网络质量指标以及该网络质量指标所对应的异常触发阈值和权重值,通过下述公式,计算得到该服务层级中每个网络质量指标的减分值;
Figure FDA0001792179350000021
其中,
Di表示该服务层级中第i个网络质量指标的减分值;Ni表示该服务层级中第i个网络质量指标的值;Mi表示该服务层级中第i个网络质量指标对应的异常触发阈值;Ci表示该服务层级中第i个网络质量指标对应的权重值;
所述根据每个服务层级的每个应用质量指标,获取该服务层级中该应用质量指标的减分值,包括:
根据每个服务层级的每个应用质量指标,获取该服务层级中该应用质量指标对应的异常触发阈值和权重值;并根据该服务层级中每个应用质量指标以及该应用质量指标所对应的异常触发阈值和权重值,通过下述公式,计算得到该服务层级中每个应用质量指标的减分值;
Figure FDA0001792179350000022
其中,
Dj表示该服务层级中第j个应用质量指标的减分值;Nj表示该服务层级中第j个应用质量指标的值;Mj表示该服务层级中第j个应用质量指标对应的异常触发阈值;Cj表示该服务层级中第j个应用质量指标对应的权重值。
5.根据权利要求4所述的方法,其特征在于,
所述根据每个服务层级的每个网络质量指标,获取该服务层级中该网络质量指标对应的异常触发阈值和权重值,包括:
根据每个服务层级的每个网络质量指标的历史值,获取该服务层级中该网络质量指标对应的正常标准值;
根据该服务层级中该网络质量指标对应的正常标准值,获取该服务层级中该网络质量指标对应的异常触发阈值;
根据预先设置的该服务层级中该网络质量指标的预设阈值溢出比与预设权重值之间的对应关系,获取得到该服务层级中该网络质量指标的阈值溢出比所对应的权重值,并将该服务层级中该网络质量指标的阈值溢出比所对应的权重值确定为该服务层级中该网络质量指标所对应的权重值;其中,所述阈值溢出比为该服务层级中该网络质量指标超出该网络质量指标所对应的异常触发阈值的比例;
所述根据每个服务层级的每个应用质量指标,获取该服务层级中该应用质量指标对应的异常触发阈值和权重值,包括:
根据每个服务层级的每个应用质量指标的历史值,获取该服务层级中该应用质量指标对应的正常标准值;
根据该服务层级中该应用质量指标对应的正常标准值,获取该服务层级中该应用质量指标对应的异常触发阈值;
根据预先设置的该服务层级中该应用质量指标的预设阈值溢出比与预设权重值之间的对应关系,获取该服务层级中该应用质量指标的阈值溢出比所对应的权重值,并将该服务层级中该应用质量指标的阈值溢出比所对应的权重值确定为该服务层级中该应用质量指标所对应的权重值;其中,所述阈值溢出比为该服务层级中该应用质量指标超出该应用质量指标所对应的异常触发阈值的比例。
6.根据权利要求1所述的方法,其特征在于,所述根据每个服务层级的网络健康值和应用健康值,确定所述业务系统的健康度,包括:
根据每个服务层级的网络健康值,确定业务系统中网络健康值为最小值的目标网络健康值;
根据每个服务层级的应用健康值,确定业务系统中应用健康值为最小值的目标应用健康值;
将所述目标网络健康值和所述目标应用健康值确定为所述业务系统的健康值。
7.一种业务系统的健康度评估装置,其特征在于,所述装置包括:
第一获取模块,用于获取业务系统中每个服务层级的网络质量指标和应用质量指标;
第二获取模块,用于根据每个服务层级的网络质量指标,获取该服务层级的网络健康值,并根据每个服务层级的应用质量指标,获取该服务层级的应用健康值;
确定模块,用于根据每个服务层级的网络健康值和应用健康值,确定所述业务系统的健康度。
8.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至6中任一项所述的业务系统的健康度评估方法的步骤。
9.一种非暂态计算机可读存储介质,其上存储有计算机程序,其特征在于,该计算机程序被处理器执行时实现如权利要求1至6中任一项所述的业务系统的健康度评估方法的步骤。
CN201811041388.4A 2018-09-07 2018-09-07 一种业务系统的健康度评估方法及装置 Active CN110890972B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811041388.4A CN110890972B (zh) 2018-09-07 2018-09-07 一种业务系统的健康度评估方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811041388.4A CN110890972B (zh) 2018-09-07 2018-09-07 一种业务系统的健康度评估方法及装置

Publications (2)

Publication Number Publication Date
CN110890972A true CN110890972A (zh) 2020-03-17
CN110890972B CN110890972B (zh) 2022-06-28

Family

ID=69744449

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811041388.4A Active CN110890972B (zh) 2018-09-07 2018-09-07 一种业务系统的健康度评估方法及装置

Country Status (1)

Country Link
CN (1) CN110890972B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111611478A (zh) * 2020-05-06 2020-09-01 支付宝(杭州)信息技术有限公司 信息推荐方法、装置和电子设备
CN112162907A (zh) * 2020-09-30 2021-01-01 上海新炬网络信息技术股份有限公司 基于监控指标数据的健康度评估方法
CN113328885A (zh) * 2021-05-27 2021-08-31 中国工商银行股份有限公司 网络健康度评估方法、装置、电子设备、介质和程序产品
CN113904956A (zh) * 2021-10-29 2022-01-07 新华三大数据技术有限公司 一种网络健康度检测方法、装置、电子设备及存储介质
CN115796709A (zh) * 2023-02-06 2023-03-14 云账户技术(天津)有限公司 交易业务健康情况的评估方法、装置、设备及存储介质
CN116405377A (zh) * 2023-06-07 2023-07-07 太初(无锡)电子科技有限公司 网络状态检测方法、协议转换组件、设备及存储介质

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1895454A1 (en) * 2006-09-01 2008-03-05 Siemens Aktiengesellschaft Business process and system with integrated network quality of service management
EP2140610A1 (en) * 2007-03-30 2010-01-06 BRITISH TELECOMMUNICATIONS public limited company Data network monitoring system and method
CN102081622A (zh) * 2009-11-30 2011-06-01 中国移动通信集团贵州有限公司 评估系统健康度的方法及系统健康度评估装置
CN103152438A (zh) * 2013-04-09 2013-06-12 上海理想信息产业(集团)有限公司 一种云计算环境下业务健康度获取方法
US20150229540A1 (en) * 2012-09-18 2015-08-13 Zte Corporation Service-Based Communication Network Evaluation Method and Device
US20150333988A1 (en) * 2014-05-16 2015-11-19 A10 Networks, Inc. Distributed system to determine a server's health
CN105095747A (zh) * 2014-04-15 2015-11-25 阿里巴巴集团控股有限公司 一种Java应用健康度评估方法及系统
CN106549831A (zh) * 2016-11-24 2017-03-29 国家电网公司 一种信息系统的健康分析方法和系统
CN106850337A (zh) * 2016-12-29 2017-06-13 中兴通讯股份有限公司 一种网络质量检测方法及装置
CN107360586A (zh) * 2016-05-10 2017-11-17 中国移动通信集团黑龙江有限公司 一种网络质量的评估方法及装置
US20180026856A1 (en) * 2016-07-21 2018-01-25 Cisco Technology, Inc. Orchestrating micro-service deployment based on network policy health
CN107769848A (zh) * 2016-08-19 2018-03-06 国网江苏省电力公司南京供电公司 一种检测光纤通道质量的方法及装置
CN107846295A (zh) * 2016-09-19 2018-03-27 华为技术有限公司 微服务配置装置及方法
US20180091413A1 (en) * 2016-09-28 2018-03-29 Amazon Technologies, Inc. Network health data aggregation service

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1895454A1 (en) * 2006-09-01 2008-03-05 Siemens Aktiengesellschaft Business process and system with integrated network quality of service management
EP2140610A1 (en) * 2007-03-30 2010-01-06 BRITISH TELECOMMUNICATIONS public limited company Data network monitoring system and method
CN102081622A (zh) * 2009-11-30 2011-06-01 中国移动通信集团贵州有限公司 评估系统健康度的方法及系统健康度评估装置
US20150229540A1 (en) * 2012-09-18 2015-08-13 Zte Corporation Service-Based Communication Network Evaluation Method and Device
CN103152438A (zh) * 2013-04-09 2013-06-12 上海理想信息产业(集团)有限公司 一种云计算环境下业务健康度获取方法
CN105095747A (zh) * 2014-04-15 2015-11-25 阿里巴巴集团控股有限公司 一种Java应用健康度评估方法及系统
US20150333988A1 (en) * 2014-05-16 2015-11-19 A10 Networks, Inc. Distributed system to determine a server's health
CN107360586A (zh) * 2016-05-10 2017-11-17 中国移动通信集团黑龙江有限公司 一种网络质量的评估方法及装置
US20180026856A1 (en) * 2016-07-21 2018-01-25 Cisco Technology, Inc. Orchestrating micro-service deployment based on network policy health
CN107769848A (zh) * 2016-08-19 2018-03-06 国网江苏省电力公司南京供电公司 一种检测光纤通道质量的方法及装置
CN107846295A (zh) * 2016-09-19 2018-03-27 华为技术有限公司 微服务配置装置及方法
US20180091413A1 (en) * 2016-09-28 2018-03-29 Amazon Technologies, Inc. Network health data aggregation service
CN106549831A (zh) * 2016-11-24 2017-03-29 国家电网公司 一种信息系统的健康分析方法和系统
CN106850337A (zh) * 2016-12-29 2017-06-13 中兴通讯股份有限公司 一种网络质量检测方法及装置

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111611478A (zh) * 2020-05-06 2020-09-01 支付宝(杭州)信息技术有限公司 信息推荐方法、装置和电子设备
CN111611478B (zh) * 2020-05-06 2023-04-07 支付宝(杭州)信息技术有限公司 信息推荐方法、装置和电子设备
CN112162907A (zh) * 2020-09-30 2021-01-01 上海新炬网络信息技术股份有限公司 基于监控指标数据的健康度评估方法
CN113328885A (zh) * 2021-05-27 2021-08-31 中国工商银行股份有限公司 网络健康度评估方法、装置、电子设备、介质和程序产品
CN113904956A (zh) * 2021-10-29 2022-01-07 新华三大数据技术有限公司 一种网络健康度检测方法、装置、电子设备及存储介质
CN115796709A (zh) * 2023-02-06 2023-03-14 云账户技术(天津)有限公司 交易业务健康情况的评估方法、装置、设备及存储介质
CN116405377A (zh) * 2023-06-07 2023-07-07 太初(无锡)电子科技有限公司 网络状态检测方法、协议转换组件、设备及存储介质
CN116405377B (zh) * 2023-06-07 2023-08-08 太初(无锡)电子科技有限公司 网络状态检测方法、协议转换组件、设备及存储介质

Also Published As

Publication number Publication date
CN110890972B (zh) 2022-06-28

Similar Documents

Publication Publication Date Title
CN110890972B (zh) 一种业务系统的健康度评估方法及装置
CN110880984B (zh) 基于模型的流量异常监测方法、装置、设备及存储介质
US9009305B1 (en) Network host inference system
CN105721184B (zh) 一种网络链路质量的监控方法及装置
CN109617868B (zh) 一种ddos攻击的检测方法、装置及检测服务器
US20090116402A1 (en) Communication quality measuring apparatus and communication quality measuring method
CN111510345B (zh) 一种边缘节点异常检测的方法及装置
EP3166266B1 (en) Method and device for discovering network topology
JP2018147172A (ja) 異常検知装置、異常検知方法及びプログラム
EP3682595B1 (en) Obtaining local area network diagnostic test results
CN107689956B (zh) 一种异常事件的威胁评估方法及装置
WO2017000536A1 (zh) 一种bfd检测方法与装置
EP3334117A1 (en) Method, apparatus and system for quantizing defence result
JP2008283621A (ja) ネットワーク輻輳状況監視装置、ネットワーク輻輳状況監視方法及びプログラム
CN112737897B (zh) 一种链路监测调度方法、装置、设备及存储介质
CN105207797A (zh) 故障定位方法和装置
CN111343135B (zh) 一种网络安全态势检测方法
CN115348092A (zh) 一种工控网络异常流量检测方法、装置及电子设备
CN117118739A (zh) 网络安全规则的评估方法及装置、存储介质、电子设备
CN110896544A (zh) 故障定界方法及装置
JP6589223B2 (ja) サービス推定装置、サービス推定方法、及びプログラム
Ugochukwu et al. Diagnosing Salem University Lokoja Network for Better Network Performance
JP7272189B2 (ja) 情報処理装置、無線通信システム、情報処理方法及びプログラム
JP2011188450A (ja) ネットワーク監視装置
CN116366482A (zh) 应用监控方法、系统和相关设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant