CN113010410A - 一种基于骨干网对cdn性能的监控和评测方法和系统 - Google Patents
一种基于骨干网对cdn性能的监控和评测方法和系统 Download PDFInfo
- Publication number
- CN113010410A CN113010410A CN202011425852.7A CN202011425852A CN113010410A CN 113010410 A CN113010410 A CN 113010410A CN 202011425852 A CN202011425852 A CN 202011425852A CN 113010410 A CN113010410 A CN 113010410A
- Authority
- CN
- China
- Prior art keywords
- cdn
- monitoring
- information
- evaluating
- submodule
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 105
- 238000000034 method Methods 0.000 title claims abstract description 37
- 238000001514 detection method Methods 0.000 claims abstract description 20
- 238000012545 processing Methods 0.000 claims description 8
- 230000010365 information processing Effects 0.000 claims description 6
- 230000000007 visual effect Effects 0.000 claims description 6
- 230000004931 aggregating effect Effects 0.000 claims description 5
- 230000008569 process Effects 0.000 claims description 5
- 230000008859 change Effects 0.000 claims description 4
- 238000012800 visualization Methods 0.000 claims description 4
- 238000013480 data collection Methods 0.000 claims description 3
- 238000005065 mining Methods 0.000 claims description 3
- 238000004141 dimensional analysis Methods 0.000 abstract description 4
- 230000002776 aggregation Effects 0.000 abstract description 3
- 238000004220 aggregation Methods 0.000 abstract description 3
- 238000007781 pre-processing Methods 0.000 abstract description 3
- 238000010586 diagram Methods 0.000 description 6
- 230000004044 response Effects 0.000 description 5
- 238000004458 analytical method Methods 0.000 description 3
- 238000011161 development Methods 0.000 description 3
- 238000007405 data analysis Methods 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000013522 software testing Methods 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3688—Test management for test execution, e.g. scheduling of test suites
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明涉及一种基于骨干网对CDN性能的监控和评测方法和系统。方法包括步骤S2、任务信息通过API保存至Mysql任务信息数据库；S3、调度器分发任务至各监测点；S4、监测点对用户网站进行探测，收集预定指标数据，并预处理后返回调度器；S5、调度器收集各监测点返回的指标数据，验证、过滤、写入PostgreSQL探测结果数据库；S6、数据API从探测结果数据库读取指标数据，进行多维度分析、统计、聚合，生成监控和评测结果。借此，本发明能够快速、高效、稳定、便捷地实现对CDN性能的监控和评测。
Description
技术领域
本发明属于软件测试领域，具体涉及一种基于骨干网对CDN性能的监控和评测方法和系统，主要用于软件性能测试。
背景技术
随着互联网的蓬勃发展，越来越多的企业搭建网站应用，以满足公司业务的发展需求，但是企业也面临网站的用户体验并不是很好，有时加载非常慢，甚至有时直接返回错误等各种问题。这时，就需要一款能实现自动网页性能监控的工具，对页面可用性、页面性能、资源可用性、资源性能、首屏时间等进行全面监控，根据页面性能和网站资源监控结果，快速准确的定位到网站性能问题的具体原因及所在的地区，准确地判断是网络、CDN、服务器、还是网站页面性能的问题，快速给用户告警提醒，以便用户根据监控平台的提示信息进行问题整改，从而不断提高用户网站的使用体验，更好的促进公司业务的发展。
发明内容
为了解决现有技术的上述问题，一方面，本发明提供一种基于骨干网对CDN性能的监控和评测方法，其能对采集到的数据进行快速的分析。
为了达到上述目的，本发明采用的主要技术方案包括：
一种基于骨干网对CDN性能的监控和评测方法，其包括如下步骤：
S2、任务信息通过API保存至Mysql任务信息数据库；
S3、调度器分发任务至各监测点；
S4、监测点对用户网站进行探测，收集预定指标数据，并预处理后返回调度器；
S5、调度器收集各监测点返回的指标数据，验证、过滤、写入PostgreSQL探测结果数据库；
S6、数据API从探测结果数据库读取指标数据，进行多维度分析、统计、聚合，生成监控和评测结果。
借助上述方案，本发明的基于骨干网对CDN性能的监控和评测方法，其可以按频率进行调度，能对采集到的数据进行快速的分析，数据响应及时、准确、稳定。
本发明一个实施例的基于骨干网对CDN性能的监控和评测方法，其步骤S3中包括步骤：
S30、调度器每次启动，从DB数据库中读取最新的CDN Provider信息，存储在内存中。
本发明一个实施例的基于骨干网对CDN性能的监控和评测方法，其步骤S3中包括步骤：
S31、更新CDNProvider接收到信息，更新<CDN-Provider>信息。
本发明一个实施例的基于骨干网对CDN性能的监控和评测方法，其步骤S3中包括步骤：
S32、获取CDNProviders接收Client信息，若有变化生成新的token，并返回当前<CDN-Provider>信息以及Token，若接收到的Token为：client-startup，则返回CdnProvider对应关系信息和<Hostname.CdnProvideId>白名单信息。
本发明一个实施例的基于骨干网对CDN性能的监控和评测方法，其步骤S3中包括步骤：
S33、cdn_provider数据表变化后访问调度器的接口服务，以生成新的token。
本发明一个实施例的基于骨干网对CDN性能的监控和评测方法，其步骤S4中包括步骤：
S40、监测点启动时从调度器端获得最新的cdnProvider、CDN白名单、token信息。
本发明一个实施例的基于骨干网对CDN性能的监控和评测方法，其步骤S4中包括步骤：
S41、监测点定时访问调度器的接口，获取最新的CDN信息和token。
本发明一个实施例的基于骨干网对CDN性能的监控和评测方法，其步骤S4中包括步骤：
S42、监测点会返回自己最新的CND信息给调度器。
本发明一个较佳实施例的基于骨干网对CDN性能的监控和评测方法，其步骤S42中包括下列步骤：
S4201、Start to process Synthetic Ojbect CDN；
S4202、根据har文件获得该obj的serverIp；
S4203、check<Hostname:CdnProviderId>白名单，判断Hostname是否在白名单中，若是，则执行步骤S4211，若否，则执行步骤S4202；
S4204、check<ServerIP.providerId>对应关系Map，判断Serverip是否在缓存中，若是，则执行步骤S4211，若否，则执行步骤S4205；
S4205、dig该obj的host；
S4206、根据Dig结果，获得该host对应的A地址和Cname；
S4207、判断是否有Cname，若是，则执行步骤S4208，若否，则执行步骤S4212；
S4208、check<CDNKeyWord-Provider>对应关系Map，判断Key word是否在缓存中，若是，则执行步骤S4209，若否，则执行步骤S4212，其中较佳的Check方式为:先判断keyword是否存在信息源为User的缓存中，若不存在，再去判定该key word是否存在信息源为System的缓存中；
S4209、将<ServerIp:providerId>的对应关系缓存；
S4210、将缓存中的<ServerIp:providerId>的对应关系和/或<A地址-1>存入<ServerIP.providerId>对应关系Map；
S4211、给该synthetic_host对应的providerId，结束；
S4212、将<A地址-1>存入缓存中；
S4213、给该synthetic_host的providerId为-1，结束。
上述任一实施例的基于骨干网对CDN性能的监控和评测方法，其还包括步骤：S1、通过Web页面创建任务。
上述任一实施例的基于骨干网对CDN性能的监控和评测方法，其还包括步骤：S7、通过Web页面可视化展示监控和评测结果。
另一方面，本发明还提供一种基于骨干网对CDN性能的监控和评测系统，其能对采集到的数据进行快速的分析。
为了达到上述目的，本发明采用的主要技术方案包括：
一种基于骨干网对CDN性能的监控和评测系统，其包括：
调度器模块，用于按频率进行调度；
监测点模块，用于对用户网站进行探测，收集预定指标数据，并返回调度器；
任务信息数据库模块，用于保存任务信息数据；
探测结果数据库模块，用于保存探测结果数据；
数据API模块，用于对指标数据进行分析、统计、聚合，生成监控和评测结果。
借助上述方案，本发明的基于骨干网对CDN性能的监控和评测系统，其可以按频率进行调度，能对采集到的数据进行快速的分析，数据响应及时、准确、稳定。
本发明一个较佳实施例的基于骨干网对CDN性能的监控和评测系统，其调度器模块包括：任务分发子模块，用于分发任务至各监测点。
本发明一个较佳实施例的基于骨干网对CDN性能的监控和评测系统，其调度器模块包括：数据收集子模块，用于对用户网站进行探测，收集预定指标数据，并返回调度器。
本发明一个较佳实施例的基于骨干网对CDN性能的监控和评测系统，其调度器模块包括：CDN-Provider信息处理子模块，用于读取、更新CDN Provider信息。
本发明一个较佳实施例的基于骨干网对CDN性能的监控和评测系统，其调度器模块包括：token信息处理子模块，用于接收、处理token信息。
上述任一实施例的基于骨干网对CDN性能的监控和评测系统，其还包括：可视化web页面，用于创建任务、展示监控和评测结果。
上述任一实施例的基于骨干网对CDN性能的监控和评测系统，其还包括下列模块中的任一或任几个：
CDN-Provider获取子模块，用于启动时从调度器端获得最新的cdnProvider、CDN白名单、token信息；
定时器子模块，用于定时从server端获得最新的cdn provider信息；
<CDNKeyWord-Provider>对应关系Map子模块，用于更新存储<CDNKeyWord-Provider>对应关系Map；
<Hostname:CdnProviderId>白名单子模块，用于更新存储<Hostname:CdnProviderId>白名单；
<ServerIP.providerId>对应关系Map子模块，用于更新存储<ServerIP.providerId>对应关系Map；
<ServerIp:providerId>对应关系缓存子模块，用于将<ServerIp:providerId>的对应关系缓存；
<A地址-1>缓存子模块，用于将<A地址-1>存入缓存中；
providerId对应子模块，用于给synthetic_host对应的providerId；
serverIp获取子模块，用于根据har文件获得该obj的serverIp；
Hostname判断子模块，用于判断Hostname是否在白名单中；
Serverip判断子模块，用于判断Serverip是否在缓存中；
Key word判断子模块，用于判断Key word是否在缓存中；
Cname判断子模块，用于判断是否有Cname；
A地址获取子模块，用于根据Dig结果，获得该host对应的A地址；
Cname获取子模块，用于根据Dig结果，获得该host对应的Cname；
主机挖掘子模块，用于dig各obj的host。
附图说明
图1为本发明一个实施例的基于骨干网对CDN性能的监控和评测方法的主要流程示意图；
图2为本发明一个实施例的基于骨干网对CDN性能的监控和评测系统的结构示意图；
图3为本发明一个应用例中的接口设计示意图；
图4为本发明一个应用例中的处理流程示意图；
图5为本发明一个应用例中的数据架构示意图；
图6为本发明一个应用例中的逻辑架构示意图。
具体实施方式
为了更好的解释本发明，以便于理解，下面结合附图，通过具体实施方式，对本发明作详细描述。
参见图1，本发明一个实施例的基于骨干网对CDN性能的监控和评测方法，其包括如下步骤：
S1、用户通过Web页面创建任务；
S2、任务信息通过API保存至Mysql任务信息数据库；
S3、调度器分发任务至各监测点；
S4、监测点对用户网站进行探测，收集预定指标数据，并预处理后返回调度器；
S5、调度器收集各监测点返回的指标数据，验证、过滤、写入PostgreSQL探测结果数据库；
S6、数据API从探测结果数据库读取指标数据，进行多维度分析、统计、聚合，生成监控和评测结果；
S7、通过Web页面可视化展示监控和评测结果。
借助上述方案，本发明的基于骨干网对CDN性能的监控和评测方法，其可以按频率进行调度，能对采集到的数据进行快速的分析，数据响应及时、准确、稳定。
较佳的，其步骤S3中包括步骤：
S30、调度器每次启动，从DB数据库中读取最新的CDN Provider信息，存储在内存中。
S31、更新CDNProvider接收到信息，更新<CDN-Provider>信息；
S32、获取CDNProviders接收Client信息，若有变化生成新的token，并返回当前<CDN-Provider>信息以及Token，若接收到的Token为：client-startup，则返回CdnProvider对应关系信息和<Hostname.CdnProvideId>白名单信息；
S33、cdn_provider数据表变化后访问调度器的接口服务，以生成新的token。
较佳的，其步骤S4中包括步骤：
S40、监测点启动时从调度器端获得最新的cdnProvider、CDN白名单、token信息；
S41、监测点定时访问调度器的接口，获取最新的CDN信息和token；
S42、监测点会返回自己最新的CND信息给调度器。
具体的，
S40、监测点启动时，向调度器发送“client-startup”Token，从调度器端获得最新的cdnProvider、CDN白名单、token信息，更新<Hostname:CdnProviderId>白名单，加载<CDNKeyWord-Provider>对应关系Map；
S41、监测点定时向调度器发送“client-startup”Token，访问调度器的接口，获取最新的CDN信息和token，并修改<CDNKeyWord-Provider>对应关系Map；
S42、监测点会返回自己最新的CND信息给调度器；
S4201、Start to process Synthetic Ojbect CDN；
S4202、根据har文件获得该obj的serverIp；
S4203、check<Hostname:CdnProviderId>白名单，判断Hostname是否在白名单中，若是，则执行步骤S4211，若否，则执行步骤S4202；
S4204、check<ServerIP.providerId>对应关系Map，判断Serverip是否在缓存中，若是，则执行步骤S4211，若否，则执行步骤S4205；
S4205、dig该obj的host；
S4206、根据Dig结果，获得该host对应的A地址和Cname；
S4207、判断是否有Cname，若是，则执行步骤S4208，若否，则执行步骤S4212；
S4208、check<CDNKeyWord-Provider>对应关系Map，判断Key word是否在缓存中，若是，则执行步骤S4209，若否，则执行步骤S4212；
S4209、将<ServerIp:providerId>的对应关系缓存；
S4210、将缓存中的<ServerIp:providerId>的对应关系和/或<A地址-1>存入<ServerIP.providerId>对应关系Map；
S4211、给该synthetic_host对应的providerId，结束；
S4212、将<A地址-1>存入缓存中；
S4213、给该synthetic_host的providerId为-1，结束。
其中，S4208中，Check方式为:先判断key word是否存在信息源为User的缓存中；若不存在，再去判定该key word是否存在信息源为System的缓存中。
参见图2，本发明一个较佳实施例的基于骨干网对CDN性能的监控和评测系统，其包括：
调度器模块，用于按频率进行调度；
监测点模块，用于对用户网站进行探测，收集预定指标数据，并返回调度器；
任务信息数据库模块，用于保存任务信息数据；
探测结果数据库模块，用于保存探测结果数据；
数据API模块，用于对指标数据进行分析、统计、聚合，生成监控和评测结果。
可视化web页面，用于创建任务、展示监控和评测结果。
借助上述方案，本发明的基于骨干网对CDN性能的监控和评测系统，其可以按频率进行调度，能对采集到的数据进行快速的分析，数据响应及时、准确、稳定，任务设置快捷、易用，能支持每种指标数据的可视化展示，数据展示方式可读性高。
较佳的，还包括下列模块：
CDN-Provider获取子模块，用于启动时从调度器端获得最新的cdnProvider、CDN白名单、token信息；
定时器子模块，用于定时从server端获得最新的cdn provider信息；
<CDNKeyWord-Provider>对应关系Map子模块，用于更新存储<CDNKeyWord-Provider>对应关系Map；
<Hostname:CdnProviderId>白名单子模块，用于更新存储<Hostname:CdnProviderId>白名单；
<ServerIP.providerId>对应关系Map子模块，用于更新存储<ServerIP.providerId>对应关系Map；
<ServerIp:providerId>对应关系缓存子模块，用于将<ServerIp:providerId>的对应关系缓存；
<A地址-1>缓存子模块，用于将<A地址-1>存入缓存中；
providerId对应子模块，用于给synthetic_host对应的providerId；
serverIp获取子模块，用于根据har文件获得该obj的serverIp；
Hostname判断子模块，用于判断Hostname是否在白名单中；
Serverip判断子模块，用于判断Serverip是否在缓存中；
Key word判断子模块，用于判断Key word是否在缓存中；
Cname判断子模块，用于判断是否有Cname；
A地址获取子模块，用于根据Dig结果，获得该host对应的A地址；
Cname获取子模块，用于根据Dig结果，获得该host对应的Cname；
主机挖掘子模块，用于dig各obj的host。
较佳的，调度器模块包括：
任务分发子模块，用于分发任务至各监测点；
数据收集子模块，用于对用户网站进行探测，收集预定指标数据，并返回调度器；
CDN-Provider信息处理子模块，用于读取、更新CDN Provider信息；
token信息处理子模块，用于接收、处理token信息。
其中，较佳的，探测结果数据库模块采用PostgreSQL数据库，其中包括DBCloudwise_synthetic子模块和Table:Cdn_provider synthetic_host子模块。
其中，较佳的，基于PHP的服务器，可以进行新增、修改、删除<CDN-Provider>操作，并访问Java Restfull服务，告知Java Server端<CDN-Provider>有变化，http://Server！p.ServerPort/updatedCDNprovider。
为了便于理解本发明，下面还提供一个具体应用例对本发明做进一步描述(参见图3至图6)。
其中，调度器负责任务按频率进行调度，包括扫描并存储下一周期将要被执行的任务列表，并且与监测点通信下发任务至各监测点，收集监测点上报返回的数据，进行验证、过滤等分析统计后写入数据库；
监测点部署在分布于世界各地多种网络运营商的物理主机上，负责执行从“调度器”获取的任务，包括检测用户网站，即对用户网站进行探测，收集各指标数据并进行汇总处理，上报返回到调度器；
数据库包括Mysql任务信息数据库和PostgreSQL探测结果数据库，其中，Mysql任务信息数据库用来存储任务相关信息和用户相关信息等基本信息的存储，PostgreSQL探测结果数据库负责对监控数据、分析统计数据进行存储；
数据API负责从不同维度对各项指标的数据进行分析、统计、聚合，生成监控和测评结果；
Redis缓存：用于热数据缓存，用于提高交互效率；
可视化web页面可以通过图形、表格等不同形式展示结果，包括页面可用性、页面性能、资源可用性、资源性能、首屏时间等数据。
借此，可以实现调度器在系统后台服务端，通过复杂的调度算法，实现按频率调度；监测点端通过访问服务器API获得探测任务信息，监测点在探测用户资源后，对各类结果数据进行预处理后回传给服务器；服务器对从监测点段接收到的数据进行多维度分析、处理并存储到数据库中；数据API通过读取数据库，根据API数据定义对数据进行分析、多维度处理后包装成所需要的数据返回格式，以满足前端渲染界面的需要；可视化web页面把数据API返回的数据，以图表、表格等不同形式，展现在页面上。
同时，在数据存储的选择上，选择了mysql+Postgres的组合，其中mysql用于任务信息的存储(应用兼容)，PostgreSQL存储大量的探测结果信息以及处理信息。在数据分析层面，产品使用了丰富的PostgreSQL函数库编写存储过程，同时确保了业务数据分析处理的高效执行。具体包括：用户可以通过Web页面创建任务，任务信息通过Api保存至Mysql；调用器分发任务至检测点并收集、整理采集数据至PostgreSQL；数据Api从Mysql和PostgreSQL读取数据后，返回至Web页面以图表等形式展现。
其中，调度器每次启动，从DB中读取最新的CDN Provider信息，存储在内存中；监测点启动时从调度器端获得最新的cdnProvider、CDN白名单、token信息；cdn_provider数据表变化后访问调度器的接口服务，以生成新的token；监测点定时访问调度器的接口，获取最新的CDN信息和token；监测点会返回自己最新的CND信息给调度器。
借此，使得每个任务的具体测试时间平铺，散点化；可以按照任务的频率，任务执行填充率优先原则切出合理的任务时间片段，平衡各个任务；清晰的逻辑和维度跟踪、分析系统的任务调度持续分时数据(需求量，监测点派发量，数据回收量)，提供可视化数据给运维团队便于系统健康度跟踪和管理；服务器端具有服务的水平扩展性，可用性，单个服务器故障，升级或维护时，在负载均衡的场景下，对整体的影响轻度且可控；监测点高效率执行任务信息，用最低的资源消耗去执行任务，快速处理返回结果数据。
综上所述，本发明的基于骨干网对CDN性能的监控和评测方法和系统，可以按频率进行调度，能对采集到的数据进行快速的分析，数据响应及时、准确、稳定，可以实现及时告警，任务设置快捷、易用，可以自定义设置告警规则，能支持每种指标数据的可视化展示，数据展示方式可读性高，能以邮件、短信等多元化方式及时告警。
Claims (10)
1.一种基于骨干网对CDN性能的监控和评测方法，其包括如下步骤：
S2、任务信息通过API保存至任务信息数据库；
S3、调度器分发任务至各监测点；
S4、监测点对用户网站进行探测，收集预定指标数据，并返回调度器；
S5、调度器收集各监测点返回的指标数据，验证、过滤、写入探测结果数据库；
S6、数据API从探测结果数据库读取指标数据，进行分析、统计、聚合，生成监控和评测结果。
2.如权利要求1所述的基于骨干网对CDN性能的监控和评测方法，其步骤S3中包括步骤：
S30、调度器每次启动，从DB数据库中读取最新的CDN Provider信息，存储在内存中。
S31、更新CDNProvider接收到信息，更新<CDN-Provider>信息；
S32、获取CDNProviders接收Client信息，若有变化生成新的token，并返回当前<CDN-Provider>信息以及Token，若接收到的Token为：client-startup，则返回CdnProvider对应关系信息和<Hostname.CdnProvideId>白名单信息；
S33、cdn_provider数据表变化后访问调度器的接口服务，以生成新的token。
3.如权利要求1所述的基于骨干网对CDN性能的监控和评测方法，其步骤S4中包括步骤：
S40、监测点启动时从调度器端获得最新的cdnProvider、CDN白名单、token信息；
S41、监测点定时访问调度器的接口，获取最新的CDN信息和token；
S42、监测点会返回自己最新的CND信息给调度器。
4.如权利要求3所述的基于骨干网对CDN性能的监控和评测方法，其步骤S42中包括步骤：
S4201、Start to process Synthetic Ojbect CDN；
S4202、根据har文件获得该obj的serverIp；
S4203、check<Hostname:CdnProviderId>白名单，判断Hostname是否在白名单中，若是，则执行步骤S4211，若否，则执行步骤S4202；
S4204、check<ServerIP.providerId>对应关系Map，判断Serverip是否在缓存中，若是，则执行步骤S4211，若否，则执行步骤S4205；
S4205、dig该obj的host；
S4206、根据Dig结果，获得该host对应的A地址和Cname；
S4207、判断是否有Cname，若是，则执行步骤S4208，若否，则执行步骤S4212；
S4208、check<CDNKeyWord-Provider>对应关系Map，判断Key word是否在缓存中，若是，则执行步骤S4209，若否，则执行步骤S4212，其中较佳的Check方式为:先判断key word是否存在信息源为User的缓存中，若不存在，再去判定该key word是否存在信息源为System的缓存中；
S4209、将<ServerIp:providerId>的对应关系缓存；
S4210、将缓存中的<ServerIp:providerId>的对应关系和/或<A地址-1>存入<ServerIP.providerId>对应关系Map；
S4211、给该synthetic_host对应的providerId，结束；
S4212、将<A地址-1>存入缓存中；
S4213、给该synthetic_host的providerId为-1，结束。
5.如权利要求1所述的基于骨干网对CDN性能的监控和评测方法，其还包括步骤：
S1、通过Web页面创建任务；
S7、通过Web页面可视化展示监控和评测结果。
6.一种基于骨干网对CDN性能的监控和评测系统，其特征在于，其包括：
调度器模块，用于按频率进行调度；
监测点模块，用于对用户网站进行探测，收集预定指标数据，并返回调度器；
任务信息数据库模块，用于保存任务信息数据；
探测结果数据库模块，用于保存探测结果数据；
数据API模块，用于对指标数据进行分析、统计、聚合，生成监控和评测结果。
7.如权利要6所述的基于骨干网对CDN性能的监控和评测系统，其特征在于，调度器模块包括：
任务分发子模块，用于分发任务至各监测点；
数据收集子模块，用于对用户网站进行探测，收集预定指标数据，并返回调度器。
8.如权利要求6所述的基于骨干网对CDN性能的监控和评测系统，其特征在于，调度器模块包括：
CDN-Provider信息处理子模块，用于读取、更新CDN Provider信息；
token信息处理子模块，用于接收、处理token信息。
9.如权利要求6所述的基于骨干网对CDN性能的监控和评测系统，其特征在于，还包括：
可视化web页面，用于创建任务、展示监控和评测结果。
10.如权利要求6所述的基于骨干网对CDN性能的监控和评测系统，其特征在于，还包括下列模块中的任一或任几个：
CDN-Provider获取子模块，用于启动时从调度器端获得最新的cdnProvider、CDN白名单、token信息；
定时器子模块，用于定时从server端获得最新的cdn provider信息；
<CDNKeyWord-Provider>对应关系Map子模块，用于更新存储<CDNKeyWord-Provider>对应关系Map；
<Hostname:CdnProviderId>白名单子模块，用于更新存储<Hostname:CdnProviderId>白名单；
<ServerIP.providerId>对应关系Map子模块，用于更新存储<ServerIP.providerId>对应关系Map；
<ServerIp:providerId>对应关系缓存子模块，用于将<ServerIp:providerId>的对应关系缓存；
<A地址-1>缓存子模块，用于将<A地址-1>存入缓存中；
providerId对应子模块，用于给synthetic_host对应的providerId；
serverIp获取子模块，用于根据har文件获得该obj的serverIp；
Hostname判断子模块，用于判断Hostname是否在白名单中；
Serverip判断子模块，用于判断Serverip是否在缓存中；
Key word判断子模块，用于判断Key word是否在缓存中；
Cname判断子模块，用于判断是否有Cname；
A地址获取子模块，用于根据Dig结果，获得该host对应的A地址；
Cname获取子模块，用于根据Dig结果，获得该host对应的Cname；
主机挖掘子模块，用于dig各obj的host。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011425852.7A CN113010410A (zh) | 2020-12-08 | 2020-12-08 | 一种基于骨干网对cdn性能的监控和评测方法和系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011425852.7A CN113010410A (zh) | 2020-12-08 | 2020-12-08 | 一种基于骨干网对cdn性能的监控和评测方法和系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113010410A true CN113010410A (zh) | 2021-06-22 |
Family
ID=76383173
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011425852.7A Pending CN113010410A (zh) | 2020-12-08 | 2020-12-08 | 一种基于骨干网对cdn性能的监控和评测方法和系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113010410A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113535205A (zh) * | 2021-07-22 | 2021-10-22 | 浪潮云信息技术股份公司 | 一种基于NIFI接口的WEB组件token定时更新实现方法及系统 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104994123A (zh) * | 2015-05-12 | 2015-10-21 | 段利平 | 一种cdn云平台及cdn云平台的流量调度方法 |
| CN107135103A (zh) * | 2017-05-08 | 2017-09-05 | 网宿科技股份有限公司 | 在异构资源上构建内容分发网络平台的方法和系统 |
| CN109474484A (zh) * | 2017-09-07 | 2019-03-15 | 阿里巴巴集团控股有限公司 | Cdn的检查方法及装置、系统 |
| CN110830564A (zh) * | 2019-10-30 | 2020-02-21 | 北京金山云网络技术有限公司 | Cdn调度方法、装置、系统及计算机可读存储介质 |
| CN111898059A (zh) * | 2019-05-06 | 2020-11-06 | 千寻位置网络有限公司 | 网站页面质量评估和监控方法及其系统 |
-
2020
- 2020-12-08 CN CN202011425852.7A patent/CN113010410A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104994123A (zh) * | 2015-05-12 | 2015-10-21 | 段利平 | 一种cdn云平台及cdn云平台的流量调度方法 |
| CN107135103A (zh) * | 2017-05-08 | 2017-09-05 | 网宿科技股份有限公司 | 在异构资源上构建内容分发网络平台的方法和系统 |
| CN109474484A (zh) * | 2017-09-07 | 2019-03-15 | 阿里巴巴集团控股有限公司 | Cdn的检查方法及装置、系统 |
| CN111898059A (zh) * | 2019-05-06 | 2020-11-06 | 千寻位置网络有限公司 | 网站页面质量评估和监控方法及其系统 |
| CN110830564A (zh) * | 2019-10-30 | 2020-02-21 | 北京金山云网络技术有限公司 | Cdn调度方法、装置、系统及计算机可读存储介质 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113535205A (zh) * | 2021-07-22 | 2021-10-22 | 浪潮云信息技术股份公司 | 一种基于NIFI接口的WEB组件token定时更新实现方法及系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8490055B2 (en) | Generating dependency maps from dependency data | |
| US9772923B2 (en) | Fast OLAP for real user measurement of website performance | |
| US10127146B2 (en) | Systems and methods to identify and classify performance bottlenecks in cloud based applications | |
| US10664837B2 (en) | Method and system for real-time, load-driven multidimensional and hierarchical classification of monitored transaction executions for visualization and analysis tasks like statistical anomaly detection | |
| US9590880B2 (en) | Dynamic collection analysis and reporting of telemetry data | |
| Liu et al. | Understanding diverse usage patterns from large-scale appstore-service profiles | |
| US10783002B1 (en) | Cost determination of a service call | |
| US10116534B2 (en) | Systems and methods for WebSphere MQ performance metrics analysis | |
| CN109309596B (zh) | 一种压力测试方法、装置及服务器 | |
| CN102231673B (zh) | 用于监控业务服务器的系统和方法 | |
| CN110489339B (zh) | 客户端压测报表生成方法、系统、介质和电子设备 | |
| US10411969B2 (en) | Backend resource costs for online service offerings | |
| CN111953556B (zh) | 网站自动拨测方法、装置、计算机设备及可读存储介质 | |
| CN113010410A (zh) | 一种基于骨干网对cdn性能的监控和评测方法和系统 | |
| US9817864B1 (en) | Flexible pivot querying of monitoring data with zero setup | |
| CN106649374B (zh) | 导航标签排序的方法及装置 | |
| CN114168624B (zh) | 数据分析方法、计算设备及存储介质 | |
| US9104392B1 (en) | Multitenant monitoring system storing monitoring data supporting flexible pivot querying | |
| US10171602B2 (en) | Determining device counts | |
| CN115659045A (zh) | 用户操作的识别方法、装置、存储介质以及电子设备 | |
| CN114675931A (zh) | 一种集成平台实例的资源监控方法及监控装置 | |
| US10972353B1 (en) | Identifying change windows for performing maintenance on a service | |
| US9009073B1 (en) | Product availability check using image processing | |
| CN110941608B (zh) | 一种埋点分析和漏斗分析报表生成方法、装置及设备 | |
| CN112416699A (zh) | 指标数据收集方法及系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |