CN111898059A - 网站页面质量评估和监控方法及其系统 - Google Patents
网站页面质量评估和监控方法及其系统 Download PDFInfo
- Publication number
- CN111898059A CN111898059A CN201910373139.3A CN201910373139A CN111898059A CN 111898059 A CN111898059 A CN 111898059A CN 201910373139 A CN201910373139 A CN 201910373139A CN 111898059 A CN111898059 A CN 111898059A
- Authority
- CN
- China
- Prior art keywords
- simulated
- page
- network conditions
- node
- interface
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 87
- 238000012544 monitoring process Methods 0.000 title claims abstract description 86
- 238000013441 quality evaluation Methods 0.000 title claims abstract description 44
- 230000003068 static effect Effects 0.000 claims abstract description 58
- 238000001303 quality assessment method Methods 0.000 claims abstract description 34
- 230000008569 process Effects 0.000 claims abstract description 23
- 238000004088 simulation Methods 0.000 claims abstract description 23
- 238000005457 optimization Methods 0.000 claims abstract description 18
- 230000002159 abnormal effect Effects 0.000 claims description 18
- 238000012545 processing Methods 0.000 description 13
- 230000009471 action Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 7
- 238000012360 testing method Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 5
- 239000000969 carrier Substances 0.000 description 4
- 229940107810 cellcept Drugs 0.000 description 4
- 230000003203 everyday effect Effects 0.000 description 4
- HPNSFSBZBAHARI-UHFFFAOYSA-N micophenolic acid Natural products OC1=C(CC=C(C)CCC(O)=O)C(OC)=C(C)C2=C1C(=O)OC2 HPNSFSBZBAHARI-UHFFFAOYSA-N 0.000 description 4
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000005856 abnormality Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000011156 evaluation Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000002085 persistent effect Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000002688 persistence Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
- 230000003245 working effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/958—Organisation or management of web site content, e.g. publishing, maintaining pages or automatic linking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3604—Software analysis for verifying properties of programs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/445—Program loading or initiating
- G06F9/44521—Dynamic linking or loading; Link editing at or after load time, e.g. Java class loading
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Debugging And Monitoring (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本申请涉及互联网技术领域，公开了一种网站页面质量评估和监控方法及其系统。该网站页面质量评估包括获取多组模拟网络状况和模拟处理器速度的组合；对于每一种组合，分别执行以下步骤：将一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中；在该种组合中的模拟网络状况和模拟处理器速度下，控制该无界面浏览器访问网站前端页面，使用第一监听事件采集该访问网站前端页面的过程中涉及的API接口和静态资源请求数据，使用第二监听事件采集页面加载时的性能数据；按照预定的规则，对所采集到的该API接口和静态资源请求数据及该页面加载时的性能数据进行分析生成质量评估数据和优化报告。
Description
技术领域
本申请涉及互联网技术领域，特别涉及网站页面质量评估和监控技术。
背景技术
随着计算机技术的快速发展，需要对网站页面不断更新以满足用户的需求，质量评估和监控的应用可以及时发现网站页面的问题，提升用户体验。但是，传统的质量评估和监控方式只能采集特定的物理处理器和网络状况下的性能数据，得到的质量评估数据和监控数据不全面；而且，传统的质量评估大多是静态资源的评估而传统的监控方式大多是监控页面API的正常运行，认为API正常运行即等于页面正常运行，但事实上还存在DNS异常、CDN异常、浏览器兼容性等问题无法被察觉，且传统的质量评估和监控方法对所在系统原有的代码具有侵入性，安全性不高。
发明内容
本申请的目的在于提供一种网站页面质量评估和监控方法及其系统，能够在保证系统安全的情况下，对网站页面进行质量评估或监控，且得到的页面质量数据和监控数据更全面。
本申请公开了一种网站页面质量评估方法，包括：
获取多组模拟网络状况和模拟处理器速度的组合；对于每一种组合，分别执行以下步骤：
将一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中；
在该种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器访问网站前端页面，使用第一监听事件采集所述访问网站前端页面的过程中涉及的API接口和静态资源请求数据，使用第二监听事件采集页面加载时的性能数据；
按照预定的规则，对所采集到的所述API接口和静态资源请求数据及所述页面加载时的性能数据进行分析生成质量评估数据和优化报告。
在一个优选例中，所述多组模拟网络状况和模拟处理器速度的组合中的所述模拟网络状态包括模拟2G网络状况、模拟3G网络状况、模拟4G网络状况和模拟WIFI网络状况。
在一个优选例中，所述在该种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器访问网站前端页面，进一步包括：
在该种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器采用树的前序遍历对所述网站前端页面进行层级迭代访问。
在一个优选例中，所述按照预定的规则，对所采集到的所述API接口和静态资源请求数据及所述页面加载时的性能数据进行分析生成质量评估数据和优化报告，进一步包括：
将所采集到的所述API接口和静态资源请求数据及所述页面加载时的性能数据分别与预先约定的资源加载顺序、资源大小阈值和请求时间阈值进行比较分析，生成质量评估数据以及根据所述质量评估数据生成优化报告。
在一个优选例中，所述使用第二监听事件采集页面加载时的性能数据之后，还包括：
将所采集到的所述API接口和静态资源请求数据及所述页面加载时的性能数据进行持久化存储到数据库，并向外提供所述API接口供用户访问。
在一个优选例中，所述在该种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器采用树的前序遍历对所述网站前端页面进行层级迭代访问，进一步包括：
A在该种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器访问一个新页面；
B如果所述新页面属于最后一层需要遍历的层级，则继续判断所述新页面是否属于父亲的最后一个节点，否则遍历所述新页面内剩余的标签，返回步骤A；
C如果所述新页面属于父亲的最后一个节点，则关闭该节点及父亲节点，回到祖父节点，否则关闭该节点，回到上一个节点；
D如果所述祖父节点或所述上一个节点为最顶层节点，则关闭该最顶层节点，执行结束，否则遍历所述新页面内剩余的标签，返回步骤A。
本申请还公开了一种网站页面监控方法包括：
获取多组模拟网络状况和模拟处理器速度的组合；对于每一种组合，分别执行以下步骤：将一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中；
在该种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器访问网站前端页面，使用全局监听事件采集所述访问网站前端页面的过程中涉及的API接口和静态资源访问异常数据及页面报错数据；
按照预定的规则，对所采集到的所述API接口和静态资源访问异常数据及页面报错数据进行分析生成告警消息发送给用户。
在一个优选例中，所述多组模拟网络状况和模拟处理器速度的组合中的所述模拟网络状态包括模拟2G网络状况、模拟3G网络状况、模拟4G网络状况和模拟WIFI网络状况。
在一个优选例中，所述在该种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器访问网站前端页面，进一步包括：
在该种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器采用树的前序遍历对所述网站前端页面进行层级迭代访问。
在一个优选例中，对所采集到的所述API接口和静态资源访问异常数据及页面报错数据进行分析生成告警消息发送给用户，进一步包括：
将所采集到的所述API接口和静态资源访问异常数据及页面报错数据与预设警戒值进行比较，如果达到所述预设警戒值，则向所述用户发送告警消息。
在一个优选例中，所述在该种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器采用树的前序遍历对所述网站前端页面进行层级迭代访问，进一步包括：
A在该种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器访问一个新页面；
B如果所述新页面属于最后一层需要遍历的层级，则继续判断所述新页面是否属于父亲的最后一个节点，否则遍历所述新页面内剩余的标签，返回步骤A；
C如果所述新页面属于父亲的最后一个节点，则关闭该节点及父亲节点，回到祖父节点，否则关闭该节点，回到上一个节点；
D如果所述祖父节点或所述上一个节点为最顶层节点，则关闭该最顶层节点，执行结束，否则遍历所述新页面内剩余的标签，返回步骤A。
在一个优选例中，所述网站页面监控方法被设置为定时执行。
本申请还公开了一种网站页面质量评估系统包括：
配置模块，用于获取多组模拟网络状况和模拟处理器速度的组合，对于所述配置模块中的每一种组合，分别将所述每一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中，在所述每一种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器访问网站前端页面；
第一采集模块，用于在所述每一种组合中的模拟网络状况和模拟处理器速度下，使用第一监听事件采集所述访问网站前端页面的过程中涉及的API接口和静态资源请求数据，使用第二监听事件采集页面加载时的性能数据；
第一分析模块，用于在所述每一种组合中的模拟网络状况和模拟处理器速度下，按照预定的规则，对所述采集模块所采集到的所述API接口和静态资源请求数据及所述页面加载时的性能数据进行分析生成质量评估数据和优化报告。
在一个优选例中，所述多组模拟网络状况和模拟处理器速度的组合中的所述模拟网络状态包括模拟2G网络状况、模拟3G网络状况、模拟4G网络状况和模拟WIFI网络状况。
在一个优选例中，所述配置模块还用于，对于所获取的多组模拟网络状况和模拟处理器速度的组合中的每一种组合，分别将所述每一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中，在所述每一种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器采用树的前序遍历对所述网站前端页面进行层级迭代访问。
在一个优选例中，所述第一分析模块还用，将所述采集模块所采集到的所述API接口和静态资源请求数据及所述页面加载时的性能数据分别与预先约定的资源加载顺序、资源大小阈值和请求时间阈值进行比较分析，生成质量评估数据以及根据所述质量评估数据生成优化报告。
在一个优选例中，还包括存储模块，用于将所述采集模块所采集到的所述API接口和静态资源请求数据及所述页面加载时的性能数据进行持久化存储到数据库，并向外提供所述API接口供用户访问。
在一个优选例中，所述配置模块还用于，对于所获取的多组模拟网络状况和模拟处理器速度的组合中的每一种组合，分别将所述每一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中，在所述每一种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器访问一个新页面,如果所述新页面属于最后一层需要遍历的层级，则继续判断所述新页面是否属于父亲的最后一个节点，否则遍历所述新页面内剩余的标签，返回“控制所述无界面浏览器访问一个新页面”，如果所述新页面属于父亲的最后一个节点，则关闭该节点及父亲节点，回到祖父节点，否则关闭该节点，回到上一个节点，如果所述祖父节点或所述上一个节点为最顶层节点，则关闭该最顶层节点后结束，否则遍历所述新页面内剩余的标签，返回“控制所述无界面浏览器访问一个新页面”直至结束。
本申请还公开了一种网站页面监控系统包括：
配置模块，是前文描述的配置模块；
第二采集模块，用于在所述每一种组合中的模拟网络状况和模拟处理器速度下，使用全局监听事件采集所述访问网站前端页面的过程中涉及的API接口和静态资源访问异常数据及页面报错数据；
第二分析模块，用于在所述每一种组合中的模拟网络状况和模拟处理器速度下，按照预定的规则，对所述采集模块所采集到的所述API接口和静态资源访问异常数据及页面报错数据进行分析生成告警消息发送给用户。
在一个优选例中，所述多组模拟网络状况和模拟处理器速度的组合中的所述模拟网络状态包括模拟2G网络状况、模拟3G网络状况、模拟4G网络状况和模拟WIFI网络状况。
在一个优选例中，所述配置模块还用于，对于所获取的多组模拟网络状况和模拟处理器速度的组合中的每一种组合，分别将所述每一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中，在所述每一种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器采用树的前序遍历对所述网站前端页面进行层级迭代访问。
在一个优选例中，所述第二分析模块，还用于按照预定的规则，将所述采集模块所采集到的所述API接口和静态资源访问异常数据及页面报错数据与预设警戒值进行比较，如果达到所述预设警戒值，则向所述用户发送告警消息。
在一个优选例中，所述配置模块还用于，对于所获取的多组模拟网络状况和模拟处理器速度的组合中的每一种组合，分别将所述每一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中，在所述每一种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器访问一个新页面,如果所述新页面属于最后一层需要遍历的层级，则继续判断所述新页面是否属于父亲的最后一个节点，否则遍历所述新页面内剩余的标签，返回“控制所述无界面浏览器访问一个新页面”，如果所述新页面属于父亲的最后一个节点，则关闭该节点及父亲节点，回到祖父节点，否则关闭该节点，回到上一个节点，如果所述祖父节点或所述上一个节点为最顶层节点，则关闭该最顶层节点后结束，否则遍历所述新页面内剩余的标签，返回“控制所述无界面浏览器访问一个新页面”直至结束。
在一个优选例中，所述网站页面监控系统被设置为定时执行。
本申请还公开了一种网站页面质量评估系统包括：
存储器，用于存储计算机可执行指令；以及，
处理器，用于在执行所述计算机可执行指令时实现如前文描述的网站页面质量评估方法中的步骤。
本申请还公开了一种计算机可读存储介质所述计算机可读存储介质中存储有计算机可执行指令，所述计算机可执行指令被处理器执行时实现如前文描述的网站页面质量评估方法中的步骤。
本申请还公开了一种网站页面监控系统包括：
存储器，用于存储计算机可执行指令；以及，
处理器，用于在执行所述计算机可执行指令时实现如前文描述的网站页面监控方法中的步骤。
本申请还公开了一种计算机可读存储介质所述计算机可读存储介质中存储有计算机可执行指令，所述计算机可执行指令被处理器执行时实现如前文描述的网站页面监控方法中的步骤。
传统的质量评估和监控方法只能在有限的网络和有限的物理处理器下采集性能数据，所提供的网络和物理处理器组合也有限，且在不同的网络和物理处理器组合的切换过程都是通过人工模拟(甚至手动操作)，成本较高，所得到质量评估和监控结果不够全面。而本申请的实施方式中的质量评估和监控方法，克服了传统方法的大部分缺点，基于不同的模拟网络状况和不同的模拟处理器的各种组合，分别将所述各种组合下的模拟网络状态和模拟处理器速度设置到无界面浏览器的运行环境中，并且在每一种组合下进行质量性能数据的采集和分析，质量评估和监控效果更佳，得到的质量评估数据更加全面；而且因为可以对不同模拟网络状态和不同模拟处理器速度所有组合进行自动匹配和切换设置，使得成本大大降低，且质量评估速度更快和监控更精准，最终得到的质量评估数据和监控数据更全面，也避免了传统方法中涉及的人为因素所造成的错误。
进一步地，通过控制该无界面浏览器采用树的前序遍历对该网站前端页面进行层级迭代访问，避免了因页面层次较深和每层需要遍历的数据过大造成对系统性能的影响，本申请的实施方式中所采用多层级页面迭代遍历方式给用户提供便捷的操作方式，一次就可以查看主页面及其所有子页面的页面性能和监控情况。
进一步地，因为传统的页面质量评估和监控方法大都使用基于CS架构SDK的方式实现，对所在系统的原有代码存在侵入性，本申请的实施方式中通过设置无界面浏览器对网站前端页面进行质量评估和监控，对所在系统无侵入性，提高了系统的安全性。
本申请的实施方式中分别将各种不同模拟网络状况和不同模拟处理器速度的组合设置到无界面浏览器的运行环境中，并分别在每种组合下，对网站页面进行个性化的质量评估和监控，使得得到的质量评估数据和监控数据更加准确和优质，提升用户体验。
本申请的说明书中记载了大量的技术特征，分布在各个技术方案中，如果要罗列出本申请所有可能的技术特征的组合(即技术方案)的话，会使得说明书过于冗长。为了避免这个问题，本申请上述发明内容中公开的各个技术特征、在下文各个实施方式和例子中公开的各技术特征、以及附图中公开的各个技术特征，都可以自由地互相组合，从而构成各种新的技术方案(这些技术方案均因视为在本说明书中已经记载)，除非这种技术特征的组合在技术上是不可行的。例如，在一个例子中公开了特征A+B+C，在另一个例子中公开了特征A+B+D+E，而特征C和D是起到相同作用的等同技术手段，技术上只要择一使用即可，不可能同时采用，特征E技术上可以与特征C相组合，则，A+B+C+D的方案因技术不可行而应当不被视为已经记载，而A+B+C+E的方案应当视为已经被记载。
附图说明
图1是根据本申请第一实施方式的网站页面质量评估方法流程示意图
图2是根据本申请第二实施方式的网站页面监控方法流程示意图
图3是根据本申请第三实施方式的网站页面质量评估系统结构示意图
图4是根据本申请第四实施方式的网站页面监控系统结构示意图
图5是根据本申请中控制该无界面浏览器访问网站前端页面的一个具体实施例
图6是根据本申请第一实施方式的一个具体实施例
图7是根据本申请第一实施方式的一个具体实施例的基本功能时序图
图8是根据本申请第二实施方式的一个具体实施例
图9是根据本申请第二实施方式的一个具体实施例的基本功能时序图
具体实施方式
在以下的叙述中，为了使读者更好地理解本申请而提出了许多技术细节。但是，本领域的普通技术人员可以理解，即使没有这些技术细节和基于以下各实施方式的种种变化和修改，也可以实现本申请所要求保护的技术方案。
部分概念的说明：
SDK：Software Development Kit，软件开发工具包。
CS架构：即客户端/服务器架构。
无界面浏览器：指没有用户图形界面的的浏览器。
Puppeteer：通过DevTools协议控制无界面浏览器的Node库。可以通过Puppeteer的提供的API直接控制浏览器模拟大部分用户操作来进行UITest或者作为爬虫。
MongoDB：一个基于分布式文件存储的数据库访问页面来收集数据。
持久化：是将程序数据在持久状态和瞬时状态间转换的机制。
API:Application Programming Interface，应用程序编程接口。是一些预先定义的函数，目的是提供应用程序与开发人员基于某软件或硬件得以访问一组例程的能力，而又无需访问源码，或理解内部工作机制的细节。
下面概要说明本申请的部分创新点：
传统的网站页面质量评估方法多只是采集静态资源请求数据，采集到的页面性能数据不够全面，而本申请实施方式中的网站页面质量评估方法同时采集访问过程中涉及的所有API接口和静态资源请求数据及页面加载时的性能数据，采集到的页面数据比较全面，且分别将所采集到的所述API接口和静态资源请求数据及页面加载时的性能数据与预先约定的资源加载顺序规则、资源大小阈值、请求时间阈值进行比较，可以得出比较全面和详细的质量评估数据，并根据该质量评估数据给出优化建议，最后将质量评估数据和优化建议发送给用户，供用户使用，提升了用户体验。
传统的网站页面监控方法大都使用基于CS架构SDK的方式实现，当网络、浏览器等出现问题时，SDK无法加载，导致监控数据无法被采集到，监控效果不佳，且在监控过程中主要是监控网站前端页面的API是否正常运行，如果API正常运行就判定网站前端页面正常运行，但实际还存在无法被察觉的DNS异常、CDN异常、浏览器兼容性等问题，而本申请实施方式中的网站页面监控方法通过设置无界面浏览器访问网站前端页面，并使用全局监听事件采集该访问过程中涉及的API接口和静态资源访问异常数据及页面报错数据，使得采集的数据更全面，并及时将补获的异常通过告警信息的方式发送到用户，其中可以通过订阅的方式灵活地设置监控时间，提升了用户体验。
为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请的实施方式作进一步地详细描述。
本申请的第一实施方式涉及一种网站页面质量评估方法，其流程如图1所示，该方法包括以下步骤：
开始获取多组模拟网络状况和模拟处理器速度的组合；对于每一种组合，分别执行以下步骤101～步骤103。
优选的，该“多组模拟网络状况和模拟处理器速度的组合”中包括不同的模拟网络状况和不同的模拟处理器速度的任意组合。可选地，该“多组模拟网络状况和模拟处理器速度的组合”中也可以包含单独的模拟网络状况的组合和单独的模拟处理速度的组合。
该多组模拟网络状况和模拟处理器速度的组合中的该模拟网络状态是多种多样的，可选地，该模拟网络状态可以包括模拟2G网络状态、模拟3G网络状态、模拟4G网络状态和模拟WIFI网络状态等。可选地，同一种网络(如2G网络、3G网络、4G网络和WIFI网络等)的网络状态进一步包括在不同场景下的不同网络状况；例如，同一种网络(如3G)在室内和室外的具有不同网络状况；例如，同一种网络(如4G)在山区和平原具有不同网络状况；例如，同一种网络(如WIFI)在个人家用和公共场所公用的不同网络状态；等等。可以根据各种网络和各种场景模拟出相应的网络状态，使得在网站页面质量评估过程中更加全面的评估网络环境造成的各类问题。
该多组模拟网络状况和模拟处理器速度的组合中的该模拟处理器速度是多种多样的，可选地，该多组模拟网络状况和模拟处理器速度的组合中的该模拟处理器速度可以但不限于模拟同一场景下的不同处理器芯片的速度，或者，模拟同一处理器芯片在不同场景下的速度，等等。与传统的通过实体物理处理器进行测试的方法，本实施方式模拟出的处理器速度更加全面。
可选地，该处理器速度可以基于不同处理器芯片，进一步可以根据不同的设备载体进行划分，该设备载体包括但不限手机、台式计算机、笔记本电脑等。
例如，针对手机设备的处理速度可以根据手机典型常规处理器芯片和对应的处理速度进行设置该模拟处理器速度。其中该典型常规处理器芯片可以按照市场占有率大小进行选取，包括高通的骁龙处理器、三星的Exynos系列处理器、苹果的A系列处理器、华为的海思系类处理器和华为的麒麟系列处理器等。而且，按照市场占有率大小进行选取处理器芯片和对应的处理器速度，最终得到的质量评估数据更符合实际情况、更真实可靠。
之后进入步骤101，将一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中。
之后进入步骤102，在该种组合中的模拟网络状况和模拟处理器速度下，控制该无界面浏览器访问网站前端页面，使用第一监听事件采集该访问网站前端页面的过程中涉及的API接口和静态资源请求数据，使用第二监听事件采集页面加载时的性能数据。
可选地，步骤102中“在该种组合中的模拟网络状况和模拟处理器速度下，控制该无界面浏览器访问网站前端页面”，进一步包括：在该种组合中的模拟网络状况和模拟处理器速度下，控制该无界面浏览器采用树的前序遍历对该网站前端页面进行层级迭代访问。在一个具体实施例中，“在该种组合中的模拟网络状况和模拟处理器速度下，控制该无界面浏览器采用树的前序遍历对该网站前端页面进行层级迭代访问”包括以下在步骤：开始子步骤A，在该种组合中的模拟网络状况和模拟处理器速度下，控制该无界面浏览器访问一个新页面；之后进入子步骤B，如果该新页面属于最后一层需要遍历的层级，则继续判断该新页面是否属于父亲的最后一个节点，否则遍历该新页面内剩余的标签，返回步骤A；之后进入子步骤C，如果该新页面属于父亲的最后一个节点，则关闭该节点及父亲节点，回到祖父节点，否则关闭该节点，回到上一个节点；之后进入子步骤D，如果该祖父节点或该上一个节点为最顶层节点，则关闭该最顶层节点，执行结束，否则遍历该新页面内剩余的标签，返回步骤A。具体地如图5所示。
可选地，步骤102之后，还包括：将所采集到的该API接口和静态资源请求数据及该页面加载时的性能数据进行持久化存储到数据库，并向外提供该API接口供用户访问。
之后进入步骤103，按照预定的规则，对所采集到的该API接口和静态资源请求数据及该页面加载时的性能数据进行分析生成质量评估数据和优化报告。
可选地，该步骤103进一步包括：将所采集到的该API接口请求数据与预先约定的资源加载顺序规则进行比较分析，将将所采集到的静态资源请求数据与预先约定的资源大小阈值进行比较分析，将该页面加载时的性能数据与预先约定的请求时间阈值进行比较分析后，生成质量评估数据以及根据该质量评估数据生成优化报告。
本实施方式中“多组模拟网络状况和模拟处理器速度的组合”的获取方式和“步骤101”的设置方式有多种，包括：基于puppeteer框架“获取多组模拟网络状况和模拟处理器速度的组合和将每一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中”、基于PhantomJS框架“获取多组模拟网络状况和模拟处理器速度的组合”和“将一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中”、基于SlimerJS框架“获取多组模拟网络状况和模拟处理器速度的组合”和“将一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中”，以及基于Splash框架“获取多组模拟网络状况和模拟处理器速度的组合”和“将一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中”，等等。
如图8所示为本申请第一实施方式的一个具体实施例，图6为其基本功能时序图，该具体实施例的无界面浏览器是基于puppeteer框架的。该具体实施例主要包括以下步骤：首先，使用puppeteer的newPage创建一个新页面；然后，通过puppeteer的Network.emulateNetworkConditons来模拟网络状况以及用Emulation.setCPUThrottlingRate来模拟处理器速度；然后，在特定的网络状况和处理器下，使用page.on(‘request’)这个监听事件去采集所有的api接口和静态资源请求数据，使用page.evaluate这个监听事件去采集页面加载时的性能数据(即window.performance)；最后，对这些采集到的数据进行分析，与资源加载顺序规则、资源大小规则、请求时间的规则等进行对比，为用户提供全面的质量评估数据和优化建议，最后将所采集到的数据持久化存储到mongodb。
本实施方式中，基于“该多组模拟网络状况和模拟处理器速度的组合”下的网站页面质量评估方法，可以在同一次测试中实现不同网络状况和不同处理器速度下的任意组合，并且通过自动匹配的形式穷尽所有可能的组合，与传统的人工模拟相比，成本更低、测试更全面。
本申请的第二实施方式涉及一种网站监控方法，其流程如图2所示，该方法包括以下步骤：
开始获取多组模拟网络状况和模拟处理器速度的组合；对于每一种组合，分别执行以下步骤201～步骤203。
优选地，该“多组模拟网络状况和模拟处理器速度的组合”中包括不同的模拟网络状况和不同的模拟处理器速度的任意组合。可选地，该“多组模拟网络状况和模拟处理器速度的组合”中也可以包含单独模拟网络状况的组合和单独模拟处理速度的组合。
该多组模拟网络状况和模拟处理器速度的组合中的该模拟网络状态是多种多样的，可选地，该模拟网络状态可以包括模拟2G网络状态、模拟3G网络状态、模拟4G网络状态和模拟WIFI网络状态等。可选地，同一种网络(如2G网络、3G网络、4G网络和WIFI网络等)的网络状态进一步包括在不同场景下的不同网络状况；例如，同一种网络(如3G)在室内和室外的具有不同网络状况；例如，同一种网络(如4G)在山区和平原具有不同网络状况；例如，同一种网络(如WIFI)在个人家用和公共场所公用的不同网络状态；等等。可以根据各种网络和各种场景模拟出相应的网络状态，使得在网站页面质量评估过程中更加全面的评估网络环境造成的各类问题。
该多组模拟网络状况和模拟处理器速度的组合中的该模拟处理器速度是多种多样的，可选地，该多组模拟网络状况和模拟处理器速度的组合中的该模拟处理器速度可以但不限于模拟同一场景下的不同处理器芯片的速度，或者，模拟同一处理器芯片在不同场景下的速度，等等。与传统的通过实体物理处理器进行测试的方法，本实施方式模拟出的处理器速度更加全面。
可选地，该处理器速度可以基于不同处理器芯片，进一步可以根据不同的设备载体进行划分，该设备载体包括但不限手机、台式计算机、笔记本电脑等。
例如，针对手机设备的处理速度可以根据手机典型常规处理器芯片和对应的处理速度进行设置该模拟处理器速度。其中该典型常规处理器芯片可以按照市场占有率大小进行选取，包括高通的骁龙处理器、三星的Exynos系列处理器、苹果的A系列处理器、华为的海思系类处理器和华为的麒麟系列处理器等。而且，按照市场占有率大小进行选取处理器芯片和对应的处理器速度，最终得到的质量评估数据更符合实际情况、更真实可靠。之后进入步骤201，将一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中。
之后进入步骤202，在该种组合中的模拟网络状况和模拟处理器速度下，控制该无界面浏览器访问网站前端页面，使用全局监听事件采集该访问网站前端页面的过程中涉及的API接口和静态资源访问异常数据及页面报错数据。
可选地，步骤202中“该在该种组合中的模拟网络状况和模拟处理器速度下，控制该无界面浏览器访问网站前端页面”，进一步包括：在该种组合中的模拟网络状况和模拟处理器速度下，控制该无界面浏览器采用树的前序遍历对该网站前端页面进行层级迭代访问。
在一个具体实施例中，“在该种组合中的模拟网络状况和模拟处理器速度下，控制该无界面浏览器采用树的前序遍历对该网站前端页面进行层级迭代访问”包括以下在步骤：开始子步骤A，在该种组合中的模拟网络状况和模拟处理器速度下，控制该无界面浏览器访问一个新页面；之后进入子步骤B，如果该新页面属于最后一层需要遍历的层级，则继续判断该新页面是否属于父亲的最后一个节点，否则遍历该新页面内剩余的标签，返回步骤A；之后进入子步骤C，如果该新页面属于父亲的最后一个节点，则关闭该节点及父亲节点，回到祖父节点，否则关闭该节点，回到上一个节点；之后进入子步骤D，如果该祖父节点或该上一个节点为最顶层节点，则关闭该最顶层节点，执行结束，否则遍历该新页面内剩余的标签，返回步骤A。具体地如图5所示。
之后进入步骤203，按照预定的规则，对所采集到的该API接口和静态资源访问异常数据及页面报错数据进行分析生成告警消息发送给用户。
可选地，该步骤203进一步包括：将所采集到的该API接口和静态资源访问异常数据及页面报错数据与预设警戒值进行比较，如果达到该预设警戒值，则向该用户发送告警消息。
可选地，该网站页面监控方法被设置为定时执行，例如该网站页面监控系统被设置为每天固定时间点执行一次，或者，该网站页面监控系统被设置为每天不定时地执行一次等等。可选地，该网站页面监控系统被设置以订阅的方式执行，可以根据用户需求进行设置订阅的时间参数。
本实施方式中“多组模拟网络状况和模拟处理器速度的组合”的获取方式和“步骤201”的设置方式有多种，包括：基于puppeteer框架“获取多组模拟网络状况和模拟处理器速度的组合”和“将一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中”、基于PhantomJS框架“获取多组模拟网络状况和模拟处理器速度的组合”和“将一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中”、基于SlimerJS框架“获取多组模拟网络状况和模拟处理器速度的组合”和“将一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中”，以及基于Splash框架“获取多组模拟网络状况和模拟处理器速度的组合”和“将一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中”，等等。
如图9所示为本申请第二实施方式的一个具体实施例，图7为其基本功能时序图，该具体实施例的无界面浏览器是基于puppeteer框架的。该具体实施例主要包括以下步骤：首先，使用puppeteer的newPage创建一个新页面，然后，通过puppeteer的Network.emulateNetworkConditons来模拟网络状况以及用Emulation.setCPUThrottlingRate来模拟处理器速度；然后，在特定的网络状况和处理器下，使用page.on(‘requestfailed’)这个监听事件监听所有的人api接口和静态资源访问异常，使用page.on(‘pageerror’)这个监听事件监听页面报错情况；最后，对这些采集到的数据进行分析，将其与异常的警戒值进行比较，如果达到禁戒值，就调用邮件网关，向用户发送告警邮件。
本实施方式中，基于“该多组模拟网络状况和模拟处理器速度的组合”下的网站页面监控方法，可以在同一次监控中实现不同网络状况和不同处理器速度下的任意组合，并且通过自动匹配的形式穷尽所有可能的组合，与传统的人工模拟相比，成本更低、测试更全面。
本实施方式中的该步骤201之前的执行步骤与本申请第一实施方式中的步骤101之前的执行步骤相同。
本申请的第三实施方式涉及一种网站页面质量评估系统，其结构如图3所示，该网站页面质量评估系统包括配置模块、第一采集模块和第一分析模块。其中：
该配置模块，用于获取多组模拟网络状况和模拟处理器速度的组合，对于该配置模块中的每一种组合，分别将每一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中，在该每一种组合中的模拟网络状况和模拟处理器速度下，控制该无界面浏览器访问网站前端页面。
优选地，该“多组模拟网络状况和模拟处理器速度的组合”中包括不同的模拟网络状况和不同的模拟处理器速度的任意组合。可选地，该“多组模拟网络状况和模拟处理器速度的组合”中也可以包含单独模拟网络状况的组合和单独模拟处理速度的组合。
该多组模拟网络状况和模拟处理器速度的组合中的该模拟网络状态是多种多样的，可选地，该模拟网络状态可以包括模拟2G网络状态、模拟3G网络状态、模拟4G网络状态和模拟WIFI网络状态等。可选地，同一种网络(如2G网络、3G网络、4G网络和WIFI网络等)的网络状态进一步包括在不同场景下的不同网络状况；例如，同一种网络(如3G)在室内和室外的具有不同网络状况；例如，同一种网络(如4G)在山区和平原具有不同网络状况；例如，同一种网络(如WIFI)在个人家用和公共场所公用的不同网络状态；等等。可以根据各种网络和各种场景模拟出相应的网络状态，使得在网站页面质量评估过程中更加全面的评估网络环境造成的各类问题。
该多组模拟网络状况和模拟处理器速度的组合中的该模拟处理器速度是多种多样的，可选地，该多组模拟网络状况和模拟处理器速度的组合中的该模拟处理器速度可以但不限于模拟同一场景下的不同处理器芯片的速度，或者，模拟同一处理器芯片在不同场景下的速度，等等。与传统的通过实体物理处理器进行测试的方法，本实施方式模拟出的处理器速度更加全面。
可选地，该处理器速度可以基于不同处理器芯片，进一步可以根据不同的设备载体进行划分，该设备载体包括但不限手机、台式计算机、笔记本电脑等。
例如，针对手机设备的处理速度可以根据手机典型常规处理器芯片和对应的处理速度进行设置该模拟处理器速度。其中该典型常规处理器芯片可以按照市场占有率大小进行选取，包括高通的骁龙处理器、三星的Exynos系列处理器、苹果的A系列处理器、华为的海思系类处理器和华为的麒麟系列处理器等。而且，按照市场占有率大小进行选取处理器芯片和对应的处理器速度，最终得到的质量评估数据更符合实际情况、更真实可靠。
可选地，该配置模块还用于，对于所获取的多组模拟网络状况和模拟处理器速度的组合中的每一种组合，分别将每一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中，在该每一种组合中的模拟网络状况和模拟处理器速度下，控制该无界面浏览器采用树的前序遍历对该网站前端页面进行层级迭代访问。
可选地，该配置模块还用于，对于所获取的多组模拟网络状况和模拟处理器速度的组合中的每一种组合，分别将每一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中，在该每一种组合中的模拟网络状况和模拟处理器速度下，控制该无界面浏览器访问一个新页面,如果该新页面属于最后一层需要遍历的层级，则继续判断该新页面是否属于父亲的最后一个节点，否则遍历该新页面内剩余的标签，返回“控制该无界面浏览器访问一个新页面”，如果该新页面属于父亲的最后一个节点，则关闭该节点及父亲节点，回到祖父节点，否则关闭该节点，回到上一个节点，如果该祖父节点或该上一个节点为最顶层节点，则关闭该最顶层节点后结束，否则遍历该新页面内剩余的标签，返回“控制该无界面浏览器访问一个新页面”直至结束。
2.该第一采集模块，用于在该每一种组合中的模拟网络状况和模拟处理器速度下，用于使用第一监听事件采集该访问网站前端页面的过程中涉及的API接口和静态资源请求数据，使用第二监听事件采集页面加载时的性能数据。
3.该第一分析模块，用于在该每一种组合中的模拟网络状况和模拟处理器速度下，按照预定的规则，对该采集模块所采集到的该API接口和静态资源请求数据及该页面加载时的性能数据进行分析生成质量评估数据和优化报告。
可选地，该第一分析模块还用，将该采集模块所采集到的该API接口和静态资源请求数据及该页面加载时的性能数据分别与预先约定的资源加载顺序规则、资源大小阈值和请求时间阈值进行比较分析，生成质量评估数据以及根据该质量评估数据生成优化报告。
可选地，该网站页面质量评估系统还包括存储模块，该存储模块用于将该采集模块所采集到的该API接口和静态资源请求数据及该页面加载时的性能数据进行持久化存储到数据库，并向外提供该API接口供用户访问。
第一实施方式是与本实施方式相对应的方法实施方式，第一实施方式中的技术细节可以应用于本实施方式，本实施方式中的技术细节也可以应用于第一实施方式。
本实施方式中，基于“该多组模拟网络状况和模拟处理器速度的组合”下的网站页面质量评估系统，可以实现不同网络状况和不同处理器速度下的任意组合，并且通过自动匹配的形式穷尽所有可能的组合，与传统的人工模拟相比，成本更低、测试更全面。
本申请的第四实施方式涉及一种网站页面监控系统，其结构如图4所示，该网站页面监控系统包括配置模块、第二采集模块和第二分析模块。其中：
1.该配置模块，用于获取多组模拟网络状况和模拟处理器速度的组合，对于该配置模块中的每一种组合，分别将每一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中，在该每一种组合中的模拟网络状况和模拟处理器速度下，控制该无界面浏览器访问网站前端页面，该配置模块与本申请第三实施方式涉及的配置模块功能基本相同，在同一系统中可以分时段共用该配置模块，也可以同一系统包含两个该模块分别执行各自的步骤过程。
优选地，该“多组模拟网络状况和模拟处理器速度的组合”中包括不同的模拟网络状况和不同的模拟处理器速度的任意组合。可选地，该“多组模拟网络状况和模拟处理器速度的组合”中也可以包含单独模拟网络状况的组合和单独模拟处理速度的组合。
该多组模拟网络状况和模拟处理器速度的组合中的该模拟网络状态是多种多样的，可选地，该模拟网络状态可以模拟2G网络状态、模拟3G网络状态、模拟4G网络状态和模拟WIFI网络状态等。可选地，同一种网络(如2G网络、3G网络、4G网络和WIFI网络等)的网络状态进一步包括在不同场景下的不同网络状况；例如，同一种网络(如3G)在室内和室外的具有不同网络状况；例如，同一种网络(如4G)在山区和平原具有不同网络状况；例如，同一种网络(如WIFI)在个人家用和公共场所公用的不同网络状态；等等。可以根据各种网络和各种场景模拟出相应的网络状态，使得在网站页面质量评估过程中更加全面的评估网络环境造成的各类问题。
该多组模拟网络状况和模拟处理器速度的组合中的该模拟处理器速度是多种多样的，可选地，该多组模拟网络状况和模拟处理器速度的组合中的该模拟处理器速度可以但不限于模拟同一场景下的不同处理器芯片的速度，或者，模拟同一处理器芯片在不同场景下的速度，等等。与传统的通过实体物理处理器进行测试的方法，本实施方式模拟出的处理器速度更加全面。
可选地，该处理器速度可以基于不同处理器芯片，进一步可以根据不同的设备载体进行划分，该设备载体包括但不限手机、台式计算机、笔记本电脑等。
例如，针对手机设备的处理速度可以根据手机典型常规处理器芯片和对应的处理速度进行设置该模拟处理器速度。其中该典型常规处理器芯片可以按照市场占有率大小进行选取，包括高通的骁龙处理器、三星的Exynos系列处理器、苹果的A系列处理器、华为的海思系类处理器和华为的麒麟系列处理器等。而且，按照市场占有率大小进行选取处理器芯片和对应的处理器速度，最终得到的质量评估数据更符合实际情况、更真实可靠。
可选地，该配置模块还用于，对于所获取的多组模拟网络状况和模拟处理器速度的组合中的每一种组合，分别将每一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中，在该每一种组合中的模拟网络状况和模拟处理器速度下，控制该无界面浏览器访问一个新页面,如果该新页面属于最后一层需要遍历的层级，则继续判断该新页面是否属于父亲的最后一个节点，否则遍历该新页面内剩余的标签，返回“控制该无界面浏览器访问一个新页面”，如果该新页面属于父亲的最后一个节点，则关闭该节点及父亲节点，回到祖父节点，否则关闭该节点，回到上一个节点，如果该祖父节点或该上一个节点为最顶层节点，则关闭该最顶层节点后结束，否则遍历该新页面内剩余的标签，返回“控制该无界面浏览器访问一个新页面”直至结束。
2.第二采集模块，用于在该每一种组合中的模拟网络状况和模拟处理器速度下，使用全局监听事件采集该访问网站前端页面的过程中涉及的API接口和静态资源访问异常数据及页面报错数据；
3.第二分析模块，用于在该每一种组合中的模拟网络状况和模拟处理器速度下，按照预定的规则，对该采集模块所采集到的该API接口和静态资源访问异常数据及页面报错数据进行分析生成告警消息发送给用户。
可选地，该第二分析模块还用于，按照预定的规则，将该采集模块所采集到的该API接口和静态资源访问异常数据及页面报错数据与预设警戒值进行比较，如果达到该预设警戒值，则向该用户发送告警消息。
可选地，该网站页面监控系统被设置为定时执行，例如该网站页面监控系统被设置为每天固定时间点执行一次，或者，该网站页面监控系统被设置为每天不定时地执行一次等等。可选地，该网站页面监控系统被设置以订阅的方式执行，可以根据用户需求进行设置订阅的时间参数。
第二实施方式是与本实施方式相对应的方法实施方式，第二实施方式中的技术细节可以应用于本实施方式，本实施方式中的技术细节也可以应用于第二实施方式。
本实施方式中，基于“该多组模拟网络状况和模拟处理器速度的组合”下的网站页面监控系统，可以在实现不同网络状况和不同处理器速度下的任意组合，并且通过自动匹配的形式穷尽所有可能的组合，与传统的人工模拟相比，成本更低、测试更全面。
需要说明的是，本领域技术人员应当理解，上述网站页面质量评估系统或网站页面监控系统的实施方式中所示的各模块的实现功能可参照前述网站页面质量评估方法或网站页面监控方法的相关描述而理解。上述网站页面质量评估系统或网站页面监控系统的实施方式中所示的各模块的功能可通过运行于处理器上的程序(可执行指令)而实现，也可通过具体的逻辑电路而实现。本申请实施例上述网站页面质量评估系统或网站页面监控系统如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本申请各个实施例所述方法的全部或部分。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read Only Memory)、磁碟或者光盘等各种可以存储程序代码的介质。这样，本申请实施例不限制于任何特定的硬件和软件结合。
相应地，本申请实施方式还提供一种计算机可读存储介质，其中存储有计算机可执行指令，该计算机可执行指令被处理器执行时实现本申请的各方法实施方式。计算机可读存储介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括但不限于，相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读存储介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。
此外，本申请实施方式还提供一种网站页面监控系统，其中包括用于存储计算机可执行指令的存储器，以及，处理器；该处理器用于在执行该存储器中的计算机可执行指令时实现上述各方法实施方式中的步骤。其中，该处理器可以是中央处理单元(CentralProcessing Unit，简称“CPU”)，还可以是其他通用处理器、数字信号处理器(DigitalSignal Processor，简称“DSP”)、专用集成电路(Application Specific IntegratedCircuit，简称“ASIC”)等。前述的存储器可以是只读存储器(read-only memory，简称“ROM”)、随机存取存储器(random access memory，简称“RAM”)、快闪存储器(Flash)、硬盘或者固态硬盘等。本发明各实施方式所公开的方法的步骤可以直接体现为硬件处理器执行完成，或者用处理器中的硬件及软件模块组合执行完成。
需要说明的是，在本专利的申请文件中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。本专利的申请文件中，如果提到根据某要素执行某行为，则是指至少根据该要素执行该行为的意思，其中包括了两种情况：仅根据该要素执行该行为、和根据该要素和其它要素执行该行为。多个、多次、多种等表达包括2个、2次、2种以及2个以上、2次以上、2种以上。
在本申请提及的所有文献都被认为是整体性地包括在本申请的公开内容中，以便在必要时可以作为修改的依据。此外应理解，以上所述仅为本说明书的较佳实施例而已，并非用于限定本说明书的保护范围。凡在本说明书一个或多个实施例的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本说明书一个或多个实施例的保护范围之内。
Claims (28)
1.一种网站页面质量评估方法，其特征在于，包括：
获取多组模拟网络状况和模拟处理器速度的组合；对于每一种组合，分别执行以下步骤：
将一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中；
在该种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器访问网站前端页面，使用第一监听事件采集所述访问网站前端页面的过程中涉及的API接口和静态资源请求数据，使用第二监听事件采集页面加载时的性能数据；
按照预定的规则，对所采集到的所述API接口和静态资源请求数据及所述页面加载时的性能数据进行分析生成质量评估数据和优化报告。
2.如权利要求1所述的方法，其特征在于，所述多组模拟网络状况和模拟处理器速度的组合中的所述模拟网络状态包括模拟2G网络状况、模拟3G网络状况、模拟4G网络状况和模拟WIFI网络状况。
3.如权利要求1所述的方法，其特征在于，所述在该种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器访问网站前端页面，进一步包括：
在该种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器采用树的前序遍历对所述网站前端页面进行层级迭代访问。
4.如权利要求1所述的方法，其特征在于，所述按照预定的规则，对所采集到的所述API接口和静态资源请求数据及所述页面加载时的性能数据进行分析生成质量评估数据和优化报告，进一步包括：
将所采集到的所述API接口和静态资源请求数据及所述页面加载时的性能数据分别与预先约定的资源加载顺序、资源大小阈值和请求时间阈值进行比较分析，生成质量评估数据以及根据所述质量评估数据生成优化报告。
5.如权利要求1所述的方法，其特征在于，所述使用第二监听事件采集页面加载时的性能数据之后，还包括：
将所采集到的所述API接口和静态资源请求数据及所述页面加载时的性能数据进行持久化存储到数据库，并向外提供所述API接口供用户访问。
6.如权利要求3所述的方法，其特征在于，所述在该种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器采用树的前序遍历对所述网站前端页面进行层级迭代访问，进一步包括：
A在该种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器访问一个新页面；
B如果所述新页面属于最后一层需要遍历的层级，则继续判断所述新页面是否属于父亲的最后一个节点，否则遍历所述新页面内剩余的标签，返回步骤A；
C如果所述新页面属于父亲的最后一个节点，则关闭该节点及父亲节点，回到祖父节点，否则关闭该节点，回到上一个节点；
D如果所述祖父节点或所述上一个节点为最顶层节点，则关闭该最顶层节点，执行结束，否则遍历所述新页面内剩余的标签，返回步骤A。
7.一种网站页面监控方法，其特征在于，包括：
根据权利要求1-6中任意一项所述的方法中涉及的“获取多组模拟网络状况和模拟处理器速度的组合；对于每一种组合，分别执行以下步骤：将一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中”；
在该种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器访问网站前端页面，使用全局监听事件采集所述访问网站前端页面的过程中涉及的API接口和静态资源访问异常数据及页面报错数据；
按照预定的规则，对所采集到的所述API接口和静态资源访问异常数据及页面报错数据进行分析生成告警消息发送给用户。
8.如权利要求7所述的方法，其特征在于，所述多组模拟网络状况和模拟处理器速度的组合中的所述模拟网络状态包括模拟2G网络状况、模拟3G网络状况、模拟4G网络状况和模拟WIFI网络状况。
9.如权利要求7所述的方法，其特征在于，所述在该种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器访问网站前端页面，进一步包括：
在该种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器采用树的前序遍历对所述网站前端页面进行层级迭代访问。
10.如权利要求7所述的方法，其特征在于，对所采集到的所述API接口和静态资源访问异常数据及页面报错数据进行分析生成告警消息发送给用户，进一步包括：
将所采集到的所述API接口和静态资源访问异常数据及页面报错数据与预设警戒值进行比较，如果达到所述预设警戒值，则向所述用户发送告警消息。
11.如权利要求9所述的方法，其特征在于，所述在该种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器采用树的前序遍历对所述网站前端页面进行层级迭代访问，进一步包括：
A在该种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器访问一个新页面；
B如果所述新页面属于最后一层需要遍历的层级，则继续判断所述新页面是否属于父亲的最后一个节点，否则遍历所述新页面内剩余的标签，返回步骤A；
C如果所述新页面属于父亲的最后一个节点，则关闭该节点及父亲节点，回到祖父节点，否则关闭该节点，回到上一个节点；
D如果所述祖父节点或所述上一个节点为最顶层节点，则关闭该最顶层节点，执行结束，否则遍历所述新页面内剩余的标签，返回步骤A。
12.如权利要求7-11中任意一项所述的方法，其特征在于，所述网站页面监控方法被设置为定时执行。
13.一种网站页面质量评估系统，其特征在于，包括：
配置模块，用于获取多组模拟网络状况和模拟处理器速度的组合，对于所述配置模块中的每一种组合，分别将所述每一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中，在所述每一种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器访问网站前端页面；
第一采集模块，用于在所述每一种组合中的模拟网络状况和模拟处理器速度下，使用第一监听事件采集所述访问网站前端页面的过程中涉及的API接口和静态资源请求数据，使用第二监听事件采集页面加载时的性能数据；
第一分析模块，用于在所述每一种组合中的模拟网络状况和模拟处理器速度下，按照预定的规则，对所述采集模块所采集到的所述API接口和静态资源请求数据及所述页面加载时的性能数据进行分析生成质量评估数据和优化报告。
14.如权利要求13所述的系统，其特征在于，所述多组模拟网络状况和模拟处理器速度的组合中的所述模拟网络状态包括模拟2G网络状况、模拟3G网络状况、模拟4G网络状况和模拟WIFI网络状况。
15.如权利要求13所述的系统，其特征在于，所述配置模块还用于，对于所获取的多组模拟网络状况和模拟处理器速度的组合中的每一种组合，分别将所述每一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中，在所述每一种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器采用树的前序遍历对所述网站前端页面进行层级迭代访问。
16.如权利要求13所述的系统，其特征在于，所述第一分析模块还用，将所述采集模块所采集到的所述API接口和静态资源请求数据及所述页面加载时的性能数据分别与预先约定的资源加载顺序、资源大小阈值和请求时间阈值进行比较分析，生成质量评估数据以及根据所述质量评估数据生成优化报告。
17.如权利要求13所述的系统，其特征在于，还包括存储模块，用于将所述采集模块所采集到的所述API接口和静态资源请求数据及所述页面加载时的性能数据进行持久化存储到数据库，并向外提供所述API接口供用户访问。
18.如权利要求15所述的系统，其特征在于，所述配置模块还用于，对于所获取的多组模拟网络状况和模拟处理器速度的组合中的每一种组合，分别将所述每一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中，在所述每一种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器访问一个新页面,如果所述新页面属于最后一层需要遍历的层级，则继续判断所述新页面是否属于父亲的最后一个节点，否则遍历所述新页面内剩余的标签，返回“控制所述无界面浏览器访问一个新页面”，如果所述新页面属于父亲的最后一个节点，则关闭该节点及父亲节点，回到祖父节点，否则关闭该节点，回到上一个节点，如果所述祖父节点或所述上一个节点为最顶层节点，则关闭该最顶层节点后结束，否则遍历所述新页面内剩余的标签，返回“控制所述无界面浏览器访问一个新页面”直至结束。
19.一种网站页面监控系统，其特征在于，包括：
配置模块，是权利要求13-18中任意一项所述的配置模块；
第二采集模块，用于在所述每一种组合中的模拟网络状况和模拟处理器速度下，使用全局监听事件采集所述访问网站前端页面的过程中涉及的API接口和静态资源访问异常数据及页面报错数据；
第二分析模块，用于在所述每一种组合中的模拟网络状况和模拟处理器速度下，按照预定的规则，对所述采集模块所采集到的所述API接口和静态资源访问异常数据及页面报错数据进行分析生成告警消息发送给用户。
20.如权利要求19所述的系统，其特征在于，所述多组模拟网络状况和模拟处理器速度的组合中的所述模拟网络状态包括模拟2G网络状况、模拟3G网络状况、模拟4G网络状况和模拟WIFI网络状况。
21.如权利要求19所述的系统，其特征在于，所述配置模块还用于，对于所获取的多组模拟网络状况和模拟处理器速度的组合中的每一种组合，分别将所述每一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中，在所述每一种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器采用树的前序遍历对所述网站前端页面进行层级迭代访问。
22.如权利要求19所述的系统，其特征在于，所述第二分析模块，还用于按照预定的规则，将所述采集模块所采集到的所述API接口和静态资源访问异常数据及页面报错数据与预设警戒值进行比较，如果达到所述预设警戒值，则向所述用户发送告警消息。
23.如权利要求19所述的系统，其特征在于，所述配置模块还用于，对于所获取的多组模拟网络状况和模拟处理器速度的组合中的每一种组合，分别将所述每一种组合中的模拟网络状况和模拟处理器速度设置到无界面浏览器的运行环境中，在所述每一种组合中的模拟网络状况和模拟处理器速度下，控制所述无界面浏览器访问一个新页面,如果所述新页面属于最后一层需要遍历的层级，则继续判断所述新页面是否属于父亲的最后一个节点，否则遍历所述新页面内剩余的标签，返回“控制所述无界面浏览器访问一个新页面”，如果所述新页面属于父亲的最后一个节点，则关闭该节点及父亲节点，回到祖父节点，否则关闭该节点，回到上一个节点，如果所述祖父节点或所述上一个节点为最顶层节点，则关闭该最顶层节点后结束，否则遍历所述新页面内剩余的标签，返回“控制所述无界面浏览器访问一个新页面”直至结束。
24.如权利要求19-23中任意一项所述的系统，其特征在于，所述网站页面监控系统被设置为定时执行。
25.一种网站页面质量评估系统，其特征在于，包括：
存储器，用于存储计算机可执行指令；以及，
处理器，用于在执行所述计算机可执行指令时实现如权利要求1至6中任意一项所述的方法中的步骤。
26.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机可执行指令，所述计算机可执行指令被处理器执行时实现如权利要求1至6中任意一项所述的方法中的步骤。
27.一种网站页面监控系统，其特征在于，包括：
存储器，用于存储计算机可执行指令；以及，
处理器，用于在执行所述计算机可执行指令时实现如权利要求7至12中任意一项所述的方法中的步骤。
28.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机可执行指令，所述计算机可执行指令被处理器执行时实现如权利要求7至12中任意一项所述的方法中的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910373139.3A CN111898059B (zh) | 2019-05-06 | 2019-05-06 | 网站页面质量评估和监控方法及其系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910373139.3A CN111898059B (zh) | 2019-05-06 | 2019-05-06 | 网站页面质量评估和监控方法及其系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111898059A true CN111898059A (zh) | 2020-11-06 |
| CN111898059B CN111898059B (zh) | 2023-12-22 |
Family
ID=73169529
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910373139.3A Active CN111898059B (zh) | 2019-05-06 | 2019-05-06 | 网站页面质量评估和监控方法及其系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111898059B (zh) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113010410A (zh) * | 2020-12-08 | 2021-06-22 | 云智慧（北京）科技有限公司 | 一种基于骨干网对cdn性能的监控和评测方法和系统 |
| CN113315822A (zh) * | 2021-05-21 | 2021-08-27 | 福建天泉教育科技有限公司 | 一种前后端分离架构下的页面静态化方法与系统 |
| CN113904964A (zh) * | 2021-12-09 | 2022-01-07 | 中航金网(北京)电子商务有限公司 | 一种网站前端性能监控方法、装置、电子设备及介质 |
| CN117093800A (zh) * | 2023-08-23 | 2023-11-21 | 上海螣龙科技有限公司 | 网络资产数据报告pdf批量输出方法、装置及电子设备 |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20060276997A1 (en) * | 2005-06-01 | 2006-12-07 | Drees Timothy P | Systems and methods for website monitoring and load testing via simulation |
| CN106021078A (zh) * | 2016-05-06 | 2016-10-12 | 北京蓝海讯通科技股份有限公司 | 一种性能监控方法、装置及监控设备 |
| CN108259266A (zh) * | 2017-12-19 | 2018-07-06 | 广州供电局有限公司 | 网站性能监测方法和系统 |
| US20180253373A1 (en) * | 2017-03-01 | 2018-09-06 | Salesforce.Com, Inc. | Systems and methods for automated web performance testing for cloud apps in use-case scenarios |
| US20180343174A1 (en) * | 2012-10-09 | 2018-11-29 | Google Inc. | Rule based page processing and network request processing in browsers |
| CN109033115A (zh) * | 2017-06-12 | 2018-12-18 | 广东技术师范学院 | 一种动态网页爬虫系统 |
| CN109033838A (zh) * | 2018-07-27 | 2018-12-18 | 平安科技（深圳）有限公司 | 网站安全检测方法和装置 |
| CN109240874A (zh) * | 2017-07-05 | 2019-01-18 | 北京国双科技有限公司 | 网站页面异常检测方法、装置及系统 |
-
2019
- 2019-05-06 CN CN201910373139.3A patent/CN111898059B/zh active Active
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20060276997A1 (en) * | 2005-06-01 | 2006-12-07 | Drees Timothy P | Systems and methods for website monitoring and load testing via simulation |
| US20180343174A1 (en) * | 2012-10-09 | 2018-11-29 | Google Inc. | Rule based page processing and network request processing in browsers |
| CN106021078A (zh) * | 2016-05-06 | 2016-10-12 | 北京蓝海讯通科技股份有限公司 | 一种性能监控方法、装置及监控设备 |
| US20180253373A1 (en) * | 2017-03-01 | 2018-09-06 | Salesforce.Com, Inc. | Systems and methods for automated web performance testing for cloud apps in use-case scenarios |
| CN109033115A (zh) * | 2017-06-12 | 2018-12-18 | 广东技术师范学院 | 一种动态网页爬虫系统 |
| CN109240874A (zh) * | 2017-07-05 | 2019-01-18 | 北京国双科技有限公司 | 网站页面异常检测方法、装置及系统 |
| CN108259266A (zh) * | 2017-12-19 | 2018-07-06 | 广州供电局有限公司 | 网站性能监测方法和系统 |
| CN109033838A (zh) * | 2018-07-27 | 2018-12-18 | 平安科技（深圳）有限公司 | 网站安全检测方法和装置 |
Non-Patent Citations (1)
| Title |
|---|
| 仲晓;廖建新;: "基于Webkit的网站加载过程监控系统的设计", 电信工程技术与标准化, no. 11, pages 95 - 99 * |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113010410A (zh) * | 2020-12-08 | 2021-06-22 | 云智慧（北京）科技有限公司 | 一种基于骨干网对cdn性能的监控和评测方法和系统 |
| CN113315822A (zh) * | 2021-05-21 | 2021-08-27 | 福建天泉教育科技有限公司 | 一种前后端分离架构下的页面静态化方法与系统 |
| CN113315822B (zh) * | 2021-05-21 | 2023-06-20 | 福建天泉教育科技有限公司 | 一种前后端分离架构下的页面静态化方法与系统 |
| CN113904964A (zh) * | 2021-12-09 | 2022-01-07 | 中航金网(北京)电子商务有限公司 | 一种网站前端性能监控方法、装置、电子设备及介质 |
| CN113904964B (zh) * | 2021-12-09 | 2022-04-08 | 中航金网(北京)电子商务有限公司 | 一种网站前端性能监控方法、装置、电子设备及介质 |
| CN117093800A (zh) * | 2023-08-23 | 2023-11-21 | 上海螣龙科技有限公司 | 网络资产数据报告pdf批量输出方法、装置及电子设备 |
| CN117093800B (zh) * | 2023-08-23 | 2024-04-19 | 上海螣龙科技有限公司 | 网络资产数据报告pdf批量输出方法、装置及电子设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111898059B (zh) | 2023-12-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111898059A (zh) | 网站页面质量评估和监控方法及其系统 | |
| US11012493B2 (en) | Systems and methods for tag inspection | |
| US11327742B2 (en) | Affinity recommendation in software lifecycle management | |
| US11467829B2 (en) | Methods and apparatus for finding long methods in code | |
| CN111108481B (zh) | 故障分析方法及相关设备 | |
| US20220138069A1 (en) | Agent profiler to monitor activities and performance of software agents | |
| US20190079854A1 (en) | Systems and methods for executing tests | |
| US20200374179A1 (en) | Techniques for correlating service events in computer network diagnostics | |
| CN109542754B (zh) | 移动设备的接入方法、应用程序的调试方法、装置和系统 | |
| CN114844768A (zh) | 信息分析方法、装置及电子设备 | |
| CN109710474B (zh) | 一种硬盘故障检测方法、装置、终端及可读存储介质 | |
| CN117241276B (zh) | 一种面向移动应用的检测工具及检测方法、系统及设备 | |
| CN111435327B (zh) | 一种日志记录的处理方法、装置及系统 | |
| US20190251130A1 (en) | Method and apparatus for detecting page redirection circulation | |
| CN116415094A (zh) | 一种页面埋点上报方法、装置、电子设备和存储介质 | |
| CN115168171A (zh) | 网页异常的处理方法、装置、电子设备及介质 | |
| CN116149926A (zh) | 业务指标的异常监测方法、装置、设备及存储介质 | |
| CN116010244A (zh) | 自动化测试方法、装置、电子设备及存储介质 | |
| CN114579252A (zh) | 一种监测应用状态的方法、系统、存储介质及设备 | |
| US11036624B2 (en) | Self healing software utilizing regression test fingerprints | |
| CN115730305A (zh) | 应用程序的检测方法、装置、非易失性存储介质及处理器 | |
| CN108234196B (zh) | 故障检测方法及装置 | |
| US20230004485A1 (en) | Techniques for automatically generating software testing configuration data entities | |
| CN109302299B (zh) | 一种网站断链检测方法及装置 | |
| CN110874317B (zh) | 一种生成、使用测试用例的方法及其服务器、终端 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |