CN116720023B - 浏览器运行数据的处理方法、装置及电子设备 - Google Patents
浏览器运行数据的处理方法、装置及电子设备 Download PDFInfo
- Publication number
- CN116720023B CN116720023B CN202310997407.5A CN202310997407A CN116720023B CN 116720023 B CN116720023 B CN 116720023B CN 202310997407 A CN202310997407 A CN 202310997407A CN 116720023 B CN116720023 B CN 116720023B
- Authority
- CN
- China
- Prior art keywords
- data
- browser
- optimization task
- optimization
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title abstract description 6
- 238000005457 optimization Methods 0.000 claims abstract description 142
- 238000012545 processing Methods 0.000 claims abstract description 59
- 238000004458 analytical method Methods 0.000 claims abstract description 36
- 238000007781 pre-processing Methods 0.000 claims abstract description 13
- 238000012544 monitoring process Methods 0.000 claims description 62
- 238000000034 method Methods 0.000 claims description 45
- 238000009877 rendering Methods 0.000 claims description 21
- 238000003860 storage Methods 0.000 claims description 21
- 238000004891 communication Methods 0.000 claims description 20
- 230000004044 response Effects 0.000 claims description 17
- 238000012360 testing method Methods 0.000 claims description 16
- 230000006399 behavior Effects 0.000 claims description 14
- 230000005540 biological transmission Effects 0.000 claims description 14
- 230000006835 compression Effects 0.000 claims description 12
- 238000007906 compression Methods 0.000 claims description 12
- 230000006872 improvement Effects 0.000 claims description 10
- 230000008569 process Effects 0.000 claims description 10
- 230000001133 acceleration Effects 0.000 claims description 9
- 238000004140 cleaning Methods 0.000 claims description 9
- 235000014510 cooky Nutrition 0.000 claims description 8
- 238000013461 design Methods 0.000 claims description 8
- 238000000547 structure data Methods 0.000 claims description 8
- 230000003993 interaction Effects 0.000 claims description 7
- 238000013507 mapping Methods 0.000 claims description 7
- 238000004422 calculation algorithm Methods 0.000 claims description 6
- 230000003111 delayed effect Effects 0.000 claims description 6
- 238000013515 script Methods 0.000 claims description 6
- 238000012795 verification Methods 0.000 claims description 6
- 238000001514 detection method Methods 0.000 claims description 5
- 238000012216 screening Methods 0.000 claims description 5
- 238000000586 desensitisation Methods 0.000 claims description 4
- 239000000284 extract Substances 0.000 claims description 3
- 238000001914 filtration Methods 0.000 claims description 3
- 230000003044 adaptive effect Effects 0.000 claims 4
- 230000002265 prevention Effects 0.000 claims 4
- 230000009467 reduction Effects 0.000 claims 4
- 238000011084 recovery Methods 0.000 claims 2
- 230000000875 corresponding effect Effects 0.000 description 25
- 238000004590 computer program Methods 0.000 description 12
- 238000006243 chemical reaction Methods 0.000 description 7
- 238000012986 modification Methods 0.000 description 7
- 230000004048 modification Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 238000007405 data analysis Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 238000010801 machine learning Methods 0.000 description 3
- 230000007246 mechanism Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000013473 artificial intelligence Methods 0.000 description 2
- 238000013480 data collection Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000003795 chemical substances by application Substances 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000013079 data visualisation Methods 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 239000006185 dispersion Substances 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 239000012634 fragment Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000005065 mining Methods 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000010926 purge Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/958—Organisation or management of web site content, e.g. publishing, maintaining pages or automatic linking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/955—Retrieval from the web using information identifiers, e.g. uniform resource locators [URL]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/957—Browsing optimisation, e.g. caching or content distillation
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本公开提供了浏览器运行数据的处理方法、装置及电子设备，涉及计算机技术领域，具体实现方案为：获取指定时间内待测试浏览器的浏览器数据和运行信息，以及浏览器数据和运行信息的数据类型和优先级；对浏览器数据和运行信息进行预处理和格式转换，以生成第一数据；基于对浏览器的各个类型的优化任务，将第一数据存储在数据库中；响应于接收到分析请求，从数据库中获取对应的第二数据进行处理，其中，分析请求中包含有优化任务的标签信息。由此，可以在对浏览器进行测试或者优化时，能够集中的准备好对应的数据信息，从而提高数据集中度，方便快捷的满足对特定优化任务的分析需求，提高对浏览器的优化效率。
Description
技术领域
本公开涉及计算机技术领域，具体涉及浏览器运行数据的处理方法、装置及电子设备。
背景技术
随着计算机技术和互联网技术的发展，人们对互联网产品的性能要求越来越高。在现有技术中，针对待测试浏览器的数据收集、处理和格式转换通常是手动进行或依赖不同工具的组合。这种方式存在一些问题：数据收集效率低下、处理不一致、无法满足特定优化任务的需求等。此外，现有技术没有提供一个统一的存储和管理平台，导致数据分散、易丢失、难以查询。
因而，如何在对浏览器进行测试或者优化时，能够集中的准备好对应的数据信息，从而提高数据集中度，方便快捷的满足对特定优化任务的分析需求，提高对浏览器的优化效率，是目前亟需解决的问题。
发明内容
本公开提供了一种浏览器运行数据的处理方法和装置。
根据本公开的一方面，提供了一种浏览器运行数据的处理方法，包括：
获取指定时间内待测试浏览器的浏览器数据和运行信息，以及所述浏览器数据和所述运行信息的数据类型和优先级，其中，所述浏览器数据包含半结构化数据和非结构化数据；
对所述浏览器数据和所述运行信息进行预处理和格式转换，以生成第一数据；
基于对所述浏览器的各个类型的优化任务，将所述第一数据存储在所述数据库中；
响应于接收到分析请求，从所述数据库中获取对应的第二数据进行处理，其中，所述分析请求中包含有所述优化任务的标签信息。
根据本公开的另一方面，提供了一种浏览器运行数据的处理装置，包括：
获取模块，用于获取指定时间内待测试浏览器的浏览器数据和运行信息，以及所述浏览器数据和所述运行信息的数据类型和优先级，其中，所述浏览器数据包含半结构化数据和非结构化数据；
生成模块，用于对所述浏览器数据和所述运行信息进行预处理和格式转换，以生成第一数据；
存储模块，用于基于对所述浏览器的各个类型的优化任务，将所述第一数据存储在所述数据库中；
接收模块，用于响应于接收到分析请求，从所述数据库中获取对应的第二数据进行处理，其中，所述分析请求中包含有所述优化任务的标签信息。
根据本公开的另一方面，提供了一种电子设备，包括：
至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行上述实施例所述的方法。
根据本公开的另一方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行根据上述实施例所述的方法。
根据本公开的另一方面，提供了一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现上述实施例所述方法的步骤。
本公开实施例中，首先获取指定时间内待测试浏览器的浏览器数据和运行信息，以及浏览器数据和运行信息的数据类型和优先级，其中，浏览器数据包含半结构化数据和非结构化数据，然后对浏览器数据和运行信息进行预处理和格式转换，以生成第一数据，之后基于对浏览器的各个类型的优化任务，将第一数据存储在数据库中，最后响应于接收到分析请求，从数据库中获取对应的第二数据进行处理，其中，分析请求中包含有优化任务的标签信息。由此，可以在对浏览器进行测试或者优化时，能够集中的准备好对应的数据信息，从而提高数据集中度，方便快捷的满足对特定优化任务的分析需求，提高对浏览器的优化效率。
应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
附图用于更好地理解本方案，不构成对本公开的限定。其中：
图1为本公开实施例提供的一种浏览器运行数据的处理方法的流程示意图；
图2为本公开实施例提供的一种浏览器运行数据的处理装置的结构示意图；
图3是用来实现本公开实施例的浏览器运行数据的处理方法的电子设备的框图。
实施方式
以下结合附图对本公开的示范性实施例做出说明，其中包括本公开实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本公开的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。
下面参考附图，对本公开实施例的浏览器运行数据的处理方法、装置、电子设备进行详细说明。
图1为本公开实施例提供的一种浏览器运行数据的处理方法的流程示意图。
如图1所示，该方法包括：
步骤101，获取指定时间内待测试浏览器的浏览器数据和运行信息，以及浏览器数据和运行信息的数据类型和优先级，其中，浏览器数据包含半结构化数据和非结构化数据。
其中，指定时间可以为历史一周，或者也可以为用户根据测试需要选择的任一时间段，比如过去的某一天。由此，可以针对性的对待测试浏览器的性能和状态进行复盘和分析，从而便于对待测试浏览器的优化。
其中，待测试浏览器可以为当前需要被测试的浏览器，可以为用户指定的浏览器。
其中，运行信息包括以下几种：
用户界面信息：包括浏览器窗口的尺寸、位置以及显示工具栏、菜单和其他用户界面元素的状态。网页加载信息：包括当前加载的网页的URL、标题、状态（如正在加载、已加载完成）、加载进度以及可能的错误信息。浏览历史信息：记录用户在该浏览器中访问的各个网页的顺序和详细信息。Cookie 和缓存信息：浏览器会保存一些网站设置和用户偏好的信息，如登录凭证、语言偏好、关注的主题等。这些信息通常通过 Cookie 或本地缓存存储。插件和扩展信息：浏览器可能加载并运行各种插件和扩展程序，用于提供额外的功能或呈现特定类型的内容。
其中，浏览器数据中包含的半结构化数据有网络请求数据和页面性能数据，浏览器数据中包含的非结构化数据有DOM树结构数据、JavaScript代码运行时数据和用户行为数据，其中，网络请求数据包括请求的 URL、请求方法、请求头、响应状态码、响应头；页面性能数据包括页面加载时间、各个资源文件的加载时间、页面渲染时间、重绘和回流次数；DOM 树结构数据包括 HTML 标签、属性、文本节点； JavaScript 运行时数据包括JavaScript 代码执行时间、内存占用情况、DOM 操作；用户行为数据包括用户点击、滚动、输入行为数据。
可选的，在获取指定时间内待测试浏览器的浏览器数据和运行信息时，可以是对待测试浏览器发送的压缩文件进行解压，以得到指定时间内的浏览器数据和运行信息，其中，压缩文件是待测试浏览器经过HTTP压缩并基于HTTP/2协议发送的浏览器数据和运行信息，待测试浏览器进行了CDN加速。
需要说明的是，待测试浏览器需要收集的浏览器数据和运行信息，并进行压缩，压缩通常使用HTTP压缩算法，如gzip或deflate。由于是基于HTTP/2协议，待测试浏览器将压缩文件分割成多个数据帧并发送给服务器。HTTP/2支持多路复用，可以同时处理，提高传输效率。由于待测试浏览器经过CDN加速，可以将压缩数据帧通过最近的CDN节点发送到目标服务器，在目标服务器接收到压缩数据帧后，根据HTTP/2组合成完整的压缩文件。其中，测试数据解压缩：服务器使用HTTP/2协议将得到的压缩文件进行解压缩，恢复为原始的浏览器数据和运行信息。进一步的，可以提取指定时间内的数据：根据压缩文件中的时间戳或其他相关，服务器提取出指定时间段内的浏览器数据和运行信息供进一步分析。
由此，可以减少网络传输量：通过使用HTTP压缩和HTTP/2多路复用，压缩浏览器数据和运行信息可以减小数据的传输量，从而节省带宽和降低延迟，并且可以提高传输效率，HTTP/2协议允许服务器推送资源，提高了数据传输的效率和速度。并且加速了数据获取：CDN加速可以将压缩数据快速发送到目标服务器，减少了网络延迟，加速了数据的获取和处理过程。通过数据整合与分析，也即将压缩文件中的数据可以在服务器端被解压缩和整理，便于进一步的数据分析和处理。
可选的，还可以使用HTTPS协议对数据进行加密，确保数据在传输过程中的安全性和保密性。为了使待测试浏览器能够主动触发数据上传，可以采用一些指定的客户端库或插件来处理压缩和发送数据的操作。
具体的，本公开实施例中，还可以选择XMLHttpRequest来创建和发送包含压缩数据的 POST 请求，其中XMLHttpRequest是一种内置的 JavaScript 对象，用于发送 HTTP请求。
或者，还可以选择Fetch API，其中Fetch API也可以发送包含压缩数据的 POST请求。或者，还可以使用xios ，在浏览器中发送 HTTP 请求。它提供了更方便口和功能，包括可用于处理压缩数据的选项。
进一步的，还可以根据预设的筛选条件，对待测试浏览器生成的数据进行筛选，只选择特定类型的数据进行压缩和传输，以减小数据量。此外，也可以采用其他更高效的压缩算法。
或者，还可以在服务器端设立多个节点以处理请求，确保系统的高用性。同时，实现容错机制以应对数据丢失或情况，例如使用校验和和重传机制。由此，通过压缩、传输和解压缩等步骤，实现了获取待测试浏览器的浏览器数据和运行信息的果，并通过HTTP/2协议和CDN加速提升了传输效率和速度，为进一步分析和优化浏览器性能提供了基础。
可选的，可以首先基于指定的通信协议，建立和所述待测试浏览器之间的通信，之后可以获取待测试浏览器中在指定时间内的浏览器数据和运行信息，然后确定所述浏览器数据和所述运行信息与各个测试指标的匹配度，之后可以根据所述匹配度大小，确定所述浏览器数据和所述运行信息中每条数据对应的优先级，然后可以基于所述优先级，对所述浏览器数据和所述运行信息进行数据清洗和数据脱敏处理，之后对所述浏览器数据和所述运行信息按照数据类型进行分类。
具体的，可以首先建立通信，可以根据指定的通信协议（例如HTTP或WebSocket），建立待测试浏览器与测试系统之间的通信连接，然后获取浏览器数据和运行信息，通过通信连接，向待测试浏览器发送请求以获取特定时间范围内的浏览器数据和运行信息。这可以包括页面加载时间、资源请求与响应、JavaScript执行时间等，之后可以将获取到的浏览器数据和运行信息与各个测试指标进行比对，计算它们之间的匹配度。可以使用算法或规则来评估匹配度，例如使用相似性度量方法。
进一步的，可以根据匹配度的大小，为每条浏览器数据和运行信息分配相应的优先级。较高的匹配度通常表示更重要的数据，因此可以将其指定为更高的优先级。然后可以进行数据清洗和脱敏处理，根据优先级可以对浏览器数据和运行信息进行清洗和脱敏处理，数据清洗可以包括去除无效数据、修复错误数据等操作，而脱敏处理可用于保护用户隐私，基于数据类型，将清洗和脱敏处理后的浏览器数据和运行信息进行分类。例如，可以将网络请求数据、渲染性能数据、资源加载数据等分成不同的类别。
通过上述方案，可以准确立通信并获取浏览器数据和运行信息，可以获准确的测试数据，帮助评估浏览器性能与用户体验。通过匹配度和优先级确定，可以对浏览器数据和运行信息进行有针对性的处理和分析，重点关注匹配度高的重要数据。采用数据清洗和脱敏处理，可以提高数据质量，去除无效或错误数据，并保护用户隐私敏感信息。
进一步的，还可以增加数据分析和可视化功能，利用分类后的浏览器数据和运行信息，生成详细的报告和图表，以便性能、发现性能瓶颈，并进行进一步的优化。此外，还可以考虑使用机器学习来改进数据匹配度的计算和优先级的确定，提高系统的自动化程度和准确性。
步骤102，对浏览器数据和运行信息进行预处理和格式转换，以生成第一数据。
具体的，可以对浏览器数据和运行信息进行数据清洗和筛选，对收集到的数据进行初步清洗和筛选，去除不必要的信息和异常值。这包括处理缺失数据、去除重复项、纠正格式错误等。之后，可以进行数据转换和整合，将原始数据转换为适合后格式，可以将数据转换为CSV、JSON或SQL数据库等。
可选的，还可以根据每个优化任务对应的分析目标，生成衍生变量。
可选的，还可以对数据进行归一化和标准化处理，以确保不同类型的数据在比较和分析时具有可比性和可解释性。
最后可以将经过预处理和格式转换后的第一数据存储在适当的地方，如数据库中，确保数据可靠性、可访问性和安全性。可选的，还可以进行文档和元数据记录，记录数据预处理和格式转换的步骤、方法和参数，以便之后的分析人员能够理解和重现整个过程。
步骤103，基于对浏览器的各个类型的优化任务，将第一数据存储在数据库中。
浏览器的各个类型优化任务和监测特征如下：
3个性能优化任务：
加快页面加载速度：监测特征包括首次内容绘制时间、DOMContentLoaded事件时间、完全加载时间等。
提高渲染性能：监测特征包括帧率(FPS)、渲染延迟、CSS和JavaScript执行时间等。
优化内存占用：监测特征包括内存使用量、回收频率、内存泄漏等。
3个安全性优化任务：
检测和阻止恶意软件和网络攻击：监测特征包括恶意软件拦截、网址黑名单、SSL证书验证等。
防止信息泄露和跨站脚本攻击(XSS)：监测特征包括表单字段验证、XSS过滤、Content Security Policy (CSP) 策略等。
保护用户隐私：监测特征包括Cookie和广告追踪限制、隐私模式等。
2个兼容性优化任务：
支持不同的浏览器和设备：监测特征包括浏览器标识、用户代理检测、响应式布局等。
适配HTML、CSS和JavaScript标准：监测特征包括标准兼容性测试、语法错误检查等。
4个用户体验优化任务：
改善页面交互和导航：监测特征包括页面响应时间、点击事件处理、页面平滑滚动等。
设计友好的用户界面：监测特征包括布局和设计一致性、易用性测试等。
最大限度地利用缓存：监测特征包括缓存命中率、缓存策略有效性等。
降低网络传输量：监测特征包括网络请求次数、文件压缩比例、图像优化等。
可选的，可以首先基于预设的映射关系，确定每个所述优化任务的类型，以及每个所述优化任务对应的监测特征，然后可以基于所述优化任务的类型，以及所述监测特征，从所述第一数据中确定与所述优化任务对应的第二数据，最后将所述第二数据和所述优化任务的标签信息进行关联存储，其中，所述标签信息包含所述优化任务的类型和所述监测特征。
具体的，可以首先确定优化任务类型和监测特征，基于预设的映射关系，确定针对浏览器的优化任务类型，例如加快加载速度、提升安全性等。然后，确定每个优化任务对应的监测特征，例如页面加载时间、TLS证书有效性等。
之后，可以根据确定的优化任务和监测特征，从第一数据源中抽取相关数据作为第二数据。例如，如果优化任务是加快加载速度，那么可以从日志中提取每个页面的加载时间信息。
之后，可以关联存储第二数据和优化任务标签信息，将第二数据与相应的优化任务标签信息进行关联存储。标签信息包括优化任务的类型和监测特征，可以使用数据库或其他数据存储方式进行关联。
由此，可以自动化优化任务分类，基于预设的映射关系，能够自动确定每个优化任务的类型。这样可以更高效地对大量优化任务进行分类和处理。
另外，还可以进行监测特征提取，通过确定和提取监测特征，可以获得有关浏览器性能和行为的详细数据。这些数据可以用于分析和评估优化任务的效果，以及进行进一步的改进和优化。通过将第二数据和优化任务标签信息进行关联存储，使得可以方便地查询和检索特定类型的优化任务及其对应的监测特征。这为后续的分析、报告和决策提供了基础。
可选的，还可以进行实时优化任务更新，通过监测浏览器性能和用户行为，不断更新和调整优化任务类型和标签信息，以适应浏览器发展和用户需求的变化。进一步的，还可以进行高级数据分析，利用第二数据和标签信息进行深入分析和挖掘，探索优化任务之间的关联性、趋势性以及影响因素，从而提供更准确的优化建议和决策支持。
可选的，还可以将第二数据和优化任务标为训练集，构建机器学习模型，实现自动化的优化任务分类和预测，从而加速优化流程并提高效果。
由此，能够实现对浏览器优化任务的自动分类、数据分析和决策支持，提升浏览器性能和用户体验。
步骤104，响应于接收到分析请求，从数据库中获取对应的第二数据进行处理，其中，分析请求中包含有优化任务的标签信息。
其中，第二数据可以优化任务对应的数据。通过对优化任务对应的第二数据进行分析，从而可以得到对应的优化方向，从而进行处理。
进一步的，根据对所述第二数据的处理结果，执行以下中的一项或多项：
删除所述待测试浏览器的缓存数据；
减少所述待测试浏览器对本地服务器的访问频率；
将不影响页面首次渲染的资源设置为异步加载或延迟加载；
启动硬件对所述待测试浏览器进行加速；
禁用指定的浏览器插件；
更新浏览器；
降低对DOM元素的查询和修改次数。
（1）删除所述待测试浏览器的缓存数据，在优化任务完成后，清除浏览器缓存可以通过以下步骤来实现：
在待测试浏览器中找到设置或选项菜单。
在设置或选项菜单中查找并选择“清除浏览数据”或类似选项。
选择要清除的数据类型，如缓存、Cookies、历史记录等。
确认并执行清除操作。
（2）减少所述待测试浏览器对本地服务器的访问频率：可以通过以下方式减少浏览器对服务器的访问频率：
在页面上合理使用缓存机制，确保静态资源（如图片、样式表、脚本）可以被浏览器缓存，并设置适当的缓存过期时间。
使用技术例如CDN(Content Delivery Network，内容分发网络)来加速资源访问并减少对本地服务器的压力。
对于异步加载的内容，可以使用合适的延迟加载策略，动加载，以避免一次性请求过多资源。
（3）将不影响页面首次渲染的资源设置为异步加载或延迟加载：确保不会阻塞页面首次渲染的资源可以采取以下步骤：
对于JavaScript文件，在需要延迟加载的地方使用async或defer属性，或将脚本放在页面底部。
对于CSS文件，将其放置在文档头部，并使用媒体查询和条件加载来优化加载性能。
（4）启动硬件对所述待测试浏览器进行加速：启用硬件加速可以通过以下步骤实现：
打开浏览器的设置或选项菜单。
查找并选择与硬件加速相关的选项。
启用硬件加速选项。
（5）禁用指定的浏览器插件：可以通过以下步骤禁用特定的浏览器插件：
打开浏览器的设置或选项菜单。
查找并选择插件管理器、扩展程序或类似选项。
在插件列表中找到要禁用的插件。
关闭或禁用该插件。
（6）更新浏览器：以确保浏览器具有最新版本，可以执行以下操作：
打开浏览器的设置或选项菜单。
在设置或选项菜单中查找“关于”、“帮助”或类似选项。
在关于页面中，选择“检查更新”或类似选项。
如果有新版本可用，按照浏览器提供的指示来完成更新过程。
（7）降低对DOM元素的查询和修改次数：减少对DOM元素的查询和修改可以通过以下技术来实现：
尽量使用合适的选择器来选择DOM元素，避免使用昂贵的选择器，如层级选择器和通用选择器。
将需要多次查询的DOM元素存储在变量中，以避免重复查询。
在修改DOM时，尽可能使用批处理操作，而不是逐个元素进行修改。
考虑使用文档片段（DocumentFragment）进行离线操作，并一次性将其附加到文档中。
本公开实施例中，首先获取指定时间内待测试浏览器的浏览器数据和运行信息，以及浏览器数据和运行信息的数据类型和优先级，其中，浏览器数据包含半结构化数据和非结构化数据，然后对浏览器数据和运行信息进行预处理和格式转换，以生成第一数据，之后基于对浏览器的各个类型的优化任务，将第一数据存储在数据库中，最后响应于接收到分析请求，从数据库中获取对应的第二数据进行处理，其中，分析请求中包含有优化任务的标签信息。由此，可以在对浏览器进行测试或者优化时，能够集中的准备好对应的数据信息，从而提高数据集中度，方便快捷的满足对特定优化任务的分析需求，提高对浏览器的优化效率。
为了实现上述实施例，本公开实施例还提出一种浏览器运行数据的处理装置。图2为本公开实施例提供的一种浏览器运行数据的处理装置的结构示意图。
如图2所示，该业务请求的处理装置200包括：获取模块210、生成模块220、存储模块230、接收模块240。
获取模块210，用于获取指定时间内待测试浏览器的浏览器数据和运行信息，以及所述浏览器数据和所述运行信息的数据类型和优先级，其中，所述浏览器数据包含半结构化数据和非结构化数据；
生成模块220，用于对所述浏览器数据和所述运行信息进行预处理和格式转换，以生成第一数据；
存储模块230，用于基于对所述浏览器的各个类型的优化任务，将所述第一数据存储在所述数据库中；
接收模块240，用于响应于接收到分析请求，从所述数据库中获取对应的第二数据进行处理，其中，所述分析请求中包含有所述优化任务的标签信息。
可选的，所述浏览器数据中包含的所述半结构化数据有网络请求数据和页面性能数据，所述浏览器数据中包含的非结构化数据有DOM树结构数据、JavaScript代码运行时数据和用户行为数据，其中，所述网络请求数据包括请求的 URL、请求方法、请求头、响应状态码、响应头；所述页面性能数据包括页面加载时间、各个资源文件的加载时间、页面渲染时间、重绘和回流次数；所述 DOM 树结构数据包括 HTML 标签、属性、文本节点；所述JavaScript 运行时数据包括 JavaScript 代码执行时间、内存占用情况、DOM 操作；所述用户行为数据包括用户点击、滚动、输入行为数据；
所述获取模块，具体用于：
基于指定的通信协议，建立和所述待测试浏览器之间的通信；
获取所述待测试浏览器中在指定时间内的浏览器数据和运行信息；
确定所述浏览器数据和所述运行信息与各个测试指标的匹配度；
根据所述匹配度大小，确定所述浏览器数据和所述运行信息中每条数据对应的优先级；
基于所述优先级，对所述浏览器数据和所述运行信息进行数据清洗和数据脱敏处理，之后对所述浏览器数据和所述运行信息按照数据类型进行分类。
可选的，所述存储模块，具体用于：
基于预设的映射关系，确定每个所述优化任务的类型，以及每个所述优化任务对应的监测特征；
基于所述优化任务的类型，以及所述监测特征，从所述第一数据中确定与所述优化任务对应的第二数据；
将所述第二数据和所述优化任务的标签信息进行关联存储，其中，所述标签信息包含所述优化任务的类型和所述监测特征。
可选的，所述接收模块，还用于：
根据对所述第二数据的处理结果，执行以下中的一项或多项：
删除所述待测试浏览器的缓存数据；
减少所述待测试浏览器对本地服务器的访问频率；
将不影响页面首次渲染的资源设置为异步加载或延迟加载；
启动硬件对所述待测试浏览器进行加速；
禁用指定的浏览器插件；
更新浏览器；
降低对DOM元素的查询和修改次数。
可选的，所述获取模块，具体用于：
对所述待测试浏览器发送的压缩文件进行解压，以得到所述指定时间内的浏览器数据和运行信息，其中，所述压缩文件是所述待测试浏览器经过HTTP压缩并基于HTTP/2协议发送的所述浏览器数据和运行信息，所述待测试浏览器进行了CDN加速。
本公开实施例中，首先获取指定时间内待测试浏览器的浏览器数据和运行信息，以及浏览器数据和运行信息的数据类型和优先级，其中，浏览器数据包含半结构化数据和非结构化数据，然后对浏览器数据和运行信息进行预处理和格式转换，以生成第一数据，之后基于对浏览器的各个类型的优化任务，将第一数据存储在数据库中，最后响应于接收到分析请求，从数据库中获取对应的第二数据进行处理，其中，分析请求中包含有优化任务的标签信息。由此，可以在对浏览器进行测试或者优化时，能够集中的准备好对应的数据信息，从而提高数据集中度，方便快捷的满足对特定优化任务的分析需求，提高对浏览器的优化效率，可以更加方便地进行有针对性的分析和优化。
根据本公开的实施例，本公开还提供了一种电子设备、一种可读存储介质和一种计算机程序产品。
图3示出了可以用来实施本公开的实施例的示例电子设备600的示意性框图。电子设备旨在表示各种形式的数字计算机，诸如，膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置，诸如，个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例，并且不意在限制本文中描述的和/或者要求的本公开的实现。
如图3所示，设备600包括计算单元601，其可以根据存储在ROM（Read-OnlyMemory，只读存储器）602中的计算机程序或者从存储单元608加载到RAM（Random AccessMemory，随机访问/存取存储器）603中的计算机程序，来执行各种适当的动作和处理。在RAM603中，还可存储设备600操作所需的各种程序和数据。计算单元601、ROM 602以及RAM 603通过总线604彼此相连。I/O（Input/Output，输入/输出）接口605也连接至总线604。
设备600中的多个部件连接至I/O接口605，包括：输入单元606，例如键盘、鼠标等；输出单元607，例如各种类型的显示器、扬声器等；存储单元608，例如磁盘、光盘等；以及通信单元609，例如网卡、调制解调器、无线通信收发机等。通信单元609允许设备600通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
计算单元601可以是各种具有处理和计算能力的通用和/或专用处理组件。计算单元601的一些示例包括但不限于CPU（Central Processing Unit，中央处理单元）、GPU（Graphic Processing Units，图形处理单元）、各种专用的AI（Artificial Intelligence，人工智能）计算芯片、各种运行机器学习模型算法的计算单元、DSP（Digital SignalProcessor，数字信号处理器）、以及任何适当的处理器、控制器、微控制器等。计算单元601执行上文所描述的各个方法和处理，例如浏览器运行数据的处理方法。例如，在一些实施例中，对浏览器运行数据的处理方法可被实现为计算机软件程序，其被有形地包含于机器可读介质，例如存储单元608。在一些实施例中，计算机程序的部分或者全部可以经由ROM 602和/或通信单元609而被载入和/或安装到设备600上。当计算机程序加载到RAM 603并由计算单元601执行时，可以执行上文描述的浏览器运行数据的处理方法的一个或多个步骤。备选地，在其他实施例中，计算单元601可以通过其他任何适当的方式（例如，借助于固件）而被配置为执行浏览器运行数据的处理方法。
本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、FPGA（Field Programmable Gate Array，现场可编程门阵列）、ASIC（Application-Specific Integrated Circuit，专用集成电路）、ASSP（Application Specific StandardProduct，专用标准产品）、SOC（System On Chip，芯片上系统的系统）、CPLD（ComplexProgrammable Logic Device，复杂可编程逻辑设备）、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括：实施在一个或者多个计算机程序中，该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释，该可编程处理器可以是专用或者通用可编程处理器，可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令，并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
用于实施本公开的方法的程序代码可以采用一个或多个编程语言的任何组合来编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器或控制器，使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行，作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
在本公开的上下文中，机器可读介质可以是有形的介质，其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备，或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、RAM、ROM、EPROM（Electrically Programmable Read-Only-Memory，可擦除可编程只读存储器）或快闪存储器、光纤、CD-ROM（Compact Disc Read-Only Memory，便捷式紧凑盘只读存储器）、光学储存设备、磁储存设备、或上述内容的任何合适组合。
为了提供与用户的交互，可以在计算机上实施此处描述的系统和技术，该计算机具有：用于向用户显示信息的显示装置（例如，CRT（Cathode-Ray Tube，阴极射线管）或者LCD（Liquid Crystal Display，液晶显示器）监视器）；以及键盘和指向装置（例如，鼠标或者轨迹球），用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互；例如，提供给用户的反馈可以是任何形式的传感反馈（例如，视觉反馈、听觉反馈、或者触觉反馈）；并且可以用任何形式（包括声输入、语音输入或者、触觉输入）来接收来自用户的输入。
可以将此处描述的系统和技术实施在包括后台部件的计算系统（例如，作为数据服务器）、或者包括中间件部件的计算系统（例如，应用服务器）、或者包括前端部件的计算系统（例如，具有图形用户界面或者网络浏览器的用户计算机，用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互）、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信（例如，通信网络）来将系统的部件相互连接。通信网络的示例包括：LAN（LocalArea Network，局域网）、WAN（Wide Area Network，广域网）、互联网和区块链网络。
计算机系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器，又称为云计算服务器或云主机，是云计算服务体系中的一项主机产品，以解决了传统物理主机与VPS服务（VirtualPrivate Server，虚拟专用服务器）中，存在的管理难度大，业务扩展性弱的缺陷。服务器也可以为分布式系统的服务器，或者是结合了区块链的服务器。
根据本公开的实施例，本公开还提供了一种计算机程序产品，当计算机程序产品中的指令处理器执行时，执行本公开上述实施例提出的浏览器运行数据的处理方法。
应该理解，可以使用上面所示的各种形式的流程，重新排序、增加或删除步骤。例如，本公开中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行，只要能够实现本公开公开的技术方案所期望的结果，本文在此不进行限制。
上述具体实施方式，并不构成对本公开保护范围的限制。本领域技术人员应该明白的是，根据设计要求和其他因素，可以进行各种修改、组合、子组合和替代。任何在本公开的精神和原则之内所作的修改、等同替换和改进等，均应包含在本公开保护范围之内。
Claims (5)
1.一种浏览器运行数据的处理方法，其特征在于，由云服务器执行，包括：
获取指定时间内待测试浏览器的浏览器数据和运行信息，以及所述浏览器数据和所述运行信息的数据类型和优先级，其中，所述浏览器数据包含半结构化数据和非结构化数据，所述运行信息包括用户界面信息、网页加载信息、浏览历史信息、Cookie 和缓存信息，以及插件和扩展信息；
其中，所述浏览器数据中包含的所述半结构化数据有网络请求数据和页面性能数据，所述浏览器数据中包含的非结构化数据有DOM树结构数据、JavaScript代码运行时数据和用户行为数据，其中，所述网络请求数据包括请求的 URL、请求方法、请求头、响应状态码、响应头；所述页面性能数据包括页面加载时间、各个资源文件的加载时间、页面渲染时间、重绘和回流次数；所述 DOM 树结构数据包括 HTML 标签、属性、文本节点；所述JavaScript 运行时数据包括 JavaScript 代码执行时间、内存占用情况、DOM 操作；所述用户行为数据包括用户点击、滚动、输入行为数据；
其中，所述获取指定时间内待测试浏览器的浏览器数据和运行信息，以及所述浏览器数据和所述运行信息的数据类型和优先级，包括：
基于指定的通信协议，建立和所述待测试浏览器之间的通信；
获取所述待测试浏览器中在指定时间内的浏览器数据和运行信息；
确定所述浏览器数据和所述运行信息与各个测试指标的匹配度；
根据所述匹配度大小，确定所述浏览器数据和所述运行信息中每条数据对应的优先级；
基于所述优先级，对所述浏览器数据和所述运行信息进行数据清洗和数据脱敏处理，之后对所述浏览器数据和所述运行信息按照数据类型进行分类；
其中，所述指定时间表征用户基于对待测试浏览器的优化需要所选择的任一历史时间段；
对所述浏览器数据和所述运行信息进行预处理和格式转换，以生成第一数据，其中还包括，将所述第一数据在预处理和格式转换过程中的文档、步骤和参数记录在数据库中；
基于对所述浏览器的各个类型的优化任务，将所述第一数据存储在所述数据库中，其中，所述优化任务包括性能优化任务、安全性优化任务、兼容性优化任务和用户体验优化任务，且所述性能优化任务、安全性优化任务、兼容性优化任务和用户体验优化任务均对应有多个优化任务类型，每个所述优化任务类型对应有多个监测特征；
所述性能优化任务对应的优化任务类型有加快页面加载速度、提高渲染性能和优化内存占用，所述加快页面加载速度对应的监测特征包括首次内容绘制时间、DOMContentLoaded事件时间、完全加载时间，所述提高渲染性能对应的监测特征包括帧率、渲染延迟、CSS和JavaScript执行时间，所述优化内存占用对应的监测特征包括内存使用量、回收频率、内存泄漏；
所述安全性优化任务对应的优化任务类型有检测和阻止恶意软件和网络攻击、防止信息泄露和跨站脚本攻击，以及保护用户隐私；
所述检测和阻止恶意软件和网络攻击对应的监测特征包括恶意软件拦截、网址黑名单、SSL证书验证，所述防止信息泄露和跨站脚本攻击对应的监测特征包括表单字段验证、XSS过滤、 Content Security Policy 策略，所述保护用户隐私对应的监测特征包括Cookie和广告追踪限制、隐私模式；
所述兼容性优化任务对应的优化任务类型有支持不同的浏览器和设备和适配HTML、CSS和JavaScript标准，所述支持不同的浏览器和设备对应的监测特征包括浏览器标识、用户代理检测和响应式布局，所述适配HTML、CSS和JavaScript标准对应的监测特征包括标准兼容性测试和语法错误检查；
所述用户体验优化任务对应的优化任务类型有改善页面交互和导航、设计友好的用户界面、最大限度地利用缓存和降低网络传输量， 所述改善页面交互和导航对应的监测特征包括页面响应时间、点击事件处理、页面平滑滚动，所述设计友好的用户界面对应的监测特征包括布局和设计一致性、易用性测试，所述最大限度地利用缓存对应的监测特征包括缓存命中率、缓存策略有效性，所述降低网络传输量对应的监测特征包括网络请求次数、文件压缩比例、图像优化；
所述基于对所述浏览器的各个类型的优化任务，将所述第一数据存储在所述数据库中，包括：
基于预设的映射关系，确定每个所述优化任务的类型，以及每个所述优化任务对应的监测特征，以实现对大量优化任务进行分类和处理；
基于所述优化任务的类型，以及所述监测特征，从所述第一数据中确定与所述优化任务对应的第二数据；
将所述第二数据和所述优化任务的标签信息进行关联存储，其中，所述标签信息包含所述优化任务的类型和所述监测特征；
响应于接收到分析请求，从所述数据库中获取对应的第二数据进行处理，其中，所述分析请求中包含有所述优化任务的标签信息；
其中，在响应于接收到分析请求，从所述数据库中获取对应的第二数据进行处理之后，还包括：根据对所述第二数据的处理结果，执行以下中的一项或多项：
删除所述待测试浏览器的缓存数据；
减少所述待测试浏览器对本地服务器的访问频率；
将不影响页面首次渲染的资源设置为异步加载或延迟加载；
启动硬件对所述待测试浏览器进行加速；
禁用指定的浏览器插件；
更新浏览器；
降低对DOM元素的查询和修改次数；
其中，所述获取所述待测试浏览器中在指定时间内的浏览器数据和运行信息，包括：使用HTTP压缩算法对待测试浏览器需要收集的浏览器数据和运行信息进行压缩，基于HTTP/2协议，待测试浏览器将压缩文件分割成多个数据帧并发送给服务器，HTTP/2协议支持多路复用，待测试浏览器经过CDN加速，将压缩数据帧通过最近的CDN节点发送到目标服务器，目标服务器使用HTTP/2协议将得到的压缩文件进行解压缩，恢复为原始的浏览器数据和运行信息，根据压缩文件中的时间戳，服务器提取出指定时间段内的浏览器数据和运行信息。
2.根据权利要求1所述的方法，其特征在于，所述获取所述待测试浏览器中在指定时间内的浏览器数据和运行信息；
基于预设的筛选条件，对待测试浏览器在指定时间内生成的数据进行筛选，并从中选择指定类型的数据形成压缩文件进行压缩和传输。
3.一种浏览器运行数据的处理装置，其特征在于，被配置于云服务器中，包括：
获取模块，用于获取指定时间内待测试浏览器的浏览器数据和运行信息，以及所述浏览器数据和所述运行信息的数据类型和优先级，其中，所述浏览器数据包含半结构化数据和非结构化数据，所述运行信息包括用户界面信息、网页加载信息、浏览历史信息、Cookie和缓存信息，以及插件和扩展信息；
其中，所述浏览器数据中包含的所述半结构化数据有网络请求数据和页面性能数据，所述浏览器数据中包含的非结构化数据有DOM树结构数据、JavaScript代码运行时数据和用户行为数据；
其中，所述网络请求数据包括请求的 URL、请求方法、请求头、响应状态码、响应头；所述页面性能数据包括页面加载时间、各个资源文件的加载时间、页面渲染时间、重绘和回流次数；所述 DOM 树结构数据包括 HTML 标签、属性、文本节点；所述 JavaScript 运行时数据包括 JavaScript 代码执行时间、内存占用情况、DOM 操作；所述用户行为数据包括用户点击、滚动、输入行为数据；
所述获取模块，具体用于：
基于指定的通信协议，建立和所述待测试浏览器之间的通信；
获取所述待测试浏览器中在指定时间内的浏览器数据和运行信息；
确定所述浏览器数据和所述运行信息与各个测试指标的匹配度；
根据所述匹配度大小，确定所述浏览器数据和所述运行信息中每条数据对应的优先级；
基于所述优先级，对所述浏览器数据和所述运行信息进行数据清洗和数据脱敏处理，之后对所述浏览器数据和所述运行信息按照数据类型进行分类；
其中，所述指定时间表征用户基于对待测试浏览器的优化需要所选择的任一历史时间段；
生成模块，用于对所述浏览器数据和所述运行信息进行预处理和格式转换，以生成第一数据，其中还包括，将所述第一数据在预处理和格式转换过程中的文档、步骤和参数记录在数据库中；
存储模块，用于基于对所述浏览器的各个类型的优化任务，将所述第一数据存储在所述数据库中，其中，所述优化任务包括性能优化任务、安全性优化任务、兼容性优化任务和用户体验优化任务，且所述性能优化任务、安全性优化任务、兼容性优化任务和用户体验优化任务均对应有多个优化任务类型，每个所述优化任务类型对应有多个监测特征；
所述性能优化任务对应的优化任务类型有加快页面加载速度、提高渲染性能和优化内存占用，所述加快页面加载速度对应的监测特征包括首次内容绘制时间、DOMContentLoaded事件时间、完全加载时间，所述提高渲染性能对应的监测特征包括帧率、渲染延迟、CSS和JavaScript执行时间，所述优化内存占用对应的监测特征包括内存使用量、回收频率、内存泄漏；
所述安全性优化任务对应的优化任务类型有检测和阻止恶意软件和网络攻击、防止信息泄露和跨站脚本攻击，以及保护用户隐私；
所述检测和阻止恶意软件和网络攻击对应的监测特征包括恶意软件拦截、网址黑名单、SSL证书验证，所述防止信息泄露和跨站脚本攻击对应的监测特征包括表单字段验证、XSS过滤、 Content Security Policy 策略，所述保护用户隐私对应的监测特征包括Cookie和广告追踪限制、隐私模式；
所述兼容性优化任务对应的优化任务类型有支持不同的浏览器和设备和适配HTML、CSS和JavaScript标准，所述支持不同的浏览器和设备对应的监测特征包括浏览器标识、用户代理检测和响应式布局，所述适配HTML、CSS和JavaScript标准对应的监测特征包括标准兼容性测试和语法错误检查；
所述用户体验优化任务对应的优化任务类型有改善页面交互和导航、设计友好的用户界面、最大限度地利用缓存和降低网络传输量， 所述改善页面交互和导航对应的监测特征包括页面响应时间、点击事件处理、页面平滑滚动，所述设计友好的用户界面对应的监测特征包括布局和设计一致性、易用性测试，所述最大限度地利用缓存对应的监测特征包括缓存命中率、缓存策略有效性，所述降低网络传输量对应的监测特征包括网络请求次数、文件压缩比例、图像优化；
接收模块，用于响应于接收到分析请求，从所述数据库中获取对应的第二数据进行处理，其中，所述分析请求中包含有所述优化任务的标签信息；
其中，所述基于对所述浏览器的各个类型的优化任务，将所述第一数据存储在所述数据库中，包括：
基于预设的映射关系，确定每个所述优化任务的类型，以及每个所述优化任务对应的监测特征，以实现对大量优化任务进行分类和处理；
基于所述优化任务的类型，以及所述监测特征，从所述第一数据中确定与所述优化任务对应的第二数据；
将所述第二数据和所述优化任务的标签信息进行关联存储，其中，所述标签信息包含所述优化任务的类型和所述监测特征；
响应于接收到分析请求，从所述数据库中获取对应的第二数据进行处理，其中，所述分析请求中包含有所述优化任务的标签信息；
其中，所述接收模块，还用于：
根据对所述第二数据的处理结果，执行以下中的一项或多项：
删除所述待测试浏览器的缓存数据；
减少所述待测试浏览器对本地服务器的访问频率；
将不影响页面首次渲染的资源设置为异步加载或延迟加载；
启动硬件对所述待测试浏览器进行加速；
禁用指定的浏览器插件；
更新浏览器；
降低对DOM元素的查询和修改次数；
其中，所述获取所述待测试浏览器中在指定时间内的浏览器数据和运行信息，包括：使用HTTP压缩算法对待测试浏览器需要收集的浏览器数据和运行信息进行压缩，基于HTTP/2协议，待测试浏览器将压缩文件分割成多个数据帧并发送给服务器，HTTP/2协议支持多路复用，待测试浏览器经过CDN加速，将压缩数据帧通过最近的CDN节点发送到目标服务器，目标服务器使用HTTP/2协议将得到的压缩文件进行解压缩，恢复为原始的浏览器数据和运行信息，根据压缩文件中的时间戳，服务器提取出指定时间段内的浏览器数据和运行信息。
4.根据权利要求3所述的装置，其特征在于，所述存储模块，具体用于：
基于预设的映射关系，确定每个所述优化任务的类型，以及每个所述优化任务对应的监测特征；
基于所述优化任务的类型，以及所述监测特征，从所述第一数据中确定与所述优化任务对应的第二数据；
将所述第二数据和所述优化任务的标签信息进行关联存储，其中，所述标签信息包含所述优化任务的类型和所述监测特征。
5.一种电子设备，包括：
至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1-2中任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310997407.5A CN116720023B (zh) | 2023-08-09 | 2023-08-09 | 浏览器运行数据的处理方法、装置及电子设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310997407.5A CN116720023B (zh) | 2023-08-09 | 2023-08-09 | 浏览器运行数据的处理方法、装置及电子设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN116720023A CN116720023A (zh) | 2023-09-08 |
| CN116720023B true CN116720023B (zh) | 2024-04-12 |
Family
ID=87868325
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202310997407.5A Active CN116720023B (zh) | 2023-08-09 | 2023-08-09 | 浏览器运行数据的处理方法、装置及电子设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN116720023B (zh) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105138452A (zh) * | 2015-08-03 | 2015-12-09 | 广东欧珀移动通信有限公司 | 一种基于终端系统的浏览器性能自动化测试方法 |
| CN110309041A (zh) * | 2019-06-28 | 2019-10-08 | 深圳前海微众银行股份有限公司 | 浏览器性能实时监控方法、装置、设备及可读存储介质 |
| CN113688022A (zh) * | 2021-08-23 | 2021-11-23 | 中国南方电网有限责任公司 | 浏览器性能监控方法、装置、设备和介质 |
| CN114679420A (zh) * | 2020-12-10 | 2022-06-28 | 腾讯科技（深圳）有限公司 | 智能车联网、数据处理方法、电子设备及存储介质 |
| CN115543785A (zh) * | 2022-09-19 | 2022-12-30 | 北京优锘科技有限公司 | 一种检测Web浏览器运行性能的方法及装置 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| AU2010328326B2 (en) * | 2009-12-07 | 2016-12-01 | Robert Buffone | System and method for website performance optimization and internet traffic processing |
-
2023
- 2023-08-09 CN CN202310997407.5A patent/CN116720023B/zh active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105138452A (zh) * | 2015-08-03 | 2015-12-09 | 广东欧珀移动通信有限公司 | 一种基于终端系统的浏览器性能自动化测试方法 |
| CN110309041A (zh) * | 2019-06-28 | 2019-10-08 | 深圳前海微众银行股份有限公司 | 浏览器性能实时监控方法、装置、设备及可读存储介质 |
| CN114679420A (zh) * | 2020-12-10 | 2022-06-28 | 腾讯科技（深圳）有限公司 | 智能车联网、数据处理方法、电子设备及存储介质 |
| CN113688022A (zh) * | 2021-08-23 | 2021-11-23 | 中国南方电网有限责任公司 | 浏览器性能监控方法、装置、设备和介质 |
| CN115543785A (zh) * | 2022-09-19 | 2022-12-30 | 北京优锘科技有限公司 | 一种检测Web浏览器运行性能的方法及装置 |
Non-Patent Citations (1)
| Title |
|---|
| Web前端性能优化方案与实践;王成;李少元;郑黎晓;缑锦;曾梅琴;刘慧敏;;计算机应用与软件;20141215(第12期);95-101+153 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN116720023A (zh) | 2023-09-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11245713B2 (en) | Enrichment and analysis of cybersecurity threat intelligence and orchestrating application of threat intelligence to selected network security events | |
| CN107480277B (zh) | 用于网站日志采集的方法及装置 | |
| US11216342B2 (en) | Methods for improved auditing of web sites and devices thereof | |
| CN107370806B (zh) | Http状态码监控方法、装置、存储介质和电子设备 | |
| US20210385251A1 (en) | System and methods for integrating datasets and automating transformation workflows using a distributed computational graph | |
| US11093480B2 (en) | Aggregation analysis and remediation of data invalidations | |
| US11546380B2 (en) | System and method for creation and implementation of data processing workflows using a distributed computational graph | |
| EP3168748A1 (en) | System and method for monitoring performance of applications | |
| US11556640B1 (en) | Systems and methods for automated cybersecurity analysis of extracted binary string sets | |
| US10713591B2 (en) | Adaptive metric pruning | |
| JP2011243192A (ja) | 効率的なトランザクションパターンマッチングのための規則体系 | |
| CN112685671A (zh) | 页面显示方法、装置、设备及存储介质 | |
| US20150066965A1 (en) | Data processing, data collection | |
| CN107766224B (zh) | 测试方法和测试装置 | |
| CN113157480A (zh) | 错误信息处理方法、装置、存储介质以及终端 | |
| US10644971B2 (en) | Graph search in structured query language style query | |
| CN113204695A (zh) | 网站识别方法和装置 | |
| US10706108B2 (en) | Field name recommendation | |
| CN116720023B (zh) | 浏览器运行数据的处理方法、装置及电子设备 | |
| CN110569424A (zh) | 一种信息推介的方法和装置 | |
| CN115495740A (zh) | 一种病毒检测方法和装置 | |
| CN112035205A (zh) | 数据处理方法、装置、设备和存储介质 | |
| US9858549B2 (en) | Business transaction resource usage tracking | |
| CN113032341A (zh) | 一种基于可视化配置的日志处理方法 | |
| CN115333858B (zh) | 登录页面破解方法、装置、设备以及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |