CN111708689A - 一种修改ab实验的方法、装置及电子设备 - Google Patents
一种修改ab实验的方法、装置及电子设备 Download PDFInfo
- Publication number
- CN111708689A CN111708689A CN202010426853.7A CN202010426853A CN111708689A CN 111708689 A CN111708689 A CN 111708689A CN 202010426853 A CN202010426853 A CN 202010426853A CN 111708689 A CN111708689 A CN 111708689A
- Authority
- CN
- China
- Prior art keywords
- experiment
- target
- version
- modifying
- identification
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000002474 experimental method Methods 0.000 title claims abstract description 483
- 238000000034 method Methods 0.000 title claims abstract description 60
- 238000012986 modification Methods 0.000 claims abstract description 48
- 230000004048 modification Effects 0.000 claims abstract description 46
- 238000004891 communication Methods 0.000 claims description 20
- 230000000694 effects Effects 0.000 claims description 13
- 238000001514 detection method Methods 0.000 claims description 10
- 238000004590 computer program Methods 0.000 claims description 7
- 238000011161 development Methods 0.000 claims description 5
- 238000010276 construction Methods 0.000 claims description 2
- 230000004044 response Effects 0.000 description 15
- 230000008569 process Effects 0.000 description 14
- 230000002159 abnormal effect Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 5
- 230000001960 triggered effect Effects 0.000 description 5
- 238000013515 script Methods 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 239000007795 chemical reaction product Substances 0.000 description 3
- 230000005856 abnormality Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 239000000047 product Substances 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 235000014510 cooky Nutrition 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/362—Software debugging
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
- Testing And Monitoring For Control Systems (AREA)
Abstract
本发明实施例提供了一种修改AB实验的方法、装置及电子设备。其中的方法包括：截获用于修改目标AB实验的请求报文，所述请求报文携带有所述目标AB实验的实验标识；对所述请求报文进行解析，获取所述目标AB实验的实验标识；根据所述目标AB实验的实验标识，获取所述目标AB实验的使用情况信息；检测所述使用情况信息是否满足预设条件，若满足，则响应所述请求报文，执行修改所述目标AB实验的操作。本发明实施例可以提高修改AB实验的安全性、可靠性。
Description
技术领域
本发明涉及通信技术领域，特别是涉及一种修改AB实验的方法、装置及电子设备。
背景技术
AB实验是为应用或系统搭建两个及以上版本，在相同时间维度，分别让结构相同或者相似的的访客群组随机或按规则的访问不同版本，之后使用数据收集工具收集多组用户数据和业务数据，最终结合业务指标评估出最优版本正式采用。
随着产品和业务逻辑的迭代、负责人的变更等原因，可能存在需要修改AB实验的情况。例如，下线AB实验，或者修改AB实验的参数等。然而，目前通常是通过配置人员在后端的实验平台修改AB实验，但是由于配置人员并不了解前端AB实验的使用情况，因此，修改AB实验可能导致大范围的前端访问出现异常。例如，在大量用户正在使用与某个AB实验相关的版本文件的情况下，配置人员在不了解前端使用情况时，直接对该AB实验进行修改，将导致大范围用户的前端访问出现异常，造成较为严重的影响。
为了避免上述情况，配置人员在修改AB实验之前，需要与产品人员确认前端使用AB实验的情况，导致沟通成本较高，以及修改AB实验的效率较低。
发明内容
本发明实施例的目的在于提供一种修改AB实验的方法，可以为修改AB实验提供参考依据，使得修改AB实验的操作更加安全、可靠，以及减少沟通成本，提高修改AB实验的效率。具体技术方案如下：
在本发明实施的第一方面，首先提供了一种修改AB实验的方法，包括：
截获用于修改目标AB实验的请求报文，所述请求报文携带有所述目标AB实验的实验标识；
对所述请求报文进行解析，获取所述目标AB实验的实验标识；
根据所述目标AB实验的实验标识，获取所述目标AB实验的使用情况信息；
检测所述使用情况信息是否满足预设条件，若满足，则响应所述请求报文，执行修改所述目标AB实验的操作。
在本发明实施的第二方面，还提供了一种修改AB实验的装置，包括：
请求截获模块，用于截获用于修改目标AB实验的请求报文，所述请求报文携带有所述目标AB实验的实验标识；
标识获取模块，用于对所述请求报文进行解析，获取所述目标AB实验的实验标识；
情况获取模块，用于根据所述目标AB实验的实验标识，获取所述目标AB实验的使用情况信息；
检测修改模块，用于检测所述使用情况信息是否满足预设条件，若满足，则响应所述请求报文，执行修改所述目标AB实验的操作。
在本发明实施的又一方面，还提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述任一所述的修改AB实验的方法。
在本发明实施的又一方面，还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述任一所述的修改AB实验的方法。
本发明实施例提供的修改AB实验的方法，可以截获用于修改目标AB实验的请求报文，解析得到所述目标AB实验的实验标识；进而可以根据所述实验标识，获取所述目标AB实验的使用情况信息，并检测所述使用情况信息是否满足预设条件，若满足，则响应所述请求报文，执行修改所述目标AB实验的操作。
本发明实施例改进了修改AB实验的操作流程，在执行修改目标AB实验的操作之前，增加了对目标AB实验的使用情况信息的检测操作，只有在检测到目标AB实验的使用信息满足预设条件的情况下，也即确定修改目标AB实验产生的影响在预期范围内的情况下，才响应所述用于修改目标AB实验的请求报文，执行修改所述目标AB实验的操作，可以避免配置人员不了解目标AB实验的使用情况直接进行修改，导致大范围用户的前端访问出现异常的情况，使得修改AB实验的操作流程更加安全、可靠，可以减少前端的访问异常，以及减少用户报障的概率，提高用户体验。
此外，通过本发明实施例，配置人员在修改AB实验的过程中，不需要找前端的产品人员确认目标AB实验的使用情况，可以降低沟通成本，提高修改AB实验的效率，减少人力成本。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。
图1为本发明实施例中的一种修改AB实验的方法实施例的步骤流程图；
图2为本发明实施例中的一种版本库的文件结构示意图；
图3为本发明实施例中的另一种修改AB实验的方法实施例的步骤流程图；
图4为本发明实施例中的又一种修改AB实验的方法实施例的步骤流程图；
图5为本发明实施例中的一种AB实验的流程示意图；
图6为本发明实施例中的再一种修改AB实验的方法实施例的步骤流程图；
图7为本发明实施例中的一种修改AB实验的装置实施例的结构框图；
图8为本发明实施例中的一种电子设备的结构框图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行描述。
方法实施例一
参照图1，示出了本发明实施例中的一种修改AB实验的方法实施例的步骤流程图，所述方法可以包括如下步骤：
步骤101、截获用于修改目标AB实验的请求报文，所述请求报文携带有所述目标AB实验的实验标识；
步骤102、对所述请求报文进行解析，获取所述目标AB实验的实验标识；
步骤103、根据所述目标AB实验的实验标识，获取所述目标AB实验的使用情况信息；
步骤104、检测所述使用情况信息是否满足预设条件，若满足，则响应所述请求报文，执行修改所述目标AB实验的操作。
其中，AB实验平台可用于向配置人员提供修改AB实验的配置界面，配置人员通过AB实验平台可以向服务器发送请求报文，所述请求报文用于请求服务器对所述目标AB实验执行相应的修改操作，服务器中保存有AB实验的数据信息，服务器在接收到请求报文之后，可以执行请求报文所请求的修改操作。所述修改操作可以包括：发布新的AB实验、下线已有的AB实验、以及配置AB实验的参数等。
在具体应用中，配置人员通常不清楚修改目标AB实验之后，会产生多大的影响，如果直接进行修改，可能会导致大范围用户的前端访问出现异常，造成较为严重的影响。本发明实施例提供的修改AB实验的方法，对修改AB实验的操作流程进行了改进，在服务器执行修改目标AB实验的操作之前，增加了对目标AB实验的使用情况信息的检测操作，只有在检测到目标AB实验的使用信息满足预设条件的情况下，也即确定修改目标AB实验产生的影响在预期范围内的情况下，才响应所述用于修改目标AB实验的请求报文。
在具体应用中，AB实验平台修改AB实验通常采用HTTP(HyperText TransferProtocol，超文本传输协议)协议的POST请求方式，因此，所述请求报文通常为HTTP请求报文，目标AB实验的实验标识可以包含在POST的请求报文主体中。
配置人员可以通过AB实验平台向服务器发送用于修改目标AB实验的HTTP请求报文。HTTP请求报文包含请求行、请求头部、空行和请求报文主体四个部分。在截获AB实验平台向服务器发送的用于修改目标AB实验的HTTP请求报文后，可以对所述HTTP请求报文进行解析，得到所述HTTP请求报文的请求报文主体，进而可以从所述请求报文主体中提取所述目标AB实验的实验标识。例如，待修改的目标AB实验名称为ABtest1，实验标识为ID1，则提取的实验标识为ID1，根据实验标识为ID1可以获取所述目标AB实验的使用情况信息，进而可以检测所述使用情况信息是否满足预设条件。
需要说明的是，本发明实施例的执行主体可以是AB实验平台，也可以是服务器，还可以是AB实验平台和服务器之间的中间模块。例如，在执行主体为AB实验平台的情况下，如果AB实验平台的发送模块检测到用于修改目标AB实验的请求报文，则可以截获该请求报文，如果检测到目标AB实验的使用情况信息满足预设条件，可以继续向服务器发送该请求报文，以使服务器在接收到该请求报文之后，执行修改目标AB实验的操作。又如，在执行主体为服务器的情况下，如果服务器的接收模块检测到用于修改目标AB实验的请求报文，则可以截获该请求报文，如果检测到目标AB实验的使用情况信息满足预设条件，可以将该请求报文发送至用于执行修改操作的执行模块，以执行修改目标AB实验的操作。再如，在执行主体为中间模块的情况下，如果中间模块检测到用于修改目标AB实验的请求报文，则可以截获该请求报文，如果检测到目标AB实验的使用情况信息满足预设条件，可以继续向服务器转发该请求报文，以使服务器在接收到该请求报文之后，执行修改目标AB实验的操作。
此外，本发明实施例对截获所述请求报文的具体方式不加以限制。例如，可以编写脚本，并且将该脚本配置在所述执行主体中。所述预设条件可以为预先设置的，可用于体现修改目标AB实验产生的影响是否在预期范围内。在检测到目标AB实验的使用情况信息满足预设条件的情况下，可以确定修改目标AB实验产生的影响在预期范围内，此时可以响应所述请求报文，执行修改所述目标AB实验的操作。在获取待修改的目标AB实验的实验标识之后，可以根据所述实验标识，获取所述目标AB实验的使用情况信息，可选地，所述目标AB实验的使用情况信息可以包括如下信息：与所述目标AB实验相关联的目标版本文件的版本信息。
一个示例中，待修改的目标AB实验为ABtest1，假设获取到该目标AB实验的使用情况信息包括：与该目标AB实验ABtest1相关联的目标版本文件的版本信息为v11.1.0。也就是说，如果用户终端当前使用的APP的版本为v11.1.0，那么修改目标AB实验ABtest1，将会对该用户带来影响。根据该使用情况信息，可以得知当前有哪些版本正在使用待修改的目标AB实验，可以判断修改目标AB实验的安全性和影响范围，进而可以确定该目标AB实验的使用情况信息是否满足预设条件，在确定该目标AB实验满足预设条件的情况下，才执行修改所述目标AB实验的操作。
在本发明的一种可选实施例中，所述截获用于修改目标AB实验的请求报文之前，所述方法还可以包括：
步骤S11、根据开发版本文件、调试版本文件、以及已发布版本文件，构建版本库；
步骤S12、对所述版本库中参与AB实验的版本文件标记相应AB实验的实验标识；
步骤103所述根据所述目标AB实验的实验标识，获取所述目标AB实验的使用情况信息，具体可以包括：
步骤1031、对所述目标AB实验的实验标识与所述版本库中版本文件标记的实验标识进行匹配，得到实验标识相匹配的目标版本文件；
步骤1032、获取所述目标版本文件的版本信息；
步骤1033、将所述目标版本文件的版本信息作为所述目标AB实验的使用情况信息。
所述版本库用于保存当前版本和历史版本的App版本文件。需要说明的是，本发明实施例对所述版本库的存放位置和形式不加以限制。参照图2，示出了本发明实施例中的一种版本库的文件结构示意图。如图2所示，所述版本库可以为服务器中的某个预设的文件夹。该文件夹中可以保存有开发版本文件、调试版本文件、以及已发布版本文件，并且每个版本文件以一个文件夹的形式保存，每个版本文件的文件夹中可以包括版本提审的ipa文件，本发明实施例对所述版本库中参与AB实验的版本文件标记相应AB实验的实验标识。
在获取待修改的目标AB实验的实验标识之后，可以在版本库中检索所述实验标识，通过预先编写的脚本遍历版本库中各版本APP的ipa文件，对所述目标AB实验的实验标识与所述版本库中版本文件标记的实验标识进行匹配，得到实验标识相匹配的目标版本文件，对所述目标文件的版本信息进行汇总，得到所述目标AB实验的使用情况信息。
最后，检测所述使用情况信息中目标文件的版本信息是否满足预设条件，例如，可以检测使用该版本信息的使用人数是否小于预设人数，或者，检测该版本信息的实验效果是否已达到预设效果等，以确定待修改的目标AB实验的使用情况信息是否满足预设条件。
可选地，所述获取所述目标AB实验的使用情况信息之后，所述方法还可以包括：输出所述目标AB实验的使用情况信息。
本发明实施例还可以在AB实验平台输出所述目标AB实验的使用情况信息，以使配置人员可以直观了解当前待修改的目标AB实验的使用情况，帮助配置人员做出更加合理、准确的决策。
综上，本发明实施例可以截获用于修改目标AB实验的请求报文，解析得到所述目标AB实验的实验标识；进而可以根据所述实验标识，获取所述目标AB实验的使用情况信息，并检测所述使用情况信息是否满足预设条件，若满足，则响应所述请求报文，执行修改所述目标AB实验的操作。
本发明实施例改进了修改AB实验的操作流程，在服务器执行修改目标AB实验的操作之前，增加了对目标AB实验的使用情况信息的检测操作，只有在检测到目标AB实验满足预设条件的情况下，才响应所述用于修改目标AB实验的请求报文，执行修改所述目标AB实验的操作，可以避免配置人员不了解目标AB实验的使用情况直接进行修改，导致大范围用户的前端访问出现异常的情况，使得修改AB实验的操作流程更加安全、可靠，可以减少前端的访问异常，以及减少用户报障的概率，提高用户体验。
此外，通过本发明实施例，配置人员在修改AB实验的过程中，不需要找前端的产品人员确认目标AB实验的使用情况，可以降低沟通成本，提高修改AB实验的效率，减少人力成本。
方法实施例二
参照图3，示出了本发明实施例中的另一种修改AB实验的方法实施例的步骤流程图，所述方法可以包括如下步骤：
步骤201、截获用于修改目标AB实验的请求报文，所述请求报文携带有所述目标AB实验的实验标识；
步骤202、对所述请求报文进行解析，获取所述目标AB实验的实验标识；
步骤203、根据所述实验标识，获取所述目标AB实验的使用情况信息，所述使用情况信息包括：与所述目标AB实验相关联的目标版本文件的版本信息；
步骤204、从数据统计平台获取所述版本信息的使用统计数据，所述使用统计数据包括：使用人数和/或使用占比；
步骤205、在所述使用情况信息中添加所述使用统计数据；
步骤206、检测所述使用情况信息是否满足预设条件，若满足，则响应所述请求报文，执行修改所述目标AB实验的操作。
在具体实施中，本发明实施例可以截获AB实验平台向服务器发送的用于修改目标AB实验的请求报文，根据所述请求报文中携带的目标AB实验的实验标识，可以获取所述目标AB实验的使用情况信息，所述使用情况信息可以包括：与所述目标AB实验相关联的目标版本文件的版本信息。例如，待修改的目标AB实验为ABtest1，目标版本文件的版本信息为v11.1.0。
由此，可以得知哪些版本正在使用当前待修改的目标AB实验，如果修改该目标AB实验，会对使用这些版本的前端带来哪些影响，进而可以预估影响范围以及影响的严重性，以检测所述使用情况信息是否满足预设条件。
为了进一步提高检测的准确性，以及减小修改目标AB实验的影响范围，本发明实施例在获取与所述目标AB实验相关联的目标版本文件的版本信息之后，从数据统计平台获取所述版本信息的使用统计数据，并且在所述使用情况信息中添加所述使用统计数据。所述使用统计数据可以包括：使用人数和/或使用占比。其中，使用人数指当前使用与所述目标AB实验相关联的目标版本文件的用户数，使用占比指当前使用与所述目标AB实验相关联的目标版本文件的用户数在所有用户数中的比例。
根据所述统计数据，可以得知正在使用当前待修改的目标AB实验相关的目标版本文件的使用人数和/或使用占比，进而可以更加准确地确定修改目标AB实验会对多少用户的使用产生影响，可以更加准确地预估影响范围以及影响的严重性，为检测所述目标AB实验的使用情况信息是否满足预设条件提供更加可靠的依据。
目前的AB实验流程通常为：配置人员在实验平台发布AB实验并生成一套用于日志采集的脚本，业务系统将脚本加入实验页面并开始实验，用户访问系统页面后业务系统根据用户cookies(存储在用户本地终端上的数据)和业务规则返回不同实验版本，用户浏览器将版本日志发送至日志收集器，日志收集器将接收到的日志经过ETL(extracttransform-load，即抽取-转换-加载)转换并同步至数据统计平台。
由此，数据统计平台可以记录APP每个版本的使用统计数据。通过查询数据统计平台，可以得到与所述目标AB实验相关联的目标版本文件的版本信息的使用统计数据。所述使用统计数据包括使用人数和使用占比中的至少一种，本发明实施例将所述使用统计数据也加入所述目标AB实验的使用情况信息中，参与使用情况信息的检测过程。此时，所述使用情况信息中包括：与所述目标AB实验相关联的目标版本文件的版本信息，以及所述版本信息的使用统计数据。
一个示例中，待修改的目标AB实验为ABtest1，目标版本文件的版本信息为v11.1.0，从数据统计平台获取版本信息v11.1.0的使用统计数据包括：使用人数为5000人，使用占比为80％。所述检测所述使用情况信息是否满足预设条件，可以包括：检测使用人数是否小于预设人数，和/或，检测使用占比是否小于预设占比。例如，若检测到使用人数小于预设人数，并且使用占比小于预设占比，则确定该目标AB实验的使用情况信息符合预设条件。可以理解，上述预设条件仅作为本发明实施例的一种应用示例，本发明实施例对预设条件的具体内容不加以限制。
综上，本发明实施例通过截获用于修改目标AB实验的请求报文，在修改目标AB实验之前，增加对目标AB实验的使用情况的检验流程，以检测所述使用情况信息是否满足预设条件，若满足，则响应所述请求报文，执行修改所述目标AB实验的操作。所述使用情况信息中包括：与所述目标AB实验相关联的目标版本文件的版本信息，以及所述版本信息的使用统计数据。由此，可以确定哪些版本正在使用当前待修改的目标AB实验，以及有多少用户正在使用这些版本，使用这些版本的用户在所有用户中的占比等信息，进而可以确定修改目标AB实验，会对使用哪些版本的用户产生影响，以及会对多少用户产生影响，可以准确判断影响的范围和严重性，在确定目标AB实验的使用情况满足预设的修改条件的情况下，也即，在确定修改目标AB实验产生的影响范围在预期范围内的情况下，才执行对目标AB实验的修改操作，可以提高修改AB实验的安全性和可靠性，尽可能减小修改的影响范围。
方法实施例三
参照图4，示出了本发明实施例中的又一种修改AB实验的方法实施例的步骤流程图，所述方法可以包括如下步骤：
步骤301、截获用于修改目标AB实验的请求报文，所述请求报文携带有所述目标AB实验的实验标识；
步骤302、对所述请求报文进行解析，获取所述目标AB实验的实验标识；
步骤303、根据所述目标AB实验的实验标识，获取所述目标AB实验的实验状态数据，所述实验状态数据包括：实验完成状态和/或实验效果；
步骤304、将所述实验效果数据作为所述目标AB实验的使用情况信息；
步骤305、检测所述使用情况信息是否满足预设条件，若满足，则响应所述请求报文，执行修改所述目标AB实验的操作。
在具体实施中，本发明实施例可以截获AB实验平台向服务器发送的用于修改目标AB实验的请求报文，根据所述请求报文中携带的目标AB实验的实验标识，获取所述目标AB实验的实验状态数据，将所述实验效果数据作为所述目标AB实验的使用情况信息，以检测所述使用情况信息是否满足预设条件，若满足，则响应所述请求报文，执行修改所述目标AB实验的操作。其中，所述实验状态数据可以包括：实验完成状态和/或实验效果。
在具体实施中，AB实验通常包括实验组和对照组，由于实验组和对照组的功能上通常会有一些区别，因此，修改目标AB实验通常会对一部分用户产生影响。参照图5，示出了本发明实施例中的一种AB实验的流程示意图。如图5所示，用户终端在冷启动APP时，用户终端利用设备ID和用户ID向AB实验平台发出请求，AB实验平台接收到用户终端的请求后，从服务器请求数据然后进行实验运算，并将实验结果返回给用户终端，用户终端即可获取到当前用户所在实验分组，从而展示对应的界面。
在具体实施中，修改目标AB实验包括发布新的AB实验、下线已有的AB实验、以及配置AB实验的参数等。以下线已有的AB实验为例，假设需要下线的目标AB实验为ABtest1。命中该目标AB实验ABtest1的用户(如实验组的用户)，前端将展示界面A，没有命中该目标AB实验ABtest1的用户(如对照组的用户)，前端将展示界面B。
如果配置人员通过AB实验平台下线目标AB实验ABtest1，而此时目标AB实验ABtest1并没有结束，或者，经过实验得知界面A的效果优于界面B，则实验组的用户无法访问界面A，导致用户访问出现异常，或者，导致修改结果与预期不符，本发明实施例称这种修改为误修改操作。
为了防止配置人员的误修改操作，本发明实施例在获取所述目标AB实验的实验标识之后，可以根据所述实验标识，获取所述目标AB实验的实验状态数据，并且将所述实验状态数据作为所述目标AB实验的使用情况信息，以检测所述实验状态数据是否满足预设条件，也即检测当前的修改操作是否为误修改操作。
其中，所述实验完成状态可用于表示目标AB实验是否已经结束，如果目标AB实验还未结束，则不宜下线该目标AB实验，此时，可以确定目标实验的使用情况信息不符合预设条件。所述实验效果可用于表示目标AB实验的效果，例如，对于目标AB实验ABtest1，如果界面A的效果优于界面B，那么下线目标AB实验ABtest1则认为是误修改操作，此时，可以确定目标实验的使用情况信息不符合预设条件；如果界面B的效果优于界面A，那么下线目标AB实验ABtest1则认为是正常结束AB实验的操作，此时，可以确定目标实验的使用情况信息符合预设条件。
需要说明的是，本发明实施例对目标AB实验的使用情况数据的具体数据内容不做限制。在具体实施中，可以根据实际需求选择所需的使用情况数据。
优选地，所述使用情况数据可以包括：与目标AB实验相关联的目标版本文件的版本信息，所述版本信息的使用统计数据，以及所述目标AB实验的实验状态数据。
由此，配置人员可以得知当前有哪些版本正在使用目标AB实验，以及这些版本的使用情况，进而可以判断修改目标AB实验的安全性和影响范围。为了使得配置人员的判断更加准确，进一步减小由于配置人员的误修改操作带来的影响，在步骤302获取所述目标AB实验的实验标识之后，本发明实施例根据所述实验标识，获取所述目标AB实验的实验状态数据，并且将所述实验状态数据作为所述目标AB实验的使用情况信息，参与检测过程，以排除误修改操作。
综上，本发明实施例通过截获用于修改目标AB实验的请求报文，在修改目标AB实验之前，增加对目标AB实验的使用情况的检验流程，以检测所述使用情况信息是否满足预设条件，若满足，则响应所述请求报文，执行修改所述目标AB实验的操作。所述使用情况信息中包括：目标AB实验的实验状态数据，如实验完成状态和/或实验效果。通过对实验状态数据的检测，可以确定当前待修改目标AB实验的操作属于配置人员的误修改操作，还是属于修改流程中的正常操作，如果检测到实验状态数据不满足预设条件，也即当前待修改目标AB实验的操作属于配置人员的误修改操作，则可以拒绝响应该请求报文，不执行修改AB实验的操作。如果检测到实验状态数据满足预设条件，也即当前待修改目标AB实验的操作属于修改流程中的正常操作，则可以响应该请求报文，执行修改AB实验的操作。由此，通过本发明实施例，可以避免配置人员在不了解前端使用情况下执行的误修改操作，提高修改AB实验的安全性、可靠性和准确性。
方法实施例四
参照图6，示出了本发明实施例中的再一种修改AB实验的方法实施例的步骤流程图，所述方法可以包括如下步骤：
步骤401、截获用于修改目标AB实验的请求报文，所述请求报文携带有所述目标AB实验的实验标识；
步骤402、对所述请求报文进行解析，获取所述目标AB实验的实验标识；
步骤403、根据所述目标AB实验的实验标识，获取所述目标AB实验的使用情况信息；
步骤404、检测所述使用情况信息是否满足预设条件；
步骤405、在所述使用情况信息不满足预设条件的情况下，若接收到用于确定修改所述目标AB实验的指示信息，则响应所述指示信息，执行修改所述目标AB实验的操作。
在具体实施中，本发明实施例可以截获AB实验平台向服务器发送的用于修改目标AB实验的请求报文，根据所述请求报文中携带的目标AB实验的实验标识，获取所述目标AB实验的使用情况信息，以检测所述使用情况信息是否满足预设条件，若检测到所述使用情况信息满足预设条件，则响应所述请求报文，执行修改所述目标AB实验的操作。若检测到所述使用情况信息不满足预设条件，可以拒绝响应所述请求报文，不执行修改所述目标AB实验的操作。
可选地，在检测到所述使用情况信息不满足预设条件时，还可以输出提示信息，以提示不建议执行当前修改目标AB实验的操作。进一步地，还可以输出目标AB实验的使用情况信息，以使配置人员可以查看该使用情况信息，了解不建议执行修改目标AB实验操作的原因。
可选地，在检测到所述使用情况信息不满足预设条件时，还可以弹出用于询问是否确认执行当前修改操作的提示框，如果接收到确认修改的响应消息，则触发用于确定修改所述目标AB实验的指示信息，说明配置人员明确需要执行修改操作，则可以响应所述指示信息，执行修改所述目标AB实验的操作。如果接收到取消修改的响应消息，则终止修改操作流程，不执行修改所述目标AB实验的操作。
需要说明的是，本发明实施例对所述指示信息的触发形式不作限制。例如，所述指示信息可以为默许指示，如在弹出用于询问是否确认执行当前修改操作的提示框之后，如果预设时间内没有接收到响应消息，则默认需要执行修改操作，可以触发用于确定修改所述目标AB实验的指示信息。又如，在弹出用于询问是否确认执行当前修改操作的提示框之后，如果预设时间内接收到确认修改的响应消息，则触发用于确定修改所述目标AB实验的指示信息。再如，在检测到所述使用情况信息不满足预设条件，且未执行修改目标AB实验的操作的情况下，若接收到再次通过AB实验平台触发的用于修改目标AB实验的请求报文，则触发用于确定修改所述目标AB实验的指示信息。
可选地，所述响应所述指示信息，执行修改所述目标AB实验的操作，可以包括：响应所述指示信息，将截获的用于修改目标AB实验的请求报文转发至服务器中用于执行修改操作的执行模块，以通过所述执行模块对所述目标AB实验执行相应的修改操作。
或者，所述响应所述指示信息，执行修改所述目标AB实验的操作，可以包括：响应所述指示信息，向服务器的执行模块重新发送用于修改AB实验的请求报文，以使所述执行模块对所述目标AB实验执行相应的修改操作。
服务器的执行模块响应于该请求报文，可以执行对目标AB实验的修改操作，并且向AB实验平台返回针对所述请求报文的响应报文，以通知修改操作的完成情况。可以理解，所述响应数据可以为HTTP响应报文，该HTTP响应报文包括状态行、消息报头、空行和响应报文主体四个部分。
综上，本发明实施例通过截获用于修改目标AB实验的请求报文，在修改目标AB实验之前，增加对目标AB实验的使用情况的检验流程，以检测所述使用情况信息是否满足预设条件，若检测到所述使用情况信息满足预设条件，才响应所述请求报文，执行修改所述目标AB实验的操作。或者，在检测到所述使用情况信息不满足预设条件的情况下，如果接收到用于修改所述目标AB实验的指示信息，才可以确定配置人员明确需要执行修改操作，则响应所述指示信息，执行修改所述目标AB实验的操作。本发明实施例通过增加检验流程，以及二次确认的流程，可以提高修改AB实验的安全性、可靠性和准确性。
装置实施例
参照图7，示出了本发明实施例中的一种修改AB实验的装置实施例的结构框图，所述装置可以包括：
请求截获模块501，用于截获用于修改目标AB实验的请求报文，所述请求报文携带有所述目标AB实验的实验标识；
标识获取模块502，用于对所述请求报文进行解析，获取所述目标AB实验的实验标识；
情况获取模块503，用于根据所述目标AB实验的实验标识，获取所述目标AB实验的使用情况信息；
检测修改模块504，用于检测所述使用情况信息是否满足预设条件，若满足，则响应所述请求报文，执行修改所述目标AB实验的操作。
可选地，所述装置还包括：
版本库构建模块，用于根据开发版本文件、调试版本文件、以及已发布版本文件，构建版本库；
标识标记模块，用于对所述版本库中参与AB实验的版本文件标记相应AB实验的实验标识；
所述情况获取模块，包括：
标识匹配子模块，用于对所述目标AB实验的实验标识与所述版本库中版本文件标记的实验标识进行匹配，得到实验标识相匹配的目标版本文件；
版本获取子模块，用于获取所述目标版本文件的版本信息；
第一确定子模块，用于将所述目标版本文件的版本信息作为所述目标AB实验的使用情况信息。
可选地，所述装置还包括：
统计数据获取模块，用于从数据统计平台获取所述版本信息的使用统计数据，所述使用统计数据包括：使用人数和/或使用占比；
信息添加模块，用于在所述目标AB实验的使用情况信息中添加所述使用统计数据。
可选地，所述情况获取模块，包括：
状态数据获取子模块，用于根据所述目标AB实验的实验标识，获取所述目标AB实验的实验状态数据，所述实验状态数据包括：实验完成状态和/或实验效果；
第二确定子模块，用于将所述实验状态数据作为所述目标AB实验的使用情况信息。
可选地，所述装置还包括：
修改执行模块，用于在所述使用情况信息不满足预设条件的情况下，若接收到用于确定修改所述目标AB实验的指示信息，则响应所述指示信息，执行修改所述目标AB实验的操作。
可选地，所述请求报文用于请求对所述目标AB实验执行修改操作，所述修改操作包括：发布新的AB实验、下线已有的AB实验、以及配置AB实验的参数。
综上，本发明实施例的修改AB实验的装置，改进了修改AB实验的操作流程，在服务器执行修改目标AB实验的操作之前，增加了对目标AB实验的使用情况信息的检测操作，只有在检测到目标AB实验满足预设条件的情况下，才响应所述用于修改目标AB实验的请求报文，执行修改所述目标AB实验的操作，可以避免配置人员不了解目标AB实验的使用情况直接进行修改，导致大范围用户的前端访问出现异常的情况，使得修改AB实验的操作流程更加安全、可靠，可以减少前端的访问异常，以及减少用户报障的概率，提高用户体验。
此外，通过本发明实施例，配置人员在修改AB实验的过程中，不需要找前端的产品人员确认目标AB实验的使用情况，可以降低沟通成本，提高修改AB实验的效率，减少人力成本。
本发明实施例还提供了一种电子设备，如图8所示，包括处理器601、通信接口602、存储器603和通信总线604，其中，处理器601，通信接口602，存储器603通过通信总线604完成相互间的通信，
存储器603，用于存放计算机程序；
处理器601，用于执行存储器603上所存放的程序时，实现如下步骤：
截获用于修改目标AB实验的请求报文，所述请求报文携带有所述目标AB实验的实验标识；
对所述请求报文进行解析，获取所述目标AB实验的实验标识；
根据所述目标AB实验的实验标识，获取所述目标AB实验的使用情况信息；
检测所述使用情况信息是否满足预设条件，若满足，则响应所述请求报文，执行修改所述目标AB实验的操作。
上述终端提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect，简称PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture，简称EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示，图中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述终端与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory，简称RAM)，也可以包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。可选的，存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器，包括中央处理器(Central Processing Unit，简称CPU)、网络处理器(Network Processor，简称NP)等；还可以是数字信号处理器(Digital Signal Processing，简称DSP)、专用集成电路(Application SpecificIntegrated Circuit，简称ASIC)、现场可编程门阵列(Field－Programmable Gate Array，简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本发明提供的又一实施例中，还提供了一种计算机可读存储介质，该计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述实施例中任一所述的修改AB实验的方法。
在本发明提供的又一实施例中，还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述实施例中任一所述的修改AB实验的方法。
在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。
Claims (10)
1.一种修改AB实验的方法，其特征在于，所述方法包括：
截获用于修改目标AB实验的请求报文，所述请求报文携带有所述目标AB实验的实验标识；
对所述请求报文进行解析，获取所述目标AB实验的实验标识；
根据所述目标AB实验的实验标识，获取所述目标AB实验的使用情况信息；
检测所述使用情况信息是否满足预设条件，若满足，则响应所述请求报文，执行修改所述目标AB实验的操作。
2.根据权利要求1所述的方法，其特征在于，所述截获用于修改目标AB实验的请求报文之前，所述方法还包括：
根据开发版本文件、调试版本文件、以及已发布版本文件，构建版本库；
对所述版本库中参与AB实验的版本文件标记相应AB实验的实验标识；
所述根据所述目标AB实验的实验标识，获取所述目标AB实验的使用情况信息，包括：
对所述目标AB实验的实验标识与所述版本库中版本文件标记的实验标识进行匹配，得到实验标识相匹配的目标版本文件；
获取所述目标版本文件的版本信息；
将所述目标版本文件的版本信息作为所述目标AB实验的使用情况信息。
3.根据权利要求2所述的方法，其特征在于，所述获取所述目标版本文件的版本信息之后，所述方法还包括：
从数据统计平台获取所述版本信息的使用统计数据，所述使用统计数据包括：使用人数和/或使用占比；
在所述目标AB实验的使用情况信息中添加所述使用统计数据。
4.根据权利要求1所述的方法，其特征在于，所述根据所述目标AB实验的实验标识，获取所述目标AB实验的使用情况信息，包括：
根据所述目标AB实验的实验标识，获取所述目标AB实验的实验状态数据，所述实验状态数据包括：实验完成状态和/或实验效果；
将所述实验状态数据作为所述目标AB实验的使用情况信息。
5.根据权利要求1所述的方法，其特征在于，所述检测所述使用情况信息是否满足预设条件之后，所述方法还包括：
在所述使用情况信息不满足预设条件的情况下，若接收到用于确定修改所述目标AB实验的指示信息，则响应所述指示信息，执行修改所述目标AB实验的操作。
6.根据权利要求1所述的方法，其特征在于，所述请求报文用于请求对所述目标AB实验执行修改操作，所述修改操作包括：发布新的AB实验、下线已有的AB实验、以及配置AB实验的参数。
7.一种修改AB实验的装置，其特征在于，所述装置包括：
请求截获模块，用于截获用于修改目标AB实验的请求报文，所述请求报文携带有所述目标AB实验的实验标识；
标识获取模块，用于对所述请求报文进行解析，获取所述目标AB实验的实验标识；
情况获取模块，用于根据所述目标AB实验的实验标识，获取所述目标AB实验的使用情况信息；
检测修改模块，用于检测所述使用情况信息是否满足预设条件，若满足，则响应所述请求报文，执行修改所述目标AB实验的操作。
8.根据权利要求7所述的装置，其特征在于，所述装置还包括：
版本库构建模块，用于根据开发版本文件、调试版本文件、以及已发布版本文件，构建版本库；
标识标记模块，用于对所述版本库中参与AB实验的版本文件标记相应AB实验的实验标识；
所述情况获取模块，包括：
标识匹配子模块，用于对所述目标AB实验的实验标识与所述版本库中版本文件标记的实验标识进行匹配，得到实验标识相匹配的目标版本文件；
版本获取子模块，用于获取所述目标版本文件的版本信息；
第一确定子模块，用于将所述目标版本文件的版本信息作为所述目标AB实验的使用情况信息。
9.一种电子设备，其特征在于，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现权利要求1-6任一所述的方法步骤。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-6中任一所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010426853.7A CN111708689B (zh) | 2020-05-19 | 2020-05-19 | 一种修改ab实验的方法、装置及电子设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010426853.7A CN111708689B (zh) | 2020-05-19 | 2020-05-19 | 一种修改ab实验的方法、装置及电子设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111708689A true CN111708689A (zh) | 2020-09-25 |
| CN111708689B CN111708689B (zh) | 2024-06-25 |
Family
ID=72538237
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010426853.7A Active CN111708689B (zh) | 2020-05-19 | 2020-05-19 | 一种修改ab实验的方法、装置及电子设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111708689B (zh) |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20160292248A1 (en) * | 2013-11-22 | 2016-10-06 | Cambridge Social Science Decision Lab Inc. | Methods, systems, and articles of manufacture for the management and identification of causal knowledge |
| CN106708537A (zh) * | 2017-01-22 | 2017-05-24 | 百度在线网络技术（北京）有限公司 | 应用更新方法和装置 |
| CN106959925A (zh) * | 2017-04-25 | 2017-07-18 | 北京云测信息技术有限公司 | 一种版本测试方法及装置 |
| CN107145347A (zh) * | 2017-04-27 | 2017-09-08 | 努比亚技术有限公司 | 一种应用灰度发布方法、设备及存储介质 |
| CN110008131A (zh) * | 2019-04-12 | 2019-07-12 | 重庆天蓬网络有限公司 | 一种基于算法实现的区域ab实验管理的方法及装置 |
| CN110019072A (zh) * | 2017-11-21 | 2019-07-16 | 北京京东尚科信息技术有限公司 | 基于实时数据的ab实验方法及系统 |
| CN110147381A (zh) * | 2019-05-27 | 2019-08-20 | 智者四海（北京）技术有限公司 | 信息处理方法、系统及记录介质 |
| CN110601922A (zh) * | 2019-09-18 | 2019-12-20 | 北京三快在线科技有限公司 | 一种对照实验的实现方法、装置、电子设备和存储介质 |
| CN110990270A (zh) * | 2019-11-28 | 2020-04-10 | 百度在线网络技术（北京）有限公司 | Ab实验实现方法、装置、电子设备及存储介质 |
-
2020
- 2020-05-19 CN CN202010426853.7A patent/CN111708689B/zh active Active
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20160292248A1 (en) * | 2013-11-22 | 2016-10-06 | Cambridge Social Science Decision Lab Inc. | Methods, systems, and articles of manufacture for the management and identification of causal knowledge |
| CN106708537A (zh) * | 2017-01-22 | 2017-05-24 | 百度在线网络技术（北京）有限公司 | 应用更新方法和装置 |
| CN106959925A (zh) * | 2017-04-25 | 2017-07-18 | 北京云测信息技术有限公司 | 一种版本测试方法及装置 |
| CN107145347A (zh) * | 2017-04-27 | 2017-09-08 | 努比亚技术有限公司 | 一种应用灰度发布方法、设备及存储介质 |
| CN110019072A (zh) * | 2017-11-21 | 2019-07-16 | 北京京东尚科信息技术有限公司 | 基于实时数据的ab实验方法及系统 |
| CN110008131A (zh) * | 2019-04-12 | 2019-07-12 | 重庆天蓬网络有限公司 | 一种基于算法实现的区域ab实验管理的方法及装置 |
| CN110147381A (zh) * | 2019-05-27 | 2019-08-20 | 智者四海（北京）技术有限公司 | 信息处理方法、系统及记录介质 |
| CN110601922A (zh) * | 2019-09-18 | 2019-12-20 | 北京三快在线科技有限公司 | 一种对照实验的实现方法、装置、电子设备和存储介质 |
| CN110990270A (zh) * | 2019-11-28 | 2020-04-10 | 百度在线网络技术（北京）有限公司 | Ab实验实现方法、装置、电子设备及存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111708689B (zh) | 2024-06-25 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111522711B (zh) | 一种数据监控处理系统、方法、执行端、监控端及电子设备 | |
| CN113472607B (zh) | 应用程序网络环境检测方法、装置、设备及存储介质 | |
| CN108156141B (zh) | 一种实时数据识别方法、装置及电子设备 | |
| CN111711533B (zh) | 故障诊断方法、装置、电子设备及存储介质 | |
| CN110929896A (zh) | 一种系统设备的安全分析方法及装置 | |
| CN111526109B (zh) | 自动检测web威胁识别防御系统的运行状态的方法及装置 | |
| CN114301800A (zh) | 一种网络设备质差分析方法及装置 | |
| CN114244694A (zh) | 一种网络端口智能管理方法、系统、设备及可读存储介质 | |
| CN111866921A (zh) | 一种5g基站业务故障查找方法、装置、设备及可存储介质 | |
| JP2014523671A (ja) | 対話型アプリケーションサービスの全体的なパフォーマンスの評価 | |
| CN115037653B (zh) | 业务流量监控方法、装置、电子设备和存储介质 | |
| CN111708689B (zh) | 一种修改ab实验的方法、装置及电子设备 | |
| EP3607767B1 (en) | Network fault discovery | |
| CN110659247A (zh) | 话单文件连续性检测方法、装置、设备及介质 | |
| CN113965447B (zh) | 一种在线云诊断方法、装置、系统、设备及存储介质 | |
| CN114090293A (zh) | 一种服务提供方法及电子设备 | |
| CN112910684B (zh) | 一种通过实时流式平台监控重点数据的方法及终端 | |
| CN117255005B (zh) | 一种基于cdn的业务告警处理方法、装置、设备及介质 | |
| CN113595958A (zh) | 一种物联网设备的安全检测系统及方法 | |
| CN110661677A (zh) | 一种dns测试方法、装置和系统 | |
| CN115987827B (zh) | 一种设备监测方法、装置、电子设备及可读介质 | |
| CN114245242B (zh) | 一种用户下线检测方法、装置和电子设备 | |
| CN113472583B (zh) | 故障原因识别方法、装置及故障原因识别系统 | |
| CN114647546B (zh) | 一种机箱异常的处理方法、装置、电子设备及存储介质 | |
| CN110225543B (zh) | 基于网络请求数据的移动端软件质量态势感知系统及方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant |