CN114036036A - 一种基于自动标注的自动化测试分析系统、方法及终端设备 - Google Patents
一种基于自动标注的自动化测试分析系统、方法及终端设备 Download PDFInfo
- Publication number
- CN114036036A CN114036036A CN202010705244.5A CN202010705244A CN114036036A CN 114036036 A CN114036036 A CN 114036036A CN 202010705244 A CN202010705244 A CN 202010705244A CN 114036036 A CN114036036 A CN 114036036A
- Authority
- CN
- China
- Prior art keywords
- automatic
- module
- result
- labeling
- analysis
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000004458 analytical method Methods 0.000 title claims abstract description 105
- 238000002372 labelling Methods 0.000 title claims abstract description 93
- 238000012360 testing method Methods 0.000 title claims abstract description 69
- 238000000034 method Methods 0.000 title claims abstract description 19
- 230000008569 process Effects 0.000 claims abstract description 7
- 238000004422 calculation algorithm Methods 0.000 claims description 13
- 238000005070 sampling Methods 0.000 claims description 9
- 238000001514 detection method Methods 0.000 claims description 6
- 238000012545 processing Methods 0.000 claims description 6
- 238000012216 screening Methods 0.000 claims description 4
- 238000007689 inspection Methods 0.000 claims description 3
- 230000010354 integration Effects 0.000 abstract 1
- 238000013522 software testing Methods 0.000 abstract 1
- 210000001503 joint Anatomy 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000004899 motility Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了一种基于自动标注的自动化测试分析系统、方法及终端设备，该系统包括自动标注模块、引导模块A、引导模块B、引导模块C、引导模块D、自动汇总模块、自动分析模块，及分析平台；自动标注模块对视频进行处理，按帧拆分成图片集，引导模块用于完成自动化测试过程中的各种配置的引导，自动汇总模块根据汇总的维度、汇总内容、汇总结果输出格式、汇总结果输出路径，进行数据汇总，自动分析模块对标注结果进行自动分析。通过将标注功能集成到自动测试平台，只需要将需要处理的视频输入到自动测试平台，即可自动标注输出测试集、自动汇总分析输出测试结果，方便快捷，大大提高了测试效率。
Description
技术领域
本发明涉及图像识别研究领域，尤其是自动化测试方面，具体涉及一种基于自动标注的自动化测试分析系统、方法及终端设备。
背景技术
随着大数据技术的不断发展，需要分析的数据量越来越大，对处理速度的要求也越来越高，如何能快速而准确的获得分析结果，显得尤为重要。在图像识别测试领域，首先需要对视频进行预处理，生成对应的标注结果，然后针对标注结果进行测试。近年来，行业内大多使用手工标注和手动测试，或者借助部分工具实现半自动化测试。在实现本发明过程中，发明人发现现有技术中至少存在如下问题：目前在图像识别测试领域过多的依赖于人的主观能动性，由于测试人员能力差异，导致标注结果和测试结果也会有很大的差别，且由于人力成本和人员效率问题，导致测试效率较低，项目进度缓慢，不能较好的满足当前对于数据处理速度的要求；同时输出形式单一，易用性较差。
发明内容
为了克服现有技术的不足，本公开实施例提供了一种基于自动标注的自动化测试分析系统、方法及终端设备，大大提高了测试效率。技术方案如下：
第一方面，提供了一种基于自动标注的自动化测试分析系统，该系统包括自动标注模块、引导模块A、引导模块B、引导模块C、引导模块D、自动汇总模块、自动分析模块，及分析平台；
所述自动标注模块对视频进行处理，按帧拆分成图片集，图片集按视频所属城市、线路、车辆等信息进行分组；
所述引导模块A，用于进行标注配置的操作引导，可以配置标注类型、生成的图片集格式、标注结果格式、标注结果内容、标注结果存储路径等；自动标注模块根据标注类型选择终端上传的视频集，并根据引导模块A的配置，在对应路径生成相应格式的标注结果；
所述引导模块B，用于选择是否进行邮件推送，
若是，则配置邮箱服务器和接收人的邮箱地址，将标注结果通过邮件推送给对应接收人，接收人收到邮件后，可以选择是否对标注结果进行抽查，若选择抽查，则对抽查的部分进行检查和人工重新标注，将抽查的重新标注结果输入至分析平台；
若否，直接跳过该模块；
所述引导模块C，用于选择是否需要对数据进行自动汇总，
若是，则进行自动汇总模块的汇总配置引导，可以选择汇总的维度、汇总内容、汇总结果输出格式、汇总结果输出路径等；
若否，将直接按照引导模块A和B的配置内容输出结果；
所述引导模块D，用于选择是否自动分析，
若是，则对抽查标注结果配置等待超时时间t1、配置抽查结果轮询时间t2；根据t1和t2，自动分析模块对标注结果进行自动分析；
若否，跳过该模块。
优选的，该自动化测试分析系统，可实时展示执行日志、当前执行任务内容、执行进度、执行成功失败情况等。
第二方面，提供了一种基于自动标注的自动化测试分析方法，该方法包括如下步骤：
根据一种基于自动标注的自动化测试分析系统中的引导模块A、引导模块B、引导模块C、引导模块D完成引导配置；
通过自动标注模块对视频进行处理，按帧拆分成图片集，并对图片集按视频所属城市、线路、车辆等信息进行分组，根据引导模块A的配置，在对应路径生成相应格式的标注结果；将标注结果上传至分析平台；
检测引导模块B是否配置邮件推送，若是，自动标注模块进行邮件推送提醒，将标注结果推送给对应的接收人，提醒接收人是否对标注结果进行抽查，若接收人选择对标注结果进行抽查，则对抽查的部分进行检查和人工重新标注，将抽查标注结果输入至分析平台；若否，则跳过该步骤；
通过自动汇总模块检测是否配置自动汇总，若是，则按照引导模块C的配置，对标注结果进行自动汇总和生成相应的文件；若否，则跳过该步骤；
通过自动分析模块检测是否配置自动分析，若是，自动分析模块检测自动分析是否到达等待超时时间t1，当未到达等待超时时间t1时，则每隔轮询时间t2，检查一次分析平台是否接收到抽查标注结果，若分析平台接收到抽查标注结果或者到达等待超时时间t1，自动分析模块对标注结果进行自动分析，生成相应的准确率、召回率、总上车人数、总下车人数、上下客流差、漏检率、误检率等；所述等待超时时间t1为从邮件推送开始距当前时间的时间差；若否，则跳过该步骤；
输出结果。
优选的，自动分析模块生成分析结果时，可以按不同的筛选条件进行统计：按日期统计一段时间内的标注准确率和召回率，和/或按照车型统计各车型的标注准确率和召回率，和/或通过折线图展示近期算法模型的质量趋势；和/或通过图表展示算法模型对每一类车型的客流图像识别成功率。
优选的，自动化测试分析系统的结果根据API接口文档，支持接口对外开放；自动化测试分析系统包括自动标注结果获取接口M；
自动标注结果获取接口M调用时需要传入7个参数：type、picPath、resPath、picType、resType、content、model，其中picPath、resPath，和model为必填，其他4个参数均含默认值，不传参数时均取默认值；
type为标注对象类型，传入1-3的整数，分别对应不同的视频类型；
picPath为视频读取路径，是必填参数，需要填入处理的视频集的路径；
resPath为标注结果存储路径，是必填参数，需要填入存储结果的路径；
picType为生成的图片集类型；
resType为生成的标注结果类型；
content为标注内容选项；
model为算法模型的全路径，是必填参数。
优选的，自动化测试分析系统的结果根据API接口文档，支持接口对外开放；自动化测试分析系统包括自动汇总结果获取接口N，该接口N调用时需要传入4个参数：type、Path、resType、content，其中Path参数为必填，其他3个参数均含默认值，不传参数时均取默认值；
type为汇总维度，传入1-6的整数，分别对应：1：按城市，2：按车型，3：按车辆前后门，4：按时间，5：按班次，6：按上下客，默认值为1；
path为汇总结果路径，是必填参数；
resType为汇总结果类型；
content为汇总内容。
优选的，自动化测试分析系统的结果根据API接口文档，支持接口对外开放；自动化测试分析系统包括自动分析结果获取接口O，该接口O调用时使用GET方法，不需要传入参数，即可调用该接口获取自动分析模块的生成结果。
进一步的，该自动化测试分析方法，可实时展示执行日志、当前执行任务内容、执行进度、执行成功或失败情况。
与现有技术相比，上述技术方案中的一个技术方案具有如下有益效果：通过将标注功能集成到自动测试平台，只需要将需要处理的视频输入到自动测试平台，即可自动标注输出测试集、自动汇总分析输出测试结果，方便快捷，大大提高了测试效率；同时支持多种格式的结果输出，对外提供接口，支持其他平台对接，易用性更高。同时具备以下优点：
1、减少人力投入，降低成本。
2、自动测试并输出结果，减少由于人员差异带来的误差。
3、使用方便，输出内容格式多样化。
4、将标注脚本可视化、输出格式多样化，并集成到平台，提高易用性。
5、提供对外接口，支持对接。
附图说明
图1为本公开实施例提供的一种基于自动标注的自动化测试分析方法的流程图；
具体实施方式
为了阐明本发明的技术方案和工作原理，下面将结合附图对本公开实施方式做进一步的详细描述。
上述所有可选技术方案，可以采用任意结合形成本公开的可选实施例，在此不再一一赘述。
第一方面：本公开实施例提供了一种基于自动标注的自动化测试分析系统：该系统包括引导模块A、引导模块B、引导模块C、引导模块D、自动标注模块、自动汇总模块、自动分析模块，分析平台；
自动标注模块对视频进行处理，按帧拆分成图片集，并且按照视频所属城市、线路、车辆等信息进行分组；
引导模块A，用于进行标注配置的操作引导，可以配置标注类型，所述标注类型有客流、开关门等，继续配置生成的图片集格式(如：jpg，png等)、标注结果格式(如：json，excel，txt等)、标注结果内容(如：date，time，bus_id等)、标注结果存储路径等；自动标注模块根据标注类型选择终端上传的视频集，根据引导模块A的配置，在对应路径生成相应格式的标注结果。
引导模块B，用于选择是否进行邮件推送，若是，需要配置邮箱服务器和接收人的邮箱地址，如xingzheyi@xingzheyi.com，在自动标注结束后，将标注结果通过邮件推送给对应接收人，接收人收到邮件后可以选择是否进行对标注结果进行抽查，若选择是，则对抽查的部分进行检查和人工重新标注，将抽查标注结果输入至分析平台进行自动分析；若否，直接跳过该模块。
引导模块C，用于选择是否需要对数据进行自动汇总，若是，将进行自动汇总模块的汇总配置引导，可以选择汇总的维度(如：按城市、按车型等)、汇总内容(如：上客数、下客数等)、汇总结果输出格式(如：json、excel、图表等)、汇总结果输出路径等；若否，将直接按照引导模块A和B的内容输出结果，自动测试流程结束。
引导模块D选择是否自动分析，若是，则对抽查标注结果配置等待超时时间t1、配置抽查结果轮询时间t2；根据t1和t2，自动分析模块对标注结果进行自动分析；自动分析模块对标注结果进行自动分析；若否，跳过该模块。
优选的，该自动化测试分析系统，可实时展示执行日志、当前执行任务内容、执行进度、执行成功失败情况等；可视化展示功能便于把握整体测试进度，并且支持失败后跳过或重试机制。
第二方面，提供了一种基于自动标注的自动化测试分析方法，附图1为基于自动标注的自动化测试分析方法的流程图，结合该图，该方法包括如下步骤：
步骤1，根据一种基于自动标注的自动化测试分析系统中的引导模块A、引导模块B、引导模块C、引导模块D完成引导配置；
步骤2，通过自动标注模块对视频进行处理，按帧拆分成图片集，并且按照视频所属城市、线路、车辆等信息进行分组，根据引导模块A的配置，在对应路径生成相应格式的标注结果；
优选的，自动化测试分析系统的结果根据API接口文档，支持接口对外开放；自动化测试分析系统包括自动标注结果获取接口M，如表1所示；
其中自动标注结果获取接口M调用时需要传入7个参数：type、picPath、resPath、picType、resType、content、model，其中视频读取路径、标注结果路径参数，和算法模型路径为必填，其他4个参数均含默认值，不传参数时均取默认值。
type为标注对象类型，传入1-3的整数，分别对应不同的视频类型：1-客流2-开关门3-OD，针对不同的视频类型，标注平台提供3种标注策略，若不做选择时使用默认值1，即客流视频。
picPath为视频读取路径，是必填参数，需要填入处理的视频集的路径，如：D:\videos\bus_flow
resPath为标注结果存储路径，是必填参数，需要填入存储结果的路径，如：D:\result\bus_flow
picType为生成的图片集类型，传入1-3的整数，分别对应1:jpg 2:png3:bmp，此处不填时使用默认值1:jpg
resType为生成的标注结果类型，传入1-3的整数，分别对应1：json，2：excel，3：txt，此处不填时使用默认值1：json
content为标注内容选项，传入1-10的整数列表，分别对应1：date日期，2：city城市，3：bus_id车辆编号，4：begin_time班次起始时间，5：end_time班次结束时间，6：cam摄像头位置，7：time图片时间，8：bus_type车辆类型9：up_sum上车人数，10：down_sum下车人数。此处不填将对所有内容选项进行标注，生成对应结果。
model为算法模型的全路径，是必填参数，如填入：D:\model\bus_flow_V1.01.onnx。
表1自动标注结果获取接口M
步骤3，检测引导模块B是否配置邮件推送，若是，自动标注模块进行邮件推送提醒，将标注结果推送给对应的接收人，提醒接收人是否对标注结果进行抽查，若接收人选择对标注结果进行抽查，则对抽查的部分进行检查和人工重新标注，将抽查标注结果输入至分析平台；
步骤4，通过自动汇总模块检测是否配置自动汇总，若是，则按照引导模块C的配置，对步骤2的标注结果进行自动汇总和生成相应的文件；若无，则跳过该步骤；
优选的，自动化测试分析系统还包括自动汇总结果获取接口N，该接口N调用时需要传入4个参数，其中汇总结果路径参数为必填，其他3个参数均含默认值，不传参数时均取默认值。
type为汇总维度，传入1-6的整数列表，分别对应：1：按城市，2：按车型，3：按车辆前后门，4：按时间，5：按班次，6：按上下客。此处不填默认按城市汇总，生成对应结果。
path为汇总结果路径，是必填参数，需要填入处理结果的保存路径，如：D:\results
resType为汇总结果类型，传入1-3的整数，分别对应：1：json，2：excel，3：txt。此处不填默认取json格式。
content为汇总内容，传入整数列表，分别对应：1：上客数，2：下客数。此处不填默认按全部汇总，生成对应结果。
表2自动汇总结果获取接口N
步骤5，通过自动分析模块检测是否配置自动分析，
若是，自动分析模块检测自动分析是否到达等待超时时间t1，当未到达等待超时时间t1时，则每隔轮询时间t2，检查一次分析平台是否接收到抽查标注结果，若分析平台接收到抽查标注结果或者到达等待超时时间t1，自动分析模块对标注结果进行自动分析，生成相应的准确率、召回率、总上车人数、总下车人数、上下客流差、漏检率、误检率等；所述等待超时时间t1为从邮件推送开始距当前时间的时间差；
例如t1配置为4h，在4h内，每隔轮询时间30min(t2＝30min)，检查一次平台是否接收到抽查标注结果，若是，则自动分析模块进行自动分析；否则，在下一个30min后再次检查，依次循环；当超过4h的时间仍未检测到抽查结果时，则自动分析模块进行自动分析。
若否，则跳过该步骤；
步骤6，输出结果。
优选的，该自动化测试分析系统，可实时展示执行日志、当前执行任务内容、执行进度、执行成功失败情况等；可视化展示功能便于把握整体测试进度，并且支持失败后跳过或重试机制。
优选的，自动化测试分析系统还包括自动分析结果获取接口O，该接口O调用时使用GET方法，不需要传入参数，即可调用该接口获取准确率、召回率等结果。
表3自动分析结果获取接口O
优选的，自动分析生成的结果，可以对所有的分析结果按不同的筛选条件进行统计，如按日期统计一段时间内的标注准确率和召回率，通过折线图展示近期算法模型的质量趋势；如按照车型统计各车型的标注准确率和召回率，通过图表展示算法模型对每一类车型的客流图像识别成功率，便于下一步优化算法模型。
第三方面，本公开实施例提供了一种终端设备，该终端设备包括所有可能的实现方式中任一项所述一种基于自动标注的自动化测试分析系统。
以上结合附图对本发明进行了示例性描述，显然，本发明具体实现并不受上述方式的限制，凡是采用了本发明的方法构思和技术方案进行的各种非实质性的改进；或者未经改进、等同替换，将本发明的上述构思和技术方案直接应用于其他场合的，均在本发明的保护范围之内。
Claims (10)
1.一种基于自动标注的自动化测试分析系统，其特征在于，该系统包括自动标注模块、引导模块A、引导模块B、引导模块C、引导模块D、自动汇总模块、自动分析模块，及分析平台；
所述自动标注模块对视频进行处理，按帧拆分成图片集，图片集按视频所属城市、线路、车辆等信息进行分组；
所述引导模块A，用于进行标注配置的操作引导，可以配置标注类型、生成的图片集格式、标注结果格式、标注结果内容、标注结果存储路径；自动标注模块根据标注类型选择终端上传的视频集，并根据引导模块A的配置，在对应路径生成相应格式的标注结果；
所述引导模块B，用于选择是否进行邮件推送，
若是，则配置邮箱服务器和接收人的邮箱地址，将标注结果通过邮件推送给对应接收人，接收人收到邮件后，可以选择是否对标注结果进行抽查，若选择抽查，则对抽查的部分进行检查和人工重新标注，将抽查的重新标注结果输入至分析平台；
若否，直接跳过该模块；
所述引导模块C，用于选择是否需要对数据进行自动汇总，
若是，则进行自动汇总模块的汇总配置引导，可以选择汇总的维度、汇总内容、汇总结果输出格式、汇总结果输出路径；
若否，将直接按照引导模块A和B的配置内容输出结果；
所述引导模块D，用于选择是否自动分析，
若是，则对抽查标注结果配置等待超时时间t1、配置抽查结果轮询时间t2；根据t1和t2，自动分析模块对标注结果进行自动分析；
若否，跳过该模块。
2.根据权利要求1所述的一种基于自动标注的自动化测试分析系统，其特征在于，该自动化测试分析系统，可实时展示执行日志、当前执行任务内容、执行进度、执行成功或失败情况。
3.根据权利要求1所述的一种基于自动标注的自动化测试分析系统，其特征在于，自动分析模块生成分析结果时，可以按不同的筛选条件进行统计：按日期统计一段时间内的标注准确率和召回率，和/或按照车型统计各车型的标注准确率和召回率，和/或通过折线图展示近期算法模型的质量趋势；和/或通过图表展示算法模型对每一类车型的客流图像识别成功率。
4.一种基于自动标注的自动化测试分析方法，其特征在于，该方法包括如下步骤：
根据一种基于自动标注的自动化测试分析系统中的引导模块A、引导模块B、引导模块C、引导模块D完成引导配置；
通过自动标注模块对视频进行处理，按帧拆分成图片集，并对图片集按视频所属城市、线路、车辆等信息进行分组，根据引导模块A的配置，在对应路径生成相应格式的标注结果；将标注结果上传至分析平台；
检测引导模块B是否配置邮件推送，若是，自动标注模块进行邮件推送提醒，将标注结果推送给对应的接收人，提醒接收人是否对标注结果进行抽查，若接收人选择对标注结果进行抽查，则对抽查的部分进行检查和人工重新标注，将抽查标注结果输入至分析平台；若否，则跳过该步骤；
通过自动汇总模块检测是否配置自动汇总，若是，则按照引导模块C的配置，对标注结果进行自动汇总和生成相应的文件；若否，则跳过该步骤；
通过自动分析模块检测是否配置自动分析，若是，自动分析模块检测自动分析是否到达等待超时时间t1，当未到达等待超时时间t1时，则每隔轮询时间t2，检查一次分析平台是否接收到抽查标注结果，若分析平台接收到抽查标注结果或者到达等待超时时间t1，自动分析模块对标注结果进行自动分析，生成相应的准确率、召回率、总上车人数、总下车人数、上下客流差、漏检率、误检率；所述等待超时时间t1为从邮件推送开始距当前时间的时间差；若否，则跳过该步骤；
输出结果。
5.根据权利要求4所述的一种基于自动标注的自动化测试分析方法，其特征在于，自动分析模块生成分析结果时，可以按不同的筛选条件进行统计：按日期统计一段时间内的标注准确率和召回率，和/或按照车型统计各车型的标注准确率和召回率，和/或通过折线图展示近期算法模型的质量趋势；和/或通过图表展示算法模型对每一类车型的客流图像识别成功率。
6.根据权利要求4或5任一项所述的一种基于自动标注的自动化测试分析方法，其特征在于，自动化测试分析系统的结果根据API接口文档，支持接口对外开放；自动化测试分析系统包括自动标注结果获取接口M；
自动标注结果获取接口M调用时需要传入7个参数：type、picPath、resPath、picType、resType、content、model，其中picPath、resPath，和model为必填，其他4个参数均含默认值，不传参数时均取默认值；
type为标注对象类型，传入1-3的整数，分别对应不同的视频类型；
picPath为视频读取路径，是必填参数，需要填入处理的视频集的路径；
resPath为标注结果存储路径，是必填参数，需要填入存储结果的路径；
picType为生成的图片集类型；
resType为生成的标注结果类型；
content为标注内容选项；
model为算法模型的全路径，是必填参数。
7.根据权利要求4或5任一项所述的一种基于自动标注的自动化测试分析方法，其特征在于，自动化测试分析系统的结果根据API接口文档，支持接口对外开放；自动化测试分析系统包括自动汇总结果获取接口N，该接口N调用时需要传入4个参数：type、Path、resType、content，其中Path参数为必填，其他3个参数均含默认值，不传参数时均取默认值；
type为汇总维度，传入1-6的整数，分别对应：1：按城市，2：按车型，3：按车辆前后门，4：按时间，5：按班次，6：按上下客，默认值为1；
path为汇总结果路径，是必填参数；
resType为汇总结果类型；
content为汇总内容。
8.根据权利要求4或5任一项所述的一种基于自动标注的自动化测试分析方法，其特征在于，自动化测试分析系统的结果根据API接口文档，支持接口对外开放；自动化测试分析系统包括自动分析结果获取接口O，该接口O调用时使用GET方法，不需要传入参数，即可调用该接口获取自动分析模块的生成结果。
9.根据权利要求4或5任一项所述的一种基于自动标注的自动化测试分析方法，其特征在于，该自动化测试分析方法，可实时展示执行日志、当前执行任务内容、执行进度、执行成功或失败情况。
10.一种终端设备，其特征在于，该终端设备包括权利要求1-3任一项所述一种基于自动标注的自动化测试分析系统。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010705244.5A CN114036036A (zh) | 2020-07-21 | 2020-07-21 | 一种基于自动标注的自动化测试分析系统、方法及终端设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010705244.5A CN114036036A (zh) | 2020-07-21 | 2020-07-21 | 一种基于自动标注的自动化测试分析系统、方法及终端设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN114036036A true CN114036036A (zh) | 2022-02-11 |
Family
ID=80134074
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010705244.5A Withdrawn CN114036036A (zh) | 2020-07-21 | 2020-07-21 | 一种基于自动标注的自动化测试分析系统、方法及终端设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114036036A (zh) |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102999417A (zh) * | 2012-11-14 | 2013-03-27 | 迈普通信技术股份有限公司 | 自动化测试管理系统及方法 |
| CN105404896A (zh) * | 2015-11-03 | 2016-03-16 | 北京旷视科技有限公司 | 标注数据处理方法和标注数据处理系统 |
| CN108491328A (zh) * | 2018-03-27 | 2018-09-04 | 四川长虹电器股份有限公司 | 一种基线测试报告自动化处理系统及方法 |
| US20180307594A1 (en) * | 2015-10-20 | 2018-10-25 | China Electric Power Research Institute Company Limited | System, method and storage device for cim/e model standard compliance test |
| CN109815882A (zh) * | 2019-01-21 | 2019-05-28 | 南京行者易智能交通科技有限公司 | 一种基于图像识别的地铁车厢客流密度监控系统及方法 |
| CN110798445A (zh) * | 2019-09-12 | 2020-02-14 | 中国平安财产保险股份有限公司 | 公共网关接口测试方法、装置、计算机设备及存储介质 |
| CN111160380A (zh) * | 2018-11-07 | 2020-05-15 | 华为技术有限公司 | 生成视频分析模型的方法及视频分析系统 |
-
2020
- 2020-07-21 CN CN202010705244.5A patent/CN114036036A/zh not_active Withdrawn
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102999417A (zh) * | 2012-11-14 | 2013-03-27 | 迈普通信技术股份有限公司 | 自动化测试管理系统及方法 |
| US20180307594A1 (en) * | 2015-10-20 | 2018-10-25 | China Electric Power Research Institute Company Limited | System, method and storage device for cim/e model standard compliance test |
| CN105404896A (zh) * | 2015-11-03 | 2016-03-16 | 北京旷视科技有限公司 | 标注数据处理方法和标注数据处理系统 |
| CN108491328A (zh) * | 2018-03-27 | 2018-09-04 | 四川长虹电器股份有限公司 | 一种基线测试报告自动化处理系统及方法 |
| CN111160380A (zh) * | 2018-11-07 | 2020-05-15 | 华为技术有限公司 | 生成视频分析模型的方法及视频分析系统 |
| CN109815882A (zh) * | 2019-01-21 | 2019-05-28 | 南京行者易智能交通科技有限公司 | 一种基于图像识别的地铁车厢客流密度监控系统及方法 |
| CN110798445A (zh) * | 2019-09-12 | 2020-02-14 | 中国平安财产保险股份有限公司 | 公共网关接口测试方法、装置、计算机设备及存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107179324B (zh) | 检测产品包装的方法、装置和系统 | |
| CN103376380B (zh) | 一种测试系统及方法 | |
| CN110490181B (zh) | 一种基于ocr识别技术的表单填写审核方法、装置、设备以及计算机存储介质 | |
| CN105808416A (zh) | 一种人机图形交互界面的自动化测试方法和系统 | |
| CN109697160A (zh) | 一种以太网接口软件自动化测试系统及方法 | |
| CN101778307A (zh) | 机顶盒功能测试装置 | |
| CN115357501B (zh) | 航天测控软件的自动化测试方法和系统 | |
| CN113891070A (zh) | 一种网络摄像机延迟时间的测量方法和装置 | |
| CN111309791A (zh) | 一种检测仪器数据自动采集方法 | |
| CN114943875A (zh) | 用于电缆元件识别的视觉分析方法 | |
| CN114036036A (zh) | 一种基于自动标注的自动化测试分析系统、方法及终端设备 | |
| CN106972983A (zh) | 网络接口的自动化测试装置及方法 | |
| CN113179195A (zh) | 一种can报文埋点检测方法、系统、装置及计算机可读存储介质 | |
| CN113947564A (zh) | 一种电力行业低压台区计量设备图像校验方法及系统 | |
| CN112837640A (zh) | 屏幕动态画面测试方法、系统、电子设备及存储介质 | |
| CN115017174B (zh) | 乘客信息系统的显示内容监测方法、系统及电子设备 | |
| CN111047731A (zh) | 一种基于ar技术的电信机房巡检方法及系统 | |
| CN112950059B (zh) | 智能车路系统监控设施工程质量管理用测试系统及方法 | |
| CN113923443A (zh) | 一种网络录像机测试方法、装置及计算机可读存储介质 | |
| CN115222276A (zh) | 竞品分析评估方法及竞品分析评估装置 | |
| CN114218078A (zh) | 一种ui页面测试方法、装置、设备及可读存储介质 | |
| CN111929034B (zh) | 一种基于pos机型号的屏幕缺陷自动化测试方法 | |
| CN110108448B (zh) | 一种动态logo的缺陷自动检测方法 | |
| CN114005054A (zh) | 一种ai智能评分系统 | |
| CN106157337B (zh) | 图片分析方法及分析系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WW01 | Invention patent application withdrawn after publication |
Application publication date: 20220211 |