CN112954257B - 一种视频会议的自动化校验方法及其系统 - Google Patents

Abstract

本发明提供了一种视频会议的自动化校验方法，所述方法为：步骤S1、视频会议终端等待接收服务端下发的命令，视频会议终端收到命令执行对应的命令；步骤S2、管理当前注册的视频会议终端信息，同时创建并管理调度任务内容；步骤S3、执行某个任务时服务端下发调度命令，通过配置好的调度任务内容，下发对应命令到对应的视频会议终端去执行命令操作，来实现模拟多终端进入会议的过程；步骤S4、任务完成后，会记录各个视频会议终端在会议过程中的一些执行信息及状态，统一汇总并生成一份报告。

Description

一种视频会议的自动化校验方法及其系统

技术领域

本发明涉及计算机通讯技术领域，特别是一种视频会议的自动化校验方法及其系统。

背景技术

随着互联网的快速发展和科技进步，视频会议系统的普及已慢慢的渗入到各行各业，使得视频会议系统的发展达到一个新高度，普遍应用在互联网、教育等行业。对于测试人员，视频会议的测试方法将成为当前测试领域中的一个重点研究方向，但是目前视频会议校验的方式主要仍是通过人工进行会议模拟的方式进行。

现有的校验方式存在如下缺点：缺点一，通过人工进行会议模拟多人会议交互的时候，会耗费较大的人力。其中由于涉及到多人会议，进行功能测试的时候，往往需要多个人员进行互动，一个人根本无法应对此类场景，与此同时，如果真实的安排较多人的来进行交互测试，测试成本就会明显提高。

缺点二，通过人工进行测试多人视频交互的时候，如果涉及到较多终端的模拟测试，通常会占用较多的设备，全部通过真实设备进行会议的话，需要同时足够多的设备支撑，而一般情况下，每个测试人员所分配的测试资源是有限的。

缺点三，音视频通讯过程中涉及到语音的交互，但是如果设备之间间隔的距离太短，会出现明显的回声杂音。往往需要间隔一段的距离进行语音交互测试，而这部分语音输出通过人工的话，双方并不能很好的预估对方的语音输入内容。

缺点四，业内也有通过使用UI自动化来实现自动化入会、退出等操作模拟的场景，但是常规的自动化无法实现不同端之间的交互。当需要同时控制安卓、IOS、web、window等进行多端交互的时候，仍旧需要进行人工的干预。

发明内容

为克服上述问题，本发明的目的是提供一种视频会议的自动化校验方法，在没有资源限制的情况下，可以实现大规模的在线用户会议模拟，可以作为性能测试方案，由于基于真实待测软件，其性能测试的结果更具有效性。

本发明采用以下方案实现：一种视频会议的自动化校验方法，所述方法包括如下步骤：

步骤S1、视频会议终端等待接收服务端下发的命令，视频会议终端收到命令执行对应的命令；

步骤S2、管理当前注册的视频会议终端信息，同时创建并管理调度任务内容；

步骤S3、执行某个任务时服务端下发调度命令，通过配置好的调度任务内容，下发对应命令到对应的视频会议终端去执行命令操作，来实现模拟多终端进入会议的过程；

步骤S4、任务完成后，会记录各个视频会议终端在会议过程中的一些执行信息及状态，统一汇总并生成一份报告。

进一步的，所述步骤S1进一步包括：视频会议终端进行初始化，该初始化具体为：视频会议终端执行程序后，程序会开始检测当前运行终端上是否存在安卓设备，并将对应的安卓设备加入到当前终端的设备列表中；继续检测是否存在IOS设备，是，则加入当前终端的设备列表中；继续检测终端的window上是否存在待测试的视频软件，是，则加入当前终端的设备列表中；向服务端发送当前服务的设备情况；终端开始定时检测当前运行终端的设备在线情况，并提供一个给服务端中心查询设备在线情况的接口api1，该接口api1作用在于服务端中心下发命令前做设备状态校验使用，避免由于设备环境问题导致执行异常。

进一步的，所述步骤S1进一步包括：视频会议终端进行初始化后，再进行解析请求操作，该解析请求操作具体为：每个运行终端都是一个独立可执行的接口服务，以flask作为框架对外提供接口服务，接口服务包含设备在线信息获取接口api1、命令执行请求接口api2、脚本更新请求、视频会议流程执行进度查询、以及任务结果查询；

当接口api1被请求到的时候，将返回终端的一个设备在线情况，由服务端中心更新设备状态；当接口api2被请求到的时候，服务端将解析请求中的内容，找到需要调用设备并启动进一步执行命令，并返回服务端中心，告知当前设备已开始运行，不再提供给其他任务调度；当任务完成之后，能通过查询接口api5获得本地的程序执行结果，执行结果包含每个步骤的截图、日志信息。

进一步的，所述步骤S2进一步包括：管理当前注册的视频会议终端信息，终端信息包括终端id、终端IP、终端平台信息platform、终端平台扩展信息info、在线状态state、以及离线时间leave_time；当有一个终端进行安装部署的时候，服务端会记录当前终端的对应信息入库，并定时和访问每个终端的当前信息，对应地进行信息的更新；其中，创建待执行的调度任务，具体为：选择设备列表中一个在线的设备，然后配置设备需要执行的行为命令；命令包括进入会议、退出会议、开启摄像头、关闭摄像头、打开麦克风、关闭麦克风、说话、创建会议、延时命令；一个设备的执行命令按照自定义的流程进行增加，变成一个类似于视频会议流程的过程，等完成调度任务配置之后，进行保存；一个调度任务能添加多个设备进行执行；当完成设备配置之后，就能选择保存任务。

进一步的，所述步骤S3进一步包括：设置一个异常终端补全的能力开关，执行某个任务时服务端下发调度命令，即下发调度任务到对应的终端设备；同时下发当前任务下的视频会议流程到每个设备上，并在后台更新当前的一个执行情况，此后页面每次刷新就会向对应的终端查询视频会议流程的进展，并在页面上显示对应的情况概览；当下发请求时候发现终端如果服务异常，如果开启了所述异常终端补全的功能，那么程序会自动去查询当前其他相同类型且还在线的终端，并下发命令到对应的新终端上，继续执行测试任务；

当执行的时候取到了能用的设备，终端会反馈该设备被成功下发命令，服务端中心就将对应的终端设备的使用状态记录为执行中，以便于其他任务不会选中该设备；当对应任务完成的时候，服务端中心就会查询一次当前任务完成的具体情况，其中终端服务会返回本次任务运行的日志、截图及执行位置情况；当子任务执行，会将该终端设备的状态修改为闲置中，表示结束当前的执行，同时后台该任务下会显示对应的终端设备已完成测试；如果全部子任务执行完成，则会标志已全部完成，并显示对应的报告生成结果。

进一步的，所述步骤S4进一步包括：当完成任务执行之后，程序会汇总一些执行概况，该执行概况包含子任务完成通过率、运行时间、异常情况；能跳转查阅某个子任务的完成情况，能直接查阅该步骤产生的日志以及截图；最后，发起推送通知到具体的负责人。

进一步的，所述视频会议终端去执行命令具体为：根据服务端下发数据中的平台类型，启动对应平台的自动化脚本，其中支持安卓、IOS、终端PC机三端的自动化脚本；其中安卓和IOS的自动化脚本以appium框架来实现、终端PC机的window的自动化脚本则以uiautomation框架实现、web端的自动化脚本以selenium框架实现；服务端下发的行为支持安卓、IOS、终端PC机的每个平台；每个行为信息都将以字典的方式进行入参并执行；视频会议流程中的说话是通过调用tts语音合成的方式里实现的语音播放，其中在硬件上会配置一个音响，通过tts语音播放，被待测系统的麦克风采集，从而实现模拟人为说话的场景；当完成服务端下发的视频会议流程内容，终端会告知服务端中心，该设备已经转为空闲，能供其他任务调用了。

本发明还提供了一种视频会议的自动化校验系统，所述系统包括终端执行模块、数据管理模块、任务调度模块、以及报告管理模块；

所述终端执行模块，用于视频会议终端等待接收服务端下发的命令，视频会议终端收到命令执行对应的命令；

所述数据管理模块，管理当前注册的视频会议终端信息，同时创建并管理调度任务内容；

所述任务调度模块，执行某个任务时服务端下发调度命令，通过配置好的调度任务内容，下发对应命令到对应的视频会议终端去执行命令操作，来实现模拟多终端进入会议的过程；

所述报告管理模块，用于任务完成后，会记录各个视频会议终端在会议过程中的一些执行信息及状态，统一汇总并生成一份报告。

进一步的，所述终端执行模块的实现方式进一步包括：视频会议终端进行初始化，该初始化具体为：视频会议终端执行程序后，程序会开始检测当前运行终端上是否存在安卓设备，并将对应的安卓设备加入到当前终端的设备列表中；继续检测是否存在IOS设备，是，则加入当前终端的设备列表中；继续检测终端的window上是否存在待测试的视频软件，是，则加入当前终端的设备列表中；向服务端发送当前服务的设备情况；终端开始定时检测当前运行终端的设备在线情况，并提供一个给服务端中心查询设备在线情况的接口api1，该接口api1作用在于服务端中心下发命令前做设备状态校验使用，避免由于设备环境问题导致执行异常。

进一步的，所述终端执行模块的实现方式进一步包括：视频会议终端进行初始化后，再进行解析请求操作，该解析请求操作具体为：每个运行终端都是一个独立可执行的接口服务，以flask作为框架对外提供接口服务，接口服务包含设备在线信息获取接口api1、命令执行请求接口api2、脚本更新请求、视频会议流程执行进度查询、以及任务结果查询；

当接口api1被请求到的时候，将返回终端的一个设备在线情况，由服务端中心更新设备状态；当接口api2被请求到的时候，服务端将解析请求中的内容，找到需要调用设备并启动进一步执行命令，并返回服务端中心，告知当前设备已开始运行，不再提供给其他任务调度；当任务完成之后，能通过查询接口api5获得本地的程序执行结果，执行结果包含每个步骤的截图、日志信息。

进一步的，所述数据管理模块进一步包括终端数据管理单元和任务数据管理单元，所述终端数据管理单元，用于管理当前注册的视频会议终端信息，终端信息包括终端id、终端IP、终端平台信息platform、终端平台扩展信息info、在线状态state、以及离线时间leave_time；当有一个终端进行安装部署的时候，服务端会记录当前终端的对应信息入库，并定时和访问每个终端的当前信息，对应地进行信息的更新；其中，任务数据管理单元，用于选择设备列表中一个在线的设备，然后配置设备需要执行的行为命令；命令包括进入会议、退出会议、开启摄像头、关闭摄像头、打开麦克风、关闭麦克风、说话、创建会议、延时命令；一个设备的执行命令按照自定义的流程进行增加，变成一个类似于视频会议流程的过程，等完成调度任务配置之后，进行保存；一个调度任务能添加多个设备进行执行；当完成设备配置之后，就能选择保存任务。

进一步的，所述任务调度模块的实现方式进一步包括：设置一个异常终端补全的能力开关，执行某个任务时服务端下发调度命令，即下发调度任务到对应的终端设备；同时下发当前任务下的视频会议流程到每个设备上，并在后台更新当前的一个执行情况，此后页面每次刷新就会向对应的终端查询视频会议流程的进展，并在页面上显示对应的情况概览；当下发请求时候发现终端如果服务异常，如果开启了所述异常终端补全的功能，那么程序会自动去查询当前其他相同类型且还在线的终端，并下发命令到对应的新终端上，继续执行测试任务；

当执行的时候取到了能用的设备，终端会反馈该设备被成功下发命令，服务端中心就将对应的终端设备的使用状态记录为执行中，以便于其他任务不会选中该设备；当对应任务完成的时候，服务端中心就会查询一次当前任务完成的具体情况，其中终端服务会返回本次任务运行的日志、截图及执行位置情况；当子任务执行，会将该终端设备的状态修改为闲置中，表示结束当前的执行，同时后台该任务下会显示对应的终端设备已完成测试；如果全部子任务执行完成，则会标志已全部完成，并显示对应的报告生成结果。

进一步的，所述报告管理模块的实现方式进一步包括：当完成任务执行之后，程序会汇总一些执行概况，该执行概况包含子任务完成通过率、运行时间、异常情况；能跳转查阅某个子任务的完成情况，能直接查阅该步骤产生的日志以及截图；最后，发起推送通知到具体的负责人。

进一步的，所述视频会议终端去执行命令具体为：根据服务端下发数据中的平台类型，启动对应平台的自动化脚本，其中支持安卓、IOS、终端PC机三端的自动化脚本；其中安卓和IOS的自动化脚本以appium框架来实现、终端PC机的window的自动化脚本则以uiautomation框架实现、web端的自动化脚本以selenium框架实现；服务端下发的行为支持安卓、IOS、终端PC机的每个平台；每个行为信息都将以字典的方式进行入参并执行；视频会议流程中的说话是通过调用tts语音合成的方式里实现的语音播放，其中在硬件上会配置一个音响，通过tts语音播放，被待测系统的麦克风采集，从而实现模拟人为说话的场景；当完成服务端下发的视频会议流程内容，终端会告知服务端中心，该设备已经转为空闲，能供其他任务调用了。

本发明的有益效果在于：1、通过本专利提供的方式进行视频会议的测试校验，测试人员可以实现单个人控制安卓、IOS、PC机等多个终端入会。

2、通过本专利提供的方式进行视频会议测试，测试人员可以实现远程控制不同位置的终端进入会议进行开会。

3、通过本专利提供的方式进行视频会议测试，可以实现多个会议的同时进行，可以模拟多会议，多用户的一个场景测试。

4、通过本专利提供的报告统计，可以快速分析出每个会议室中的一个会议过程情况，可以检测到每个终端的一个运行情况。

5、通过本专利提供的报告，可以快速的判断每个版本优化之后对应性能响应上的一个变化，为项目在性能方面是否需要增加硬件投入或优化算法提供依据。

6、通过本专利提供的更新脚本方法，只要在服务端中心更新一份最新脚本，就可以通过命令下发的方式，更新所有终端的执行脚本。

7、通过本专利提供的会议自动化测试的方式，可以实现全天候24小时模拟开会，可以发现更多稳定性上的问题。

8、通过本专利提供的视频会议自动化测试方式，在没有资源限制的情况下，可以实现大规模的在线用户会议模拟，可以作为性能测试方案，由于基于真实待测软件，其性能测试的结果更具有效性。

附图说明

图1是本发明的方法流程示意图。

图2是本发明的系统原理框图。

图3是本发明的终端执行模块的工作原理图。

图4是本发明的数据管理模块的工作原理图。

图5是本发明的任务调度模块的工作原理图。

图6是本发明的报告管理模块的工作原理图。

具体实施方式

下面结合附图对本发明做进一步说明。

请参阅图1所示，本发明的一种视频会议的自动化校验方法，所述方法包括如下步骤：

步骤S1、视频会议终端等待接收服务端下发的命令，视频会议终端收到命令执行对应的命令；

步骤S2、管理当前注册的视频会议终端信息，同时创建并管理调度任务内容；

步骤S3、执行某个任务时服务端下发调度命令，通过配置好的调度任务内容，下发对应命令到对应的视频会议终端去执行命令操作，来实现模拟多终端进入会议的过程；所述视频会议终端去执行命令具体为：根据服务端下发数据中的平台类型，启动对应平台的自动化脚本，其中支持安卓、IOS、终端PC机三端的自动化脚本；其中安卓和IOS的自动化脚本以appium框架来实现、终端PC机的window的自动化脚本则以uiautomation框架实现、web端的自动化脚本以selenium框架实现；服务端下发的行为支持安卓、IOS、终端PC机的每个平台；每个行为信息都将以字典的方式进行入参并执行；视频会议流程中的说话是通过调用tts语音合成的方式里实现的语音播放，其中在硬件上会配置一个音响，通过tts语音播放，被待测系统的麦克风采集，从而实现模拟人为说话的场景；当完成服务端下发的视频会议流程内容，终端会告知服务端中心，该设备已经转为空闲，能供其他任务调用了。

步骤S4、任务完成后，会记录各个视频会议终端在会议过程中的一些执行信息及状态，统一汇总并生成一份报告。

其中，所述步骤S1进一步包括：视频会议终端进行初始化，该初始化具体为：视频会议终端执行程序后，程序会开始检测当前运行终端上是否存在安卓设备，并将对应的安卓设备加入到当前终端的设备列表中；继续检测是否存在IOS设备，是，则加入当前终端的设备列表中；继续检测终端的window上是否存在待测试的视频软件，是，则加入当前终端的设备列表中；向服务端发送当前服务的设备情况；终端开始定时检测当前运行终端的设备在线情况，并提供一个给服务端中心查询设备在线情况的接口api1，该接口api1作用在于服务端中心下发命令前做设备状态校验使用，避免由于设备环境问题导致执行异常。

所述步骤S1进一步包括：视频会议终端进行初始化后，再进行解析请求操作，该解析请求操作具体为：每个运行终端都是一个独立可执行的接口服务，以flask作为框架对外提供接口服务，接口服务包含设备在线信息获取接口api1、命令执行请求接口api2、脚本更新请求、视频会议流程执行进度查询、以及任务结果查询；

当接口api1被请求到的时候，将返回终端的一个设备在线情况，由服务端中心更新设备状态；当接口api2被请求到的时候，服务端将解析请求中的内容，找到需要调用设备并启动进一步执行命令，并返回服务端中心，告知当前设备已开始运行，不再提供给其他任务调度；当任务完成之后，能通过查询接口api5获得本地的程序执行结果，执行结果包含每个步骤的截图、日志信息。

所述步骤S2进一步包括：管理当前注册的视频会议终端信息，终端信息包括终端id、终端IP、终端平台信息platform、终端平台扩展信息info、在线状态state、以及离线时间leave_time；当有一个终端进行安装部署的时候，服务端会记录当前终端的对应信息入库，并定时和访问每个终端的当前信息，对应地进行信息的更新；其中，创建待执行的调度任务，具体为：选择设备列表中一个在线的设备，然后配置设备需要执行的行为命令；命令包括进入会议、退出会议、开启摄像头、关闭摄像头、打开麦克风、关闭麦克风、说话、创建会议、延时命令；一个设备的执行命令按照自定义的流程进行增加，变成一个类似于视频会议流程的过程，等完成调度任务配置之后，进行保存；一个调度任务能添加多个设备进行执行；当完成设备配置之后，就能选择保存任务。

其中，所述步骤S3进一步包括：设置一个异常终端补全的能力开关，执行某个任务时服务端下发调度命令，即下发调度任务到对应的终端设备；同时下发当前任务下的视频会议流程到每个设备上，并在后台更新当前的一个执行情况，此后页面每次刷新就会向对应的终端查询视频会议流程的进展，并在页面上显示对应的情况概览；当下发请求时候发现终端如果服务异常，如果开启了所述异常终端补全的功能，那么程序会自动去查询当前其他相同类型且还在线的终端，并下发命令到对应的新终端上，继续执行测试任务；

当执行的时候取到了能用的设备，终端会反馈该设备被成功下发命令，服务端中心就将对应的终端设备的使用状态记录为执行中，以便于其他任务不会选中该设备；当对应任务完成的时候，服务端中心就会查询一次当前任务完成的具体情况，其中终端服务会返回本次任务运行的日志、截图及执行位置情况；当子任务执行，会将该终端设备的状态修改为闲置中，表示结束当前的执行，同时后台该任务下会显示对应的终端设备已完成测试；如果全部子任务执行完成，则会标志已全部完成，并显示对应的报告生成结果。

另外，所述步骤S4进一步包括：当完成任务执行之后，程序会汇总一些执行概况，该执行概况包含子任务完成通过率、运行时间、异常情况；能跳转查阅某个子任务的完成情况，能直接查阅该步骤产生的日志以及截图；最后，发起推送通知到具体的负责人。

请参阅图2所示，本发明的一种视频会议的自动化校验系统，所述系统包括终端执行模块、数据管理模块、任务调度模块、以及报告管理模块；

所述终端执行模块，用于视频会议终端等待接收服务端下发的命令，视频会议终端收到命令执行对应的命令；

所述数据管理模块，管理当前注册的视频会议终端信息，同时创建并管理调度任务内容；

所述任务调度模块，执行某个任务时服务端下发调度命令，通过配置好的调度任务内容，下发对应命令到对应的视频会议终端去执行命令操作，来实现模拟多终端进入会议的过程；

所述报告管理模块，用于任务完成后，会记录各个视频会议终端在会议过程中的一些执行信息及状态，统一汇总并生成一份报告。

下面结合一具体实施例对本发明作进一步说明：

通过系统业务平台化管理(详见图2系统业务图)，实现以下模块的统一管理：1、终端执行模块、2、数据管理模块、3、任务调度模块、4、报告管理模块。首先，终端执行模块指的是具体执行会议命令的终端(根据服务下发的命令调度指定的设备执行对应的操作，具体如：调用安卓手机登陆指定账号进入指定会议室)，再则业务后台上可以创建任务，配置指定的终端需要进入的对应会议室；然后由任务调度模块执行调度，下发终端去执行对应的命令，实现模拟多终端入会的过程；最后，报告管理模块，记录各个终端在会议过程中的一些执行信息及状态，统一汇总并生成一份报告。

本发明的一种视频会议的自动化校验系统，所述系统包括终端执行模块、数据管理模块、任务调度模块、以及报告管理模块四个模块。其中【终端执行模块】负责接收服务端下发命令，并执行对应的命令；【数据管理模块】则负责管理当前注册的终端信息，同时用于创建并管理调度任务；而【任务调度模块】即执行某个任务时候用于下发调度命令的，通过配置好的任务内容，下发对应命令到对应的终端；最后当任务完成之后，每个终端会汇报此次的执行结果，并由【报告管理模块】进行统一的汇报呈现。

【终端执行模块】(详见图3)，该终端执行模块为一个单击可执行的exe程序。其中终端主要功能包含3个方面，分别是：初始化、解析请求、执行命令。

1.1、首先，双击运行即可完成终端的初始化操作，具体为：

1.2、当双击系统程序后，程序会开始检测当前运行终端(即电脑)上是否存在安卓设备，并将对应的安卓设备加入到当前终端的设备列表中；

1.3、继上，继续检测是否存在IOS设备，是的话加入当前终端的设备列表中；

1.4、继上，继续检测当前终端的PC机window上是否存在待测试的视频软件，是的话加入当前终端的设备列表中；(即终端设备本身即为PC机)

1.5、继上，向服务端中心发送当前服务的设备情况；

1.6、继上，终端开始定时检测当前电脑的设备在线情况，并提供一个给服务端中心查询设备在线情况的接口api1，其作用在于服务端中心下发命令前做设备状态校验使用，避免由于设备环境问题导致执行异常。

2.1、再则，解析请求，具体为：

2.2、每个终端都是一个独立可执行的接口服务，本系统以flask作为框架(flask仅仅只是实现接口一个框架，可不局限于flask)，对外提供接口服务，其中包含①.设备在线信息获取接口api1、②.命令执行请求接口api2、③、脚本更新请求、④、视频会议流程(即类似剧本)执行进度查询、⑤、任务结果查询。以上api均以标准的restful规范，可接受服务端中心下发的接口请求。

2.3、当接口api1被请求到的时候，将返回终端的一个设备在线情况，由服务端中心更新设备状态；

2.4、当接口api2被请求到的时候，服务端将解析请求中的内容，找到需要调用设备并启动进一步执行命令(比如：下发的命令中要求的是执行安卓手机，且设备ID为number1，则启动安卓的自动化脚本程序，并执行对应的命令)，并返回服务端中心，告知当前设备已开始运行，不再提供给其他任务调度；

2.5、较优的，系统还提供接口api3，用于执行脚本更新的请求。毕竟待测的视频软件会有版本更新，可能有涉及到一些功能的新增，通过调用该接口，可以调度服务端中心指定的最新脚本地址，实现批量更新到终端，而无需人工一个个去更新系统(比如新增了一个摄像头切换的功能，原来脚本不支持该行为，需要更新最新的脚本，此时可以通过调用该接口来实现)；

2.6、较优的，系统还提供接口api4，用于服务端中心请求查询下发任务目前的完成情况，如表1任务，如果运行在6,就会返回{“action”：“say”，“id”：6}，告知服务端中心，目前执行在第六步，行为是say。

2.7、当任务完成之后，可以通过查询接口api5获得本地的程序执行结果，包含每个步骤的截图、日志等。

3.1、最后，执行命令，具体为：

3.2、根据服务端中心下发数据中的平台类型，启动对应平台的自动化脚本，支持安卓、IOS、PC机三端的自动化脚本。其中安卓和IOS的自动化脚本以appium框架来实现、window的自动化脚本则以uiautomation框架实现、web端的自动化脚本以selenium框架实现。

3.3、较优的，服务端下发的行为支持3.1中所包含的每个平台。每个行为信息都将以字典的方式进行入参并执行。比如下发一个登陆账号行为login，会提供对应的信息{“user”：“user”，“password”：“password”}，由每个终端写好的脚本方法进行对应的执行。终端执行命令包含但不局限于①、进入会议、②、退出会议、③、开启摄像头、④、关闭摄像头、⑤、打开麦克风、⑥、关闭麦克风、⑦、说话、⑧、创建会议⑨、延时等，以表1为例，执行的行为顺序即：登陆指定账号user、密码password，等待5秒后进入会议号123456，并打开麦克风、摄像头，说一句你好，然后关闭麦克风和摄像头，最后退出会议室。

3.4、较优的3.3中所述的说话，即表1中的say行为(word指配置的语料，type指音色)，是通过调用tts语音合成的方式里实现的语音播放，其中本系统在硬件上会配置一个音响，通过tts语音播放，被待测系统的麦克风采集，从而实现模拟人为说话的场景；

3.5、当完成服务端下发的视频会议流程(类似剧本)内容，终端会告知服务端中心，该设备已经转为空闲，可以供其他任务调用了。

id	action	info
			1	login	{“user”：“user”，“password”：“password”}
2	sleep	{“time”：5}
			3	in	{“room_id”：“123456”}
4	open_voice	{}
			5	open_video	{}
6	say	{“word”：“你好”，“type”：1}
			7	close_voice	{}
8	close_video	{}
			9	leave	{}

表1

【数据管理模块】(详见图4)，包含如下内容：

1、数据管理模块指的是服务端中心负责管理数据信息的模块，具体又分为【终端数据管理】和【任务数据管理】两个子单元；

2、其中，【终端数据管理】负责每个终端的信息管理(详见表2、包含但不局限于终端设备id-唯一表示、ip-电脑IP、platform-平台、info-平台扩展信息、state-在线状态、leave_time-离线时间)。首先，当有一个终端进行安装部署的时候，即完成【终端执行模块】中1.1-1.5环节后，服务端中心会记录当前终端的对应信息入库，并定时和访问每个终端的当前信息(即通过上文所描述的api1接口来获取更新数据)，对应地进行信息的更新。

表2

3、其中，【任务数据管理】负责创建待执行的任务。首先，选择一个在线的设备，然后配置设备需要执行的行为命令。命令包含但不局限于①、进入会议、②、退出会议、③、开启摄像头、④、关闭摄像头、⑤、打开麦克风、⑥、关闭麦克风、⑦、说话、⑧、创建会议⑨、延时等等。其中，对于需要配置参数的命令，需要用户填写对应的参数(比如：【进入会议室】的命令，会提供输入框用于填写会议号，同理，【说话】的命令需要输入需要说的话的内容，即表1所示内容)。

4、继上，一个设备的执行命令可以按照自定义的流程进行增加，变成一个类似于剧本的过程。比如：进入某个会议，打开麦克风，说你好，延迟1分钟，说再见，退出会议。当完成任务配置之后，可以保存。

5、继上，一个任务可以添加多个设备进行执行。较优的，系统提供一个复制其他设备的‘剧本’，便于用户可以快速的进行新的设备‘剧本’编辑。

6、当完成设备配置之后，就可以选择保存任务。

三、【终端调度模块】(详见图5)，包含如下内容：

1、当点击任务执行模块，即由终端调度模块来下发执行任务到对应的终端设备，较优的是，系统在执行模块的时候会提供一个【异常终端补全】的能力开关(具体作用会在下文功能使用时候介绍)；

2、首先，调度模块会以此下发当前任务下的‘剧本’到每个设备上，并在后台更新当前的一个执行情况，此后页面每次刷新就会向对应的终端查询‘剧本’的进展，并在页面上显示对应的情况概览。

4、继上，较优的，当下发请求时候发现终端如果服务异常(比如：5**，请求不上)，如果开启了【异常终端补全】的功能，那么程序会自动去查询当前其他相同类型且还在线的终端，并该下发命令到对应的新终端上，继续执行测试任务(简单举例：当任务调度原来指定的安卓A设备所在服务出现异常(如：关机、或者所在运行环境的服务器故障)，那么程序会找到其他(闲置中)的终端设备，例如找到安卓B，会继续检测安卓B是否有问题，如果是，接着查安卓C，同理直到查到由可调用的设备，或者是全部没有，则记录该异常)；

5、继上，当执行的时候取到了可以用的设备，同【终端执行模块】下2.4，终端会反馈该设备被成功下发命令，服务端中心就将对应的终端设备的使用状态记录为(执行中)，以便于其他任务不会选中该设备；

6、继上，当对应任务完成的时候，服务端中心就会查询一次当前任务完成的具体情况，其中终端服务会返回本次任务运行的日志、截图及执行位置情况；

7、继上，当子任务执行，会将该终端设备的状态修改为(闲置中)，表示结束当前的执行，同时后台该任务下会显示对应的终端设备已完成测试(即：显示1个已完成，2个执行中)。

8、继上，如果全部子任务执行完成，则会标志已全部完成，并显示对应是报告生成结果。

四、【报告管理模块】(详见图6)，包含如下内容：

1、首先，当完成任务执行之后，程序会汇总一些执行概况，包含子任务完成通过率、运行时间、异常情况等；

2、具体的，可以跳转查阅某个子任务的完成情况，比如运行中某个行为时候出现崩溃，则可以直接查阅该步骤产生的日志以及截图；

3、最后，发起推送通知到具体的负责人。

本发明的具体应用场景如下：

场景一：

同学小A负责一个视频会议测试系统，目前团队只有3个测试人员(包含小A之外，还有执行测试小B和小C)。起初测试点对点视频会议的时候两个人尚且可以较为顺利的完成测试场景。后来随着业务线的变更，需要除了点对点会议，还需要支持多对多的会议测试场景。小A作为负责人，为了覆盖对应点测试场景，申请了一波的设备。但是测试过程中小B和小C由于坐的太近了，进入视频会议的时候，只要开麦，就会导致出现杂音，期间遭到了同事的投诉，无奈之下，小B和小C测试的时候，总是一个人跑去会议室，或者是其他地方，避免距离太近而导致出现回音，但是由于视频会议测试是需要有一定的协同交互测试，两个人不坐在一起，也容易导致消息同步的不及时。

通过本专利的方案，小A在不同位置的工位部署对应的设备，只需要提前编写号对应的剧本脚本，通过下发任务到对应的终端，就可以进行多机交互的场景测试。与此同时，也解决了由于距离太近而导致的噪音问题。

场景二：

测试同学小A和小B一起负责一个视频会议项目的测试，其中小A有一天请假了，此时小B的测试工作就显得非常尴尬，因为自己一个人无法与自己进行视频通话，尤其是在声音方面，无法测试对话的语音是否流畅等。

通过本专利的方案，同学小A只需要在后台配置一个终端设备，并配置该设备进入到指定的会议室中，并调用say的方法，播放提前配置好的语料，自己就可以听到设备模拟出来的声音效果，摆脱了一个人无法进行对话交互的局限性。

场景三：

测试同学小A和小B所负责的视频会议项目测试中，发现当多端同时在会议中持续开会较长时间后(比如：3小时)，会出现程序不稳定闪退等情况发生，但是由于视频会议的特殊性，小A和小B又不能为了一个BUG，投入太多的时间在复现bug上，但是又不得不复现。

通过本专利的方案，同学小A只需要配置一个多端交互的任务，比如：同时下发安排2个安卓、2个IOS及PC，并自定义会议中的行为剧本，放置着让程序自动去执行，模拟人为操作，等待任务执行完后，去查阅结果即可。

场景四：

测试同学小A和小B所负责的视频会议项目测试中，允许存在多人同时入会说话发言。但是测试同学只有2位，小A和小B最多只能模拟同时2个人在说话的场景(如果一个人操作2台设备放太近会有回声，所以一个人一般只能控制一台)。于是小A和小B就没有验证该场景的结果，最终出现超过3路音频流同时发声时候，其中1个人的声音听不到的问题，最终也导致小A和小B被项目责备。

通过本专利的方案，同学小A和小B只需要配置多个设备对应的语料，并配置不同的音色，并把这些设备全部安排在同一个会议室中，此时小A和小B也可以加入到该会议室中去感受多人混谈的情况，给出测试结果，避免漏测。

本专利的基于指定设备执行自定义剧本，支持不同平台的调用，其组合灵活性不局限于上述4个场景，其专利方案下可实现的场景组合均属于专利的保护范畴。

以上所述仅为本发明的较佳实施例，凡依本发明申请专利范围所做的均等变化与修饰，皆应属本发明的涵盖范围。

Claims (12)

1.一种视频会议的自动化校验方法，其特征在于：所述方法包括如下步骤：

步骤S1、视频会议终端等待接收服务端下发的命令，视频会议终端收到命令执行对应的命令；所述步骤S1进一步包括：视频会议终端进行初始化后，再进行解析请求操作，该解析请求操作具体为：每个运行终端都是一个独立可执行的接口服务，以flask作为框架对外提供接口服务，接口服务包含设备在线信息获取接口api1、命令执行请求接口api2、脚本更新请求、视频会议流程执行进度查询、以及任务结果查询；

当接口api1被请求到的时候，将返回终端的一个设备在线情况，由服务端中心更新设备状态；当接口api2被请求到的时候，服务端将解析请求中的内容，找到需要调用设备并启动进一步执行命令，并返回服务端中心，告知当前设备已开始运行，不再提供给其他任务调度；当任务完成之后，能通过查询接口api5获得本地的程序执行结果，执行结果包含每个步骤的截图、日志信息；

步骤S2、管理当前注册的视频会议终端信息，同时创建并管理调度任务内容；

步骤S3、执行某个任务时服务端下发调度命令，通过配置好的调度任务内容，下发对应命令到对应的视频会议终端去执行命令操作，来实现模拟多终端进入会议的过程；

步骤S4、任务完成后，会记录各个视频会议终端在会议过程中的一些执行信息及状态，统一汇总并生成一份报告。

2.根据权利要求1所述的一种视频会议的自动化校验方法，其特征在于：所述步骤S1进一步包括：视频会议终端进行初始化，该初始化具体为：视频会议终端执行程序后，程序会开始检测当前运行终端上是否存在安卓设备，并将对应的安卓设备加入到当前终端的设备列表中；继续检测是否存在IOS设备，是，则加入当前终端的设备列表中；继续检测终端的window上是否存在待测试的视频软件，是，则加入当前终端的设备列表中；向服务端发送当前服务的设备情况；终端开始定时检测当前运行终端的设备在线情况，并提供一个给服务端中心查询设备在线情况的接口api1，该接口api1作用在于服务端中心下发命令前做设备状态校验使用，避免由于设备环境问题导致执行异常。

3.根据权利要求1所述的一种视频会议的自动化校验方法，其特征在于：所述步骤S2进一步包括：管理当前注册的视频会议终端信息，终端信息包括终端id、终端IP、终端平台信息platform、终端平台扩展信息info、在线状态state、以及离线时间leave_time；当有一个终端进行安装部署的时候，服务端会记录当前终端的对应信息入库，并定时和访问每个终端的当前信息，对应地进行信息的更新；其中，创建待执行的调度任务，具体为：选择设备列表中一个在线的设备，然后配置设备需要执行的行为命令；命令包括进入会议、退出会议、开启摄像头、关闭摄像头、打开麦克风、关闭麦克风、说话、创建会议、延时命令；一个设备的执行命令按照自定义的流程进行增加，变成一个类似于视频会议流程的过程，等完成调度任务配置之后，进行保存；一个调度任务能添加多个设备进行执行；当完成设备配置之后，就能选择保存任务。

4.根据权利要求3所述的一种视频会议的自动化校验方法，其特征在于：所述步骤S3进一步包括：设置一个异常终端补全的能力开关，执行某个任务时服务端下发调度命令，即下发调度任务到对应的终端设备；同时下发当前任务下的视频会议流程到每个设备上，并在后台更新当前的一个执行情况，此后页面每次刷新就会向对应的终端查询视频会议流程的进展，并在页面上显示对应的情况概览；当下发请求时候发现终端如果服务异常，如果开启了所述异常终端补全的功能，那么程序会自动去查询当前其他相同类型且还在线的终端，并下发命令到对应的新终端上，继续执行测试任务；

当执行的时候取到了能用的设备，终端会反馈该设备被成功下发命令，服务端中心就将对应的终端设备的使用状态记录为执行中，以便于其他任务不会选中该设备；当对应任务完成的时候，服务端中心就会查询一次当前任务完成的具体情况，其中终端服务会返回本次任务运行的日志、截图及执行位置情况；当子任务执行，会将该终端设备的状态修改为闲置中，表示结束当前的执行，同时后台该任务下会显示对应的终端设备已完成测试；如果全部子任务执行完成，则会标志已全部完成，并显示对应的报告生成结果。

5.根据权利要求1所述的一种视频会议的自动化校验方法，其特征在于：所述步骤S4进一步包括：当完成任务执行之后，程序会汇总一些执行概况，该执行概况包含子任务完成通过率、运行时间、异常情况；能跳转查阅某个子任务的完成情况，能直接查阅该步骤产生的日志以及截图；最后，发起推送通知到具体的负责人。

6.根据权利要求1所述的一种视频会议的自动化校验方法，其特征在于：所述视频会议终端去执行命令具体为：根据服务端下发数据中的平台类型，启动对应平台的自动化脚本，其中支持安卓、IOS、终端PC机三端的自动化脚本；其中安卓和IOS的自动化脚本以appium框架来实现、终端PC机的window的自动化脚本则以uiautomation框架实现、web端的自动化脚本以selenium框架实现；服务端下发的行为支持安卓、IOS、终端PC机的每个平台；每个行为信息都将以字典的方式进行入参并执行；视频会议流程中的说话是通过调用tts语音合成的方式里实现的语音播放，其中在硬件上会配置一个音响，通过tts语音播放，被待测系统的麦克风采集，从而实现模拟人为说话的场景；当完成服务端下发的视频会议流程内容，终端会告知服务端中心，该设备已经转为空闲，能供其他任务调用了。

7.一种视频会议的自动化校验系统，其特征在于：所述系统包括终端执行模块、数据管理模块、任务调度模块、以及报告管理模块；

所述终端执行模块，用于视频会议终端等待接收服务端下发的命令，视频会议终端收到命令执行对应的命令；所述终端执行模块的实现方式进一步包括：视频会议终端进行初始化后，再进行解析请求操作，该解析请求操作具体为：每个运行终端都是一个独立可执行的接口服务，以flask作为框架对外提供接口服务，接口服务包含设备在线信息获取接口api1、命令执行请求接口api2、脚本更新请求、视频会议流程执行进度查询、以及任务结果查询；

当接口api1被请求到的时候，将返回终端的一个设备在线情况，由服务端中心更新设备状态；当接口api2被请求到的时候，服务端将解析请求中的内容，找到需要调用设备并启动进一步执行命令，并返回服务端中心，告知当前设备已开始运行，不再提供给其他任务调度；当任务完成之后，能通过查询接口api5获得本地的程序执行结果，执行结果包含每个步骤的截图、日志信息；

所述数据管理模块，管理当前注册的视频会议终端信息，同时创建并管理调度任务内容；

所述任务调度模块，执行某个任务时服务端下发调度命令，通过配置好的调度任务内容，下发对应命令到对应的视频会议终端去执行命令操作，来实现模拟多终端进入会议的过程；

所述报告管理模块，用于任务完成后，会记录各个视频会议终端在会议过程中的一些执行信息及状态，统一汇总并生成一份报告。

8.根据权利要求7所述的一种视频会议的自动化校验系统，其特征在于：所述终端执行模块的实现方式进一步包括：视频会议终端进行初始化，该初始化具体为：视频会议终端执行程序后，程序会开始检测当前运行终端上是否存在安卓设备，并将对应的安卓设备加入到当前终端的设备列表中；继续检测是否存在IOS设备，是，则加入当前终端的设备列表中；继续检测终端的window上是否存在待测试的视频软件，是，则加入当前终端的设备列表中；向服务端发送当前服务的设备情况；终端开始定时检测当前运行终端的设备在线情况，并提供一个给服务端中心查询设备在线情况的接口api1，该接口api1作用在于服务端中心下发命令前做设备状态校验使用，避免由于设备环境问题导致执行异常。

9.根据权利要求7所述的一种视频会议的自动化校验系统，其特征在于：所述数据管理模块进一步包括终端数据管理单元和任务数据管理单元，所述终端数据管理单元，用于管理当前注册的视频会议终端信息，终端信息包括终端id、终端IP、终端平台信息platform、终端平台扩展信息info、在线状态state、以及离线时间leave_time；当有一个终端进行安装部署的时候，服务端会记录当前终端的对应信息入库，并定时和访问每个终端的当前信息，对应地进行信息的更新；其中，任务数据管理单元，用于选择设备列表中一个在线的设备，然后配置设备需要执行的行为命令；命令包括进入会议、退出会议、开启摄像头、关闭摄像头、打开麦克风、关闭麦克风、说话、创建会议、延时命令；一个设备的执行命令按照自定义的流程进行增加，变成一个类似于视频会议流程的过程，等完成调度任务配置之后，进行保存；一个调度任务能添加多个设备进行执行；当完成设备配置之后，就能选择保存任务。

10.根据权利要求9所述的一种视频会议的自动化校验系统，其特征在于：所述任务调度模块的实现方式进一步包括：设置一个异常终端补全的能力开关，执行某个任务时服务端下发调度命令，即下发调度任务到对应的终端设备；同时下发当前任务下的视频会议流程到每个设备上，并在后台更新当前的一个执行情况，此后页面每次刷新就会向对应的终端查询视频会议流程的进展，并在页面上显示对应的情况概览；当下发请求时候发现终端如果服务异常，如果开启了所述异常终端补全的功能，那么程序会自动去查询当前其他相同类型且还在线的终端，并下发命令到对应的新终端上，继续执行测试任务；

当执行的时候取到了能用的设备，终端会反馈该设备被成功下发命令，服务端中心就将对应的终端设备的使用状态记录为执行中，以便于其他任务不会选中该设备；当对应任务完成的时候，服务端中心就会查询一次当前任务完成的具体情况，其中终端服务会返回本次任务运行的日志、截图及执行位置情况；当子任务执行，会将该终端设备的状态修改为闲置中，表示结束当前的执行，同时后台该任务下会显示对应的终端设备已完成测试；如果全部子任务执行完成，则会标志已全部完成，并显示对应的报告生成结果。

11.根据权利要求7所述的一种视频会议的自动化校验系统，其特征在于：所述报告管理模块的实现方式进一步包括：当完成任务执行之后，程序会汇总一些执行概况，该执行概况包含子任务完成通过率、运行时间、异常情况；能跳转查阅某个子任务的完成情况，能直接查阅该步骤产生的日志以及截图；最后，发起推送通知到具体的负责人。

12.根据权利要求7所述的一种视频会议的自动化校验系统，其特征在于：所述视频会议终端去执行命令具体为：根据服务端下发数据中的平台类型，启动对应平台的自动化脚本，其中支持安卓、IOS、终端PC机三端的自动化脚本；其中安卓和IOS的自动化脚本以appium框架来实现、终端PC机的window的自动化脚本则以uiautomation框架实现、web端的自动化脚本以selenium框架实现；服务端下发的行为支持安卓、IOS、终端PC机的每个平台；每个行为信息都将以字典的方式进行入参并执行；视频会议流程中的说话是通过调用tts语音合成的方式里实现的语音播放，其中在硬件上会配置一个音响，通过tts语音播放，被待测系统的麦克风采集，从而实现模拟人为说话的场景；当完成服务端下发的视频会议流程内容，终端会告知服务端中心，该设备已经转为空闲，能供其他任务调用了。

Images