CN115900754A - Ar设备性能测试方法及装置、计算机可读介质、电子设备 - Google Patents

Abstract

本公开具体涉及增强现实技术领域，具体涉及AR设备性能测试方法及装置、计算机可读介质以及电子设备。所述方法包括：获取任务触发指令；其中，所述任务触发指令包括：测试对象，以及测试环境需求数据；响应所述任务触发指令，创建所述测试对象对应的测试任务，并基于上述测试环境需求创建所述测试任务对应的配置文件；其中，所述配置文件包括：第一策略测试数据、第二策略测试数据和第三策略测试数据中的任意一项或任意多项的组合；根据所述配置文件执行所述测试任务，以获取所述测试对象的性能评价结果。本公开的技术方案能够提供高效的、完整的测试条件，进而能够使得对测试对象的定位性能测试的评价结果具有较高的准确度。

Description

AR设备性能测试方法及装置、计算机可读介质、电子设备

技术领域

本公开涉及增强现实技术领域，具体涉及一种AR设备性能测试方法、一种AR设备性能测试装置、一种计算机可读介质以及一种电子设备。

背景技术

对于增强现实设备来说，在对其性能进行测试时，现有技术一般需要在一定的测试条件和测试环境中，获取移动过程中的AR(Augmented Reality，增强现实)设备输出的位置与姿态信息，与测试环境中位姿获取设备获得的AR设备的高精度的位置与姿态测量信息相对比，计算相应的评估指标，从而实现定量评估AR设备的定位性能。然而，现有的基于上述方式的测试方法中，对于测试条件的描述较为模糊，测试过程无法充分模拟用户在使用AR设备时可能发生的移动模式及环境变化，从而导致测试结果精确度不高，或者不全面。

需要说明的是，在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。

发明内容

本公开提供一种AR设备性能测试方法、一种AR设备性能测试装置、一种计算机可读介质以及一种电子设备，能够根据实际需求构建高效的测试数据。

本公开的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本公开的实践而习得。

根据本公开的第一方面，提供一种AR设备性能测试方法，包括：

获取任务触发指令；其中，所述任务触发指令包括：测试对象，以及测试环境需求数据；

响应所述任务触发指令，创建所述测试对象对应的测试任务，并基于上述测试环境需求创建所述测试任务对应的配置文件；其中，所述配置文件包括：第一策略测试数据、第二策略测试数据和第三策略测试数据中的任意一项或任意多项的组合；

根据所述配置文件执行所述测试任务，以获取所述测试对象的性能评价结果。

根据本公开的第二方面，提供一种AR设备性能测试装置，包括：

指令接收模块，用于获取任务触发指令；其中，所述任务触发指令包括：测试对象，以及测试环境需求数据；

指令响应模块，用于响应所述任务触发指令，创建所述测试对象对应的测试任务，并基于上述测试环境需求创建所述测试任务对应的配置文件；其中，所述配置文件包括：第一策略测试数据、第二策略测试数据和第三策略测试数据中的任意一项或任意多项的组合；

测试执行模块，用于根据所述配置文件执行所述测试任务，以获取所述测试对象的性能评价结果。

根据本公开的第三方面，提供一种计算机可读介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述的AR设备性能测试方法。

根据本公开的第四方面，提供一种电子设备，包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器实现上述的AR设备性能测试方法。

本公开的一种实施例所提供的AR设备性能测试方法，通过根据测试对象的的不同测试需求，配置基于不同特性构建的包含不同数据特征的第一策略测试数据、第二策略测试数据和第三策略测试数据，并利用该些测试数据对测试对象进行测试，从而能够提供高效的、完整的测试条件，进而能够使得对测试对象的定位性能测试的评价结果具有较高的准确度。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1示意性示出本公开示例性实施例中一种AR设备性能测试方法的示意图；

图2示意性示出本公开示例性实施例中一种构建噪声参数查找表方法的示意图；

图3示意性示出本公开示例性实施例中一种圆形轨迹的示意图；

图4示意性示出本公开示例性实施例中一种直线轨迹的示意图；

图5示意性示出本公开示例性实施例中另一种M形轨迹的示意图；

图6示意性示出本公开示例性实施例中另一种zigzag轨迹的示意图；

图7示意性示出本公开示例性实施例中一种正方形轨迹的示意图；

图8示意性示出本公开示例性实施例中一种8字形轨迹的示意图；

图9示意性示出本公开示例性实施例中一种AR设备性能测试装置的组成示意图；

图10示意性示出本公开示例性实施例中一种电子设备的结构示意图。

具体实施方式

现在将参考附图更全面地描述示例实施方式。然而，示例实施方式能够以多种形式实施，且不应被理解为限于在此阐述的范例；相反，提供这些实施方式使得本公开将更加全面和完整，并将示例实施方式的构思全面地传达给本领域的技术人员。所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。

此外，附图仅为本公开的示意性图解，并非一定是按比例绘制。图中相同的附图标记表示相同或类似的部分，因而将省略对它们的重复描述。附图中所示的一些方框图是功能实体，不一定必须与物理或逻辑上独立的实体相对应。可以采用软件形式来实现这些功能实体，或在一个或多个硬件模块或集成电路中实现这些功能实体，或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。

在相关技术中，在对AR设备进行定位性能评估时，对于测试条件的限定相对较为模糊或过于宽泛，测试过程无法充分模拟用户在使用AR设备时可能发生的移动模式及环境变化，也无法模拟有可能出现的恶劣使用场景。从而导致对AR设备定位性能评估结果的不准确。

针对上述的现有技术的缺点和不足，本示例实施方式中提供了一种AR设备性能测试方法，应用于对AR设备进行定位性能的测试。参考图1中所示，上述的AR设备性能测试方法可以包括以下步骤：

S11，获取任务触发指令；其中，所述任务触发指令包括：测试对象，以及测试环境需求数据；

S12，响应所述任务触发指令，创建所述测试对象对应的测试任务，并基于上述测试环境需求创建所述测试任务对应的配置文件；其中，所述配置文件包括：第一策略测试数据、第二策略测试数据和第三策略测试数据中的任意一项或任意多项的组合；

S13，根据所述配置文件执行所述测试任务，以获取所述测试对象的性能评价结果。

本示例实施方式所提供的AR设备性能测试方法中，通过根据测试对象的的不同测试需求，配置基于不同特性构建的包含不同数据特征的第一策略测试数据、第二策略测试数据和第三策略测试数据，并利用该些测试数据对测试对象进行测试，一方面，能够提供高效的、完整的测试条件；另一方面，能够使得对测试对象的定位性能测试的评价结果具有较高的准确度。

下面，将结合附图及实施例对本示例实施方式中的AR设备性能测试方法的各个步骤进行更详细的说明。

在步骤S11中，获取任务触发指令；其中，所述任务触发指令包括：测试对象，以及测试环境需求数据。

本示例实施方式中，上述的AR设备的性能测试方法可以应用于一AR设备的性能测试系统。参考图2所示的系统架构，该性能测试系统可以包括：测试对象201、测试设备205，以及用户侧终端设备204、服务器203等。终端设备204和服务器203之间，以及终端设备204与测试对象201、测试设备205之间，均可以通过网络202进行数据传输。网络可以包括各种连接类型，例如有线通信链路、无线通信链路等等。举例来说，用户可以在用户侧终端设备向服务器端发送针对AR设备的性能测试请求；其中，该性能测试请求可以是上述的任务触发指令；或者，在一些示例实施方式中，也可以由终端设备实现服务器的功能。例如，可以在终端设备中布置一应用程序，用户通过输入设备在应用程序中输入任务触发指令后，可以由终端设备针对该任务触发请求创建对应的测试任务。

本示例实施方式中，为适应于上述的AR设备的性能测试系统，并在该测试系统中执行上述的AR设备性能测试方法，可以预先搭建测试环境。举例而言，测试环境可以包括测试场地，以及对应的场地环境参数。例如，测试场地的场地及其场地环境参数可以包括场地面积、环境光照、温度、湿度、压强等参数。并且，各参数可以配置有一定的数值范围。例如，场地面积可以是(3m×3m)-(5m×5m)的自由行走面积；光照强度可以实时控制；温度、湿度、压强稳定且数值区间较小；例如，温度为21℃-23℃。此外，在一些示例实施方式中，测试场地的底面可以配置有棋盘格。

此外，还可以对测试环境的环境参数进行配置。例如，环境参数可以包括内部环境参数和外部环境参数。其中，对于测试对象来说，其内部环境可以是指运行环境；例如安卓平台，以及对应的算法依赖库。外部环境可以是指增强现实设备运行所依赖的硬件。举例来说，可以首先确定测试对象配置的各传感器的内参和各传感器之间的外参，并进行精度可信度的硬件标定。其中，传感器可以包括被测试终端设备上装配的相机、IMU(惯性传感器)，等等。

本示例实施方式中，参考图2所示的系统架构，上述的测试对象可以是具备增强现实功能的手机、平板电脑、AR眼镜、AR头盔等智能设备。

在步骤S12中，响应所述任务触发指令，创建所述测试对象对应的测试任务，并基于上述测试环境需求创建所述测试任务对应的配置文件；其中，所述配置文件包括：第一策略测试数据、第二策略测试数据和第三策略测试数据中的任意一项或任意多项的组合；

本示例实施方式中，对于服务器端或者具备与服务器端相同计算能力的终端设备来说，在接收到该任务触发指令后，便可以针对该测试请求创建对应的测试任务，并创建对应的用于性能测试的配置文件。

举例来说，上述的任务触发指令可以包括测试对象的型号、系统信息、传感器型号以及标定信息，以及其他用户自定义的性能需求信息等等。例如，性能需求信息可以包括对部分极端环境或运行条件下的性能测试需求。基于任务触发指令中测试对象的相关参数，可以有针对性的为测试对象配置不同的测试数据，构建不同策略的测试数据。

在一些示例实施方式中，测试环境需求数据可以包括：测试场地尺寸信息。具体而言，可以根据所述测试对象对应的预设移动轨迹图形信息以及图像尺寸，结合所述测试场地尺寸信息构建所述第一策略测试数据；其中，所述第一策略测试数据包括：开环测试集和/或闭环测试集。

举例来说，上述的第一策略测试数据集中可以是抽象数据的测试数据集，测试对象根据该测试数据集的移动模式为简单的几何图案的移动具体的，根据运动轨迹是否闭合可以划分为开环测试集合闭环测试集。参考图3-图8所示，其中，开环测试集中，测试对象的移动轨迹线路可以包括：直线、M形、zigzag(锯齿形线条)形，等。闭环数据集中，可以包括：方形、圆形、8字形、长距离直线、长距离方形，等。

例如，对于开环测试集中的“直线”轨迹来说，参考图4所示，在测试场地中规划3m*3m的正方形，测试对象的移动轨迹可以是从正方形的一个顶点至对角的顶点，移动时视线方向沿着行进方向。

对于“M形”轨迹，参考图5所示，在测试场地中规划3m*3m的正方形，从正方形的一个顶点走到对边最短距离的四分之一点处，折返3次形成M形轨迹，移动时视线方向沿着行进方向。

对于“zigzag”轨迹，参考图6所示，在测试场地中规划3m*3m的正方形，从正方形的一个顶点走到对边最短距离的四分之一点处，折返3次形成M形轨迹，移动时视线方向保持不变，指向M形轨迹的终点方向。

对于闭环测试集中的“正方形”轨迹，参考图7所示，在测试场地中规划3m*3m的正方形，移动时视线方向沿着行进方向。

对于“圆形”轨迹，参考图3所示，在测试场地中规划直径3m的圆形，移动时视线方向沿着行进方向。

对于“8字形”轨迹，参考图8所示，在测试场地中规划两个正方形，为3m*3m正方形的两条中线与边组成的8字形，移动时视线方向沿着行进方向。

对于“长距离直线”轨迹，在测试场地中，可以沿直径3m的圆形行走两圈，然后走出测试场地，沿直线行走30m，再沿原路返回测试场地，回到测试场地后再沿直径3m的圆形行走两圈。

对于“长距离方形”轨迹，在测试场地沿直径3m的圆形行走两圈，然后走出测试场地，沿15m*15m的方形行走，并返回到测试场地，回到测试场地后再沿直径3m的圆形行走两圈。

此外，在各移动轨迹中，视线角度可以区分为平视与俯视。控制测试对象视线方向与水平线夹角分别为：约0度(平视)；约45度(俯视)。

另外，还可以配置测试终端在不同轨迹中的移动速度，例如控制测试终端移动速度分别为中速与快速。此外，可以要求在60秒内完成如下轨迹。具体的：

对于“M形”轨迹，配置其速度策略为：中速：1次M形轨迹；快速：2次M形轨迹。

对于“Zigzag”轨迹，配置其速度策略为：中速：1次M形轨迹；快速：2次M形轨迹。

对于“方形”轨迹，配置其速度策略为：中速：3圈；快速；5圈。

对于“圆形”轨迹，配置其速度策略为：中速：3圈；快速：6圈。

对于“8字形”轨迹，配置其速度策略为：中速：3圈；快速：5圈。

此外，对于每个拐点处应保证转弯时间在1秒以上。并尽可能使视野内有连贯的兴趣点。

至此，基于抽象数据的第一策略测试数据共有26组；极大的丰富了测试数据的内容和类型。

本示例实施方式中，还可以根据所述测试对象对应的预设动作对应的移动轨迹构建所述第二策略测试数据。

具体来说，可以模拟用户的真实使用场景，例如，模拟动作可以包括：点头、摆头、推拉、走、跑、跳、后退、桌面级虚拟物体跟踪、房间级虚拟物体跟踪。并为各动作配置对应的移动轨迹数据。具体的：

对于“点头”动作，可以配置移动轨迹为直径3m的圆形，移动时视线方向沿行进方向上下俯仰，在60秒内走两圈。

对于“摆头”动作，可以配置移动轨迹为直径3m的圆形，移动时视线方向沿行进方向左右摆动，在60秒内走两圈。

对于“推拉”动作，可以配置移动轨迹为直径3m的圆形，移动时视线方向沿行进方向前后推拉，在60秒内走两圈。

对于“走”的动作，可以配置移动轨迹为在3m*3m的场地中随意行走60秒、90秒与120秒。

对于“跑”的动作，可以配置移动轨迹为直径3m的圆形，在30秒内跑至少4圈。

对于“跳”的动作，可以配置移动轨迹为从3m*3m的正方形的一个顶点走到对角的顶点。走到中点时起跳，然后下蹲，再起跳，最后走到对角顶点。

对于“后退”的动作，可以配置移动轨迹为直径3m的圆形，移动时视线方向沿着行进方向，在60秒内倒走两圈。

对于“桌面级虚拟物体跟踪”，可以是在测试场地中央摆放桌子，桌子上摆放标准大小的3*3魔方一个，移动时视线环绕魔方移动60秒。

对于“房间级虚拟物体跟踪”，可以是轨迹为直径为3m的圆形，用A3纸张打印50mm*50mm棋盘格并摆放于场地中央，移动时视线环绕棋盘格移动60秒。

本示例实施方式中，可以根据所述测试对象对应的预设设备运动状态和/或环境变化策略构建所述第三策略测试数据。

具体来说，可以模拟不同类型的恶劣用户场景。例如，可以划分为与设备相关的恶劣场景，如长期静止、设备振动、设备跌落等；以及与外界环境相关的恶劣场景，如光照变化、视觉内容动态变化等。具体的：

对于“长期静止”场景，可以采用在测试场地中央摆放桌子，桌子上摆放用于固定的固定架，将增强现实设备分别沿三个轴放置于架子上静止300秒；例如，对于手机，可以按照Android或iOS定义的xyz方向分别摆放。静止时应保证视野中有较为丰富的视觉内容。

对于“设备振动”场景，可以是控制增强现实设备使其左右小幅振动30秒。振动时应保证视野中有较为丰富的视觉内容。

对于“设备跌落”场景，可以是在场地中央摆放桌子，桌子上摆放用于固定的架子，将增强现实设备从架子上拿起后，模拟自由掉落过程，然后放回架子的原位置。

对于“光照变化”场景，可以是在第一策略测试数据为基础，在60s内前后施加如下两种改变光照环境的事件：1)房间变暗3秒，然后房间全暗3秒，房间变暗3秒，最后房间恢复亮度；2)房间变暗3秒，房间恢复亮度3秒，房间全暗3秒，最后房间恢复亮度。

对于“视觉内容动态变化”场景，可以是：1)在场地中央摆放桌子，桌子上摆放标准大小的3*3魔方一个，移动时视线环绕魔方移动60秒，移动过程中利用道具部分遮挡魔方。2)利用轨迹为直径3m的圆形，用A3纸张打印50mm*50mm棋盘格并摆放于测试场地中央，请其他测试员在棋盘格周围自由走动。测试终端移动时视线环绕棋盘格移动60秒。

在一些示例实施方式中，可以根据测试对象的种类、系统类型、传感器类型和型号，以及自定以的性能测试精度来选择上述的一种或多种测试数据，来构建配置文件。例如，在测试对象为手机时，可以选择上述的第一策略测试数据、第二策略测试数据和第三策略测试数据来构建对应的配置文件；或者，若测试对象为AR眼镜，则可以选择第一策略测试数据和第二策略测试数据；等等。或者，也可以基于用户定义的模拟场景来选择与之匹配的测试数据。

在步骤S13中，根据所述配置文件执行所述测试任务，以获取所述测试对象的性能评价结果。

本示例实施方式中，确定测试任务对应的配置文件之后，便可以响应用户的操作指令开始执行测试任务。例如，可以将测试对象与测试系统进行网络连接，在确定网络连接稳定后，开始数据采集。其中，性能评估的具体指标可以包括：精度、鲁棒性和启动时间等。此外，性能评估的指标还可以包括时延、公告、运算开销等等。

本示例实施方式中，上述的步骤S13可以包括：

步骤S131，基于所述配置文件获取所述测试对象的第一测试数据；以及

步骤S132，利用位姿捕获设备获取所述测试对象对应的第二测试数据；

步骤S133，基于所述第一测试数据和所述第二测试数据进行数据比对以获取所述测试对象的性能评价结果。

举例来说，终端设备可以向测试对象和测试设备发送测试指令，测试对象在接收到测试指令后，便可以在测试场地中进行移动并输出数据流；测试设备在接收到测试指令后，便可以开始进行数据采集。

具体来说，测试对象作为数据生产设备，可以在测试场地内按预设规则进行运动；或者，也可以模拟一定的测试场景选择运动轨迹。其中，上述的第一测试数据可以包括所述测试对象对应的视频流数据、深度数据和IMU数据中的任意一项或任意多项的组合。具体的，在测试对象的运动过程中，可以采集RGB相机输出的视频流数据、深度相机(Tof相机)输出的深度流数据，以及加速度计和陀螺仪等设备输出的IMU流数据，并将该些数据作为输入数据。通过设计不同变量的第一测试数据作为输入数据，可以模拟AR设备的实际使用场景，进而实现对定位性能的测试。

对于上述的步骤S132，在开始采集测试对象输出的第一测试数据的同时，可以利用测试系统中预先布置的位姿捕获设备采集测试对象当前的位置和姿态信息，并将该些作为作为第二测试数据，作为真值(ground-truth)。举例来说，位姿捕获设备可以采用MOCAP动作捕捉设备、GPS-RTK基站，或者激光全站仪等设备。在测试系统中，位姿捕获设备作为测试设备，可以通过无线网络与终端设备、测试对象进行连接。在测试场地中，位姿捕获设备的探测区域应当完全覆盖测试场地中的自由行走区域。当测试对象在测试场地中移动时，位姿捕获设备持续应当保持对测试对象的持续跟踪。此外，在开始采集数据之前，还可以通过终端设备对测试对象和位姿捕获设备进行时间戳同步。

对于上述的步骤S132，可以基于所述第一测试数据和所述第二测试数据进行数据比对以获取绝对轨迹误差和/或绝对旋转误差，以根据绝对轨迹误差和/或绝对旋转误差生成所述性能评估结果。

具体而言，进行AR设备定位性能评估的精度指标可以包括：绝对轨迹误差ATE和绝对旋转误差ARE；将AR设备估计位姿和位姿捕获设备获取位姿的直接差值的位置项与姿态项；并可以通过不同的统计方法来获取，例如RMSE，CE90等。其中，RMSE指均方根误差；对于一组ATE或ARE数据，RMSE用来衡量观测值(AR设备SLAM系统输出位姿值)同真值(位姿捕获设备获取的位姿值)之间的偏差。上述的CE90指圆概率误差，对于一组ATE或ARE数据，CE90指90％的数据值落在以其为半径的误差圆内，是用来衡量误差分布范围的阈值。对于测试结果，ATE应≤100mm，或者ATE与轨迹总长度的比值应≤1％；ARE应≤10°，或者转弯处每转动10°，ARE应≤2°。

此外，对于上述的鲁棒性指标可以对应上述第三策略测试数据中不同的场景，增强现实设备应持续输出位姿，或及时判断为失败情况并从中恢复。持续输出位姿时，ATE与轨迹总长度的比值应≤5％；判断失败并恢复时，重新输出位姿的间隔时长应≤5s。

上述启动时间可以是从增强现实设备接收输入数据到输出第一帧位姿的间隔时长，启动时间应≤5s。

本公开实施例所提供的AR设备的性能测试方法，在对AR设备进行定位性能测试时，可以根据用户的指令创建对应的测试任务及配置文件；在配置文件中，可以针对不同的测试对象及性能测试标准配置不同的测试数据，使测试方案可以清晰地反馈增强现实设备在运行时遇到的困难或错误。基于配置文件，在测试环境中移动增强现实设备，并获得增强现实设备在该条件下的位姿观测值；同时利用位姿捕获设备同步获得设备在移动时的位姿真值；根据位姿观测值和位姿真值，计算得到定位性能评估指标。适用于定量评估增强现实设备定位性能的精度与鲁棒性。

需要注意的是，上述附图仅是根据本发明示例性实施例的方法所包括的处理的示意性说明，而不是限制目的。易于理解，上述附图所示的处理并不表明或限制这些处理的时间顺序。另外，也易于理解，这些处理可以是例如在多个模块中同步或异步执行的。

进一步的，参考图9所示，本示例的实施方式中还提供一种AR设备性能测试装置90，包括：指令接收模块901、指令响应模块902、测试执行模块903。其中，

所述指令接收模块901可以，用于获取任务触发指令；其中，所述任务触发指令包括：测试对象，以及测试环境需求数据。

所述指令响应模块902可以用于响应所述任务触发指令，创建所述测试对象对应的测试任务，并基于上述测试环境需求创建所述测试任务对应的配置文件；其中，所述配置文件包括：第一策略测试数据、第二策略测试数据和第三策略测试数据中的任意一项或任意多项的组合。

所述测试执行模块903可以用于根据所述配置文件执行所述测试任务，以获取所述测试对象的性能评价结果。

在本公开的一种示例中，所述测试环境需求数据包括：测试场地尺寸信息。

在本公开的一种示例中，所述装置90还可以包括：第一策略测试数据创建模块。

所述第一策略测试数据创建模块可以用于根据所述测试对象对应的预设移动轨迹图形信息以及图像尺寸，结合所述测试场地尺寸信息构建所述第一策略测试数据；其中，所述第一策略测试数据包括：开环测试集和/或闭环测试集。

在本公开的一种示例中，所述装置90还可以包括：第二策略测试数据创建模块。

所述第二策略测试数据创建模块可以用于根据所述测试对象对应的预设动作对应的移动轨迹构建所述第二策略测试数据。

在本公开的一种示例中，所述装置90还可以包括：第三策略测试数据创建模块。

所述第三策略测试数据创建模块可以用于根据所述测试对象对应的预设设备运动状态和/或环境变化策略构建所述第三策略测试数据。

在本公开的一种示例中，所述所述测试执行模块903可以包括第一测试数据采集模块、第二测试数据采集模块和评价结果输出模块。其中，

所述第一测试数据采集模块可以用于基于所述配置文件获取所述测试对象的第一测试数据。

所述第二测试数据采集模块可以用于利用位姿捕获设备获取所述测试对象对应的第二测试数据。

所述评价结果输出模块可以用于基于所述第一测试数据和所述第二测试数据进行数据比对以获取所述测试对象的性能评价结果。

在本公开的一种示例中，所述评价结果输出模块可以包括：基于所述第一测试数据和所述第二测试数据进行数据比对以获取特征比对数据，并根据所述特征比对数据生成所述性能评价结果；其中，所述特征比对数据把控绝对轨迹误差数据、绝对旋转误差以及启动时间数据中的任意一项或任意多项的组合。

上述的AR设备性能测试装置中各模块的具体细节已经在对应的AR设备性能测试方法中进行了详细的描述，因此此处不再赘述。

应当注意，尽管在上文详细描述中提及了用于动作执行的设备的若干模块或者单元，但是这种划分并非强制性的。实际上，根据本公开的实施方式，上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之，上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。

图10示出了适于用来实现本发明实施例的电子设备的示意图。

需要说明的是，图10示出的电子设备1000仅是一个示例，不应对本公开实施例的功能和使用范围带来任何限制。

如图10所示，电子设备1000包括中央处理单元(Central Processing Unit，CPU)1001，其可以根据存储在只读存储器(Read-Only Memory，ROM)402中的程序或者从储存部分1008加载到随机访问存储器(Random Access Memory，RAM)1003中的程序而执行各种适当的动作和处理。在RAM 1003中，还存储有系统操作所需的各种程序和数据。CPU 1001、ROM1002以及RAM 1003通过总线1004彼此相连。输入/输出(Input/Output，I/O)接口1005也连接至总线1004。

以下部件连接至I/O接口1005：包括键盘、鼠标等的输入部分1006；包括诸如阴极射线管(Cathode Ray Tube，CRT)、液晶显示器(Liquid Crystal Display，LCD)等以及扬声器等的输出部分1007；包括硬盘等的储存部分1008；以及包括诸如LAN(Local AreaNetwork，局域网)卡、调制解调器等的网络接口卡的通信部分1009。通信部分1009经由诸如因特网的网络执行通信处理。驱动器1010也根据需要连接至I/O接口1005。可拆卸介质1011，诸如磁盘、光盘、磁光盘、半导体存储器等等，根据需要安装在驱动器1010上，以便于从其上读出的计算机程序根据需要被安装入储存部分1008。

特别地，根据本发明的实施例，下文参考流程图描述的过程可以被实现为计算机软件程序。例如，本发明的实施例包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信部分1009从网络上被下载和安装，和/或从可拆卸介质1011被安装。在该计算机程序被中央处理单元(CPU)1001执行时，执行本申请的系统中限定的各种功能。

具体来说，上述的电子设备可以是手机、平板电脑或者笔记本电脑等智能移动终端设备。或者，上述的电子设备也可以是台式电脑等智能终端设备。

需要说明的是，本发明实施例所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(Erasable Programmable Read Only Memory，EPROM)、闪存、光纤、便携式紧凑磁盘只读存储器(Compact Disc Read-Only Memory，CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本发明中，计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：无线、有线等等，或者上述的任意合适的组合。

附图中的流程图和框图，图示了按照本发明各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图或流程图中的每个方框、以及框图或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

描述于本发明实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现，所描述的单元也可以设置在处理器中。其中，这些单元的名称在某种情况下并不构成对该单元本身的限定。

需要说明的是，作为另一方面，本申请还提供了一种计算机可读介质，该计算机可读介质可以是上述实施例中描述的电子设备中所包含的；也可以是单独存在，而未装配入该电子设备中。上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被一个该电子设备执行时，使得该电子设备实现如下述实施例中所述的方法。例如，所述的电子设备可以实现如图1或图2所示的各个步骤。

此外，上述附图仅是根据本发明示例性实施例的方法所包括的处理的示意性说明，而不是限制目的。易于理解，上述附图所示的处理并不表明或限制这些处理的时间顺序。另外，也易于理解，这些处理可以是例如在多个模块中同步或异步执行的。

此外，上述附图仅是根据本发明示例性实施例的方法所包括的处理的示意性说明，而不是限制目的。易于理解，上述附图所示的处理并不表明或限制这些处理的时间顺序。另外，也易于理解，这些处理可以是例如在多个模块中同步或异步执行的。

本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其他实施例。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由权利要求指出。

应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限。

Claims (10)

1.一种AR设备性能测试方法，其特征在于，包括：

获取任务触发指令；其中，所述任务触发指令包括：测试对象，以及测试环境需求数据；

响应所述任务触发指令，创建所述测试对象对应的测试任务，并基于上述测试环境需求创建所述测试任务对应的配置文件；其中，所述配置文件包括：第一策略测试数据、第二策略测试数据和第三策略测试数据中的任意一项或任意多项的组合；

根据所述配置文件执行所述测试任务，以获取所述测试对象的性能评价结果。

2.根据权利要求1所述的AR设备性能测试方法，其特征在于，所述测试环境需求数据包括：测试场地尺寸信息。

3.根据权利要求2所述的AR设备性能测试方法，其特征在于，所述方法还包括：

根据所述测试对象对应的预设移动轨迹图形信息以及图像尺寸，结合所述测试场地尺寸信息构建所述第一策略测试数据；

其中，所述第一策略测试数据包括：开环测试集和/或闭环测试集。

4.根据权利要求2所述的AR设备性能测试方法，其特征在于，所述方法还包括：

根据所述测试对象对应的预设动作对应的移动轨迹构建所述第二策略测试数据。

5.根据权利要求2所述的AR设备性能测试方法，其特征在于，所述方法还包括：

根据所述测试对象对应的预设设备运动状态和/或环境变化策略构建所述第三策略测试数据。

6.根据权利要求1所述的AR设备性能测试方法，其特征在于，所述获取所述测试对象的性能评价结果，包括：

基于所述配置文件获取所述测试对象的第一测试数据；以及

利用位姿捕获设备获取所述测试对象对应的第二测试数据；

基于所述第一测试数据和所述第二测试数据进行数据比对以获取所述测试对象的性能评价结果。

7.根据权利要求6所述的AR设备性能测试方法，其特征在于，所述基于所述第一测试数据和所述第二测试数据进行数据比对以获取所述测试对象的性能评估结果，包括：

基于所述第一测试数据和所述第二测试数据进行数据比对以获取特征比对数据，并根据所述特征比对数据生成所述性能评价结果；其中，所述特征比对数据把控绝对轨迹误差数据、绝对旋转误差以及启动时间数据中的任意一项或任意多项的组合。

8.一种AR设备性能测试装置，其特征在于，包括：

指令接收模块，用于获取任务触发指令；其中，所述任务触发指令包括：测试对象，以及测试环境需求数据；

指令响应模块，用于响应所述任务触发指令，创建所述测试对象对应的测试任务，并基于上述测试环境需求创建所述测试任务对应的配置文件；其中，所述配置文件包括：第一策略测试数据、第二策略测试数据和第三策略测试数据中的任意一项或任意多项的组合；

测试执行模块，用于根据所述配置文件执行所述测试任务，以获取所述测试对象的性能评价结果。

9.一种计算机可读介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的AR设备性能测试方法。

10.一种电子设备，其特征在于，包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器实现如权利要求1至7中任一项所述的AR设备性能测试方法。

Images