WO2020147420A1 - 应用性能数据采集方法、终端、计算机设备及存储介质 - Google Patents
应用性能数据采集方法、终端、计算机设备及存储介质 Download PDFInfo
- Publication number
- WO2020147420A1 WO2020147420A1 PCT/CN2019/120107 CN2019120107W WO2020147420A1 WO 2020147420 A1 WO2020147420 A1 WO 2020147420A1 CN 2019120107 W CN2019120107 W CN 2019120107W WO 2020147420 A1 WO2020147420 A1 WO 2020147420A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- performance data
- client software
- application
- terminal
- websocket
- Prior art date
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
Abstract
涉及性能测试领域,应用性能数据采集方法、终端、计算机设备及存储介质,其中的一种应用性能数据采集方法包括:执行包含WebSocket协议的性能数据采集脚本,启用WebSocket服务进程,并采集指定应用的性能数据(S10);当所述WebSocket服务进程与接收终端上的客户端软件建立连接时,将所述性能数据通过WebSocket协议发送到所述客户端软件(S20)。应用性能数据采集方法,可以及时地接收到测试终端发送的性能数据,同时大大减少向测试终端发送的请求数,降低测试终端的访问压力,减少接收性能数据的延时,提高性能数据采集的准确性。
Description
说明书 发明名称 :应用性能数据釆集方法、 终端、 计算机设备及存储介质
[0001] 本申请以 2019年 1月 18日提交的申请号为 201910048273.6, 名称为“应用性能数 据采集方法、 终端、 计算机设备及存储介质”的中国发明申请为基础, 并要求其 优先权。
技术领域
[0002] 本申请涉及性能测试领域, 尤其涉及一种应用性能数据采集方法、 终端、 计算 机设备及存储介质。
[0003]
[0004] 背景技术
[0005] adb是 android
sdk (安卓系统软件开发工具包) 里的一个工具, adb的全称为 Android Debug Bridge, 起到调试桥的作用。
[0006] 在安卓应用测试领域, 常常需要采集应用的性能数据。 在采集的过程中, 需要 使用 adb工具, 如在 adb Shell (adb的字符交互界面) 中执行获取应用性能命令。 然而这种方式是通过 adb协议来发送采集命令与接收应用性能数据的, 需要将接 收到数据先保存在 PC (个人计算机) 端的文件中, 再通过 Web网页吧应用性能 数据显示出来, 这样会导致显示出来的应用性能数据存在较大的延迟。 有时应 用性能数据的延时大于 1秒。
[0007]
[0008] 发明内容
[0009] 基于此, 有必要针对上述技术问题, 提供一种应用性能数据采集方法、 终端、 计算机设备及存储介质, 以减少采集应用性能数据的延迟时间。
[0010] 一种应用性能数据采集方法, 包括:
[0011] 执行包含 WebSocket协议的性能数据采集脚本, 启用 WebSocket服务进程, 并采 集指定应用的性能数据;
[0012] 当所述 WebSocket服务进程与接收终端上的客户端软件建立连接时, 将所述性
能数据通过 WebSocket协议发送到所述客户端软件。
[0013] 一种应用性能数据采集方法, 包括:
[0014] 启用客户端软件, 建立客户端软件与测试终端的 WebSocket服务进程的连接;
[0015] 通过 WebSocket协议接收所述测试终端发送的性能数据, 所述性能数据在所述 测试终端通过包含 WebSocket协议的性能数据采集脚本对指定应用进行采集而获 得;
[0016] 通过所述客户端软件对所述性能数据进行解析, 输出应用性能图表。
[0017] 一种测试终端, 包括:
[0018] 采集模块, 用于执行包含 WebSocket协议的性能数据采集脚本, 启用 WebSocket 服务进程, 并采集指定应用的性能数据;
[0019] 发送模块, 用于当所述 WebSocket服务进程与接收终端上的客户端软件建立连 接时, 将所述性能数据通过 WebSocket协议发送到所述客户端软件。
[0020] 一种接收终端, 包括:
[0021] 连接模块, 用于启用客户端软件, 建立客户端软件与测试终端的 WebSocket月艮 务进程的连接;
[0022] 接收模块, 用于通过 WebSocket协议接收所述测试终端发送的性能数据, 所述 性能数据在所述测试终端通过包含 WebSocket协议的性能数据采集脚本对指定应 用进行采集而获得;
[0023] 输出模块, 用于通过所述客户端软件对所述性能数据进行解析, 输出应用性能 图表。
[0024] 一种计算机设备, 包括存储器、 处理器以及存储在所述存储器中并可在所述处 理器上运行的计算机可读指令, 所述处理器执行所述计算机可读指令时实现如 下步骤:
[0025] 执行包含 WebSocket协议的性能数据采集脚本, 启用 WebSocket服务进程, 并采 集指定应用的性能数据;
[0026] 当所述 WebSocket服务进程与接收终端上的客户端软件建立连接时, 将所述性 能数据通过 WebSocket协议发送到所述客户端软件。
[0027] 一种计算机设备, 包括存储器、 处理器以及存储在所述存储器中并可在所述处
理器上运行的计算机可读指令, 所述处理器执行所述计算机可读指令时实现如 下步骤:
[0028] 启用客户端软件, 建立客户端软件与测试终端的 WebSocket服务进程的连接;
[0029] 通过 WebSocket协议接收所述测试终端发送的性能数据, 所述性能数据在所述 测试终端通过包含 WebSocket协议的性能数据采集脚本对指定应用进行采集而获 得;
[0030] 通过所述客户端软件对所述性能数据进行解析, 输出应用性能图表。
[0031] 一个或多个存储有计算机可读指令的可读存储介质, 所述计算机可读指令被一 个或多个处理器执行时, 使得所述一个或多个处理器执行如下步骤:
[0032] 执行包含 WebSocket协议的性能数据采集脚本, 启用 WebSocket服务进程, 并采 集指定应用的性能数据;
[0033] 当所述 WebSocket服务进程与接收终端上的客户端软件建立连接时, 将所述性 能数据通过 WebSocket协议发送到所述客户端软件。
[0034] 一个或多个存储有计算机可读指令的可读存储介质, 所述计算机可读指令被一 个或多个处理器执行时, 使得所述一个或多个处理器执行如下步骤:
[0035] 启用客户端软件, 建立客户端软件与测试终端的 WebSocket服务进程的连接;
[0036] 通过 WebSocket协议接收所述测试终端发送的性能数据, 所述性能数据在所述 测试终端通过包含 WebSocket协议的性能数据采集脚本对指定应用进行采集而获 得;
[0037] 通过所述客户端软件对所述性能数据进行解析, 输出应用性能图表。
[0038] 本申请的一个或多个实施例的细节在下面的附图和描述中提出, 本申请的其他 特征和优点将从说明书、 附图以及权利要求变得明显。
[0039]
[0040] 附图说明
[0041] 为了更清楚地说明本申请实施例的技术方案, 下面将对本申请实施例的描述中 所需要使用的附图作简单地介绍, 显而易见地, 下面描述中的附图仅仅是本申 请的一些实施例, 对于本领域普通技术人员来讲, 在不付出创造性劳动性的前 提下, 还可以根据这些附图获得其他的附图。
[0042] 图 1是本申请一实施例中应用性能数据采集方法的一应用环境示意图;
[0043] 图 2是本申请一实施例中应用性能数据采集方法的一流程示意图;
[0044] 图 3是本申请一实施例中应用性能数据采集方法的一流程示意图;
[0045] 图 4是本申请一实施例中应用性能数据采集方法的一流程示意图;
[0046] 图 5是本申请一实施例中应用性能数据采集方法的一流程示意图;
[0047] 图 6是本申请一实施例中应用性能数据采集方法的一流程示意图;
[0048] 图 7是本申请一实施例中应用性能数据采集方法的一流程示意图;
[0049] 图 8是本申请一实施例中应用性能数据采集方法的一流程示意图;
[0050] 图 9是本申请一实施例中测试终端的一结构示意图;
[0051] 图 10是本申请一实施例中接收终端的一结构示意图;
[0052] 图 11是本申请一实施例中计算机设备的一示意图。
[0053]
[0054] 具体实施方式
[0055] 下面将结合本申请实施例中的附图, 对本申请实施例中的技术方案进行清楚、 完整地描述, 显然, 所描述的实施例是本申请一部分实施例, 而不是全部的实 施例。 基于本申请中的实施例, 本领域普通技术人员在没有作出创造性劳动前 提下所获得的所有其他实施例, 都属于本申请保护的范围。
[0056] 本实施例提供的应用性能数据采集方法, 可应用在如图 1的应用环境中, 其中 , 接收终端与测试终端进行通信。 接收终端包括但不限于各种个人计算机、 笔 记本电脑和平板电脑。 测试终端包括但不限于各种智能手机、 平板电脑和可穿 戴设备。
[0057] 在一实施例中, 如图 2所示, 提供一种应用性能数据采集方法, 以该方法应用 在图 1中的测试终端为例进行说明, 包括如下步骤:
[0058] S10、 执行包含 WebSocket协议的性能数据采集脚本, 启用 WebSocket服务进程
, 并采集指定应用的性能数据。
[0059] 本实施例中, WebSocket协议是一种网络通信协议, 是 HTML5 (万维网的核心 语言、 标准通用标记语言下的一个应用超文本标记语言的第五次重大修改) 提 供的一种在单个 TCP (Transmission Control Protocol传输控制协议) 连接上进行
全双工通讯的协议。 包含 WebSocket协议的性能数据采集脚本是一种可以在测试 终端上运行的程序文件。 若测试终端的系统为安卓系统, 包含 WebSocket协议的 性能数据采集脚本可以是一种 Shell脚本。 Shell脚本与 Windows/Dos下的批处理相 似, 也就是用各类命令预先放入到一个文件中, 方便一次性执行的一个程序文 件, 主要是方便管理员进行设置或者管理用的。 Shell脚本比用其他编程程序编 辑的程序效率更高, 它使用了 Linux/Unix下的命令。 指定应用可以是测试终端上 的任意一个应用程序, 可以是视频应用, 也可以是即时通信应用。 性能数据包 括但不限于指定应用的 CPU占用率、 内存消耗量、 流量使用情况、 电量消耗值。 包含 WebSocket协议的性能数据采集脚本是一种专门为指定应用编写的程序文本 , 并包含启用 WebSocket协议的指令和采集指定应用的性能数据的指令。
[0060] 当测试终端执行包含 WebSocket协议的性能数据采集脚本, 测试终端将启用 We bSocket服务进程, 并收集指定应用的性能数据。 在启用 WebSocket服务进程之后 , 测试终端可以与处于同一网络下的接收终端建立连接, 并通过 WebSocket协议 进行数据传送。 在此处测试终端与接收终端之间的连接可以是无线连接, 也可 以是有线连接。 在执行包含 WebSocket协议的性能数据采集脚本时, 测试终端运 行的进程包括 WebSocket服务进程和采集指定应用的性能数据进程。
[0061] S20、 当所述 WebSocket服务进程与接收终端上的客户端软件建立连接时, 将所 述性能数据通过 WebSocket协议发送到所述客户端软件。
[0062] 本实施例中, 接收终端装载有客户端软件。 客户端软件可以是一个可以作为 W ebSocket客户端用于访问提供 WebSocket服务进程的终端 (即测试终端) 的浏览 器, 同时具有读取并解析应用性能数据的功能。
[0063] 当接收终端与测试终端处于同一网络环境下, 且性能数据采集脚本所运行的 W ebSocket服务进程未与其他终端建立连接, 可在客户端软件中访问测试终端的访 问地址, 向测试终端发出 WebSocket连线请求, 测试终端发出回应, 建立客户端 软件与测试终端的连接, 这个过程通常称为“握手”。 WebSocket协议是一个持久 化的协议, 客户端软件和作为服务器的测试终端只需要做一个握手的动作, 然 后, 客户端软件和测试终端之间就形成了一条快速通道, 两者之间就直接可以 数据互相传送。 测试终端不再被动的接收到客户端软件的请求之后才返回数据
, 而是在有新数据时就主动推送给客户端软件。 在此处, 测试终端的访问地址 可由测试人员手动输入, 也可以是预先内嵌于客户端软件的网址。
[0064] 步骤 S10-S20中, 执行包含 WebSocket协议的性能数据采集脚本, 启用 WebSock et服务进程, 并采集指定应用的性能数据, 以在测试终端上获取性能数据。 当所 述 WebSocket服务进程与接收终端上的客户端软件建立连接时, 将所述性能数据 通过 WebSocket协议发送到所述客户端软件, 以使接收终端及时地获取到所需要 收集的指定应用的性能数据。
[0065] 可选的, 在一实施例中, 如图 3所不, 若测试终端的系统为安卓系统, 步骤 S10 之前, 包括:
[0066] S101、 建立与所述接收终端的数据连接并启动 USB调试功能, 接收执行指令, 所述执行指令用于执行所述包含 WebSocket协议的性能数据采集脚本, 所述执行 指令根据所述接收终端的 adb Shell界面输入的执行语句而生成。
[0067] 本实施例中, 测试终端的系统为安卓系统。 adb, 即 Android Debug Bridge, 它 是 Android开发/测试人员常用工具。 Shell是 linux系统的字符交互界面。 adb Shell界面是用于访问安装安卓系统的终端的访问交互界面。 接收终端需安装有 a db工具包。 adb工具包可从网络上获取。 adb Shell界面即为 adb工具包的一个操作 界面。 USB调试功能是 Android提供的一个用于开发工作的功能, 使用该功能可 在计算机和 Android设备之间复制数据、 在移动设备上安装应用程序、 读取曰志 数据等。
[0068] 在测试终端未开启 WebSocket服务进程时, 接收终端可以采用数据线与测试终 端建立连接。 并在测试终端的 USB调试功能启用后, 在接收终端打开 adb Shell界 面, 输入执行语句。 adb工具包将执行语句转化为执行指令, 并将该执行指令发 送给测试终端。 测试终端接收到该执行指令后, 读取存储在测试终端本地的包 含 WebSocket协议的性能数据采集脚本, 启用 WebSocket服务进程, 并采集指定 应用的性能数据。
[0069] 步骤 S101中, 建立与所述接收终端的数据连接并启动 USB调试功能, 接收执行 指令, 所述执行指令用于执行所述包含 WebSocket协议的性能数据采集脚本, 所 述执行指令根据所述接收终端的 adb Shell界面输入的执行语句而生成, 提供了一
种启用性能数据采集脚本的方式, 即在接收终端上通过 adb命令启用测试终端上 的性能数据采集脚本。
[0070] 可选的, 在一实施例中, 如图 4所示, 步骤 S 10之前, 包括:
[0071] S102、 建立与所述接收终端的数据连接并启动 USB调试功能, 接收并保存所述 接收终端发送的所述包含 WebSocket协议的性能数据采集脚本。
[0072] 本实施例中, 在执行包含 WebSocket协议的性能数据采集脚本之前, 测试终端 需要获取到包含 WebSocket协议的性能数据采集脚本。 测试终端通过数据线与接 收终端连接之后, 且 USB调试功能处于启用状态, 可以通过复制粘贴的方式将包 含 WebSocket协议的性能数据采集脚本从接收终端复制到测试终端。 也可以在 ad b Shell界面执行 adb pull命令, 将性能数据采集脚本导出至测试终端。
[0073] 步骤 S102中, 建立与所述接收终端的数据连接并启动 USB调试功能, 接收并保 存所述接收终端发送的所述包含 WebSocket协议的性能数据采集脚本, 以使测试 终端获取到包含 WebSocket协议的性能数据采集脚本。
[0074] 可选的, 在一实施例中, 如图 5所示, 步骤 S10包括:
[0075] S 103、 按照预设频率实时收集所述指定应用的性能数据。
[0076] S104、 当一项测试任务执行完毕时, 统计测试周期内性能数据的最大值、 最小 值以及平均值。
[0077] 本实施例中, 预设频率可根据实际需要进行设定, 如可设置为 0.5次每秒、 1次 每秒、 2次每秒等。 例如, 可以是每秒钟获取一个 CPU占用率的数据 (对应的预 设频率为 i次每秒) , 也可以是每秒钟获取两个 CPU占用率的数据 (对应的预设 频率为 2次每秒) 。
[0078] 测试任务可以指对指定应用的测试操作。 性能数据采集脚本在执行过程中, 还 可以包含监测测试任务的进程。 当测试任务结束后, 测试终端还可以对测试周 期内的性能数据进行统计, 计算出各项性能数据的最大值、 最小值以及平均值 , 然后将这些统计数据当作性能数据的一部分发送到接收终端上。
[0079] 步骤 S103-S104中, 按照预设频率实时收集所述指定应用的性能数据, 可以根 据实际需要设定性能数据的收集频率 (即预设频率) 。 当一项测试任务执行完 毕时, 统计测试周期内性能数据的最大值、 最小值以及平均值, 以获得性能数
据的统计数据, 使得测试人员更直观地了解指定应用的性能数据。
[0080] 在一实施例中, 如图 6所示, 还提供另一种应用性能数据采集方法, 以该方法 应用在图 1中的接收终端为例进行说明, 包括如下步骤:
[0081] S30、 启用客户端软件, 建立客户端软件与测试终端的 WebSocket服务进程的连 接。
[0082] 本实施例中, 客户端软件可以是一个可以作为 WebSocket客户端用于访问提供 WebSocket服务进程的终端 (即测试终端) 的浏览器, 同时具有读取并解析应用 性能数据的功能。 当接收终端与测试终端处于同一网络环境下, 且性能数据采 集脚本所运行的 WebSocket服务进程未与其他终端建立连接, 可在客户端软件中 访问测试终端的访问地址, 向测试终端发出 WebSocket连线请求, 测试终端发出 回应, 建立客户端软件与测试终端的 WebSocket服务进程的连接。
[0083] S40、 通过 WebSocket协议接收所述测试终端发送的性能数据, 所述性能数据在 所述测试终端通过包含 WebSocket协议的性能数据采集脚本对指定应用进行采集 而获得。
[0084] 指定应用可以是安装于测试终端上的任意一个应用程序, 可以是视频应用, 也 可以是即时通信应用。 性能数据包括但不限于指定应用的实时 CPU占用率、 内存 消耗量、 流量使用情况。 包含 WebSocket协议的性能数据采集脚本是一种专门为 指定应用编写的程序文本, 并包含启用 WebSocket协议的指令和采集指定应用的 性能数据的指令。
[0085] 通过 WebSocket协议, 接收终端可以及时地接收到测试终端发送的性能数据, 同时大大减少向测试终端发送的请求数, 降低测试终端的访问压力, 减少接收 性能数据的延时, 提高性能数据采集的准确性。 经实际测量, 性能数据的延时 可以控制在 10毫秒以内。
[0086] S50、 通过所述客户端软件对所述性能数据进行解析, 输出应用性能图表。
[0087] 本实施例中, 客户端软件还内嵌有预设编码。 该预设编码用于对接收到的性能 数据进行解析, 并输出应用性能图表。 应用性能图表可以是应用性能数据的折 线图, 测试人员可以直观地观察该指定应用使用的应用性能的变化。 折线图可 以包括 CPU占用率折线图、 内存消耗折线图、 流量使用折线图。
[0088] 在一实例中, 测试人员需要对一个“计算器”应用的性能数据进行测量。 可以在 笔记本电脑 (即接收终端) 上分别编写测试“计算器”应用的脚本, 访问“计算机” 应用性能数据的客户端软件。 然后将测试“计算器”应用的脚本保存在待测的安卓 设备 (即测试终端) 上。 通过数据线连接笔记本电脑和安卓设备, 并启用安卓 设备的 USB调试功能。 打开笔记本电脑中的 adb工具包, 进入 adb
Shell界面, 在 adb Shell界面打开测试“计算器”应用的脚本。 安卓设备执行该脚本 , 启用 WebSocket服务进程, 并采集“计算器”应用的性能数据。 此时可以将数据 线断开。 然后在笔记本电脑打开客户端软件, 客服端软件向安卓设备发送建立 W ebSocket连接的请求, 安卓设备回应该请求, 客服端软件与安卓设备之间的连接 建立成功。 安卓设备将采集到“计算器”应用的性能数据发送给客户端软件。 客户 端软件解析接收到的性能数据并输出“计算器”应用的性能图表。 测试人员可以直 观地从该性能图表上获知“计算器”应用的应用性能变化情况。
[0089] 步骤 S30-S50中, 启用客户端软件, 建立客户端软件与测试终端的 WebSocket服 务进程的连接, 以使接收终端可以接收测试终端发送的数据。 通过 WebSocket协 议接收所述测试终端发送的性能数据, 所述性能数据在所述测试终端通过包含 W ebSocket协议的性能数据采集脚本对指定应用进行采集而获得, 由于使用了 Web Socket协议, 性能数据可以更及时地传送到接收终端, 同时, 大大减少向测试终 端发送的请求数, 降低测试终端的访问压力。 通过所述客户端软件对所述性能 数据进行解析, 输出应用性能图表, 以图表的形式展示性能数据, 方便测试人 员查看。
[0090] 可选的, 在一实施例中, 如图 7所示, 步骤 S30之前, 还包括:
[0091] 5301、 接收访问终端的访问请求, 建立与所述访问终端的连接。
[0092] 5302、 接收所述访问终端发送的打开所述客户端软件的指令。
[0093] 对应地, 步骤 S50之后, 还包括:
[0094] S60、 将所述应用性能图表发送至所述访问终端, 并在所述访问终端的显示界 面上显示所述应用性能图表。
[0095] 本实施例中, 访问终端与接收终端处于同一网络环境中。 在此处, 处于同一网 络环境中指的是所有终端处于同一个局域网内, 其中一个终端的共享文件夹可
以被另一个终端所访问。
[0096] 可以将客户端软件存放在调整访问终端的共享文件中。 可以在浏览器输入调整 终端共享文件的地址, 进入共享文件。 打开客户端软件的指令可以指双击客户 端软件图标产生的指令。
[0097] 在打开客户端软件之后, 客户端软件接收测试终端发送的性能数据, 并输出应 用性能图表, 并将该应用性能图表发送给访问终端。 在访问终端的显示界面上 可以显示指定应用的应用性能图表。
[0098] 步骤 S301-S302中, 接收访问终端的访问请求, 建立与所述访问终端的连接, 以使与接收终端建立连接的访问终端也可以实时查看到指定应用的性能数据。 接收所述访问终端发送的打开所述客户端软件的指令, 以在客户端软件上查看 指定应用的应用性能图表。 步骤 S60中, 将所述应用性能图表发送至所述访问终 端, 并在所述访问终端的显示界面上显示所述应用性能图表, 以实现在多台终 端上同时查看指定应用的应用性能图表。
[0099] 可选的, 在一实施例中, 如图 8所示, 步骤 S50还包括:
[0100] S501、 判断所述性能数据是否大于预设阈值。
[0101] S502、 若所述性能数据大于预设阈值, 则为所述性能数据增加识别标记, 并将 所述识别标记显示于应用性能图表上。
[0102] 本实施例中, 可根据实际需要对性能数据中的各项性能设置不同的预设阈值, 当该项性能的数据大于与其对应的预设阈值时, 则该数据则带有识别标识。 识 别标识用于区分高于预设阈值的数据和不高于预设阈值的数据。 识别标识可以 更改颜色、 加粗、 加亮等形式展示。 例如, CPU占用率的预设阈值设置为 10%, 当测得的指定应用的 CPU占用率不大于 10%时, 在应用性能图表上显示的数据或 数据点为蓝色, 当测得的指定应用的 CPU占用率大于 10%时, 在应用性能图表上 显示的数据或数据点为红色。
[0103] 步骤 S501-S502中, 判断所述性能数据是否大于预设阈值, 以区分大于预设阈 值和不大于预设阈值的性能数据。 若所述性能数据大于预设阈值, 则为所述性 能数据增加识别标记, 并将所述识别标记显示于应用性能图表上, 使用识别标 记在图表上标识超过预设阈值的性能数据, 更便于测试人员查看。
[0104] 应理解, 上述实施例中各步骤的序号的大小并不意味着执行顺序的先后, 各过 程的执行顺序应以其功能和内在逻辑确定, 而不应对本申请实施例的实施过程 构成任何限定。
[0105] 在一实施例中, 提供一种测试终端, 该测试终端与上述实施例中第一个应用性 能数据采集方法一一对应。 如图 9所示, 该测试终端包括采集模块 10和发送模块 20。 各功能模块详细说明如下:
[0106] 采集模块 10, 用于执行包含 WebSocket协议的性能数据采集脚本, 启用 WebSoc ket服务进程, 并采集指定应用的性能数据;
[0107] 发送模块 20, 用于当所述 WebSocket服务进程与接收终端上的客户端软件建立 连接时, 将所述性能数据通过 WebSocket协议发送到所述客户端软件。
[0108] 可选的, 测试终端还包括:
[0109] 执行模块, 用于建立与所述接收终端的数据连接并启动 USB调试功能, 接收执 行指令, 所述执行指令用于执行所述包含 WebSocket协议的性能数据采集脚本, 所述执行指令根据所述接收终端的 adb Shell界面输入的执行语句而生成。
[0110] 可选的, 测试终端还包括:
[0111] 接收脚本模块, 用于建立与所述接收终端的数据连接并启动 USB调试功能, 接 收并保存所述接收终端发送的所述包含 WebSocket协议的性能数据采集脚本。
[0112] 可选的, 采集模块 10包括:
[0113] 收集单元, 用于按照预设频率实时收集所述指定应用的性能数据;
[0114] 统计单元, 用于当一项测试任务执行完毕时, 统计测试周期内性能数据的最大 值、 最小值以及平均值。
[0115] 关于测试终端的具体限定可以参见上文中对于第一个应用性能数据采集方法的 限定, 在此不再赘述。 上述测试终端中的各个模块可全部或部分通过软件、 硬 件及其组合来实现。 上述各模块可以硬件形式内嵌于或独立于计算机设备中的 处理器中, 也可以以软件形式存储于计算机设备中的存储器中, 以便于处理器 调用执行以上各个模块对应的操作。
[0116] 在另一实施例中, 提供一种接收终端, 该接收终端与上述实施例中第二个应用 性能数据采集方法一一对应。 如图 10所示, 该测试终端包括连接模块 30、 接收
模块 40和输出模块 50。 各功能模块详细说明如下:
[0117] 连接模块 30, 用于启用客户端软件, 建立客户端软件与测试终端的 WebSocket 服务进程的连接;
[0118] 接收模块 40, 用于通过 WebSocket协议接收所述测试终端发送的性能数据, 所 述性能数据在所述测试终端通过包含 WebSocket协议的性能数据采集脚本对指定 应用进行采集而获得;
[0119] 输出模块 50, 用于通过所述客户端软件对所述性能数据进行解析, 输出应用性 育 g图表。
[0120] 可选的, 接收终端还包括:
[0121] 接收访问请求模块, 用于接收访问终端的访问请求, 建立与所述访问终端的连 接;
[0122] 接收打开指令模块, 用于接收所述访问终端发送的打开所述客户端软件的指令
[0123] 发送图表模块, 用于将所述应用性能图表发送至所述访问终端, 并在所述访问 终端的显示界面上显示所述应用性能图表。
[0124] 可选的, 输出模块 50还包括:
[0125] 阈值判断单元, 用于判断所述性能数据是否大于预设阈值;
[0126] 增加标记单元, 用于若所述性能数据大于预设阈值, 则为所述性能数据增加识 别标记, 并将所述识别标记显示于应用性能图表上。
[0127] 关于接收终端的具体限定可以参见上文中对于第二个应用性能数据采集方法的 限定, 在此不再赘述。 上述接收终端中的各个模块可全部或部分通过软件、 硬 件及其组合来实现。 上述各模块可以硬件形式内嵌于或独立于计算机设备中的 处理器中, 也可以以软件形式存储于计算机设备中的存储器中, 以便于处理器 调用执行以上各个模块对应的操作。
[0128] 在一个实施例中, 提供了一种计算机设备, 该计算机设备可以是终端, 其内部 结构图可以如图 11所示。 该计算机设备包括通过系统总线连接的处理器、 存储 器、 网络接口、 显示屏和输入装置。 其中, 该计算机设备的处理器用于提供计 算和控制能力。 该计算机设备的存储器包括非易失性存储介质、 内存储器。 该
非易失性存储介质存储有操作系统和计算机可读指令。 该内存储器为非易失性 存储介质中的操作系统和计算机可读指令的运行提供环境。 该计算机设备的网 络接口用于与外部服务器通过网络连接通信。 该计算机可读指令被处理器执行 时以实现上述任意一种应用性能数据采集方法。 本实施例所提供的可读存储介 质包括非易失性可读存储介质和易失性可读存储介质。
[0129] 在一个实施例中, 提供了一种计算机设备, 包括存储器、 处理器及存储在存储 器上并可在处理器上运行的计算机可读指令, 处理器执行计算机可读指令时实 现以下步骤:
[0130] 执行包含 WebSocket协议的性能数据采集脚本, 启用 WebSocket服务进程, 并采 集指定应用的性能数据;
[0131] 当所述 WebSocket服务进程与接收终端上的客户端软件建立连接时, 将所述性 能数据通过 WebSocket协议发送到所述客户端软件。
[0132] 或者, 处理器执行计算机可读指令时也可实现以下步骤:
[0133] 启用客户端软件, 建立客户端软件与测试终端的 WebSocket服务进程的连接;
[0134] 通过 WebSocket协议接收所述测试终端发送的性能数据, 所述性能数据在所述 测试终端通过包含 WebSocket协议的性能数据采集脚本对指定应用进行采集而获 得;
[0135] 通过所述客户端软件对所述性能数据进行解析, 输出应用性能图表。
[0136] 在一个实施例中, 提供了一个或多个存储有计算机可读指令的可读存储介质, 本实施例所提供的可读存储介质包括非易失性可读存储介质和易失性可读存储 介质。 可读存储介质上存储有计算机可读指令, 计算机可读指令被一个或多个 处理器执行时实现以下步骤:
[0137] 执行包含 WebSocket协议的性能数据采集脚本, 启用 WebSocket服务进程, 并采 集指定应用的性能数据;
[0138] 当所述 WebSocket服务进程与接收终端上的客户端软件建立连接时, 将所述性 能数据通过 WebSocket协议发送到所述客户端软件。
[0139] 或者, 计算机可读指令被一个或多个处理器执行时实现以下步骤:
[0140] 启用客户端软件, 建立客户端软件与测试终端的 WebSocket服务进程的连接;
[0141] 通过 WebSocket协议接收所述测试终端发送的性能数据, 所述性能数据在所述 测试终端通过包含 WebSocket协议的性能数据采集脚本对指定应用进行采集而获 得;
[0142] 通过所述客户端软件对所述性能数据进行解析, 输出应用性能图表。
[0143] 本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程, 是可 以通过计算机可读指令来指令相关的硬件来完成, 所述的计算机可读指令可存 储于一非易失性计算机可读取存储介质或易失性可读存储介质中, 该计算机可 读指令在执行时, 可包括如上述各方法的实施例的流程。 其中, 本申请所提供 的各实施例中所使用的对存储器、 存储、 数据库或其它介质的任何引用, 均可 包括非易失性和 /或易失性存储器。 非易失性存储器可包括只读存储器 (ROM) 可编程 ROM (PROM) 电可编程 ROM (EPROM) 电可擦除可编程 ROM (EEPROM) 或闪存。 易失性存储器可包括随机存取存储器 (RAM) 或者外部 高速缓冲存储器。 作为说明而非局限, RAM以多种形式可得, 诸如静态 RAM ( SRAM) 动态 RAM (DRAM) 同步 DRAM (SDRAM) 双数据率 SDRAM (DDRSDRAM) 增强型 SDRAM (ESDRAM) 同步链路 (Synchlink) DRAM (SLDRAM) 存储器总线 (Rambus) 直接 RAM (RDRAM) 直接存 储器总线动态 RAM (DRDRAM) 以及存储器总线动态 RAM (RDRAM) 等。
[0144] 所属领域的技术人员可以清楚地了解到, 为了描述的方便和简洁, 仅以上述各 功能单元、 模块的划分进行举例说明, 实际应用中, 可以根据需要而将上述功 能分配由不同的功能单元、 模块完成, 即将所述终端的内部结构划分成不同的 功能单元或模块, 以完成以上描述的全部或者部分功能。
[0145] 以上所述实施例仅用以说明本申请的技术方案, 而非对其限制; 尽管参照前述 实施例对本申请进行了详细的说明, 本领域的普通技术人员应当理解: 其依然 可以对前述各实施例所记载的技术方案进行修改, 或者对其中部分技术特征进 行等同替换; 而这些修改或者替换, 并不使相应技术方案的本质脱离本申请各 实施例技术方案的精神和范围, 均应包含在本申请的保护范围之内。
Claims
[权利要求 1] 一种应用性能数据采集方法, 其特征在于, 包括:
执行包含 WebSocket协议的性能数据采集脚本, 启用 WebSocket服务 进程, 并采集指定应用的性能数据;
当所述 WebSocket服务进程与接收终端上的客户端软件建立连接时, 将所述性能数据通过 WebSocket协议发送到所述客户端软件。
[权利要求 2] 如权利要求 1所述的应用性能数据采集方法, 其特征在于, 所述执行 包含 WebSocket协议的性能数据采集脚本之前, 包括:
建立与所述接收终端的数据连接并启动 USB调试功能, 接收并保存所 述接收终端发送的所述包含 WebSocket协议的性能数据采集脚本。
[权利要求 3] 如权利要求 1所述的应用性能数据采集方法, 其特征在于, 所述执行 包含 WebSocket协议的性能数据采集脚本, 启用 WebSocket服务进程 , 并采集指定应用的性能数据, 包括:
按照预设频率实时收集所述指定应用的性能数据; 当一项测试任务执行完毕时, 统计测试周期内性能数据的最大值、 最 小值以及平均值。
[权利要求 4] 一种应用性能数据采集方法, 其特征在于, 包括:
启用客户端软件, 建立客户端软件与测试终端的 WebSocket服务进程 的连接;
通过 WebSocket协议接收所述测试终端发送的性能数据, 所述性能数 据在所述测试终端通过包含 WebSocket协议的性能数据采集脚本对指 定应用进行采集而获得;
通过所述客户端软件对所述性能数据进行解析, 输出应用性能图表。
[权利要求 5] 如权利要求 4所述的应用性能数据采集方法, 其特征在于, 所述启用 客户端软件, 建立客户端软件与测试终端的 WebSocket服务进程的连 接之前, 还包括:
接收访问终端的访问请求, 建立与所述访问终端的连接;
接收所述访问终端发送的打开所述客户端软件的指令;
对应地, 所述通过所述客户端软件对所述性能数据进行解析, 输出应 用性能图表之后, 还包括:
将所述应用性能图表发送至所述访问终端, 并在所述访问终端的显示 界面上显示所述应用性能图表。
[权利要求 6] 如权利要求 4所述的应用性能数据采集方法, 其特征在于, 所述通过 所述客户端软件对所述性能数据进行解析, 输出应用性能图表, 还包 括:
判断所述性能数据是否大于预设阈值;
若所述性能数据大于预设阈值, 则为所述性能数据增加识别标记, 并 将所述识别标记显示于应用性能图表上。
[权利要求 7] 一种测试终端, 其特征在于, 包括:
采集模块, 用于执行包含 WebSocket协议的性能数据采集脚本, 启用 WebSocket服务进程, 并采集指定应用的性能数据; 发送模块, 用于当所述 WebSocket服务进程与接收终端上的客户端软 件建立连接时, 将所述性能数据通过 WebSocket协议发送到所述客户 端软件。
[权利要求 8] 如权利要求 7所述的测试终端, 还包括:
执行模块, 用于建立与所述接收终端的数据连接并启动 USB调试功能 , 接收执行指令, 所述执行指令用于执行所述包含 WebSocket协议的 性能数据采集脚本, 所述执行指令根据所述接收终端的 adb Shell界面 输入的执行语句而生成。
[权利要求 9] 如权利要求 7所述的测试终端, 所述采集模块还包括:
收集单元, 用于按照预设频率实时收集所述指定应用的性能数据; 统计单元, 用于当一项测试任务执行完毕时, 统计测试周期内性能数 据的最大值、 最小值以及平均值。
[权利要求 10] 一种接收终端, 其特征在于, 包括:
连接模块, 用于启用客户端软件, 建立客户端软件与测试终端的 Web Socket服务进程的连接;
接收模块, 用于通过 WebSocket协议接收所述测试终端发送的性能数 据, 所述性能数据在所述测试终端通过包含 WebSocket协议的性能数 据采集脚本对指定应用进行采集而获得;
输出模块, 用于通过所述客户端软件对所述性能数据进行解析, 输出 应用性能图表。
[权利要求 11] 如权利要求 10所述的接收终端, 还包括:
接收访问请求模块, 用于接收访问终端的访问请求, 建立与所述访问 终端的连接;
接收打开指令模块, 用于接收所述访问终端发送的打开所述客户端软 件的指令;
发送图表模块, 用于将所述应用性能图表发送至所述访问终端, 并在 所述访问终端的显示界面上显示所述应用性能图表。
[权利要求 12] 如权利要求 10所述的接收终端, 所述输出模块还包括:
阈值判断单元, 用于判断所述性能数据是否大于预设阈值; 增加标记单元, 用于若所述性能数据大于预设阈值, 则为所述性能数 据增加识别标记, 并将所述识别标记显示于应用性能图表上。
[权利要求 13] 一种计算机设备, 包括存储器、 处理器以及存储在所述存储器中并可 在所述处理器上运行的计算机可读指令, 其特征在于, 所述处理器执 行所述计算机可读指令时实现如下步骤:
执行包含 WebSocket协议的性能数据采集脚本, 启用 WebSocket服务 进程, 并采集指定应用的性能数据;
当所述 WebSocket服务进程与接收终端上的客户端软件建立连接时, 将所述性能数据通过 WebSocket协议发送到所述客户端软件。
[权利要求 14] 如权利要求 13所述的计算机设备, 所述执行包含 WebSocket协议的性 能数据采集脚本, 启用 WebSocket服务进程, 并采集指定应用的性能 数据, 包括:
按照预设频率实时收集所述指定应用的性能数据; 当一项测试任务执行完毕时, 统计测试周期内性能数据的最大值、 最
小值以及平均值。
[权利要求 15] 一种计算机设备, 包括存储器、 处理器以及存储在所述存储器中并可 在所述处理器上运行的计算机可读指令, 其特征在于, 所述处理器执 行所述计算机可读指令时实现如下步骤:
启用客户端软件, 建立客户端软件与测试终端的 WebSocket服务进程 的连接;
通过 WebSocket协议接收所述测试终端发送的性能数据, 所述性能数 据在所述测试终端通过包含 WebSocket协议的性能数据采集脚本对指 定应用进行采集而获得;
通过所述客户端软件对所述性能数据进行解析, 输出应用性能图表。
[权利要求 16] 如权利要求 15所述的计算机设备, 其特征在于, 所述启用客户端软件 , 建立客户端软件与测试终端的 WebSocket服务进程的连接之前, 所 述处理器执行所述计算机可读指令时还实现如下步骤:
接收访问终端的访问请求, 建立与所述访问终端的连接;
接收所述访问终端发送的打开所述客户端软件的指令;
对应地, 所述通过所述客户端软件对所述性能数据进行解析, 输出应 用性能图表之后, 所述处理器执行所述计算机可读指令时还实现如下 步骤:
将所述应用性能图表发送至所述访问终端, 并在所述访问终端的显示 界面上显示所述应用性能图表。
[权利要求 17] 一个或多个存储有计算机可读指令的可读存储介质, 所述计算机可读 指令被一个或多个处理器执行时, 使得所述一个或多个处理器执行如 下步骤:
执行包含 WebSocket协议的性能数据采集脚本, 启用 WebSocket服务 进程, 并采集指定应用的性能数据;
当所述 WebSocket服务进程与接收终端上的客户端软件建立连接时, 将所述性能数据通过 WebSocket协议发送到所述客户端软件。
[权利要求 18] 如权利要求 17所述的可读存储介质, 其特征在于, 所述执行包含 Web
Socket协议的性能数据采集脚本, 启用 WebSocket服务进程, 并采集 指定应用的性能数据, 包括:
按照预设频率实时收集所述指定应用的性能数据; 当一项测试任务执行完毕时, 统计测试周期内性能数据的最大值、 最 小值以及平均值。
[权利要求 19] 一个或多个存储有计算机可读指令的可读存储介质, 所述计算机可读 指令被一个或多个处理器执行时, 使得所述一个或多个处理器执行如 下步骤:
启用客户端软件, 建立客户端软件与测试终端的 WebSocket服务进程 的连接;
通过 WebSocket协议接收所述测试终端发送的性能数据, 所述性能数 据在所述测试终端通过包含 WebSocket协议的性能数据采集脚本对指 定应用进行采集而获得;
通过所述客户端软件对所述性能数据进行解析, 输出应用性能图表。
[权利要求 20] 如权利要求 19所述的可读存储介质, 其特征在于, 所述启用客户端软 件, 建立客户端软件与测试终端的 WebSocket服务进程的连接之前, 所述计算机可读指令被一个或多个处理器执行时, 使得所述一个或多 个处理器还执行如下步骤:
接收访问终端的访问请求, 建立与所述访问终端的连接;
接收所述访问终端发送的打开所述客户端软件的指令;
对应地, 所述通过所述客户端软件对所述性能数据进行解析, 输出应 用性能图表之后, 所述计算机可读指令被一个或多个处理器执行时, 使得所述一个或多个处理器还执行如下步骤:
将所述应用性能图表发送至所述访问终端, 并在所述访问终端的显示 界面上显示所述应用性能图表。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910048273.6A CN109840209A (zh) | 2019-01-18 | 2019-01-18 | 应用性能数据采集方法、终端、计算机设备及存储介质 |
CN201910048273.6 | 2019-01-18 |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2020147420A1 true WO2020147420A1 (zh) | 2020-07-23 |
Family
ID=66883860
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/CN2019/120107 WO2020147420A1 (zh) | 2019-01-18 | 2019-11-22 | 应用性能数据采集方法、终端、计算机设备及存储介质 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN109840209A (zh) |
WO (1) | WO2020147420A1 (zh) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109840209A (zh) * | 2019-01-18 | 2019-06-04 | 深圳壹账通智能科技有限公司 | 应用性能数据采集方法、终端、计算机设备及存储介质 |
CN111124702B (zh) * | 2019-11-22 | 2023-03-21 | 腾讯科技(深圳)有限公司 | 性能数据采集方法、装置和计算机可读存储介质 |
CN112559090B (zh) * | 2020-12-07 | 2024-04-19 | 中国科学院深圳先进技术研究院 | 一种应用程序运行时性能事件的收集方法及相关装置 |
CN114448965A (zh) * | 2021-12-22 | 2022-05-06 | 天翼云科技有限公司 | 一种大数据组件的管理方法、装置、系统及可读存储介质 |
CN114928524B (zh) * | 2022-05-20 | 2024-03-26 | 浪潮思科网络科技有限公司 | 一种web端与交换机的交互方法、设备及介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104754608A (zh) * | 2013-12-25 | 2015-07-01 | 腾讯科技(深圳)有限公司 | 实现移动终端性能监控的方法和系统 |
US9143550B2 (en) * | 2012-12-01 | 2015-09-22 | Qualcomm Innovation Center, Inc. | Graceful degradation of websocket connections to nonpersistent HTTP-based communications |
CN106161130A (zh) * | 2015-04-14 | 2016-11-23 | 阿里巴巴集团控股有限公司 | 基于WebSocket协议的性能监测装置、系统及方法 |
CN106339321A (zh) * | 2016-09-09 | 2017-01-18 | 腾讯科技(深圳)有限公司 | 一种应用程序性能测试方法及装置 |
CN106656668A (zh) * | 2016-12-22 | 2017-05-10 | 上海斐讯数据通信技术有限公司 | 一种云终端设备监控方法及系统 |
CN109840209A (zh) * | 2019-01-18 | 2019-06-04 | 深圳壹账通智能科技有限公司 | 应用性能数据采集方法、终端、计算机设备及存储介质 |
-
2019
- 2019-01-18 CN CN201910048273.6A patent/CN109840209A/zh active Pending
- 2019-11-22 WO PCT/CN2019/120107 patent/WO2020147420A1/zh active Application Filing
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9143550B2 (en) * | 2012-12-01 | 2015-09-22 | Qualcomm Innovation Center, Inc. | Graceful degradation of websocket connections to nonpersistent HTTP-based communications |
CN104754608A (zh) * | 2013-12-25 | 2015-07-01 | 腾讯科技(深圳)有限公司 | 实现移动终端性能监控的方法和系统 |
CN106161130A (zh) * | 2015-04-14 | 2016-11-23 | 阿里巴巴集团控股有限公司 | 基于WebSocket协议的性能监测装置、系统及方法 |
CN106339321A (zh) * | 2016-09-09 | 2017-01-18 | 腾讯科技(深圳)有限公司 | 一种应用程序性能测试方法及装置 |
CN106656668A (zh) * | 2016-12-22 | 2017-05-10 | 上海斐讯数据通信技术有限公司 | 一种云终端设备监控方法及系统 |
CN109840209A (zh) * | 2019-01-18 | 2019-06-04 | 深圳壹账通智能科技有限公司 | 应用性能数据采集方法、终端、计算机设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN109840209A (zh) | 2019-06-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2020147420A1 (zh) | 应用性能数据采集方法、终端、计算机设备及存储介质 | |
CN108076123B (zh) | 网页调试方法、装置及系统 | |
WO2018184361A1 (zh) | 应用程序测试方法、服务器、终端和存储介质 | |
US20140129620A1 (en) | Indicating coverage of web application testing | |
CN103516559A (zh) | 一种智能终端应用兼容性测试方法及系统 | |
CN109873735B (zh) | H5页面的性能测试方法、装置和计算机设备 | |
CN110955589A (zh) | 基于浏览器的无头模式的测试方法、系统、设备及介质 | |
CN112799940B (zh) | 回归测试方法、装置、计算机系统和计算机可读存储介质 | |
CN107229566B (zh) | 用于soa服务转换语言保持功能一致性的方法及系统 | |
CN111367814A (zh) | 一种埋点测试方法、装置、终端设备及存储介质 | |
WO2021120544A1 (zh) | 用于调试设备的方法及装置 | |
CN111045940B (zh) | 软件自动化测试方法、装置、架构、服务器及存储介质 | |
CN111367812A (zh) | 测试方法、电子设备及可读存储介质 | |
CN111651232A (zh) | 一机多控方法、装置、系统及电子设备 | |
WO2017113877A1 (zh) | 一种基于物理实测的移动端app加载能耗自动测量方法 | |
CN109739754B (zh) | 基于微信开发的应用程序自动化测试方法及系统 | |
CN109634856B (zh) | 基于云服务的iOS智能终端远程真机调试系统及方法 | |
CN113282476B (zh) | 接口性能测试方法、装置和电子设备 | |
CN115576791A (zh) | 压测线程的动态调整方法、装置、电子设备及存储介质 | |
CN110336714A (zh) | 一种手机app访问网络信令机制的测试方法 | |
CN109344064B (zh) | 一种应用远程调试方法 | |
CN112433938A (zh) | 移动端应用测试的方法和装置 | |
CN112671814A (zh) | 一种跨平台的设备开发方法、装置及系统 | |
CN112486838A (zh) | 接口测试方法、装置、计算机设备和存储介质 | |
CN111352802A (zh) | 一种网络总线的监控处理方法、装置、设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 19910192 Country of ref document: EP Kind code of ref document: A1 |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
32PN | Ep: public notification in the ep bulletin as address of the adressee cannot be established |
Free format text: NOTING OF LOSS OF RIGHTS PURSUANT TO RULE 112(1) EPC (EPO FORM 1205A DATED 03.11.2021) |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 19910192 Country of ref document: EP Kind code of ref document: A1 |