CN114327203A - 一种用户操作的还原方法及装置、记录方法及装置 - Google Patents

一种用户操作的还原方法及装置、记录方法及装置 Download PDF

Info

Publication number
CN114327203A
CN114327203A CN202111626790.0A CN202111626790A CN114327203A CN 114327203 A CN114327203 A CN 114327203A CN 202111626790 A CN202111626790 A CN 202111626790A CN 114327203 A CN114327203 A CN 114327203A
Authority
CN
China
Prior art keywords
screen capture
fingerprint
user
instruction
screenshot
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202111626790.0A
Other languages
English (en)
Other versions
CN114327203B (zh
Inventor
魏陈强
郭靖
吴志强
丁能水
吴有林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Aowang Information Technology Xiamen Co ltd
Original Assignee
Aowang Information Technology Xiamen Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Aowang Information Technology Xiamen Co ltd filed Critical Aowang Information Technology Xiamen Co ltd
Priority to CN202111626790.0A priority Critical patent/CN114327203B/zh
Publication of CN114327203A publication Critical patent/CN114327203A/zh
Application granted granted Critical
Publication of CN114327203B publication Critical patent/CN114327203B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Collating Specific Patterns (AREA)

Abstract

本申请实施例公开了一种用户操作的还原方法及装置、记录方法及装置。还原方法应用于服务器,包括:接收终端发送的指令记录和目标截屏指纹;构建测试环境;重复执行循环步骤,直至满足预设条件,确定预设方差值对应的模拟过程为用户操作过程;循环步骤包括:根据指令记录,控制模拟器在当前界面执行对应的操作指令,并每隔预设数量的操作指令,执行截屏操作,得到多个截屏图像;将所有截屏图像进行处理,得到各个截屏图像对应的截屏指纹;确定各个截屏指纹与对应的目标截屏指纹的相似度,并根据所有相似度计算相似度的方差值。本申请实施例提供的用户操作的还原方法,能够在减少占用内存的情况下,精确还原用户操作,提高用户使用体验。

Description

一种用户操作的还原方法及装置、记录方法及装置
技术领域
本申请涉及计算机技术领域,尤其涉及一种用户操作的还原方法及装置、记录方法及装置。
背景技术
用户在使用终端的过程中,可能会出现一些程序故障(bug),这些程序故障发生的概率比较低,在产品测试的过程中难以发现。当收到用户的错误反馈时,由于不清楚用户的操作方式,对用户操作出现的错误难以复现。现有技术通常采样界面录屏或记录操作指令的方式,对用户操作出现的错误进行复现。但界面录屏的方式只能针对复现率高甚至是必须出现的问题,而且用户在上传视频的过程中需要花费较多的流量和时间;记录操作指令的方式需要详细记录操作指令,占用的存储空间大。因此,在减少占用内存的情况下,如何精确还原用户操作是现在亟需解决的技术问题。
发明内容
本申请的目的之一在于提供一种用户操作的还原方法及装置、记录方法及装置,以解决在减少占用内存的情况下,如何精确还原用户操作的问题。
第一方面,本申请实施例提供一种用户操作的还原方法,应用于服务器,包括:
接收终端发送的指令记录和目标截屏指纹,其中,所述指令记录包括当前界面和所述当前界面对应的操作指令;
构建测试环境;
重复执行循环步骤,直至满足预设条件,确定预设方差值对应的模拟过程为用户操作过程;
所述循环步骤包括:根据所述指令记录,控制模拟器在所述当前界面执行对应的所述操作指令,并每隔预设数量的所述操作指令,执行截屏操作,得到多个截屏图像;
将所有所述截屏图像进行处理,得到各个所述截屏图像对应的截屏指纹;
确定各个所述截屏指纹与对应的所述目标截屏指纹的相似度,并根据所有所述相似度计算所述相似度的方差值。
在一种可选的实施方式中,所述指令记录还包括所述操作指令对应的操作时间,所述构建测试环境,包括:
根据第一条操作指令对应的操作时间,还原数据,得到测试数据;
获取所述终端的屏幕尺寸信息;
根据所述测试数据和所述屏幕尺寸信息构建测试环境。
在一种可选的实施方式中,所述预设条件包括所述方差值小于等于方差阈值。
在一种可选的实施方式中,所述预设条件还包括计算次数大于等于计算阈值,所述根据所有所述相似度计算所述相似度的方差值之后,还包括:
统计所述方差值的所述计算次数。
在一种可选的实施方式中,所述将所述截屏图像进行处理,得到所述截屏图像对应的截屏指纹,包括:
缩小所述截屏图像的尺寸,得到缩小截屏图像,其中,所述缩小截屏图像包括预设数量个像素;
对所述缩小截屏图像进行灰度化处理,得到灰度截屏图像;
从所述灰度截屏图像中选取预设矩阵的像素,并对所述预设矩阵的每个像素进行离散余弦变换,得到每个像素对应的变换值;
根据各个所述变换值,计算得到平均变换值;
将所述变换值大于等于所述平均变换值的像素标记为第一预设值,将所述变换值小于所述平均变换值的像素标记为第二预设值,得到二进制数组;
将所述二进制数组转换为十六进制数组,并将所述十六进制数组作为所述截屏图像对应的截屏指纹。
第二方面,本申请实施例提供一种用户操作的记录方法,应用于终端,包括:
响应用户的操作,生成指令记录,其中,所述指令记录包括当前界面和所述当前界面对应的操作指令;
每隔预设数量的所述操作指令,执行截屏操作,得到多个目标截屏图像;
将所有所述目标截屏图像进行处理,得到各个所述目标截屏图像对应的目标截屏指纹;
将所述指令记录和所述目标截屏指纹发送至服务器。
第三方面,本申请实施例提供一种用户操作的还原装置,应用于服务器,包括:
接收模块,用于接收终端发送的指令记录和目标截屏指纹,其中,所述指令记录包括当前界面和所述当前界面对应的操作指令;
构建模块,用于构建测试环境;
重复执行模块,用于重复执行循环步骤,直至满足预设条件,确定预设方差值对应的模拟过程为用户操作过程;
所述循环步骤包括:根据所述指令记录,控制模拟器在所述当前界面执行对应的所述操作指令,并每隔预设数量的所述操作指令,执行截屏操作,得到多个截屏图像;
将所有所述截屏图像进行处理,得到各个所述截屏图像对应的截屏指纹;
确定各个所述截屏指纹与对应的所述目标截屏指纹的相似度,并根据所有所述相似度计算所述相似度的方差值。
第四方面,本申请实施例提供一种用户操作的记录装置,应用于终端,包括:
生成模块,用于响应用户的操作,生成指令记录,其中,所述指令记录包括当前界面和所述当前界面对应的操作指令;
执行模块,用于每隔预设数量的所述操作指令,执行截屏操作,得到多个目标截屏图像;
得到模块,用于将所有所述目标截屏图像进行处理,得到各个所述目标截屏图像对应的目标截屏指纹;
发送模块,用于将所述指令记录和所述目标截屏指纹发送至服务器。
第五方面,本申请实施例提供一种计算机设备,所述计算机设备包括存储器及处理器,所述存储器存储有计算机程序,所述计算机程序在所述处理器执行时,实现如第一方面所述的用户操作的还原方法或如第二方面所述的用户操作的记录方法。
第六方面,本申请实施例提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时,实现如第一方面所述的用户操作的还原方法或如第二方面所述的用户操作的记录方法。
本申请实施例提供的一种用户操作的还原方法及装置、记录方法及装置,其中,所述还原方法包括:接收终端发送的指令记录和目标截屏指纹;构建测试环境;重复执行循环步骤,直至满足预设条件,确定预设方差值对应的模拟过程为用户操作过程;所述循环步骤包括:根据所述指令记录,控制模拟器在所述当前界面执行对应的所述操作指令,并每隔预设数量的所述操作指令,执行截屏操作,得到多个截屏图像;将所有所述截屏图像进行处理,得到各个所述截屏图像对应的截屏指纹;确定各个所述截屏指纹与对应的所述目标截屏指纹的相似度,并根据所有所述相似度计算所述相似度的方差值。通过构建测试环境,确保还原过程的环境与用户使用时的环境一致;通过将截屏图像转换为截屏指纹,减少服务器的占用内存;通过循环获取截屏图像,将截屏图像转换为截屏指纹,然后确定截屏指纹与目标截屏指纹的相似度,根据所有相似度计算相似度的方差值的过程,当满足预设条件时,确定预设方差值对应的模拟过程为用户操作过程,能够仅利用少量信息,精确还原用户操作,提高用户使用体验。
附图说明
为了更清楚地说明本申请的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本申请的某些实施例,因此不应被看作是对本申请保护范围的限定。在各个附图中,类似的构成部分采用类似的编号。
图1示出了本申请实施例提供的一种用户操作的还原方法的步骤流程示意框图;
图2示出了本申请实施例提供的一种当前界面的显示图;
图3示出了本申请实施例提供的一种用户操作的记录方法的步骤流程示意框图;
图4示出了本申请实施例提供的一种用户操作的还原装置的结构示意框图;
图5示出了本申请实施例提供的一种用户操作的记录装置的结构示意框图。
具体实施方式
下面将结合本申请实施例中附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。
通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围,而是仅仅表示本申请的选定实施例。基于本申请的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本申请保护的范围。
在下文中,可在本申请的各种实施例中使用的术语“包括”、“具有”及其同源词仅意在表示特定特征、数字、步骤、操作、元件、组件或前述项的组合,并且不应被理解为首先排除一个或更多个其它特征、数字、步骤、操作、元件、组件或前述项的组合的存在或增加一个或更多个特征、数字、步骤、操作、元件、组件或前述项的组合的可能性。
此外,术语“第一”、“第二”、“第三”等仅用于区分描述,而不能理解为指示或暗示相对重要性。
除非另有限定,否则在这里使用的所有术语(包括技术术语和科学术语)具有与本申请的各种实施例所属领域普通技术人员通常理解的含义相同的含义。所述术语(诸如在一般使用的词典中限定的术语)将被解释为具有与在相关技术领域中的语境含义相同的含义并且将不被解释为具有理想化的含义或过于正式的含义,除非在本申请的各种实施例中被清楚地限定。
实施例1
请参照图1,图1示出了本申请实施例提供的一种用户操作的还原方法的步骤流程示意框图。
如图1所示,本申请实施例提供的一种用户操作的还原方法,可以应用于服务器,包括S110至S130。
S110:接收终端发送的指令记录和目标截屏指纹,其中,所述指令记录包括当前界面和所述当前界面对应的操作指令。
在本实施例中,所述目标截屏指纹为用户操作过程中的截屏图像对应的截屏指纹。所述当前界面为终端的当前界面,请一并参阅图2,图2示出了本申请实施例提供的一种当前界面的显示图。当前界面200包括多个应用210。所述当前界面对应的操作指令包括滑动指令、点击指令和输入内容指令。
进一步地,所述接收终端发送的指令记录和目标截屏指纹之前,所述服务器接收并存储所述终端发送的屏幕尺寸信息。
S120:构建测试环境。
在本实施例中,构建测试环境,能够确保还原过程的环境与用户使用时的环境一致,从而提高还原用户操作的准确性。
所述指令记录还包括所述操作指令对应的操作时间,所述构建测试环境,包括:
根据第一条操作指令对应的操作时间,还原数据,得到测试数据;
获取所述终端的屏幕尺寸信息;
根据所述测试数据和所述屏幕尺寸信息构建测试环境。
具体地,所述服务器根据第一条操作指令对应的操作开始时间,从生产数据库还原数据,得到测试数据。
S130:重复执行循环步骤,直至满足预设条件,确定预设方差值对应的模拟过程为用户操作过程;
所述循环步骤包括:根据所述指令记录,控制模拟器在所述当前界面执行对应的所述操作指令,并每隔预设数量的所述操作指令,执行截屏操作,得到多个截屏图像;
将所有所述截屏图像进行处理,得到各个所述截屏图像对应的截屏指纹;
确定各个所述截屏指纹与对应的所述目标截屏指纹的相似度,并根据所有所述相似度计算所述相似度的方差值。
在本实施例中,所述预设条件包括所述方差值小于等于所述方差阈值。也就是说,当所述方差值小于等于所述方差阈值时,确定预设方差值为所述方差值,并将所述方差值对应的模拟过程为用户操作过程;当所述方差值大于所述方差阈值时,重复执行循环步骤。所述方差值越小,说明所述方差值对应的模拟过程越接近用户操作的过程。优选地,所述预设方差值为最小方差值。
可以理解的是,通过将截屏图像转换为截屏指纹,减少服务器的占用内存。同时,在用户操作的还原过程中,根据各个截屏指纹与对应的目标截屏指纹的相似度,计算所有相似度的方差值,当满足预设条件时,选取最小方差值对应的模拟过程为用户操作过程,精确还原了用户操作。
在一种可选的实施方式中,所述将所述截屏图像进行处理,得到所述截屏图像对应的截屏指纹,包括:
缩小所述截屏图像的尺寸,得到缩小截屏图像,其中,所述缩小截屏图像包括预设数量个像素;
对所述缩小截屏图像进行灰度化处理,得到灰度截屏图像;
从所述灰度截屏图像中选取预设矩阵的像素,并对所述预设矩阵的每个像素进行离散余弦变换,得到每个像素对应的变换值;
根据各个所述变换值,计算得到平均变换值;
将所述变换值大于等于所述平均变换值的像素标记为第一预设值,将所述变换值小于所述平均变换值的像素标记为第二预设值,得到二进制数组;
将所述二进制数组转换为十六进制数组,并将所述十六进制数组作为所述截屏图像对应的截屏指纹。
具体地,缩小截屏图像为32*32大小的截屏图像。离散余弦变换(Discrete CosineTransform,DCT)是一种特殊的傅立叶变换,将图像从像素域变换为频率域,并且DCT矩阵从左上角到右下角代表越来越高频率的系数,但是除左上角外,其他地方的系数为0或接近0,因此只保留左上角8*8的矩阵低频区域。
在本实施例中,所述第一预设值为1,所述第二预设值为0。由于计算离散余弦变换使用的是8*8的矩阵,因此生成8*8的二进制数组,有64个值。作为一个示例,得到的二进制数组为0 1 0 1 0 1 0 1 0 0 0 1 0 1 1 1 1 1 0 1 0 0 0 1 0 0 1 1 0 1 0 1 1 1 1 10 1 0 1 0 1 0 1 0 1 0 1 0 1 0 1 0 1 0 1 0 1 0 1 0 1 0 1。将该二进制数组转化为十六进制数组,即每4位数字映射为1位,如0101—>5,得到的十六进制数组为5517d135f5555555。将5517d135f5555555作为所述截屏图像对应的截屏指纹。可以理解的是,在一种可选的实施方式中,所述第一预设值为0,所述第二预设值为1。
进一步地,所述预设条件还包括计算次数大于等于计算阈值,所述根据所有所述相似度计算所述相似度的方差值之后,还包括:
统计所述方差值的所述计算次数。
具体地,当所述计算次数大于等于所述计算阈值时,确定预设方差值对应的模拟过程为用户操作过程;当所述计算次数小于所述计算阈值时,重复执行循环步骤。
在一种可选的实施方式中,所述确定各个所述截屏指纹与对应的所述目标截屏指纹的相似度,包括:
分别计算各个所述截屏指纹与所述目标截屏指纹的汉明距离;
根据所述汉明距离,确定各个所述截屏指纹与所述目标截屏指纹的相似度。
具体地,所述汉明距离(Hamming distance)表示两个等长字符串在对应位置上不同字符的数目。例如,截屏指纹为5517d135f5555555,目标截屏指纹为5417d145f5515525,则截屏指纹和目标截屏指纹的汉明距离为4。汉明距离越小,表示两个字符串越相似。
可以理解的是,还可以使用余弦相似性(cosine similarity)、欧氏距离(Euclidean distance)、编辑距离(edit distance)等方法确定各个所述截屏指纹与对应的所述目标截屏指纹的相似度,在此不作限定。
可选地,所述确定预设方差值对应的模拟过程为用户操作过程之后,输出所述预设方差对应的模拟过程的回放视频,以便工作人员根据回放视频确定终端出现的程序故障,为解决程序故障提供基础。
本申请实施例提供的一种用户操作的还原方法,所述还原方法包括:接收终端发送的指令记录和目标截屏指纹;构建测试环境;重复执行循环步骤,直至满足预设条件,确定预设方差值对应的模拟过程为用户操作过程;所述循环步骤包括:根据所述指令记录,控制模拟器在所述当前界面执行对应的所述操作指令,并每隔预设数量的所述操作指令,执行截屏操作,得到多个截屏图像;将所有所述截屏图像进行处理,得到各个所述截屏图像对应的截屏指纹;确定各个所述截屏指纹与对应的所述目标截屏指纹的相似度,并根据所有所述相似度计算所述相似度的方差值。通过构建测试环境,确保还原过程的环境与用户使用时的环境一致;通过将截屏图像转换为截屏指纹,减少服务端的占用内存;通过循环获取截屏图像,将截屏图像转换为截屏指纹,然后确定截屏指纹与目标截屏指纹的相似度,根据所有相似度计算相似度的方差值的过程,当满足预设条件时,确定预设方差值对应的模拟过程为用户操作过程,能够仅利用少量信息,精确还原用户操作,提高用户使用体验。
实施例2
请参照图3,图3示出了本申请实施例提供的一种用户操作的记录方法的步骤流程示意框图。
如图3所示,本申请实施例提供的一种用户操作的记录方法,可以应用于终端,包括S310至S340。
S310:响应用户的操作,生成指令记录,其中,所述指令记录包括当前界面和所述当前界面对应的操作指令。
在本实施例中,所述操作包括滑动、点击等触控操作和基于外接设备进行的滑动、点击等操作。
S320:每隔预设数量的所述操作指令,执行截屏操作,得到多个目标截屏图像。
在本实施例中,所述预设数量可以根据实际情况设置,在此不作限定。
S330:将所有所述目标截屏图像进行处理,得到各个所述目标截屏图像对应的目标截屏指纹。
在本实施例中,“将所有所述目标截屏图像进行处理,得到各个所述目标截屏图像对应的目标截屏指纹”的原理与实施例1中“将所有截屏图像进行处理,得到所述截屏图像对应的截屏指纹”的原理相同,在此不作赘述。
S340:将所述指令记录和所述目标截屏指纹发送至服务器。
在实施例中,所述指令记录还包括所述操作指令对应的操作时间。
可以理解的是,本实施例中的指令记录和目标截屏指纹精简,降低了终端需要记录的额外操作日志信息,减少了操作日志的上传时间和上传流量消耗,提高了用户的使用体验。
实施例3
请参照图4,图4示出了本申请实施例提供的一种用户操作的还原装置的结构示意框图。所述用户操作的还原装置500可以应用于服务器,包括接收模块510、构建模块520及重复执行模块530。
其中,所述接收模块510,用于接收终端发送的指令记录和目标截屏指纹,其中,所述指令记录包括当前界面和所述当前界面对应的操作指令;
所述构建模块520,用于构建测试环境;
所述重复执行模块530,用于重复执行循环步骤,直至满足预设条件,确定预设方差值对应的模拟过程为用户操作过程;
所述循环步骤包括:根据所述指令记录,控制模拟器在所述当前界面执行对应的所述操作指令,并每隔预设数量的所述操作指令,执行截屏操作,得到多个截屏图像;
将所有所述截屏图像进行处理,得到各个所述截屏图像对应的截屏指纹;
确定各个所述截屏指纹与对应的所述目标截屏指纹的相似度,并根据所有所述相似度计算所述相似度的方差值。
上述装置用于执行实施例1提供的方法,其实现原理和技术效果类似,在此不再赘述。
实施例4
请参照图5,图5示出了本申请实施例提供的一种用户操作的记录装置的结构示意框图。所述用户操作的记录装置700可以应用于终端,包括生成模块710、执行模块720、得到模块730及发送模块740。
其中,所述生成模块710,用于响应用户的操作,生成指令记录,其中,所述指令记录包括当前界面和所述当前界面对应的操作指令;
所述执行模块720,用于每隔预设数量的所述操作指令,执行截屏操作,得到多个目标截屏图像;
所述得到模块730,用于将所有所述目标截屏图像进行处理,得到各个所述目标截屏图像对应的目标截屏指纹;
所述发送模块740,用于将所述指令记录和所述目标截屏指纹发送至服务器。
上述装置用于执行实施例2提供的方法,其实现原理和技术效果类似,在此不再赘述。
本申请实施例还公开了一种计算机设备,所述计算机设备包括存储器及处理器,所述存储器存储有计算机程序,所述计算机程序在所述处理器执行时,实现如实施例1所述的用户操作的还原方法或如实施例2所述的用户操作的记录方法。
本申请实施例还公开了一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时,实现如实施例1所述的用户操作的还原方法或如实施例2所述的用户操作的记录方法。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,也可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,附图中的流程图和结构图显示了根据本申请的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在作为替换的实现方式中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,结构图和/或流程图中的每个方框、以及结构图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
另外,在本申请各个实施例中的各功能模块或单元可以集成在一起形成一个独立的部分,也可以是各个模块单独存在,也可以两个或更多个模块集成形成一个独立的部分。
所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是智能手机、个人计算机、服务器、或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。

Claims (10)

1.一种用户操作的还原方法,其特征在于,应用于服务器,包括:
接收终端发送的指令记录和目标截屏指纹,其中,所述指令记录包括当前界面和所述当前界面对应的操作指令;
构建测试环境;
重复执行循环步骤,直至满足预设条件,确定预设方差值对应的模拟过程为用户操作过程;
所述循环步骤包括:根据所述指令记录,控制模拟器在所述当前界面执行对应的所述操作指令,并每隔预设数量的所述操作指令,执行截屏操作,得到多个截屏图像;
将所有所述截屏图像进行处理,得到各个所述截屏图像对应的截屏指纹;
确定各个所述截屏指纹与对应的所述目标截屏指纹的相似度,并根据所有所述相似度计算所述相似度的方差值。
2.根据权利要求1所述的方法,其特征在于,所述指令记录还包括所述操作指令对应的操作时间,所述构建测试环境,包括:
根据第一条操作指令对应的操作时间,还原数据,得到测试数据;
获取所述终端的屏幕尺寸信息;
根据所述测试数据和所述屏幕尺寸信息构建测试环境。
3.根据权利要求1所述的方法,其特征在于,所述预设条件包括所述方差值小于等于方差阈值。
4.根据权利要求1所述的方法,其特征在于,所述预设条件还包括计算次数大于等于计算阈值,所述根据所有所述相似度计算所述相似度的方差值之后,还包括:
统计所述方差值的所述计算次数。
5.根据权利要求1所述的方法,其特征在于,所述将所述截屏图像进行处理,得到所述截屏图像对应的截屏指纹,包括:
缩小所述截屏图像的尺寸,得到缩小截屏图像,其中,所述缩小截屏图像包括预设数量个像素;
对所述缩小截屏图像进行灰度化处理,得到灰度截屏图像;
从所述灰度截屏图像中选取预设矩阵的像素,并对所述预设矩阵的每个像素进行离散余弦变换,得到每个像素对应的变换值;
根据各个所述变换值,计算得到平均变换值;
将所述变换值大于等于所述平均变换值的像素标记为第一预设值,将所述变换值小于所述平均变换值的像素标记为第二预设值,得到二进制数组;
将所述二进制数组转换为十六进制数组,并将所述十六进制数组作为所述截屏图像对应的截屏指纹。
6.一种用户操作的记录方法,其特征在于,应用于终端,包括:
响应用户的操作,生成指令记录,其中,所述指令记录包括当前界面和所述当前界面对应的操作指令;
每隔预设数量的所述操作指令,执行截屏操作,得到多个目标截屏图像;
将所有所述目标截屏图像进行处理,得到各个所述目标截屏图像对应的目标截屏指纹;
将所述指令记录和所述目标截屏指纹发送至服务器。
7.一种用户操作的还原装置,其特征在于,应用于服务器,包括:
接收模块,用于接收终端发送的指令记录和目标截屏指纹,其中,所述指令记录包括当前界面和所述当前界面对应的操作指令;
构建模块,用于构建测试环境;
重复执行模块,用于重复执行循环步骤,直至满足预设条件,确定预设方差值对应的模拟过程为用户操作过程;
所述循环步骤包括:根据所述指令记录,控制模拟器在所述当前界面执行对应的所述操作指令,并每隔预设数量的所述操作指令,执行截屏操作,得到多个截屏图像;
将所有所述截屏图像进行处理,得到各个所述截屏图像对应的截屏指纹;
确定各个所述截屏指纹与对应的所述目标截屏指纹的相似度,并根据所有所述相似度计算所述相似度的方差值。
8.一种用户操作的记录装置,其特征在于,应用于终端,包括:
生成模块,用于响应用户的操作,生成指令记录,其中,所述指令记录包括当前界面和所述当前界面对应的操作指令;
执行模块,用于每隔预设数量的所述操作指令,执行截屏操作,得到多个目标截屏图像;
得到模块,用于将所有所述目标截屏图像进行处理,得到各个所述目标截屏图像对应的目标截屏指纹;
发送模块,用于将所述指令记录和所述目标截屏指纹发送至服务器。
9.一种计算机设备,其特征在于,所述计算机设备包括存储器及处理器,所述存储器存储有计算机程序,所述计算机程序在所述处理器执行时,实现如权利要求1至5中任一项所述的用户操作的还原方法或如权利要求6中所述的用户操作的记录方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时,实现如权利要求1至5中任一项所述的用户操作的还原方法或如权利要求6所述的用户操作的记录方法。
CN202111626790.0A 2021-12-28 2021-12-28 一种用户操作的还原方法及装置、记录方法及装置 Active CN114327203B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111626790.0A CN114327203B (zh) 2021-12-28 2021-12-28 一种用户操作的还原方法及装置、记录方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111626790.0A CN114327203B (zh) 2021-12-28 2021-12-28 一种用户操作的还原方法及装置、记录方法及装置

Publications (2)

Publication Number Publication Date
CN114327203A true CN114327203A (zh) 2022-04-12
CN114327203B CN114327203B (zh) 2023-08-04

Family

ID=81015868

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111626790.0A Active CN114327203B (zh) 2021-12-28 2021-12-28 一种用户操作的还原方法及装置、记录方法及装置

Country Status (1)

Country Link
CN (1) CN114327203B (zh)

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001015065A1 (en) * 1999-08-19 2001-03-01 Cross Match Technologies, Inc. Method and apparatus for rolled fingerprint capture
CN106258009A (zh) * 2015-04-16 2016-12-28 华为技术有限公司 一种采集指纹的方法、指纹采集器以及终端
WO2017008744A1 (zh) * 2015-07-13 2017-01-19 西安中兴新软件有限责任公司 一种获取自动化脚本、自动化脚本的应用方法及装置
CN106354385A (zh) * 2016-08-26 2017-01-25 广东欧珀移动通信有限公司 图像处理方法、装置及终端设备
CN108475136A (zh) * 2016-01-06 2018-08-31 华为技术有限公司 一种指纹识别方法以及电子设备
US20180336363A1 (en) * 2015-02-27 2018-11-22 International Business Machines Corporation Using internal sensors to detect adverse interference and take defensive actions
US20190188442A1 (en) * 2017-12-01 2019-06-20 Invensense, Inc. Correcting a fingerprint image
WO2019236328A1 (en) * 2018-06-07 2019-12-12 Invensense, Inc. Correcting a fingerprint image
CN111782514A (zh) * 2020-06-23 2020-10-16 京东数字科技控股有限公司 一种测试数据的比对方法和装置
CN112348627A (zh) * 2020-10-21 2021-02-09 深圳Tcl新技术有限公司 应用推送方法、装置、设备及计算机可读存储介质
CN112683798A (zh) * 2020-12-14 2021-04-20 长春长光辰谱科技有限公司 一种基于高光谱成像相机的识别鉴定系统
WO2021109961A1 (zh) * 2019-12-05 2021-06-10 维沃移动通信有限公司 快捷标识生成方法、电子设备及介质
CN113391741A (zh) * 2020-11-13 2021-09-14 腾讯科技(深圳)有限公司 操作校验方法和装置、存储介质及电子设备

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001015065A1 (en) * 1999-08-19 2001-03-01 Cross Match Technologies, Inc. Method and apparatus for rolled fingerprint capture
US20180336363A1 (en) * 2015-02-27 2018-11-22 International Business Machines Corporation Using internal sensors to detect adverse interference and take defensive actions
CN106258009A (zh) * 2015-04-16 2016-12-28 华为技术有限公司 一种采集指纹的方法、指纹采集器以及终端
WO2017008744A1 (zh) * 2015-07-13 2017-01-19 西安中兴新软件有限责任公司 一种获取自动化脚本、自动化脚本的应用方法及装置
CN108475136A (zh) * 2016-01-06 2018-08-31 华为技术有限公司 一种指纹识别方法以及电子设备
CN106354385A (zh) * 2016-08-26 2017-01-25 广东欧珀移动通信有限公司 图像处理方法、装置及终端设备
US20190188442A1 (en) * 2017-12-01 2019-06-20 Invensense, Inc. Correcting a fingerprint image
WO2019236328A1 (en) * 2018-06-07 2019-12-12 Invensense, Inc. Correcting a fingerprint image
WO2021109961A1 (zh) * 2019-12-05 2021-06-10 维沃移动通信有限公司 快捷标识生成方法、电子设备及介质
CN111782514A (zh) * 2020-06-23 2020-10-16 京东数字科技控股有限公司 一种测试数据的比对方法和装置
CN112348627A (zh) * 2020-10-21 2021-02-09 深圳Tcl新技术有限公司 应用推送方法、装置、设备及计算机可读存储介质
CN113391741A (zh) * 2020-11-13 2021-09-14 腾讯科技(深圳)有限公司 操作校验方法和装置、存储介质及电子设备
CN112683798A (zh) * 2020-12-14 2021-04-20 长春长光辰谱科技有限公司 一种基于高光谱成像相机的识别鉴定系统

Also Published As

Publication number Publication date
CN114327203B (zh) 2023-08-04

Similar Documents

Publication Publication Date Title
US10699388B2 (en) Digital image fill
CN112511821B (zh) 视频卡顿检测方法、装置和存储介质
CN104246767A (zh) 用于云同步系统的遥测系统
CN108734304B (zh) 一种数据模型的训练方法、装置、及计算机设备
US11055816B2 (en) Image processing device, image processing method, and image processing program
CN110362547B (zh) 日志文件的编码、解析、存储方法和装置
CN111105375A (zh) 图像生成方法及其模型训练方法、装置及电子设备
CN105404472A (zh) 一种压缩日志时间数据的存储空间的方法及装置
CN114764774A (zh) 瑕疵检测方法、装置、电子设备及计算机可读存储介质
CN111241344A (zh) 视频查重方法、系统、服务器及存储介质
CN113516697A (zh) 图像配准的方法、装置、电子设备及计算机可读存储介质
CN111741329B (zh) 一种视频处理方法、装置、设备及存储介质
CN112052157B (zh) 测试报文的构造方法、装置及系统
CN112436973B (zh) 一种用于云游戏的服务体验指标自动化测试方法与设备
CN114327203B (zh) 一种用户操作的还原方法及装置、记录方法及装置
JP2021089711A (ja) 動画ブレの検出方法及び装置
CN115858049A (zh) Rpa流程组件化编排方法、装置、设备和介质
CN107357906B (zh) 数据处理方法、装置及图像采集设备
CN111950727B (zh) 图像数据的神经网络训练和测试方法及设备
CN116257146B (zh) 编码、解码的方法、装置、电子设备及存储介质
CN112100075B (zh) 一种用户界面回放方法、装置、设备及存储介质
CN114418130B (zh) 一种模型训练方法、数据处理方法及相关设备
CN112381408B (zh) 质检方法、装置和电子设备
CN109901990B (zh) 一种业务系统的测试方法、装置及设备
US20230112822A1 (en) Character recognition method, character recognition device and non-transitory computer readable medium

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant