CN113094291A - 锁屏界面的匹配验证方法、装置、设备及存储介质 - Google Patents

锁屏界面的匹配验证方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN113094291A
CN113094291A CN202110645102.9A CN202110645102A CN113094291A CN 113094291 A CN113094291 A CN 113094291A CN 202110645102 A CN202110645102 A CN 202110645102A CN 113094291 A CN113094291 A CN 113094291A
Authority
CN
China
Prior art keywords
value
pixel
matching
image
preset
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110645102.9A
Other languages
English (en)
Other versions
CN113094291B (zh
Inventor
吴长占
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Zooking Software Co ltd
Original Assignee
Shenzhen Zooking Software Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Zooking Software Co ltd filed Critical Shenzhen Zooking Software Co ltd
Priority to CN202110645102.9A priority Critical patent/CN113094291B/zh
Publication of CN113094291A publication Critical patent/CN113094291A/zh
Application granted granted Critical
Publication of CN113094291B publication Critical patent/CN113094291B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3688Test management for test execution, e.g. scheduling of test suites
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/75Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
    • G06V10/751Comparing pixel values or logical combinations thereof, or feature values having positional relevance, e.g. template matching

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Software Systems (AREA)
  • Databases & Information Systems (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • Multimedia (AREA)
  • Computer Hardware Design (AREA)
  • Quality & Reliability (AREA)
  • General Engineering & Computer Science (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

本发明涉及图像匹配领域,公开了一种锁屏界面的匹配验证方法、装置、设备及存储介质。该方法包括:获取所述锁屏界面的触控指令,以及分析所述触控指令,基于预置界面坐标规则,生成坐标变换数据;根据所述坐标变换数据,对所述锁屏界面进行界面变换处理,生成待匹配的变换图像;对所述变换图像进行二值化处理,得到样本图像;将所述样本图像与预置模板图像进行精度匹配处理,得到匹配概率值;判断所述匹配概率值是否大于设置的概率阈值;若大于所述概率阈值,则访问所述模板图像对应的控件数据,执行所述控件数据的指令操作。

Description

锁屏界面的匹配验证方法、装置、设备及存储介质
技术领域
本发明涉及图像匹配领域,尤其涉及一种锁屏界面的匹配验证方法、装置、设备及存储介质。
背景技术
在锁屏界面的开发过程中设计一些界面变化增加交互过程,提高锁屏界面中交互乐趣。在开发完成后,由专门的测试人员对交互界面进行测试,查看锁屏界面的交互是否能稳定实现,但是在这个过程中测试人员需要在专门的软件中对锁屏界面变换程度进行检测,观察界面的参数指标是否达到设计需求。
在测试人员进行测试过程中,繁琐的测试软件操作使得测试人员很多时间都是在用在软件操作上并较快的得出结论。因此,需要一种技术使得测试人员在使用时,可直观观察到移动终端的展示内容,避免了需要逐一对终端进行操作,从而提高了测试人员的测试效率。
发明内容
本发明的主要目的在于解决锁屏界面的交互效果测试过程中操作繁琐效率低下的技术问题。
本发明第一方面提供了一种锁屏界面的匹配验证方法,包括步骤:
获取所述锁屏界面的触控指令,以及分析所述触控指令,基于预置界面坐标规则,生成坐标变换数据;
根据所述坐标变换数据,对所述锁屏界面进行界面变换处理,生成待匹配的变换图像;
对所述变换图像进行二值化处理,得到样本图像;
将所述样本图像与预置模板图像进行精度匹配处理,得到匹配概率值;
判断所述匹配概率值是否大于设置的概率阈值;
若大于所述概率阈值,则访问所述模板图像对应的控件数据,执行所述控件数据的指令操作。
可选的,在本发明第一方面的第一种实现方式中,所述对所述变换图像进行二值化处理,得到样本图像包括:
根据预置转换阈值分析算法,对所述变换图像进行像素分析处理,计算出转换阈值;
读取所述变换图像中的像素值,判断所述像素值是否大于所述转换阈值;
若大于,则将所述像素值调整为255;
若小于,则将所述像素值调整为0;
将所述变换图像中所有的像素值进行判断调整处理后,得到样本图像。
可选的,在本发明第一方面的第二种实现方式中,所述根据预置转换阈值分析算法,对所述变换图像进行像素分析处理,计算出转换阈值包括:
随机生成测试值;
分析得出所述变换图像中像素值小于所述测试值的所有像素,生成后置像素集,以及分析得出所述变换图像中像素值大于所述测试值的所有像素,生成前置像素集;
计算所述后置像素集对应的像素平均值和像素总和值,得到后置平均值和后置总和值,以及计算所述前置像素集对应的像素平均值和像素总和值,得到前置平均值和前置总和值;
根据预置公式V=F*B*(FM-BM)^2,计算得出测试均衡值,其中,V为测试均衡值,F为前置总和值,B为后置总和值,FM为前置平均值,BM为后置平均值;
判断所述测试均衡值是否小于预置均衡阈值;
若小于,则将所述测试值确定为转换阈值;
若大于,则调整所述测试值的数值大小,重新进行分析判断。
可选的,在本发明第一方面的第三种实现方式中,所述对所述变换图像进行二值化处理,得到样本图像还包括:
读取所述变换图像的所有像素值,生成像素值矩阵;
判断所述像素值矩阵中的元素值是否大于预置转换阈值;
若大于,则将所述元素值调整为255;
若小于,则将所述元素值调整为0;
将所述像素值矩阵中的所有元素值进行判断调整后,得到调整像素矩阵;
基于所述调整像素矩阵中的每个元素值,生成样本图像。
可选的,在本发明第一方面的第四种实现方式中,所述对所述变换图像进行二值化处理,得到样本图像还包括:
基于RBG通道,将所述变换图像中像素进行灰度化处理,生成RGB灰度处理矩阵;
判断所述RGB灰度处理矩阵中的元素值是否大于预置转换阈值;
若大于,则将所述元素值调整为255;
若小于,则将所述元素值调整为0;
将所述RGB灰度处理矩中的所有元素值进行判断调整后,得到调整像素矩阵;
基于所述调整像素矩阵中的每个元素值,生成样本图像。
可选的,在本发明第一方面的第五种实现方式中,所述将所述样本图像与预置模板图像进行精度匹配处理,得到匹配概率值包括:
读取所述样本图像的像素值,生成第一像素矩阵,以及读取预置模板图像的像素值,生成所述第一像素矩阵同样形状的第二像素矩阵;
将所述第一像素矩阵与所述第二像素矩阵中的元素进行一一比对,生成元素匹配数值;
读取所述第一像素矩阵中的元素总数值,以及将所述元素匹配数值与所述元素总数值相除,得到匹配概率值。
可选的,在本发明第一方面的第六种实现方式中,在所述访问所述模板图像对应的控件数据,执行所述控件数据的指令操作之后,还包括:
读取所述锁屏界面对应移动端型号的特征字符,读取所述变换图像对应的生成日期字符;
基于所述特征字符和所述生成日期字符,对所述变换图像进行命名存储处理,以便人工抽查验证。
本发明第二方面提供了一种锁屏界面的匹配验证装置,包括:
分析模块,用于获取所述锁屏界面的触控指令,以及分析所述触控指令,基于预置界面坐标规则,生成坐标变换数据;
变换模块,用于根据所述坐标变换数据,对所述锁屏界面进行界面变换处理,生成待匹配的变换图像;
二值化模块,用于对所述变换图像进行二值化处理,得到样本图像;
精度匹配模块,用于将所述样本图像与预置模板图像进行精度匹配处理,得到匹配概率值;
判断模块,用于判断所述匹配概率值是否大于设置的概率阈值;
访问执行模块,用于若大于所述概率阈值,则访问所述模板图像对应的控件数据,执行所述控件数据的指令操作。
本发明第三方面提供了一种锁屏界面的匹配验证设备,包括:存储器和至少一个处理器,所述存储器中存储有指令,所述存储器和所述至少一个处理器通过线路互连;所述至少一个处理器调用所述存储器中的所述指令,以使得所述锁屏界面的匹配验证设备执行上述的锁屏界面的匹配验证方法。
本发明的第四方面提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述的锁屏界面的匹配验证方法。
在本发明实施例中,通过响应于监测到的作用在当前界面上的操作事件,获取所述操作事件对应的操作位置坐标和操作方式信息。基于预设的移动端屏幕坐标规则及操作屏幕坐标信息确定同步操作区域,截取变换图像。根据二值化的界面的像素值分布匹配,实现变换图像和模板图像的匹配验证,得到验证结果,实现了验证数据的快速验证处理,提高了测试人员的测试效率。
附图说明
图1为本发明实施例中锁屏界面的匹配验证方法的一个实施例示意图;
图2为本发明实施例中锁屏界面的匹配验证方法的另一个实施例示意图;
图3为本发明实施例中锁屏界面的匹配验证装置的一个实施例示意图;
图4为本发明实施例中锁屏界面的匹配验证装置的另一个实施例示意图;
图5为本发明实施例中锁屏界面的匹配验证设备的一个实施例示意图。
具体实施方式
本发明实施例提供了一种锁屏界面的匹配验证方法、装置、设备及存储介质。
本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外,术语“包括”或“具有”及其任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
为便于理解,下面对本发明实施例的具体流程进行描述,请参阅图1,本发明实施例中锁屏界面的匹配验证方法的一个实施例包括:
101、获取锁屏界面的触控指令,以及分析触控指令,基于预置界面坐标规则,生成坐标变换数据;
在本实施例中,锁屏界面的滑动、点击、双击等交互手势会产生锁屏界面的图像变化,而计算手势数据和触控分析数据的依据是基于界面的坐标进行计算,例如选择左下角的顶点作为确定坐标系变换的原点,屏幕下方沿显示界面方向为X轴的正方向,屏幕左边缘沿显示界面方向为Y轴的正方向,经过坐标轴的建立规则,将锁屏界面的滑动、点击、双击等交互方式转换坐标数据,坐标变化数据可以使用矩阵方式进行左右乘积变换锁屏界面的像素值大小,转换整个显示界面的显示效果。
102、根据坐标变换数据,对锁屏界面进行界面变换处理,生成待匹配的变换图像;
在本实施例中,在基于坐标变换数据进行变换时,将锁屏界面的像素值与坐标变换数据的矩阵左右相乘计算,得到变换后的像素值矩阵。基于像素值矩阵的像素值分布调整锁屏界面的像素值大小,最终生成变换图像。在变换图像过程中,可以组成一个变换的相乘矩阵集,在矩阵相乘过程中,是逐步相互乘积,使得变换图像能呈现更多的显示效果,由此可以带来更好的交互体验。
103、对变换图像进行二值化处理,得到样本图像;
在本实施例中,二值化过程中,二值化的具体分析较为重要,不同的二值化依据则会产生不同的分析显示效果,像素可以单独分析也可以组合分析。
优选的,本步骤可以采取以下方式:
1031、读取变换图像的所有像素值,生成像素值矩阵;
1032、判断像素值矩阵中的元素值是否大于预置转换阈值;
1033、若大于,则将元素值调整为255;
1034、若小于,则将元素值调整为0;
1035、将像素值矩阵中的所有元素值进行判断调整后,得到调整像素矩阵;
1036、基于调整像素矩阵中的每个元素值,生成样本图像。
在1031-1036步骤中,采用的是所有像素进行逐个分析像素的色彩亮度值,例如转换阈值设置为147,则大于147的像素值的像素,将被调整成255的色彩值,而小于147的像素值的像素将被调整为0。对整个变换图像界面进行像素判断调整后,即可生成调整像素矩阵。调整像素矩阵中的元素只有255和0两种值的取值,基于调整像素矩阵的元素值,生成样本图像。需要说明的1036的样本图像可以是每个像素的单独显示的图像,该图像可能存在RBG三种像素的显示,但是像素的色彩情况不影响样本图像的生成。
优选的,本步骤还可以采取以下实现方式:
1037、基于RBG通道,将变换图像中像素进行灰度化处理,生成RGB灰度处理矩阵;
1038、判断RGB灰度处理矩阵中的元素值是否大于预置转换阈值;
1039、若大于,则将元素值调整为255;
10310、若小于,则将元素值调整为0;
10311、将RGB灰度处理矩阵中的所有元素值进行判断调整后,得到调整像素矩阵;
10312、基于调整像素矩阵中的每个元素值,生成样本图像。
在1037-10312的实现过程中,是以固定三个像素的捆绑进行比对,先对RGB三像素作为基础显示过程的单元,对像素通道进行灰度化处理后,提取灰度化后的三像素值,得到RGB灰度处理矩阵。
然后,基于RGB灰度处理矩阵的元素值进行判读调整。例如转换阈值为136,则大于136的RGB灰度处理矩阵中元素的元素值变换为255,而小于136的RGB灰度处理矩阵中元素的元素值变换为0。调整整个RGB灰度处理矩阵中元素值,使得RGB灰度处理矩阵只剩下255和0两种元素值,基于调整后的三通道的调整像素矩阵,生成样本图像。
104、将样本图像与预置模板图像进行精度匹配处理,得到匹配概率值;
在本实施例中,样本图像是要生成并存储以便人工进行查验,而精度匹配还是需要读取样本图像的每个像素值,生成像素矩阵。并读取模板图像的像素矩阵,比对两个像素矩阵之间相同像素的个数,并基于相同像素个数与像素矩阵中所有像素的总数相除,得到匹配概率值。
优选的,可以采用以下的步骤:
1041、读取样本图像的像素值,生成第一像素矩阵,以及读取预置模板图像的像素值,生成第一像素矩阵同样形状的第二像素矩阵;
1042、将第一像素矩阵与第二像素矩阵中的元素进行一一比对,生成元素匹配数值;
1043、读取第一像素矩阵中的元素总数值,以及将元素匹配数值与元素总数值相除,得到匹配概率值。
在1041-1043步骤中,将样本图像每个单独像素的像素值进行提取,需要说明的,生成样本图像时是R像素、G像素、B像素三个像素作为一个组合进行计算,而进行验证匹配时,样本图像是单个像素提取为第一像素矩阵进行匹配验证。将样本图像中的每个像素值进行提取得到第二像素矩阵,其中第一像素矩阵与第二像素矩阵是同样的形状,基于元素排列在元素值上进行一一比对,判断数值是否一致,一致则标记为匹配,不一致标记为不匹配。最后统计匹配的元素数量,将匹配的元素数量与元素总数相除,得到匹配概率值。例如,匹配的元素数量是8000,而元素总数是10000,则匹配概率值为80%。
105、判断匹配概率值是否大于设置的概率阈值;
在本实施例中,生成的匹配概率值为86%而概率阈值为90%,则说明该图像变换不合格,直接生成不合格的信息发送至显示终端即可。而生成的匹配概率值为96%并且概率阈值为90%,则说明该图像变换是合格的变换,进入下一步操作。
106、若大于概率阈值,则访问模板图像对应的控件数据,执行控件数据的指令操作。
在本实施例中,匹配合理后,则会产生验证合格的数据信号,基于该数据信号,抓取模板图像在系统设置中预先设置对应的控件,执行控件的操作。控件数据可以是唤醒在数据库中存储的视频数据信息,将该视频信息显示在锁屏界面。控件数据还可以跳转链接打开预设的APP界面,将该APP在锁屏界面中唤醒。需要说明的是,控件操作是为了实现交互界面的趣味性而必不可少的一步,也是检测人员需要查验的一步。
进一步,在106步骤之后,还可以执行以下步骤:
1061、读取锁屏界面对应移动端型号的特征字符,读取变换图像对应的生成日期字符;
1062、基于特征字符和生成日期字符,对变换图像进行命名存储处理,以便人工抽查验证。
在1061-1062步骤中,完成了验证操作过程后,为了使得人工能监控锁屏界面变换的情况,需要将生成的变换图像进行存储,而生成的变换图像的名称,则以运行该变换图像的移动端设备名称和变换图像的生成日期进行组合,得到变换图像的名称。将该变换图像存储在设置好的文件夹或者数据库中,以便人工能进行查验。
在本发明实施例中,通过响应于监测到的作用在当前界面上的操作事件,获取操作事件对应的操作位置坐标和操作方式信息。基于预设的移动端屏幕坐标规则及操作屏幕坐标信息确定同步操作区域,截取变换图像。根据二值化的界面的像素值分布匹配,实现变换图像和模板图像的匹配验证,得到验证结果,实现了验证数据的快速验证处理,提高了测试人员的测试效率。
请参阅图2,本发明实施例中锁屏界面的匹配验证方法的另一个实施例包括:
201、获取锁屏界面的触控指令,以及分析触控指令,基于预置界面坐标规则,生成坐标变换数据;
202、根据坐标变换数据,对锁屏界面进行界面变换处理,生成待匹配的变换图像;
201-202类似于第一实施例,请参考第一个实施例,在此不做赘述。
203、根据预置转换阈值分析算法,对变换图像进行像素分析处理,计算出转换阈值;
在203步骤中,转换阈值是不固定的,而是依据变换图像的内容而进行调整,减少固定转换阈值产生的过曝或者过暗的问题,可以提取出背景像素的基调。
优选的,本实施例可以执行以下步骤:
2031、随机生成测试值;
2032、分析得出变换图像中像素值小于测试值的所有像素,生成后置像素集,以及分析得出变换图像中像素值大于测试值的所有像素,生成前置像素集;
2033、计算后置像素集对应的像素平均值和像素总和值,得到后置平均值和后置总和值,以及计算前置像素集对应的像素平均值和像素总和值,得到前置平均值和前置总和值;
2034、根据预置公式V=F*B*(FM-BM)^2,计算得出测试均衡值,其中,V为测试均衡值,F为前置总和值,B为后置总和值,FM为前置平均值,BM为后置平均值;
2035、判断测试均衡值是否小于预置均衡阈值;
2036、若小于,则将测试值确定为转换阈值;
2037、若大于,则调整测试值的数值大小,重新进行分析判断。
在2031-2037步骤中,随机生成像素154的测试值,将变换图像中所有低于154的像素确定为后置像素集,将变换图像中所有高于154的像素确定为前置像素集。易于理解,计算后置像素集中所有像素的B-mean为平均值、B-all为总数值,计算前置像素集所有的像素的F-mean为平均值、B-all为总数值。
根据V=F*B*(FM-BM)^2计算得出V为测试均衡值,F为前置总和值,B为后置总和值,FM为前置平均值,BM为后置平均值。需要说明的是,均衡值是用来判断整个图像是否会存在显示的分布过于单一的情况。如果V大于了均衡阈值,则说明整个划分情况的方差过大,需要调整划分的测试值,将测试值154改成测试值136再次回到2032步骤中,进行划分和判断,直至V小于均衡阈值,将测试值确定为转换阈值。
204、读取变换图像中的像素值,判断像素值是否大于转换阈值;
205、若大于,则将像素值调整为255;
206、若小于,则将像素值调整为0;
207、将变换图像中所有的像素值进行判断调整处理后,得到样本图像;
在204-207步骤中,根据变换图像的每个像素的像素值大小,基于已经计算出的转换阈值136,将变换图像中小于136的像素调整为0,将变换图像中大于136的像素值调整为255,完成调整图像处理后,生成样本图像。
208、将样本图像与预置模板图像进行精度匹配处理,得到匹配概率值;
209、判断匹配概率值是否大于设置的概率阈值;
210、若大于概率阈值,则访问模板图像对应的控件数据,执行控件数据的指令操作。
208-210类似于第一实施例,请参考第一个实施例,在此不做赘述。
在本发明实施例中,通过响应于监测到的作用在当前界面上的操作事件,获取所述操作事件对应的操作位置坐标和操作方式信息。基于预设的移动端屏幕坐标规则及操作屏幕坐标信息确定同步操作区域,截取变换图像。根据二值化的界面的像素值分布匹配,实现变换图像和模板图像的匹配验证,得到验证结果,实现了验证数据的快速验证处理,提高了测试人员的测试效率。
上面对本发明实施例中锁屏界面的匹配验证方法进行了描述,下面对本发明实施例中锁屏界面的匹配验证装置进行描述,请参阅图3,本发明实施例中锁屏界面的匹配验证装置一个实施例包括:
分析模块301,用于获取所述锁屏界面的触控指令,以及分析所述触控指令,基于预置界面坐标规则,生成坐标变换数据;
变换模块302,用于根据所述坐标变换数据,对所述锁屏界面进行界面变换处理,生成待匹配的变换图像;
二值化模块303,用于对所述变换图像进行二值化处理,得到样本图像;
精度匹配模块304,用于将所述样本图像与预置模板图像进行精度匹配处理,得到匹配概率值;
判断模块305,用于判断所述匹配概率值是否大于设置的概率阈值;
访问执行模块306,用于若大于所述概率阈值,则访问所述模板图像对应的控件数据,执行所述控件数据的指令操作。
在本发明实施例中,通过响应于监测到的作用在当前界面上的操作事件,获取所述操作事件对应的操作位置坐标和操作方式信息。基于预设的移动端屏幕坐标规则及操作屏幕坐标信息确定同步操作区域,截取变换图像。根据二值化的界面的像素值分布匹配,实现变换图像和模板图像的匹配验证,得到验证结果,实现了验证数据的快速验证处理,提高了测试人员的测试效率。
请参阅图4,本发明实施例中锁屏界面的匹配验证装置的另一个实施例包括:
分析模块301,用于获取所述锁屏界面的触控指令,以及分析所述触控指令,基于预置界面坐标规则,生成坐标变换数据;
变换模块302,用于根据所述坐标变换数据,对所述锁屏界面进行界面变换处理,生成待匹配的变换图像;
二值化模块303,用于对所述变换图像进行二值化处理,得到样本图像;
精度匹配模块304,用于将所述样本图像与预置模板图像进行精度匹配处理,得到匹配概率值;
判断模块305,用于判断所述匹配概率值是否大于设置的概率阈值;
访问执行模块306,用于若大于所述概率阈值,则访问所述模板图像对应的控件数据,执行所述控件数据的指令操作。
其中,所述二值化模块303具体用于:
读取所述变换图像的所有像素值,生成像素值矩阵;
判断所述像素值矩阵中的元素值是否大于预置转换阈值;
若大于,则将所述元素值调整为255;
若小于,则将所述元素值调整为0;
将所述像素值矩阵中的所有元素值进行判断调整后,得到调整像素矩阵;
基于所述调整像素矩阵中的每个元素值,生成样本图像。
其中,所述二值化模块303还可以具体用于:
基于RBG通道,将所述变换图像中像素进行灰度化处理,生成RGB灰度处理矩阵;
判断所述RGB灰度处理矩阵中的元素值是否大于预置转换阈值;
若大于,则将所述元素值调整为255;
若小于,则将所述元素值调整为0;
将所述RGB灰度处理矩阵中的所有元素值进行判断调整后,得到调整像素矩阵;
基于所述调整像素矩阵中的每个元素值,生成样本图像。
其中,所述精度匹配模块304具体用于:
读取所述样本图像的像素值,生成第一像素矩阵,以及读取预置模板图像的像素值,生成所述第一像素矩阵同样形状的第二像素矩阵;
将所述第一像素矩阵与所述第二像素矩阵中的元素进行一一比对,生成元素匹配数值;
读取所述第一像素矩阵中的元素总数值,以及将所述元素匹配数值与所述元素总数值相除,得到匹配概率值。
其中,所述二值化模块303还包括:
分析计算单元3031,用于根据预置转换阈值分析算法,对所述变换图像进行像素分析处理,计算出转换阈值;
判断单元3032,用于读取所述变换图像中的像素值,判断所述像素值是否大于所述转换阈值;
第一调整单元3033,用于若大于,则将所述像素值调整为255;
第二调整单元3034,用于若小于,则将所述像素值调整为0;
生成单元3035,用于将所述变换图像中所有的像素值进行判断调整处理后,得到样本图像。
其中,所述分析计算单元3031具体用于:
随机生成测试值;
分析得出所述变换图像中像素值小于所述测试值的所有像素,生成后置像素集,以及分析得出所述变换图像中像素值大于所述测试值的所有像素,生成前置像素集;
计算所述后置像素集对应的像素平均值和像素总和值,得到后置平均值和后置总和值,以及计算所述前置像素集对应的像素平均值和像素总和值,得到前置平均值和前置总和值;
根据预置公式V=F*B*(FM-BM)^2,计算得出测试均衡值,其中,V为测试均衡值,F为前置总和值,B为后置总和值,FM为前置平均值,BM为后置平均值;
判断所述测试均衡值是否小于预置均衡阈值;
若小于,则将所述测试值确定为转换阈值;
若大于,则调整所述测试值的数值大小,重新进行分析判断。
其中,所述锁屏界面的匹配验证装置还包括存储模块307,所述存储模块307具体用于:
读取所述锁屏界面对应移动端型号的特征字符,读取所述变换图像对应的生成日期字符;
基于所述特征字符和所述生成日期字符,对所述变换图像进行命名存储处理,以便人工抽查验证。
在本发明实施例中,通过响应于监测到的作用在当前界面上的操作事件,获取所述操作事件对应的操作位置坐标和操作方式信息。基于预设的移动端屏幕坐标规则及操作屏幕坐标信息确定同步操作区域,截取变换图像。根据二值化的界面的像素值分布匹配,实现变换图像和模板图像的匹配验证,得到验证结果,实现了验证数据的快速验证处理,提高了测试人员的测试效率。
上面图3和图4从模块化功能实体的角度对本发明实施例中的锁屏界面的匹配验证装置进行详细描述,下面从硬件处理的角度对本发明实施例中锁屏界面的匹配验证设备进行详细描述。
图5是本发明实施例提供的一种锁屏界面的匹配验证设备的结构示意图,该锁屏界面的匹配验证设备500可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上处理器(central processing units,CPU)510(例如,一个或一个以上处理器)和存储器520,一个或一个以上存储应用程序533或数据532的存储介质530(例如一个或一个以上海量存储设备)。其中,存储器520和存储介质530可以是短暂存储或持久存储。存储在存储介质530的程序可以包括一个或一个以上模块(图示没标出),每个模块可以包括对锁屏界面的匹配验证设备500中的一系列指令操作。更进一步地,处理器510可以设置为与存储介质530通信,在锁屏界面的匹配验证设备500上执行存储介质530中的一系列指令操作。
基于锁屏界面的匹配验证设备500还可以包括一个或一个以上电源540,一个或一个以上有线或无线网络接口550,一个或一个以上输入输出接口560,和/或,一个或一个以上操作系统531,例如Windows Serve,Mac OS X,Unix,Linux,FreeBSD等等。本领域技术人员可以理解,图5示出的锁屏界面的匹配验证设备结构并不构成对基于锁屏界面的匹配验证设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
本发明还提供一种计算机可读存储介质,该计算机可读存储介质可以为非易失性计算机可读存储介质,该计算机可读存储介质也可以为易失性计算机可读存储介质,所述计算机可读存储介质中存储有指令,当所述指令在计算机上运行时,使得计算机执行所述锁屏界面的匹配验证方法的步骤。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统或装置、单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(read-only memory,ROM)、随机存取存储器(random access memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种锁屏界面的匹配验证方法,其特征在于,包括步骤:
获取所述锁屏界面的触控指令,以及分析所述触控指令,基于预置界面坐标规则,生成坐标变换数据;
根据所述坐标变换数据,对所述锁屏界面进行界面变换处理,生成待匹配的变换图像;
对所述变换图像进行二值化处理,得到样本图像;
将所述样本图像与预置模板图像进行精度匹配处理,得到匹配概率值;
判断所述匹配概率值是否大于设置的概率阈值;
若大于所述概率阈值,则访问所述模板图像对应的控件数据,执行所述控件数据的指令操作。
2.根据权利要求1所述的锁屏界面的匹配验证方法,其特征在于,所述对所述变换图像进行二值化处理,得到样本图像包括:
根据预置转换阈值分析算法,对所述变换图像进行像素分析处理,计算出转换阈值;
读取所述变换图像中的像素值,判断所述像素值是否大于所述转换阈值;
若大于,则将所述像素值调整为255;
若小于,则将所述像素值调整为0;
将所述变换图像中所有的像素值进行判断调整处理后,得到样本图像。
3.根据权利要求2所述的锁屏界面的匹配验证方法,其特征在于,所述根据预置转换阈值分析算法,对所述变换图像进行像素分析处理,计算出转换阈值包括:
随机生成测试值;
分析得出所述变换图像中像素值小于所述测试值的所有像素,生成后置像素集,以及分析得出所述变换图像中像素值大于所述测试值的所有像素,生成前置像素集;
计算所述后置像素集对应的像素平均值和像素总和值,得到后置平均值和后置总和值,以及计算所述前置像素集对应的像素平均值和像素总和值,得到前置平均值和前置总和值;
根据预置公式V=F*B*(FM-BM)^2,计算得出测试均衡值,其中,V为测试均衡值,F为前置总和值,B为后置总和值,FM为前置平均值,BM为后置平均值;
判断所述测试均衡值是否小于预置均衡阈值;
若小于,则将所述测试值确定为转换阈值;
若大于,则调整所述测试值的数值大小,重新进行分析判断。
4.根据权利要求1所述的锁屏界面的匹配验证方法,其特征在于,所述对所述变换图像进行二值化处理,得到样本图像还包括:
读取所述变换图像的所有像素值,生成像素值矩阵;
判断所述像素值矩阵中的元素值是否大于预置转换阈值;
若大于,则将所述元素值调整为255;
若小于,则将所述元素值调整为0;
将所述像素值矩阵中的所有元素值进行判断调整后,得到调整像素矩阵;
基于所述调整像素矩阵中的每个元素值,生成样本图像。
5.根据权利要求1所述的锁屏界面的匹配验证方法,其特征在于,所述对所述变换图像进行二值化处理,得到样本图像还包括:
基于RBG通道,将所述变换图像中像素进行灰度化处理,生成RGB灰度处理矩阵;
判断所述RGB灰度处理矩阵中的元素值是否大于预置转换阈值;
若大于,则将所述元素值调整为255;
若小于,则将所述元素值调整为0;
将所述RGB灰度处理矩阵中的所有元素值进行判断调整后,得到调整像素矩阵;
基于所述调整像素矩阵中的每个元素值,生成样本图像。
6.根据权利要求1所述的锁屏界面的匹配验证方法,其特征在于,所述将所述样本图像与预置模板图像进行精度匹配处理,得到匹配概率值包括:
读取所述样本图像的像素值,生成第一像素矩阵,以及读取预置模板图像的像素值,生成所述第一像素矩阵同样形状的第二像素矩阵;
将所述第一像素矩阵与所述第二像素矩阵中的元素进行一一比对,生成元素匹配数值;
读取所述第一像素矩阵中的元素总数值,以及将所述元素匹配数值与所述元素总数值相除,得到匹配概率值。
7.根据权利要求1所述的锁屏界面的匹配验证方法,其特征在于,在所述访问所述模板图像对应的控件数据,执行所述控件数据的指令操作之后,还包括:
读取所述锁屏界面对应移动端型号的特征字符,读取所述变换图像对应的生成日期字符;
基于所述特征字符和所述生成日期字符,对所述变换图像进行命名存储处理,以便人工抽查验证。
8.一种锁屏界面的匹配验证装置,其特征在于,所述锁屏界面的匹配验证装置包括:
分析模块,用于获取所述锁屏界面的触控指令,以及分析所述触控指令,基于预置界面坐标规则,生成坐标变换数据;
变换模块,用于根据所述坐标变换数据,对所述锁屏界面进行界面变换处理,生成待匹配的变换图像;
二值化模块,用于对所述变换图像进行二值化处理,得到样本图像;
精度匹配模块,用于将所述样本图像与预置模板图像进行精度匹配处理,得到匹配概率值;
判断模块,用于判断所述匹配概率值是否大于设置的概率阈值;
访问执行模块,用于若大于所述概率阈值,则访问所述模板图像对应的控件数据,执行所述控件数据的指令操作。
9.一种锁屏界面的匹配验证设备,其特征在于,所述锁屏界面的匹配验证设备包括:存储器和至少一个处理器,所述存储器中存储有指令,所述存储器和所述至少一个处理器通过线路互连;
所述至少一个处理器调用所述存储器中的所述指令,以使得所述锁屏界面的匹配验证设备执行如权利要求1-7中任一项所述的锁屏界面的匹配验证方法。
10.一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1-7中任一项所述的锁屏界面的匹配验证方法。
CN202110645102.9A 2021-06-10 2021-06-10 锁屏界面的匹配验证方法、装置、设备及存储介质 Active CN113094291B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110645102.9A CN113094291B (zh) 2021-06-10 2021-06-10 锁屏界面的匹配验证方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110645102.9A CN113094291B (zh) 2021-06-10 2021-06-10 锁屏界面的匹配验证方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN113094291A true CN113094291A (zh) 2021-07-09
CN113094291B CN113094291B (zh) 2021-10-12

Family

ID=76665984

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110645102.9A Active CN113094291B (zh) 2021-06-10 2021-06-10 锁屏界面的匹配验证方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN113094291B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090217309A1 (en) * 2008-02-27 2009-08-27 Accenture Global Services Gmbh Graphical user interface application comparator
CN104536889A (zh) * 2014-12-26 2015-04-22 北京奇虎科技有限公司 用户界面测试的方法、用例管理平台、操作终端及系统
CN108959068A (zh) * 2018-06-04 2018-12-07 广州视源电子科技股份有限公司 软件界面测试方法、设备及存储介质
CN109117358A (zh) * 2017-06-23 2019-01-01 百度在线网络技术(北京)有限公司 用于电子设备的测试方法和测试装置
US20190188066A1 (en) * 2017-12-15 2019-06-20 Texas Instruments Incorporated Methods and apparatus to provide an efficient safety mechanism for signal processing hardware
CN112506600A (zh) * 2020-12-11 2021-03-16 上海依图网络科技有限公司 用户界面的元素定位方法及其装置、介质和电子设备

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090217309A1 (en) * 2008-02-27 2009-08-27 Accenture Global Services Gmbh Graphical user interface application comparator
CN104536889A (zh) * 2014-12-26 2015-04-22 北京奇虎科技有限公司 用户界面测试的方法、用例管理平台、操作终端及系统
CN109117358A (zh) * 2017-06-23 2019-01-01 百度在线网络技术(北京)有限公司 用于电子设备的测试方法和测试装置
US20190188066A1 (en) * 2017-12-15 2019-06-20 Texas Instruments Incorporated Methods and apparatus to provide an efficient safety mechanism for signal processing hardware
CN108959068A (zh) * 2018-06-04 2018-12-07 广州视源电子科技股份有限公司 软件界面测试方法、设备及存储介质
CN112506600A (zh) * 2020-12-11 2021-03-16 上海依图网络科技有限公司 用户界面的元素定位方法及其装置、介质和电子设备

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
余锦润 等: "基于位图识别的UI自动化测试研究和应用", 《自动化与仪表》 *

Also Published As

Publication number Publication date
CN113094291B (zh) 2021-10-12

Similar Documents

Publication Publication Date Title
US20190266434A1 (en) Method and device for extracting information from pie chart
CN108229485B (zh) 用于测试用户界面的方法和装置
CN112884092B (zh) Ai模型生成方法、电子设备及存储介质
US7092572B2 (en) Method and apparatus for global image quantification verification
US20240005468A1 (en) Image distortion evaluation method and apparatus, and computer device
US20030152275A1 (en) Method and apparatus for local image quantification verification
EP3940373A1 (en) Inspection device and method
CN107229560A (zh) 一种界面显示效果测试方法、图像样张获取方法及装置
CN111309618A (zh) 页面元素定位方法、页面测试方法及相关装置
CN110913205A (zh) 视频特效的校验方法及装置
US8392887B2 (en) Systems and methods for identifying graphic user-interface components
US11906441B2 (en) Inspection apparatus, control method, and program
CN110248235B (zh) 软件教学方法、装置、终端设备及介质
US9619900B2 (en) Systems and methods for identifying anomalous test item renderings
US10783403B2 (en) Automated design testing through deep learning
CN116883698B (zh) 一种图像对比方法及相关装置
CN113094291B (zh) 锁屏界面的匹配验证方法、装置、设备及存储介质
CN117197479A (zh) 一种应用玉米果穗外表面的图像分析方法、装置、计算机设备及存储介质
US20030185447A1 (en) Method and apparatus for adaptive local image quantification verification
US20220207724A1 (en) Method of determining a distribution of stem cells in a cell image, electronic device, and storage medium
US20190149878A1 (en) Determining and correlating visual context on a user device with user behavior using digital content on the user device
Feng et al. A new mesh visual quality metric using saliency weighting-based pooling strategy
US10514779B2 (en) System and method for measuring association between screen resolution and mouse movement speed, recording medium, and computer program product
CN113052798A (zh) 屏幕老化检测模型训练方法及屏幕老化检测方法
CN113706503B (zh) 整车点云图像分析方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant