CN108182145B - 验证app界面布局的方法、装置及计算机可读存储介质 - Google Patents

验证app界面布局的方法、装置及计算机可读存储介质 Download PDF

Info

Publication number
CN108182145B
CN108182145B CN201711407884.2A CN201711407884A CN108182145B CN 108182145 B CN108182145 B CN 108182145B CN 201711407884 A CN201711407884 A CN 201711407884A CN 108182145 B CN108182145 B CN 108182145B
Authority
CN
China
Prior art keywords
screenshot
terminal interface
app
verified
storage area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201711407884.2A
Other languages
English (en)
Other versions
CN108182145A (zh
Inventor
邵翔宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Mobile Software Co Ltd
Original Assignee
Beijing Xiaomi Mobile Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Mobile Software Co Ltd filed Critical Beijing Xiaomi Mobile Software Co Ltd
Priority to CN201711407884.2A priority Critical patent/CN108182145B/zh
Publication of CN108182145A publication Critical patent/CN108182145A/zh
Application granted granted Critical
Publication of CN108182145B publication Critical patent/CN108182145B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3688Test management for test execution, e.g. scheduling of test suites

Abstract

本公开涉及一种验证APP界面布局的方法、装置及计算机可读存储介质,以解决相关技术中人工验证APP界面布局存在的测试覆盖率低、容易漏测的技术问题。所述验证APP界面布局正确性的方法包括:当开发者选项中的显示布局边界的开关处于开启状态时,对显示APP页面的终端界面截图;对所述APP终端界面的截图进行图像处理,以形成只保留布局边界的待验证截图;利用图像相似度算法,计算所述待验证截图与已通过验证的目标截图的相似度;其中,所述目标截图为只保留布局边界的截图;根据所述相似度,确认所述待验证截图是否通过验证。

Description

验证APP界面布局的方法、装置及计算机可读存储介质
技术领域
本公开涉及数字图像处理领域,具体地,涉及一种验证APP界面布局的方法、装置及计算机可读存储介质。
背景技术
相关技术中,为了验证安卓APP界面布局的正确性,需要通过安卓APP自动化测试框架(比如:python版本的UiAutomator)把安卓APP界面进行截图,然后把截图存储到指定位置,再通过人工来进行验证。但是人工验证存在不足,比如:测试覆盖率低,容易漏测,人工成本高,测试周期长。
发明内容
为克服相关技术中存在的问题,本公开提供一种验证APP界面布局的方法、装置及计算机可读存储介质。
根据本公开实施例的第一方面,提供一种验证APP界面布局的方法,所述方法包括:
当开发者选项中的显示布局边界的开关处于开启状态时,对显示APP页面的终端界面截图;
对所述APP终端界面的截图进行图像处理,以形成只保留布局边界的待验证截图;
利用图像相似度算法,计算所述待验证截图与已通过验证的目标截图的相似度;其中,所述目标截图为只保留布局边界的截图;
根据所述相似度,确认所述待验证截图是否通过验证。
采用上述验证APP界面布局的方法,通过打开开发者选项中的显示布局边界的开关,把界面布局信息加入到截图中,然后对终端界面截图进行图像处理,进而得到纯净、清晰、直观的只保留布局边界的待验证截图,然后利用图像相似度算法验证所述待验证截图,相比于相关技术中人工验证的方案,本公开提高了测试覆盖率,并且不容易漏测,节约了人工成本,缩短了测试周期,解决了相关技术中人工验证APP界面布局存在的测试覆盖率低、容易漏测的技术问题。
结合第一方面,在第一方面的第一种可能的实现方式中,所述对所述APP终端界面的截图进行图像处理,包括:获取所述APP终端界面的截图的像素信息;确认所述APP终端界面的截图的像素点满足预设条件;将所述APP终端界面的截图的像素点的颜色赋值为目标颜色。
结合第一方面的第一种可能的实现方式,在第一方面的第二种可能的实现方式中,所述对所述APP终端界面的截图进行图像处理,包括:获取所述APP终端界面的截图的像素信息;确认所述APP终端界面的截图的像素点满足预设条件;将所述APP终端界面的截图的像素点的颜色赋值为目标颜色。
结合第一方面,在第一方面的第三种可能的实现方式中,所述待验证截图存储在第一存储区域,所述目标截图存储在第二存储区域;所述方法还包括:将所述第一存储区域中没有通过验证的待验证截图存储于第三存储区域;验证所述第三存储区域的待验证截图;将通过验证的所述第三存储区域的待验证截图存储于所述第二存储区域内。
结合第一方面的第三种可能的实现方式,在第一方面的第四种可能的实现方式中,所述将通过验证的所述第三存储区域的待验证截图存储于所述第二存储区域内后,还包括:清空所述第一存储区域和所述第三存储区域内的截图。
结合第一方面,在第一方面的第五种可能的实现方式中,所述利用图像相似度算法,包括:利用aHash、pHash或者SIFT算法。
根据本公开实施例的第二方面,提供一种验证APP界面布局的装置,所述装置包括:
截图模块,被配置为当开发者选项中的显示布局边界的开关处于开启状态时,对显示APP页面的终端界面截图;
图像处理模块,被配置为对所述APP终端界面的截图进行图像处理,以形成只保留布局边界的待验证截图;
计算模块,被配置为利用图像相似度算法,计算所述待验证截图与已通过验证的目标截图的相似度;其中,所述目标截图为只保留布局边界的截图;以及
确认模块,被配置为根据所述相似度,确认所述待验证截图是否通过验证。
结合第二方面,在第二方面的第一种可能的实现方式中,所述图像处理模块包括:获取子模块,被配置为获取所述APP终端界面的截图的像素信息;确认子模块,被配置为确认所述APP终端界面的截图的像素点满足预设条件;以及赋值子模块,被配置为将所述APP终端界面的截图的像素点的颜色赋值为目标颜色。
结合第二方面的第一种可能的实现方式,在第二方面的第二种可能的实现方式中,所述图像处理模块包括:获取子模块,被配置为获取所述APP终端界面的截图的像素信息;确认子模块,被配置为确认所述APP终端界面的截图的像素点满足预设条件;以及赋值子模块,被配置为将所述APP终端界面的截图的像素点的颜色赋值为目标颜色。
结合第二方面,在第二方面的第三种可能的实现方式中,所述待验证截图存储在第一存储区域,所述目标截图存储在第二存储区域;所述装置还包括:第一存储模块,被配置为将所述第一存储区域中没有通过验证的待验证截图存储于第三存储区域;验证模块,被配置为验证所述第三存储区域的待验证截图;以及第二存储模块,被配置为将通过验证的所述第三存储区域的待验证截图存储于所述第二存储区域内。
结合第二方面的第三种可能的实现方式,在第二方面的第四种可能的实现方式中,所述装置还包括:清空模块,被配置为将通过验证的所述第三存储区域的待验证截图存储于所述第二存储区域内后,清空所述第一存储区域和所述第三存储区域内的截图。
结合第二方面,在第二方面的第五种可能的实现方式中,所述利用图像相似度算法,包括:利用aHash、pHash或者SIFT算法。
根据本公开实施例的第三方面,提供一种验证APP界面布局的装置,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
当开发者选项中的显示布局边界的开关处于开启状态时,对显示APP页面的终端界面截图;
对所述APP终端界面的截图进行图像处理,以形成只保留布局边界的待验证截图;
利用图像相似度算法,计算所述待验证截图与已通过验证的目标截图的相似度;其中,所述目标截图为只保留布局边界的截图;
根据所述相似度,确认所述待验证截图是否通过验证。
根据本公开实施例的第四方面,提供一种计算机可读存储介质,其上存储有计算机程序指令,该程序指令被处理器执行时实现本公开第一方面所提供的验证APP界面布局的方法的步骤。
本公开的其他特征和优点将在随后的具体实施方式部分予以详细说明。
附图说明
附图是用来提供对本公开的进一步理解,并且构成说明书的一部分,与下面的具体实施方式一起用于解释本公开,但并不构成对本公开的限制。在附图中:
图1是根据一示例性实施例示出的一种验证APP界面布局的方法的流程图。
图2是根据一示例性实施例示出的打开显示布局边界开关后的终端界面截图。
图3是根据一示例性实施例示出的一种APP页面的终端界面截图。
图4是图3中的终端界面截图进行图像处理后形成的待验证截图。
图5是根据一示例性实施例示出的一种验证APP界面布局的方法包括的步骤中对截图进行图像处理的流程图。
图6是根据另一示例性实施例示出的一种验证APP界面布局的方法的流程图。
图7是根据一示例性实施例示出的一种验证APP界面布局的装置的框图。
图8是根据一示例性实施例示出的一种验证APP界面布局的装置的图像处理模块的框图。
图9是根据另一示例性实施例示出的一种验证APP界面布局的装置的框图。
图10是根据一示例性实施例示出的一种验证APP界面布局的装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
图1是根据一示例性实施例示出的一种验证APP界面布局的方法的流程图,以解决相关技术中人工验证APP界面布局存在的测试覆盖率低、容易漏测的技术问题。如图1所示,该方法可以包括以下步骤。
步骤S11,当开发者选项中的显示布局边界的开关处于开启状态时,对显示APP页面的终端界面截图。
本公开中的终端可能是智能手机、智能手表、智能手环、平板电脑等,终端可以安装有多种APP应用程序。由于要对终端中安装的APP的界面布局进行验证,请参照图2,首先,需要打开开发者选项中的显示布局边界的开关,打开开发者选项中的显示布局边界的开关后,APP的布局边界可以显示于终端屏幕上。
然后,对显示APP页面的终端界面截图,截图后如图3所示,图3是某一APP页面的终端界面截图。在自动化测试用例运行后,会进入APP的每个页面,然后在一些需要截图的页面进行截图,自动化测试用例可以在截图后命名并存储。
举例来讲,首先,如果没有名字为“target_source”的文件夹,创建一个名字为“target_source”的文件夹,运行写好的自动化测试用例,自动化测试用例会首先确定被测试手机的型号和分辨率,然后根据被测试手机的型号和分辨率信息在“target_source”文件夹下新建一个文件夹,这一类型的文件夹被称作“target_source_手机的型号和分辨率文件夹”,比如:被测试手机的型号为小米Note、分辨率为1920x 1080,那么“target_source_手机的型号和分辨率文件夹”的名字为target_source_mi_note1_1920_1080。其中,“target_source_手机的型号和分辨率文件夹”的每个子文件夹和APP的每个页面是一一对应的关系,“target_source_手机的型号和分辨率文件夹”的每个子文件夹都被称作“target_source_APP的页面文件夹”,每个“target_source_APP的页面文件夹”以APP的每个页面信息命名,比如:对应APP首页的“target_source_APP的页面文件夹”可以命名为target_source_Home_Page。
然后,在进入APP的每个页面时,自动化测试用例会对手机界面进行截图,并保存手机界面截图到“target_source_APP的页面文件夹”,每个“target_source_APP的页面文件夹”下的手机界面截图以“target_source_untreated_X.png”的格式命名,其中X的值是添加此手机界面截图后,此“target_source_APP的页面文件夹”下以“target_source_untreated_X.png”格式命名的截图的个数,比如图3中终端界面截图可以为target_source_untreated_1.png。
在截图后,执行步骤S12。
步骤S12,对所述APP终端界面的截图进行图像处理,以形成只保留布局边界的待验证截图。
请参照图4和图5,图4是图3中的终端界面截图进行图像处理后形成的待验证截图,所述对所述APP终端界面的截图进行图像处理,可以包括以下步骤。
步骤S121,获取所述APP终端界面的截图的像素信息。
其中,所述像素信息可以包括截图的像素点的颜色信息、坐标信息,也可以包括截图的宽、高信息。
步骤S122,确认所述APP终端界面的截图的像素点满足预设条件。
其中,所述预设条件可以是所述APP终端界面的截图的像素点在截图顶部的状态栏内;或者所述APP终端界面的截图顶部没有状态栏,且所述APP终端界面的截图的像素点的颜色不是保留色;或者所述APP终端界面的截图的像素点不在状态栏内,且所述APP终端界面的截图的像素点的颜色不是保留色。
步骤S123,将所述APP终端界面的截图的像素点的颜色赋值为目标颜色。其中,目标颜色可以是白色或者其它颜色,但需要与保留色区分开。比如,保留色是蓝色,在确认所述APP终端界面的截图的像素点满足预设条件时,将像素点的颜色赋值为白色,处理后形成的待验证截图如图4所示。
可选地,当所述APP终端界面的截图顶部有状态栏时,计算这个状态栏的高度值。计算方法可以为:
首先,通过自动化测试框架的dumpWindowHierarchy方法(即获取当前界面所有控件的层次结构以及所有控件的属性的方法)获取一个包含当前界面UI节点信息、UI节点层次关系的XML,然后,获取XML中resource-id为"com.android.systemui:id/status_bar"的节点,获取的节点如下:
<node index="0"text=""resource-id="com.android.systemui:id/status_bar"class="android.widget.FrameLayout"package="com.android.systemui"content-desc=""checkable="false"checked="false"clickable="false"enabled="true"focusable="true"focused="false"scrollable="false"long-clickable="false"password="false"selected="false"bounds="[0,0][1080,60]"/>,最后获取此节点的bounds属性的bottom值(本示例为60),这个状态栏的高度值=bottom值*(手机界面截图转换为Image对象后的宽度值(比如:imageWidth=image.size[0],那么imageWidth就是手机界面截图转换为Image对象后的宽度值)/手机屏幕分辨率的宽度(比如:手机的屏幕分辨率为:1920x 1080,那么手机屏幕分辨率的宽度为1080),这个状态栏的高度值被称作”target_source_状态栏的高度”。
举例来讲,首先,遍历所有“target_source_APP的页面文件夹”下的以“target_source_untreated_X.png”格式命名的截图,这种以“target_source_untreated_X.png”格式命名的截图被称作”target_source_待处理的图片”。
然后,获取”target_source_待处理的图片”的像素信息到allPixels,关键代码如下:allPixels=numpy.array(image)。
接着,获取”target_source_待处理的图片”的宽、高信息,关键代码如下:
w=image.size[0]
h=image.size[1]
然后,遍历allPixels,如果被测试APP的界面顶部有状态栏且此次遍历的像素点在状态栏内,则给此次被遍历的像素点的颜色赋值为白色,此次遍历结束;如果被测试APP的界面顶部没有状态栏或者此次被遍历的像素点不在状态栏内,则判断此次被遍历的像素点的颜色是否不是保留色(假设蓝色为保留色,保留色的RGB则为(63,127,255)),如果不是保留色,则给此次被遍历的像素点的颜色赋值为白色。
关键代码如下:
Figure BDA0001520705790000091
接着,如图4所示,根据处理后的allPixels生成一个只保留布局边界的待验证截图。关键代码如下:
treated_image=Image.fromarray(allPixels)
然后,把”target_source_待处理的图片”的文件名赋值给变量treated_name,把treated_name中的“untreated”替换为“treated”,利用treated_image创建一种文件名为treated_name且位于“target_source_待处理的图片”所在文件夹下的图片,这种类型的图片被称作”target_source_处理后的界面布局截图”,如图4所示。关键代码如下:
treated_image.save(“target_source_待处理的图片”所在的文件夹路径/treated_name,"jpeg")
形成只保留布局边界的待验证截图后,执行步骤S13。
步骤S13,利用图像相似度算法,计算所述待验证截图与已通过验证的目标截图的相似度;其中,所述目标截图为只保留布局边界的截图。所述目标截图为只保留布局边界且布局边界正确的截图,所述目标截图对应于APP页面的不同表现形式的截图,所述目标截图可以是验证通过的截图。
步骤S14,根据所述相似度,确认所述待验证截图是否通过验证。
以图像相似度算法是aHash算法(average Hash;平均哈希算法)为例,所述aHash算法的思路是,计算待验证截图与目标截图的哈希值,然后比较两个哈希值的汉明距离,如果汉明距离等于零,则所述待验证截图与已通过验证的目标截图的相似度为100%,也就是说所述待验证截图与已通过验证的目标截图的界面布局一样,即判定该待验证截图通过验证;如果汉明距离不等于零,则判定待验证截图不通过验证。
当然,在其它的实施例中,也可以采用pHash算法(perceptual Hash algorithm;感知哈希算法)或者SIFT算法(Scale-invariant feature transform;尺度不变特征变换算法),对此,本公开不作具体限定。
采用上述验证APP界面布局的方法,通过打开开发者选项中的显示布局边界的开关,把界面布局信息加入到截图中,然后对终端界面截图进行图像处理,进而得到纯净、清晰、直观的只保留布局边界的待验证截图,然后利用图像相似度算法验证所述待验证截图,相比于相关技术中人工验证的方案,本公开提高了测试覆盖率,并且不容易漏测,节约了人工成本,缩短了测试周期,解决了相关技术中人工验证APP界面布局存在的测试覆盖率低、容易漏测的技术问题。
图6是根据另一示例性实施例示出的一种验证APP界面布局的方法的流程图。如图6所示,所述待验证截图存储在第一存储区域(比如上述的“target_source”的文件夹),所述目标截图存储在第二存储区域,该方法可以包括以下步骤。
步骤S61,当开发者选项中的显示布局边界的开关处于开启状态时,对显示APP页面的终端界面截图。
步骤S62,对所述APP终端界面的截图进行图像处理,以形成只保留布局边界的待验证截图,所述待验证截图存储在第一存储区域内。
步骤S63,利用图像相似度算法,计算所述待验证截图与已通过验证的目标截图的相似度;其中,所述目标截图为只保留布局边界的截图。
步骤S64,根据所述相似度,确认所述待验证截图是否通过验证。
步骤S65,将所述第一存储区域中没有通过验证的待验证截图存储于第三存储区域。
步骤S66,验证所述第三存储区域的待验证截图。
步骤S67,将通过验证的所述第三存储区域的待验证截图存储于所述第二存储区域内。
步骤S68,清空所述第一存储区域和所述第三存储区域内的截图。
为了进一步完善本公开的方案,将没有通过验证的待验证截图存储于第三存储区域,并对第三存储区域中没有通过验证的待验证截图再次进行验证,此次验证由于需要验证的截图变少,可以通过人工验证,并将第三存储区域中通过验证的待验证截图存储于所述第二存储区域内。为了防止是由于第二存储区域没有对应的边界布局的截图而导致第三存储区域的截图没有通过图像相似度算法验证,因此需要对第三存储区域的截图再次验证,并把验证通过的截图放到第二存储区域。最后,为了不影响后续的验证,可以清空所述第一存储区域和所述第三存储区域内的截图。
图7是根据一示例性实施例示出的一种验证APP界面布局的装置的框图。如图7所示,所述装置700包括:
截图模块710,被配置为当开发者选项中的显示布局边界的开关处于开启状态时,对显示APP页面的终端界面截图;
图像处理模块720,被配置为对所述APP终端界面的截图进行图像处理,以形成只保留布局边界的待验证截图;
计算模块730,被配置为利用图像相似度算法,计算所述待验证截图与已通过验证的目标截图的相似度;其中,所述目标截图为只保留布局边界的截图;以及
确认模块740,被配置为根据所述相似度,确认所述待验证截图是否通过验证。
可选地,如图8所示,所述图像处理模块720包括:
获取子模块721,被配置为获取所述APP终端界面的截图的像素信息;
确认子模块722,被配置为确认所述APP终端界面的截图的像素点满足预设条件;以及
赋值子模块723,被配置为将所述APP终端界面的截图的像素点的颜色赋值为目标颜色。
可选地,如图8所示,所述图像处理模块720还包括:
计算子模块724,被配置为当所述APP终端界面的截图顶部有状态栏时,计算这个状态栏的高度值;
所述确认子模块722,被配置为:
确认所述APP终端界面的截图的像素点在状态栏内;或者
确认所述APP终端界面的截图顶部没有状态栏,且所述APP终端界面的截图的像素点的颜色不是保留色;或者
确认所述APP终端界面的截图的像素点不在状态栏内,且所述APP终端界面的截图的像素点的颜色不是保留色。
可选地,如图9所示,所述待验证截图存储在第一存储区域,所述目标截图存储在第二存储区域;所述装置700还包括:
第一存储模块750,被配置为将所述第一存储区域中没有通过验证的待验证截图存储于第三存储区域;
验证模块760,被配置为验证所述第三存储区域的待验证截图;以及
第二存储模块770,被配置为将通过验证的所述第三存储区域的待验证截图存储于所述第二存储区域内。
可选地,如图9所示,所述装置700还包括:
清空模块780,被配置为将通过验证的所述第三存储区域的待验证截图存储于所述第二存储区域内后,清空所述第一存储区域的截图。
可选地,所述计算模块730被配置为:利用aHash、pHash或者SIFT算法。
值得说明的是,以上对图像处理的装置的模块划分是一种逻辑功能划分,实际实现时可以有另外的划分方式。并且,上述各功能模块的物理实现也可能有多种实现方式。
并且,关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
图10是根据一示例性实施例示出的另一种验证APP界面布局的装置800的框图。例如,装置800可以是移动电话,计算机,平板设备等。
参照图10,装置800可以包括以下一个或多个组件:处理组件802,存储器804,电力组件806,多媒体组件808,音频组件810,输入/输出(I/O)的接口812,传感器组件814,以及通信组件816。
处理组件802通常控制装置800的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件802可以包括一个或多个处理器820来执行指令,以完成上述评验证APP界面布局的方法的全部或部分步骤。此外,处理组件802可以包括一个或多个模块,便于处理组件802和其他组件之间的交互。例如,处理组件802可以包括多媒体模块,以方便多媒体组件808和处理组件802之间的交互。
存储器804被配置为存储各种类型的数据以支持在装置800的操作。这些数据的示例包括用于在装置800上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器804可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电力组件806为装置800的各种组件提供电力。电力组件806可以包括电源管理系统,一个或多个电源,及其他与为装置800生成、管理和分配电力相关联的组件。
多媒体组件808包括在所述装置800和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件808包括一个前置摄像头和/或后置摄像头。当装置800处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件810被配置为输出和/或输入音频信号。例如,音频组件810包括一个麦克风(MIC),当装置800处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器804或经由通信组件816发送。在一些实施例中,音频组件810还包括一个扬声器,用于输出音频信号。
I/O接口812为处理组件802和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件814包括一个或多个传感器,用于为装置800提供各个方面的状态评估。例如,传感器组件814可以检测到装置800的打开/关闭状态,组件的相对定位,例如所述组件为装置800的显示器和小键盘,传感器组件814还可以检测装置800或装置800一个组件的位置改变,用户与装置800接触的存在或不存在,装置800方位或加速/减速和装置800的温度变化。传感器组件814可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件814还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件814还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件816被配置为便于装置800和其他设备之间有线或无线方式的通信。装置800可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件816经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件816还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,装置800可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述验证APP界面布局的方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器804,上述指令可由装置800的处理器820执行以完成上述验证APP界面布局的方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
本领域技术人员在考虑说明书及实践本公开后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (10)

1.一种验证APP界面布局的方法,其特征在于,所述方法包括:
当开发者选项中的显示布局边界的开关处于开启状态时,对显示APP页面的终端界面截图;
对所述APP终端界面的截图进行图像处理,以形成只保留布局边界的待验证截图;
利用图像相似度算法,计算所述待验证截图与已通过验证的目标截图的相似度;其中,所述目标截图为只保留布局边界的截图;
根据所述相似度,确认所述待验证截图是否通过验证;
其中,所述对所述APP终端界面的截图进行图像处理,包括:
获取所述APP终端界面的截图的像素信息;
确认所述APP终端界面的截图的像素点满足预设条件;
将所述APP终端界面的截图的像素点的颜色赋值为目标颜色;
所述对所述APP终端界面的截图进行图像处理,还包括:
当所述APP终端界面的截图顶部有状态栏时,计算这个状态栏的高度值;
所述确认所述APP终端界面的截图的颜色满足预设条件,包括:
确认所述APP终端界面的截图的像素点在状态栏内;或者
确认所述APP终端界面的截图顶部没有状态栏,且所述APP终端界面的截图的像素点的颜色不是保留色;或者
确认所述APP终端界面的截图的像素点不在状态栏内,且所述APP终端界面的截图的像素点的颜色不是保留色。
2.根据权利要求1所述的方法,其特征在于,所述待验证截图存储在第一存储区域,所述目标截图存储在第二存储区域;所述方法还包括:
将所述第一存储区域中没有通过验证的待验证截图存储于第三存储区域;
验证所述第三存储区域的待验证截图;
将通过验证的所述第三存储区域的待验证截图存储于所述第二存储区域内。
3.根据权利要求2所述的方法,其特征在于,所述将通过验证的所述第三存储区域的待验证截图存储于所述第二存储区域内后,还包括:
清空所述第一存储区域和所述第三存储区域内的截图。
4.根据权利要求1所述的方法,其特征在于,所述利用图像相似度算法,包括:利用aHash、pHash或者SIFT算法。
5.一种验证APP界面布局的装置,其特征在于,所述装置包括:
截图模块,被配置为当开发者选项中的显示布局边界的开关处于开启状态时,对显示APP页面的终端界面截图;
图像处理模块,被配置为对所述APP终端界面的截图进行图像处理,以形成只保留布局边界的待验证截图;
计算模块,被配置为利用图像相似度算法,计算所述待验证截图与已通过验证的目标截图的相似度;其中,所述目标截图为只保留布局边界的截图;以及
确认模块,被配置为根据所述相似度,确认所述待验证截图是否通过验证;
其中,所述图像处理模块包括:
获取子模块,被配置为获取所述APP终端界面的截图的像素信息;
确认子模块,被配置为确认所述APP终端界面的截图的像素点满足预设条件;以及
赋值子模块,被配置为将所述APP终端界面的截图的像素点的颜色赋值为目标颜色;
所述图像处理模块还包括:
计算子模块,被配置为当所述APP终端界面的截图顶部有状态栏时,计算这个状态栏的高度值;
所述确认子模块,被配置为:
确认所述APP终端界面的截图的像素点在状态栏内;或者
确认所述APP终端界面的截图顶部没有状态栏,且所述APP终端界面的截图的像素点的颜色不是保留色;或者
确认所述APP终端界面的截图的像素点不在状态栏内,且所述APP终端界面的截图的像素点的颜色不是保留色。
6.根据权利要求5所述的装置,其特征在于,所述待验证截图存储在第一存储区域,所述目标截图存储在第二存储区域;
所述装置还包括:
第一存储模块,被配置为将所述第一存储区域中没有通过验证的待验证截图存储于第三存储区域;
验证模块,被配置为验证所述第三存储区域的待验证截图;以及
第二存储模块,被配置为将通过验证的所述第三存储区域的待验证截图存储于所述第二存储区域内。
7.根据权利要求6所述的装置,其特征在于,所述装置还包括:
清空模块,被配置为将通过验证的所述第三存储区域的待验证截图存储于所述第二存储区域内后,清空所述第一存储区域和所述第三存储区域内的截图。
8.根据权利要求5所述的装置,其特征在于,所述计算模块被配置为:利用aHash、pHash或者SIFT算法。
9.一种验证APP界面布局的装置,其特征在于,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
当开发者选项中的显示布局边界的开关处于开启状态时,对显示APP页面的终端界面截图;
对所述APP终端界面的截图进行图像处理,以形成只保留布局边界的待验证截图;
利用图像相似度算法,计算所述待验证截图与已通过验证的目标截图的相似度;其中,所述目标截图为只保留布局边界的截图;
根据所述相似度,确认所述待验证截图是否通过验证;
其中,所述对所述APP终端界面的截图进行图像处理,包括:
获取所述APP终端界面的截图的像素信息;
确认所述APP终端界面的截图的像素点满足预设条件;
将所述APP终端界面的截图的像素点的颜色赋值为目标颜色;
所述对所述APP终端界面的截图进行图像处理,还包括:
当所述APP终端界面的截图顶部有状态栏时,计算这个状态栏的高度值;
所述确认所述APP终端界面的截图的颜色满足预设条件,包括:
确认所述APP终端界面的截图的像素点在状态栏内;或者
确认所述APP终端界面的截图顶部没有状态栏,且所述APP终端界面的截图的像素点的颜色不是保留色;或者
确认所述APP终端界面的截图的像素点不在状态栏内,且所述APP终端界面的截图的像素点的颜色不是保留色。
10.一种计算机可读存储介质,其上存储有计算机程序指令,其特征在于,该程序指令被处理器执行时实现权利要求1~4中任一项所述方法的步骤。
CN201711407884.2A 2017-12-22 2017-12-22 验证app界面布局的方法、装置及计算机可读存储介质 Active CN108182145B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711407884.2A CN108182145B (zh) 2017-12-22 2017-12-22 验证app界面布局的方法、装置及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711407884.2A CN108182145B (zh) 2017-12-22 2017-12-22 验证app界面布局的方法、装置及计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN108182145A CN108182145A (zh) 2018-06-19
CN108182145B true CN108182145B (zh) 2020-09-01

Family

ID=62546780

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711407884.2A Active CN108182145B (zh) 2017-12-22 2017-12-22 验证app界面布局的方法、装置及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN108182145B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112686338A (zh) * 2021-03-10 2021-04-20 卡斯柯信号(北京)有限公司 图像信息识别方法、装置、设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102509253A (zh) * 2011-07-11 2012-06-20 深圳市万兴软件有限公司 一种数字图像处理方法和数字图像处理装置
WO2016207875A1 (en) * 2015-06-22 2016-12-29 Photomyne Ltd. System and method for detecting objects in an image
CN107229560A (zh) * 2016-03-23 2017-10-03 阿里巴巴集团控股有限公司 一种界面显示效果测试方法、图像样张获取方法及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102509253A (zh) * 2011-07-11 2012-06-20 深圳市万兴软件有限公司 一种数字图像处理方法和数字图像处理装置
WO2016207875A1 (en) * 2015-06-22 2016-12-29 Photomyne Ltd. System and method for detecting objects in an image
CN107229560A (zh) * 2016-03-23 2017-10-03 阿里巴巴集团控股有限公司 一种界面显示效果测试方法、图像样张获取方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
"android显示布局边界查看布局";ming_csdn_;《CSDN博客:https://blog.csdn.net/ming_csdn_/article/details/54930220》;20170208;第1页 *

Also Published As

Publication number Publication date
CN108182145A (zh) 2018-06-19

Similar Documents

Publication Publication Date Title
CN106651955B (zh) 图片中目标物的定位方法及装置
US10452890B2 (en) Fingerprint template input method, device and medium
RU2669063C2 (ru) Способ и устройство получения изображений
US9924226B2 (en) Method and device for processing identification of video file
EP3125135A1 (en) Picture processing method and device
EP2978265A1 (en) Method and apparatus for automatically connecting wireless network
CN108062547B (zh) 文字检测方法及装置
KR20170020736A (ko) 이미지에 의한 공간 파라미터 결정 방법, 장치, 단말기기, 프로그램 및 컴퓨터 판독가능한 기록매체
CN108764003B (zh) 图片识别方法及装置
EP3147802B1 (en) Method and apparatus for processing information
CN107562349B (zh) 一种执行处理的方法和装置
CN108009563B (zh) 图像处理方法、装置及终端
CN113065591B (zh) 目标检测方法及装置、电子设备和存储介质
US11574415B2 (en) Method and apparatus for determining an icon position
CN108717542B (zh) 识别文字区域的方法、装置及计算机可读存储介质
CN111666941A (zh) 一种文本检测方法、装置及电子设备
CN112200040A (zh) 遮挡图像检测方法、装置及介质
CN105677352B (zh) 应用图标颜色的设置方法和装置
CN107992894B (zh) 图像识别方法、装置及计算机可读存储介质
CN108182145B (zh) 验证app界面布局的方法、装置及计算机可读存储介质
CN106773750B (zh) 设备图像显示方法及装置
CN116954540A (zh) 应用程序的显示方法、装置及终端
CN107315517B (zh) 用于防误触的方法、装置、移动终端及智能终端
CN112883073B (zh) 数据筛选方法、装置、设备、可读存储介质以及产品
RU2645590C2 (ru) Способ и устройство обработки информации

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant