CN112686338A - 图像信息识别方法、装置、设备及存储介质 - Google Patents

图像信息识别方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN112686338A
CN112686338A CN202110257108.9A CN202110257108A CN112686338A CN 112686338 A CN112686338 A CN 112686338A CN 202110257108 A CN202110257108 A CN 202110257108A CN 112686338 A CN112686338 A CN 112686338A
Authority
CN
China
Prior art keywords
screenshot
display interface
actual display
information
matching result
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110257108.9A
Other languages
English (en)
Inventor
史建友
刘超
吕鑫
杨菲
张瑞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casco Signal Beijing Ltd
Original Assignee
Casco Signal Beijing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casco Signal Beijing Ltd filed Critical Casco Signal Beijing Ltd
Priority to CN202110257108.9A priority Critical patent/CN112686338A/zh
Publication of CN112686338A publication Critical patent/CN112686338A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Image Analysis (AREA)

Abstract

本申请提供一种图像信息识别方法、装置、设备及存储介质,涉及图像处理技术领域。其中,图像信息识别方法,包括:根据期望的图像显示信息提取局部特征点位像素信息;对实际显示界面进行截图,得到实际显示界面截图;在所述实际显示界面截图中提取与所述局部特征点位像素信息相匹配的至少一个特征区域,得到匹配结果;根据所述匹配结果判断所述实际显示界面是否满足预期。本申请方案可以有效提高UI自动化测试中图像识别的鲁棒性和匹配效率,可以用于解决当前轨道交通项目测试中图像识别界面鲁棒性差、效率较低的问题。

Description

图像信息识别方法、装置、设备及存储介质
技术领域
本申请涉及图像处理技术领域,尤其涉及一种图像信息识别方法、装置、设备及存储介质。
背景技术
在目前城轨项目集成和确认测试中,因为受限于站场图的复杂性和多样性尤其是整个系统的安全苛求,自动化测试替代人工测试仍然在探索过程中,自动化的测试工具大部分只是辅助人工测试,提高效率和准确率。
不同于软件测试,项目测试基本是黑盒测试,尤其是界面操作和显示步骤占大部分。在经过多年的产品更新迭代和技术更新升级,以及行业标准的统一化下,如今的轨道交通项目测试用户界面(User Interface,UI)稳定、被测系统标准规范、可测性强,再加上大量的回归测试验证,这极大地推动了其自动化测试开发的迫切性。但是既有图像识别UI自动化测试需要图片识别,但目前的参考图片直接进行图像识别对比兼容性和匹配效率不满足自动化测试的需求。
因此,需要提供一种兼容性好且高效的图像信息识别方案。
发明内容
本申请实施例的目的是提供一种图像信息识别方法、装置、设备及存储介质,以至少解决当前轨道交通项目测试中图像识别界面鲁棒性差、效率较低的问题。
为解决上述技术问题,本申请实施例提供如下技术方案:
本申请第一方面提供一种图像信息识别方法,包括:
根据期望的图像显示信息提取局部特征点位像素信息;
对实际显示界面进行截图,得到实际显示界面截图;
在所述实际显示界面截图中提取与所述局部特征点位像素信息相匹配的至少一个特征区域,得到匹配结果;
根据所述匹配结果判断所述实际显示界面是否满足预期。
在本申请第一方面的一些变更实施方式中,所述局部特征点位像素信息包括:局部特征点位的RGB颜色分布信息。
在本申请第一方面的一些变更实施方式中,所述对实际显示界面进行截图,得到实际显示界面截图,包括:
对实际显示界面中所述局部特征点位对应的区域进行截图,得到实际显示界面截图。
在本申请第一方面的一些变更实施方式中,所述根据期望的图像显示信息提取局部特征点位像素信息,包括:
根据目标测试项目对应的期望的图像显示信息,提取所述目标测试项目对应的局部特征点位像素信息;
所述对实际显示界面进行截图,得到实际显示界面截图,包括:
对所述目标测试项目开始后的实际显示界面进行截图,得到实际显示界面截图;
所述根据所述匹配结果判断所述实际显示界面是否满足预期,包括:
根据所述匹配结果是否满足所述目标测试项目对应的预期条件,判断所述实际显示界面是否满足预期。
本申请第二方面提供一种图像信息识别装置,包括:
提取模块,用于根据期望的图像显示信息提取局部特征点位像素信息;
截图模块,用于对实际显示界面进行截图,得到实际显示界面截图;
匹配模块,用于在所述实际显示界面截图中提取与所述局部特征点位像素信息相匹配的至少一个特征区域,得到匹配结果;
判断模块,用于根据所述匹配结果判断所述实际显示界面是否满足预期。
在本申请第二方面的一些变更实施方式中,所述局部特征点位像素信息包括:局部特征点位的RGB颜色分布信息。
在本申请第二方面的一些变更实施方式中,所述截图模块,包括:
区域截图单元,用于对实际显示界面中所述局部特征点位对应的区域进行截图,得到实际显示界面截图。
在本申请第二方面的一些变更实施方式中,所述提取模块,包括:
特征信息提取单元,用于根据目标测试项目对应的期望的图像显示信息,提取所述目标测试项目对应的局部特征点位像素信息;
所述截图模块,包括:
目标项目截图单元,用于对所述目标测试项目开始后的实际显示界面进行截图,得到实际显示界面截图;
所述判断模块,包括:
判断单元,用于根据所述匹配结果是否满足所述目标测试项目对应的预期条件,判断所述实际显示界面是否满足预期。
本申请第三方面提供一种电子设备,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器运行所述计算机程序时执行以实现本申请第一方面所述的方法。
本申请第四方面提供一种计算机可读存储介质,其上存储有计算机可读指令,所述计算机可读指令可被处理器执行以实现本申请第一方面所述的方法。
本申请实施例提供的一种图像信息识别方法、装置、设备及存储介质,通过根据期望的图像显示信息提取局部特征点位像素信息,然后对实际显示界面进行截图,得到实际显示界面截图,在所述实际显示界面截图中提取与所述局部特征点位像素信息相匹配的至少一个特征区域,得到匹配结果,即可根据所述匹配结果判断所述实际显示界面是否满足预期,将上述方案应用于轨道交通项目测试,可以有效提高测试中图像识别的鲁棒性和匹配效率,既可以避免既有图像识别UI自动化测试需要图片识别,色差、图片大小、分辨率、旋转等都导致无法识别,兼容性差的问题;也可以避免了图片在一个大范围进行匹配,次数多时间长反应慢,匹配效率会过低的问题。
附图说明
通过参考附图阅读下文的详细描述,本申请示例性实施方式的上述以及其他目的、特征和优点将变得易于理解。在附图中,以示例性而非限制性的方式示出了本申请的若干实施方式,相同或对应的标号表示相同或对应的部分,其中:
图1示意性地示出了本申请的一些实施方式所提供的一种图像信息识别方法的第一种流程图;
图2示意性地示出了本申请的一些实施方式所提供的一种图像信息识别方法的第二种流程图;
图3示意性地示出了本申请的一些实施方式所提供的一种图像信息识别方法的第三种流程图;
图4示意性地示出了本申请的一些实施方式所提供的一种图像信息识别装置的示意图;
图5示意性地示出了本申请的一些实施方式所提供的一种电子设备的示意图;
图6示意性地示出了本申请的一些实施方式所提供的一种计算机可读存储介质的示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施方式。虽然附图中显示了本公开的示例性实施方式,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施方式所限制。相反,提供这些实施方式是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
需要注意的是,除非另有说明,本申请使用的技术术语或者科学术语应当为本申请所属领域技术人员所理解的通常意义。
另外,术语“第一”和“第二”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
本申请实施例的目的是提供一种图像信息识别方法、装置、设备及存储介质,以至少解决当前安全苛求系统的数据恢复效率低、风险高等问题。下面结合附图进行示例性说明。
请参考图1,其示意性地示出了本申请的一些实施方式所提供的图像信息识别方法的第一种流程图,如图1所示,所述图像信息识别方法,可以包括以下步骤:
步骤S101:根据期望的图像显示信息提取局部特征点位像素信息。
其中,上述局部特征点位像素信息可以是指局部特征点位的RGB颜色分布信息。
步骤S102:对实际显示界面进行截图,得到实际显示界面截图。
为了提高后续匹配效率,在一些实施方式中,上述对实际显示界面进行截图,得到实际显示界面截图,包括:
对实际显示界面中所述局部特征点位对应的区域进行截图,得到实际显示界面截图。
通过只对局部特征点位对应的区域进行截图,可以得到更具针对性的实际显示界面截图,从而缩小后续匹配过程所使用的实际显示界面截图,进而有助于提高匹配效率。
步骤S103:在所述实际显示界面截图中提取与所述局部特征点位像素信息相匹配的至少一个特征区域,得到匹配结果。
其中,上述匹配结果可以包括匹配得到的特征区域的数量,还可以包括匹配的相似度等数据,以进一步根据该匹配结果判断上述实际显示界面是否符合预期。
步骤S104:根据所述匹配结果判断所述实际显示界面是否满足预期。
为了便于理解,例如,在一些实施方式中,上述根据期望的图像显示信息提取局部特征点位像素信息,包括:
根据目标测试项目对应的期望的图像显示信息,提取所述目标测试项目对应的局部特征点位像素信息;
上述对实际显示界面进行截图,得到实际显示界面截图,包括:
对所述目标测试项目开始后的实际显示界面进行截图,得到实际显示界面截图;
上述根据所述匹配结果判断所述实际显示界面是否满足预期,包括:
根据所述匹配结果是否满足所述目标测试项目对应的预期条件,判断所述实际显示界面是否满足预期。
通过上述实施方式,可以针对目标测试项目,对其实际现实界面所显示的信息是否满足目标测试项目的预期进行针对性的检测,从而提高目标测试项目的实际显示界面信息的检测效率和兼容性。
本申请实施例提供的一种图像信息识别方法,至少可以取得以下有益效果:通过根据期望的图像显示信息提取局部特征点位像素信息,然后对实际显示界面进行截图,得到实际显示界面截图,在所述实际显示界面截图中提取与所述局部特征点位像素信息相匹配的至少一个特征区域,得到匹配结果,即可根据所述匹配结果判断所述实际显示界面是否满足预期,将上述方案应用于轨道交通项目测试,可以有效提高UI自动化测试中图像识别的鲁棒性和匹配效率,既可以避免既有图像识别UI自动化测试需要图片识别,色差、图片大小、分辨率、旋转等都导致无法识别,兼容性差的问题;也可以避免了图片在一个大范围进行匹配,次数多时间长反应慢,匹配效率会过低的问题。
下面结合具体实施方式进一步进行说明,其中,下述示例性说明可以参照前述任意实施例的说明进行理解,部分内容不再赘述。
需要说明的是,在下述示例性说明中,虽然部分用词存在了变化,但这并不影响其含义的表达,下述说明中会对部分用词与前述实施例说明中的用词进行对应性说明,该对应性说明所表达的对应关系既可以包括等同关系、也可以包括上下位关系,本领域技术人员可以结合实际情况进行理解。
请参考图2,其示意性地示出了本申请的一些实施方式所提供的一种图像信息识别方法的第二种流程图,上述图像信息识别方法可以应用于轨道交通项目测试中提升图像识别的鲁棒性和匹配效率,通过在城轨项目集成和确认测试中,提取局部特征点RGB值分布进行高效识别,并输出结果的方法,在城轨项目集成和确认测试中对图像识别的鲁棒性和匹配效率有很大提升,故应用前景广泛。针对目前项目测试被测系统基于需求的多样性和可配置种类繁多,导致在实际的界面显示确认中界面图像识别处理仍然具有复杂多变性和匹配准确性较低等特点,提出一种通过分析提取图像局部特征点位的RGB值分布并基于坐标和图像定位按照匹配冗余度来比对实际界面显进行图像识别的方法(即上述图像信息识别方法),至少包括以下步骤:
S201:根据期望结果的图像显示提取局部特征点位RGB分布;
S202:通过对被测对象执行用例操作后,对特定区域内的测试界面进行截图;
S203:根据第一步得到的局部特征点位RGB分布,在截图中与其进行精确或者模糊比对,记录比对结果;
S204:根据比对的结果判断是否图像显示满足期望结果。
该测试方法通过分析期望结果中界面显示来提取局部特征点位的RGB值分布,基于坐标和图像定位按照匹配冗余度来比对实际界面显示,提升了测试中图像识别的鲁棒性和匹配效率。这样可以避免既有图像识别UI自动化测试需要图片识别,色差、图片大小、分辨率、旋转等都导致无法识别,兼容性差;也避免了图片在一个大范围进行匹配,次数多时间长反应慢,匹配效率会过低的问题。
请参考图3,其示意性地示出了本申请的一些实施方式所提供的一种图像信息识别方法的第三种流程图,以执行某项目车站确认测试中测试信号机是否接近锁闭举例,结合图2对步骤进行详细描述,上述图像信息识别方法可以包括以下步骤:
S301:通过分析期望结果测试信号机接近锁闭,对应的界面显示就是检查信号机的灯柱变成黄色;
S302:根据期望的界面显示提取局部特征点位RGB分布,得到横坐标方向的4个像素点组成的矩形,RGB值依次为黑(0,0,0)、黄(255,255,0)、黄(255,255,0)和黑(0,0,0);
S303:执行信号机接近锁闭操作后,在实际的测试界面中按照被测试信号机的坐标对灯柱的所在区域进行截图;
S304:在截图中按照精确查找比对第二步得到的局部特征像素点矩形,得到在区域截图内该特征矩形的数量。
S305:按照灯柱黄色显示需要至少4个有效特征矩形的判断依据,比对上一步得到的数量是否满足有效数目,如果满足就判定接近锁闭成立,反之,接近锁闭不成立。
通过上述方法,可以针对车站确认测试中测试信号机是否接近锁闭的应用场景,通过分析期望结果中界面显示来提取局部特征点位的RGB值分布,基于坐标和图像定位按照匹配冗余度来比对实际界面显示,提升了测试中图像识别的鲁棒性和匹配效率。这样可以避免既有图像识别UI自动化测试需要图片识别,色差、图片大小、分辨率、旋转等都导致无法识别,兼容性差;也避免了图片在一个大范围进行匹配,次数多时间长反应慢,匹配效率会过低的问题。
在上述的实施例中,提供了一种图像信息识别方法,与之相对应的,本申请还提供一种图像信息识别装置。本申请实施例提供的图像信息识别装置可以实施上述图像信息识别方法,该图像信息识别装置可以通过软件、硬件或软硬结合的方式来实现。例如,该图像信息识别装置可以包括集成的或分开的功能模块或单元来执行上述各方法中的对应步骤。请参考图4,其示意性地示出了本申请的一些实施方式所提供的一种图像信息识别装置的示意图。由于装置实施例基本相似于方法实施例,所以描述得比较简单,相关之处参见方法实施例的部分说明即可。下述描述的装置实施例仅仅是示意性的。
如图4所示,所述图像信息识别装置10,包括:
提取模块101,用于根据期望的图像显示信息提取局部特征点位像素信息;
截图模块102,用于对实际显示界面进行截图,得到实际显示界面截图;
匹配模块103,用于在所述实际显示界面截图中提取与所述局部特征点位像素信息相匹配的至少一个特征区域,得到匹配结果;
判断模块104,用于根据所述匹配结果判断所述实际显示界面是否满足预期。
在本申请实施例的一些变更实施方式中,所述局部特征点位像素信息包括:局部特征点位的RGB颜色分布信息。
在本申请实施例的一些变更实施方式中,所述截图模块102,包括:
区域截图单元,用于对实际显示界面中所述局部特征点位对应的区域进行截图,得到实际显示界面截图。
在本申请实施例的一些变更实施方式中,所述提取模块101,包括:
特征信息提取单元,用于根据目标测试项目对应的期望的图像显示信息,提取所述目标测试项目对应的局部特征点位像素信息;
所述截图模块102,包括:
目标项目截图单元,用于对所述目标测试项目开始后的实际显示界面进行截图,得到实际显示界面截图;
所述判断模块104,包括:
判断单元,用于根据所述匹配结果是否满足所述目标测试项目对应的预期条件,判断所述实际显示界面是否满足预期。
本申请实施例提供的图像信息识别装置10,与本申请前述实施例提供的图像信息识别方法出于相同的发明构思,具有相同的有益效果,此处不再赘述。
本申请实施方式还提供一种与前述实施方式所提供的图像信息识别方法对应的电子设备,所述电子设备可以是任意具有数据处理能力的计算机设备,以执行上述图像信息识别方法。
请参考图5,其示意性地示出了本申请的一些实施方式所提供的一种电子设备的示意图。如图5所示,所述电子设备20包括:处理器200,存储器201,总线202和通信接口203,所述处理器200、通信接口203和存储器201通过总线202连接;所述存储器201中存储有可在所述处理器200上运行的计算机程序,所述处理器200运行所述计算机程序时执行本申请前述任一实施方式所提供的图像信息识别方法。
其中,存储器201可能包含高速随机存取存储器(Random Access Memory,RAM),也可能还包括非不稳定的存储器(non-volatile memory),例如至少一个磁盘存储器。通过至少一个通信接口203(可以是有线或者无线)实现该系统网元与至少一个其他网元之间的通信连接,可以使用互联网、广域网、本地网、城域网等。
总线202可以是ISA总线、PCI总线或EISA总线等。所述总线可以分为地址总线、数据总线、控制总线等。其中,存储器201用于存储程序,所述处理器200在接收到执行指令后,执行所述程序,前述本申请实施例任一实施方式揭示的所述图像信息识别方法可以应用于处理器200中,或者由处理器200实现。
处理器200可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器200中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器200可以是通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(Network Processor,NP)等;还可以是数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本申请实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器201,处理器200读取存储器201中的信息,结合其硬件完成上述方法的步骤。
本申请实施例提供的电子设备与本申请前述实施例提供的图像信息识别方法出于相同的发明构思,具有与其采用、运行或实现的方法相同的有益效果。
本申请实施方式还提供一种与前述实施方式所提供的图像信息识别方法对应的计算机可读介质,请参考图6,其示出的计算机可读存储介质为光盘30,其上存储有计算机程序(即程序产品),所述计算机程序在被处理器运行时,会执行前述任意实施方式所提供的图像信息识别方法。
需要说明的是,所述计算机可读存储介质的例子还可以包括,但不限于相变内存(PRAM)、静态随机存取存储器 (SRAM)、动态随机存取存储器 (DRAM)、其他类型的随机存取存储器 (RAM)、只读存储器 (ROM)、电可擦除可编程只读存储器 (EEPROM)、快闪记忆体或其他光学、磁性存储介质,在此不再一一赘述。
本申请的上述实施例提供的计算机可读存储介质与本申请前述实施例提供的图像信息识别方法出于相同的发明构思,具有与其存储的应用程序所采用、运行或实现的方法相同的有益效果。
需要说明的是,附图中的流程图和框图显示了根据本申请的多个实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序存在。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM,)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上各实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述各实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围,其均应涵盖在本申请的权利要求和说明书的范围当中。

Claims (10)

1.一种图像信息识别方法,其特征在于,包括:
根据期望的图像显示信息提取局部特征点位像素信息;
对实际显示界面进行截图,得到实际显示界面截图;
在所述实际显示界面截图中提取与所述局部特征点位像素信息相匹配的至少一个特征区域,得到匹配结果,所述匹配结果包括匹配得到的特征区域的数量;
根据所述匹配结果判断所述实际显示界面是否满足预期。
2.根据权利要求1所述的方法,其特征在于,所述局部特征点位像素信息包括:局部特征点位的RGB颜色分布信息。
3.根据权利要求1所述的方法,其特征在于,所述对实际显示界面进行截图,得到实际显示界面截图,包括:
对实际显示界面中所述局部特征点位对应的区域进行截图,得到实际显示界面截图。
4.根据权利要求1所述的方法,其特征在于,所述根据期望的图像显示信息提取局部特征点位像素信息,包括:
根据目标测试项目对应的期望的图像显示信息,提取所述目标测试项目对应的局部特征点位像素信息;
所述对实际显示界面进行截图,得到实际显示界面截图,包括:
对所述目标测试项目开始后的实际显示界面进行截图,得到实际显示界面截图;
所述根据所述匹配结果判断所述实际显示界面是否满足预期,包括:
根据所述匹配结果是否满足所述目标测试项目对应的预期条件,判断所述实际显示界面是否满足预期。
5.一种图像信息识别装置,其特征在于,包括:
提取模块,用于根据期望的图像显示信息提取局部特征点位像素信息;
截图模块,用于对实际显示界面进行截图,得到实际显示界面截图;
匹配模块,用于在所述实际显示界面截图中提取与所述局部特征点位像素信息相匹配的至少一个特征区域,得到匹配结果,所述匹配结果包括匹配得到的特征区域的数量;
判断模块,用于根据所述匹配结果判断所述实际显示界面是否满足预期。
6.根据权利要求5所述的装置,其特征在于,所述局部特征点位像素信息包括:局部特征点位的RGB颜色分布信息。
7.根据权利要求5所述的装置,其特征在于,所述截图模块,包括:
区域截图单元,用于对实际显示界面中所述局部特征点位对应的区域进行截图,得到实际显示界面截图。
8.根据权利要求5所述的装置,其特征在于,所述提取模块,包括:
特征信息提取单元,用于根据目标测试项目对应的期望的图像显示信息,提取所述目标测试项目对应的局部特征点位像素信息;
所述截图模块,包括:
目标项目截图单元,用于对所述目标测试项目开始后的实际显示界面进行截图,得到实际显示界面截图;
所述判断模块,包括:
判断单元,用于根据所述匹配结果是否满足所述目标测试项目对应的预期条件,判断所述实际显示界面是否满足预期。
9.一种电子设备,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器运行所述计算机程序时执行以实现如权利要求1至4任一项所述的方法。
10.一种计算机可读存储介质,其特征在于,其上存储有计算机可读指令,所述计算机可读指令可被处理器执行以实现如权利要求1至4任一项所述的方法。
CN202110257108.9A 2021-03-10 2021-03-10 图像信息识别方法、装置、设备及存储介质 Pending CN112686338A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110257108.9A CN112686338A (zh) 2021-03-10 2021-03-10 图像信息识别方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110257108.9A CN112686338A (zh) 2021-03-10 2021-03-10 图像信息识别方法、装置、设备及存储介质

Publications (1)

Publication Number Publication Date
CN112686338A true CN112686338A (zh) 2021-04-20

Family

ID=75458377

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110257108.9A Pending CN112686338A (zh) 2021-03-10 2021-03-10 图像信息识别方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN112686338A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114407986A (zh) * 2022-01-04 2022-04-29 北京全路通信信号研究设计院集团有限公司 一种信号机按钮的测试方法、装置、电子设备及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103389937A (zh) * 2012-05-09 2013-11-13 腾讯科技(深圳)有限公司 一种界面测试方法和装置
CN108182145A (zh) * 2017-12-22 2018-06-19 北京小米移动软件有限公司 验证app界面布局的方法、装置及计算机可读存储介质
CN109117358A (zh) * 2017-06-23 2019-01-01 百度在线网络技术(北京)有限公司 用于电子设备的测试方法和测试装置
WO2019136961A1 (zh) * 2018-01-12 2019-07-18 深圳壹账通智能科技有限公司 用户界面显示识别方法、终端设备、存储介质及装置
CN110399291A (zh) * 2019-06-20 2019-11-01 平安普惠企业管理有限公司 基于图像识别的用户页面测试方法及相关设备
CN111858356A (zh) * 2020-07-23 2020-10-30 北京首汽智行科技有限公司 一种基于图像识别技术的ui自动化测试方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103389937A (zh) * 2012-05-09 2013-11-13 腾讯科技(深圳)有限公司 一种界面测试方法和装置
CN109117358A (zh) * 2017-06-23 2019-01-01 百度在线网络技术(北京)有限公司 用于电子设备的测试方法和测试装置
CN108182145A (zh) * 2017-12-22 2018-06-19 北京小米移动软件有限公司 验证app界面布局的方法、装置及计算机可读存储介质
WO2019136961A1 (zh) * 2018-01-12 2019-07-18 深圳壹账通智能科技有限公司 用户界面显示识别方法、终端设备、存储介质及装置
CN110399291A (zh) * 2019-06-20 2019-11-01 平安普惠企业管理有限公司 基于图像识别的用户页面测试方法及相关设备
CN111858356A (zh) * 2020-07-23 2020-10-30 北京首汽智行科技有限公司 一种基于图像识别技术的ui自动化测试方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114407986A (zh) * 2022-01-04 2022-04-29 北京全路通信信号研究设计院集团有限公司 一种信号机按钮的测试方法、装置、电子设备及存储介质

Similar Documents

Publication Publication Date Title
CN107545262B (zh) 一种在自然场景图像中检测文本的方法及装置
CN109166156B (zh) 一种摄像头标定图像的生成方法、移动终端及存储介质
CN111145214A (zh) 目标跟踪方法、装置、终端设备及介质
CN110561416B (zh) 一种激光雷达重定位方法及机器人
CN110175609B (zh) 界面元素检测方法、装置及设备
CN112199268B (zh) 一种软件兼容性测试方法及电子设备
CN114638294A (zh) 一种数据增强方法、装置、终端设备及存储介质
CN112052907A (zh) 基于图像边缘信息的目标检测方法、装置及存储介质
CN110298302B (zh) 一种人体目标检测方法及相关设备
CN112686338A (zh) 图像信息识别方法、装置、设备及存储介质
CN114299030A (zh) 物体检测模型处理方法、装置、设备及存储介质
CN111931721B (zh) 年检标签颜色和个数的检测方法、装置及电子设备
CN113486715A (zh) 图像翻拍识别方法、智能终端以及计算机存储介质
CN111311573B (zh) 枝条确定方法、装置及电子设备
CN111860687A (zh) 一种图像识别方法、装置、电子设备和存储介质
CN109934185B (zh) 数据处理方法及装置、介质和计算设备
CN109359683B (zh) 目标检测方法、装置、终端和计算机可读存储介质
CN115546219B (zh) 检测板式生成方法、板卡缺陷检测方法、装置及产品
CN115222653B (zh) 测试方法和装置
CN108629219B (zh) 一种识别一维码的方法及装置
CN109977937B (zh) 图像处理方法、装置及设备
CN109461153B (zh) 数据处理方法和装置
CN114140812A (zh) 一种图元识别方法、装置、设备及介质
CN107092702B (zh) 基于重叠比例的地理信息要素位置对比检查方法及装置
CN109522993B (zh) 一种检验贴纸一致性的方法、终端设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210420

RJ01 Rejection of invention patent application after publication