CN110689009B - 信息识别方法及装置、电子设备和计算机可读存储介质 - Google Patents

信息识别方法及装置、电子设备和计算机可读存储介质 Download PDF

Info

Publication number
CN110689009B
CN110689009B CN201910883490.7A CN201910883490A CN110689009B CN 110689009 B CN110689009 B CN 110689009B CN 201910883490 A CN201910883490 A CN 201910883490A CN 110689009 B CN110689009 B CN 110689009B
Authority
CN
China
Prior art keywords
identified
window
area
recognized
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910883490.7A
Other languages
English (en)
Other versions
CN110689009A (zh
Inventor
程斌斌
杨虎
尚世豪
马亚伟
郝学武
孙亚柯
翟璐莎
钱声鹏
杨凯鸣
马爱军
陈丰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Sankuai Online Technology Co Ltd
Original Assignee
Beijing Sankuai Online Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Sankuai Online Technology Co Ltd filed Critical Beijing Sankuai Online Technology Co Ltd
Priority to CN201910883490.7A priority Critical patent/CN110689009B/zh
Publication of CN110689009A publication Critical patent/CN110689009A/zh
Application granted granted Critical
Publication of CN110689009B publication Critical patent/CN110689009B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/62Text, e.g. of license plates, overlay texts or captions on TV images
    • G06V20/635Overlay text, e.g. embedded captions in a TV program
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/40Software arrangements specially adapted for pattern recognition, e.g. user interfaces or toolboxes therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Artificial Intelligence (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • General Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本公开是关于一种信息识别方法及装置、电子设备和计算机可读存储介质,其中,信息识别方法包括:根据待识别窗口属性信息查找待识别窗口;响应于查找到待识别窗口,获取待识别窗口绘制工具;根据预先确定的待识别区域位置信息,使用待识别窗口绘制工具对待识别区域进行截图,其中,待识别区域位于待识别窗口中;识别截图内容。本公开实施例,通过响应于查找到待识别窗口,才获取待识别窗口绘制工具,以确保待识别窗口出现时才进行截图识别,从而保证识别准确性,同时,使用待识别窗口绘制工具而非桌面DC对待识别区域进行截图,以确保待识别区域被其他窗口内容遮挡时,仍能被正确识别。

Description

信息识别方法及装置、电子设备和计算机可读存储介质
技术领域
本公开涉及通信技术领域,尤其涉及一种信息识别方法及装置、电子设备和计算机可读存储介质。
背景技术
随着互联网和支付技术的快速发展,出现了很多支付方式,其中通过支付插件进行支付就是一种新兴的支付方式。在使用支付插件进行支付之前,为了提高支付效率,需要先获取到收银系统的结账金额。
目前,可以通过图像识别的方式识别结账金额。其中,通过图像识别的方式识别结账金额的过程包括:先配置识别区域,然后使用桌面设备上下文(Device Context,简称DC)截取识别区域的图片,并识别图片内容。
但是,在结账金额窗口未出现时,截图识别是无效的,而且存在识别错误的情况,且如果识别区域被其他窗口内容遮挡,将无法正确识别。
发明内容
有鉴于此,本公开提供一种信息识别方法及装置、电子设备和计算机可读存储介质。
具体地,本公开是通过如下技术方案实现的:
根据本公开实施例的第一方面,提供一种信息识别方法,所述方法包括:
根据待识别窗口属性信息查找待识别窗口;
响应于查找到所述待识别窗口,获取待识别窗口绘制工具;
根据预先确定的待识别区域位置信息,使用所述待识别窗口绘制工具对待识别区域进行截图,其中,所述待识别区域位于所述待识别窗口中;
识别截图内容。
在一实施例中,所述响应于查找到所述待识别窗口,则获取待识别窗口绘制工具,包括:
响应于查找到所述待识别窗口,则获取待识别窗口句柄;
根据所述待识别窗口句柄,获取待识别窗口设备上下文。
在一实施例中,所述方法还包括:
将人工选择的位于所述待识别窗口内的区域作为所述待识别区域,并确定所述待识别区域位置信息。
在一实施例中,所述方法还包括:
将所述待识别窗口对应的区域作为所述待识别区域,并确定所述待识别区域位置信息。
在一实施例中,所述根据预先获取的待识别窗口属性信息查找待识别窗口,包括:
定时获取每个窗口的属性信息;
将所述待识别窗口属性信息依次与所述每个窗口的属性信息进行匹配,以定时查找所述待识别窗口。
在一实施例中,所述待识别窗口属性信息包括所述待识别窗口的进程标识、父窗口标识、类名、风格、顺序信息和深度中的至少一项。
在一实施例中,所述待识别区域位置信息包括所述待识别区域设定顶点的坐标以及所述待识别区域的宽度和高度。
根据本公开实施例的第二方面,提供一种信息识别装置,所述装置包括:
查找模块,用于根据待识别窗口属性信息查找待识别窗口;
获取模块,用于响应于所述查找模块查找到所述待识别窗口,获取待识别窗口绘制工具;
截图模块,用于根据预先确定的待识别区域位置信息,使用所述获取模块获取的所述待识别窗口绘制工具对待识别区域进行截图,其中,所述待识别区域位于所述待识别窗口中;
识别模块,用于识别所述截图模块的截图内容。
在一实施例中,所述获取模块包括:
第一获取子模块,用于响应于查找到所述待识别窗口,则获取待识别窗口句柄;
第二获取子模块,用于根据所述获取子模块获取的所述待识别窗口句柄,获取待识别窗口设备上下文。
在一实施例中,所述装置还包括:
第一确定模块,用于将人工选择的位于所述待识别窗口内的区域作为所述待识别区域,并确定所述待识别区域位置信息。
在一实施例中,所述装置还包括:
第二确定模块,用于将所述待识别窗口对应的区域作为所述待识别区域,并确定所述待识别区域位置信息。
在一实施例中,所述查找模块包括:
获取子模块,用于定时获取每个窗口的属性信息;
查找子模块,用于将所述待识别窗口属性信息依次与所述获取子模块获取的所述每个窗口的属性信息进行匹配,以定时查找所述待识别窗口。
在一实施例中,所述待识别窗口属性信息包括所述待识别窗口的进程标识、父窗口标识、类名、风格、顺序信息和深度中的至少一项。
在一实施例中,所述待识别区域位置信息包括所述待识别区域设定顶点的坐标以及所述待识别区域的宽度和高度。
根据本公开实施例的第三方面,提供一种计算机可读存储介质,所述存储介质存储有计算机程序,所述计算机程序用于执行上述信息识别方法。
根据本公开实施例的第四方面,提供一种电子设备,包括处理器、存储器及存储在所述存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述信息识别方法。
本公开实施例,通过响应于查找到待识别窗口,才获取待识别窗口绘制工具,以确保待识别窗口出现时才进行截图识别,从而保证识别准确性,同时,使用待识别窗口绘制工具而非桌面DC对待识别区域进行截图,以确保待识别区域被其他窗口内容遮挡时,仍能被正确识别。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。
图1是本公开一示例性实施例示出的一种信息识别方法的流程图。
图2是本公开一示例性实施例示出的一种根据待识别窗口属性信息查找待识别窗口的流程图。
图3是本公开一示例性实施例示出的一种获取待识别窗口绘制工具的过程示意图。
图4是本公开一示例性实施例示出的另一种信息识别方法的流程图。
图5是本公开一示例性实施例示出的另一种信息识别方法的流程图。
图6是本公开一示例性实施例示出的一种信息识别装置所在电子设备的一种硬件结构图。
图7是本公开一示例性实施例示出的一种信息识别装置的框图。
图8是本公开一示例性实施例示出的另一种信息识别装置的框图。
图9是本公开一示例性实施例示出的另一种信息识别装置的框图。
图10是本公开一示例性实施例示出的另一种信息识别装置的框图。
图11是本公开一示例性实施例示出的另一种信息识别装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
在本公开使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本公开。在本公开和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本公开可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本公开范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
图1是本公开一示例性实施例示出的一种信息识别方法的流程图。如图1所示,该信息识别方法包括:
步骤S101,根据待识别窗口属性信息查找待识别窗口。
在该实施例中,待识别窗口可以包括但不局限于金额窗口。
其中,待识别窗口属性信息可以包括但不局限于待识别窗口的进程标识、父窗口标识、类名、风格、顺序信息和深度中的至少一项,进程标识可以为进程文件路径,父窗口标识可以为父窗口标题。可选地,在执行上述步骤S101之前,当用户从待识别窗口选择待识别区域时,信息识别设备可以通过当前操作系统提供的第一应用程序接口(ApplicationProgramming Interface,简称API)集合定位到待识别窗口句柄,并将待识别窗口句柄输入到当前操作系统提供的第二API集合来自动获取待识别窗口属性信息。
其中,可以通过调用FindWindowEx来获得当前窗口句柄,将当前窗口句柄输入GetWindowRect,得到当前窗口的矩形区域,通过OnMouseMove得到当前鼠标的位置,判断当前鼠标的位置是否位于当前窗口的矩形区域,若位于,则将当前窗口句柄定位为待识别窗口句柄,否则,重复执行上述操作,直至定位到待识别窗口句柄。
例如,当前操作系统为Windows系统,则可以将待识别窗口句柄输入到GetWindowThreadProcessId来获取待识别窗口的进程ID,将该进程ID输入到OpenProcess来获取进程句柄,并将该进程句柄输入到GetProcessImageFileName来获取进程文件路径。又例如,可以将待识别窗口句柄输入到GetParent来获取待识别窗口的父窗口句柄,将该父窗口句柄输入GetWindowText来获取父窗口标题。还例如,可以将待识别窗口句柄输入到GetClassName来获取待识别窗口的类名,将待识别窗口句柄输入到GetWindowLong来获取待识别窗口的风格等。
在该实施例中,如图2所示,根据待识别窗口属性信息查找待识别窗口可以包括:
步骤S1011,定时获取每个窗口的属性信息。
例如,每隔500毫秒(ms)获取窗口的属性信息。
步骤S1012,将待识别窗口属性信息依次与每个窗口的属性信息进行匹配,以定时查找待识别窗口。
将待识别窗口属性信息依次与获取到的每个窗口的属性信息进行匹配,若匹配失败,则待识别窗口不存在,不进行后续识别操作,若匹配成功,则查找到待识别窗口。
该实施例,通过定时获取每个窗口的属性信息,可以减少所消耗的资源,通过将待识别窗口属性信息依次与每个窗口的属性信息进行匹配,可以保证待识别窗口的查找准确率。
步骤S102,响应于查找到待识别窗口,获取待识别窗口绘制工具。
其中,待识别窗口绘制工具是指可以对位于待识别窗口中的待识别区域进行截图的工具,待识别窗口绘制工具可以包括但不局限于待识别窗口DC。
如图3所示,获取待识别窗口绘制工具的过程可以包括:
步骤S1021,响应于查找到待识别窗口,则获取待识别窗口句柄。
步骤S1022,根据待识别窗口句柄,获取待识别窗口DC。
其中,在获取到待识别窗口句柄之后,可以将待识别窗口句柄输入到当前操作系统的第三API集合来获取待识别窗口DC。
例如,当前操作系统为Windows系统,则可以将待识别窗口句柄输入GetwindowsDC来获取待识别窗口DC。
需要说明的是,第一API集合、第二API集合和第三API集合仅用于对当前操作系统提供的不同API进行区分,这三个集合包含的API均为当前操作系统提供的API。
该实施例,通过根据获取的待识别窗口句柄,获取待识别窗口DC,实现方式简单。
步骤S103,根据预先确定的待识别区域位置信息,使用待识别窗口绘制工具对待识别区域进行截图,其中,待识别区域位于待识别窗口中。
在该实施例中,待识别区域位置信息可以包括待识别区域设定顶点的坐标以及待识别区域的宽度和高度。
其中,待识别区域设定顶点可以为待识别区域的左上角顶点或左下角顶点等。
在该实施例中,待识别区域位于待识别窗口中可以包括两种情形:
情形1)待识别区域位于待识别窗口内,即待识别区域小于待识别窗口。
情形2)待识别区域为待识别窗口,即待识别区域与待识别窗口一样大。
情形1)属于优选实施例,由于待识别区域位于待识别窗口内,因此,待识别区域小,需要识别的内容少,从而可以提高识别效率和准确率。
步骤S104,识别截图内容。
在该实施例中,可以通过多种方式例如OCR识别截图内容。
上述实施例,通过响应于查找到待识别窗口,才获取待识别窗口绘制工具,以确保待识别窗口出现时才进行截图识别,从而保证识别准确性,同时,使用待识别窗口绘制工具而非桌面DC对待识别区域进行截图,以确保待识别区域被其他窗口内容遮挡时,仍能被正确识别。
图4是本公开一示例性实施例示出的另一种信息识别方法的流程图。如图4所示,该信息识别方法包括:
步骤S401,根据待识别窗口属性信息查找待识别窗口。
在该实施例中,待识别窗口可以包括但不局限于金额窗口。
其中,待识别窗口属性信息可以包括但不局限于待识别窗口的进程标识、父窗口标识、类名、风格、顺序信息和深度中的至少一项。
步骤S402,响应于查找到待识别窗口,获取待识别窗口绘制工具。
其中,待识别窗口绘制工具可以包括待识别窗口DC。
步骤S403,将人工选择的位于待识别窗口内的区域作为待识别区域,并确定待识别区域位置信息。
由于待识别区域位于待识别窗口内,因此,待识别区域小,需要识别的内容少,从而可以提高识别效率和准确率。
步骤S404,根据确定的待识别区域位置信息,使用待识别窗口绘制工具对待识别区域进行截图,其中,待识别区域位于待识别窗口中。
其中,待识别区域位置信息包括待识别区域设定顶点的坐标以及待识别区域的宽度和高度。
其中,待识别区域设定顶点可以为待识别区域的左上角顶点或左下角顶点等。
步骤S405,识别截图内容。
在该实施例中,可以通过多种方式例如OCR识别截图内容。
上述实施例,将人工选择的位于待识别窗口内的区域作为待识别区域,由于位于待识别窗口内的区域小,需要识别的内容少,因此,可以提高识别效率和准确率。
图5是本公开一示例性实施例示出的另一种信息识别方法的流程图。如图5所示,该信息识别方法包括:
步骤S501,根据待识别窗口属性信息查找待识别窗口。
在该实施例中,待识别窗口可以包括但不局限于金额窗口。
其中,待识别窗口属性信息可以包括但不局限于待识别窗口的进程标识、父窗口标识、类名、风格、顺序信息和深度中的至少一项。
步骤S502,响应于查找到待识别窗口,获取待识别窗口绘制工具。
其中,待识别窗口绘制工具可以包括待识别窗口DC。
步骤S503,将待识别窗口对应的区域作为待识别区域,并确定待识别区域位置信息。
步骤S504,根据确定的待识别区域位置信息,使用待识别窗口绘制工具对待识别区域进行截图,其中,待识别区域位于待识别窗口中。
其中,待识别区域位置信息包括待识别区域设定顶点的坐标以及待识别区域的宽度和高度。
其中,待识别区域设定顶点可以为待识别区域的左上角顶点或左下角顶点等。
步骤S505,识别截图内容。
在该实施例中,可以通过多种方式例如OCR识别截图内容。
上述实施例,通过将待识别窗口对应的区域作为待识别区域,并确定待识别区域位置信息,实现方式简单,然后根据确定的待识别区域位置信息,使用待识别窗口绘制工具而非桌面DC对待识别区域进行截图,以确保待识别区域被其他窗口内容遮挡时,仍能被正确识别。
与前述信息识别方法的实施例相对应,本公开还提供了信息识别装置的实施例。
本公开信息识别装置的实施例可以应用在电子设备上。其中,该电子设备可以为信息识别终端。装置实施例可以通过软件实现,也可以通过硬件或者软硬件结合的方式实现。如图6所示,为本公开信息识别装置600所在电子设备的一种硬件结构图,该电子设备包括处理器610、存储器620及存储在存储器620上并可在处理器610上运行的计算机程序,该处理器610执行该计算机程序时实现上述信息识别方法。除了图6所示的处理器610及存储器620之外,实施例中装置所在的电子设备通常根据该信息识别的实际功能,还可以包括其他硬件,对此不再赘述。
图7是本公开一示例性实施例示出的一种信息识别装置的框图,如图7所示,该信息识别装置可以包括:查找模块71、获取模块72、截图模块73和识别模块74。
查找模块71用于根据待识别窗口属性信息查找待识别窗口。
在该实施例中,待识别窗口可以包括但不局限于金额窗口。
其中,待识别窗口属性信息可以包括但不局限于待识别窗口的进程标识、父窗口标识、类名、风格、顺序信息和深度中的至少一项,进程标识可以为进程文件路径,父窗口标识可以为父窗口标题。
可选地,在查找模块71用于根据待识别窗口属性信息查找待识别窗口之前,当用户从待识别窗口选择待识别区域时,可以通过当前操作系统提供的第一应用程序接口(Application Programming Interface,简称API)集合定位到待识别窗口句柄,并将待识别窗口句柄输入到当前操作系统提供的第二API集合来自动获取待识别窗口属性信息。
其中,可以通过调用FindWindowEx来获得当前窗口句柄,将当前窗口句柄输入GetWindowRect,得到当前窗口的矩形区域,通过OnMouseMove得到当前鼠标的位置,判断当前鼠标的位置是否位于当前窗口的矩形区域,若位于,则将当前窗口句柄定位为待识别窗口句柄,否则,重复执行上述操作,直至定位到待识别窗口句柄。
例如,当前操作系统为Windows系统,则可以将待识别窗口句柄输入到GetWindowThreadProcessId来获取待识别窗口的进程ID,将该进程ID输入到OpenProcess来获取进程句柄,并将该进程句柄输入到GetProcessImageFileName来获取进程文件路径。又例如,可以将待识别窗口句柄输入到GetParent来获取待识别窗口的父窗口句柄,将该父窗口句柄输入GetWindowText来获取父窗口标题。还例如,可以将待识别窗口句柄输入到GetClassName来获取待识别窗口的类名,将待识别窗口句柄输入到GetWindowLong来获取待识别窗口的风格等。
获取模块72用于响应于查找模块71查找到待识别窗口,获取待识别窗口绘制工具。
其中,待识别窗口绘制工具可以包括待识别窗口DC。
截图模块73用于根据预先确定的待识别区域位置信息,使用获取模块72获取的待识别窗口绘制工具对待识别区域进行截图,其中,待识别区域位于待识别窗口中。
在该实施例中,待识别区域位置信息可以包括待识别区域设定顶点的坐标以及待识别区域的宽度和高度。
其中,待识别区域设定顶点可以为待识别区域的左上角顶点或左下角顶点等。
在该实施例中,待识别区域位于待识别窗口中可以包括两种情形:
情形1)待识别区域位于待识别窗口内,即待识别区域小于待识别窗口。
情形2)待识别区域为待识别窗口,即待识别区域与待识别窗口一样大。
情形1)属于优选实施例,由于待识别区域位于待识别窗口内,因此,待识别区域小,需要识别的内容少,从而可以提高识别效率和准确率。
识别模块74用于识别截图模块73的截图内容。
在该实施例中,可以通过多种方式例如OCR识别截图内容。
上述实施例,通过响应于查找到待识别窗口,才获取待识别窗口绘制工具,以确保待识别窗口出现时才进行截图识别,从而保证识别准确性,同时,使用待识别窗口绘制工具而非桌面DC对待识别区域进行截图,以确保待识别区域被其他窗口内容遮挡时,仍能被正确识别。
图8是本公开一示例性实施例示出的另一种信息识别装置的框图,如图8所示,在图7所示实施例的基础上,获取模块72可以包括:第一获取子模块721和第二获取子模块722。
第一获取子模块721用于响应于查找到待识别窗口,则获取待识别窗口句柄。
第二获取子模块722用于根据获取子模块721获取的待识别窗口句柄,获取待识别窗口设备上下文DC。
其中,在获取到待识别窗口句柄之后,可以将待识别窗口句柄输入到当前操作系统的第三API集合来获取待识别窗口DC。
例如,当前操作系统为Windows系统,则可以将待识别窗口句柄输入GetwindowsDC来获取待识别窗口DC。
需要说明的是,第一API集合、第二API集合和第三API集合仅用于对当前操作系统提供的不同API进行区分,这三个集合包含的API均为当前操作系统提供的API。上述实施例,通过根据获取的待识别窗口句柄,获取待识别窗口DC,实现方式简单。
图9是本公开一示例性实施例示出的另一种信息识别装置的框图,如图9所示,在图7所示实施例的基础上,该信息识别装置还可以包括:第一确定模块75。
第一确定模块75用于将人工选择的位于待识别窗口内的区域作为待识别区域,并确定待识别区域位置信息。
由于待识别区域位于待识别窗口内,因此,待识别区域小,需要识别的内容少,从而可以提高识别效率和准确率。
上述实施例,将人工选择的位于待识别窗口内的区域作为待识别区域,由于位于待识别窗口内的区域小,识别的内容少,因此,可以提高识别效率和准确率。
图10是本公开一示例性实施例示出的另一种信息识别装置的框图,如图10所示,在图7所示实施例的基础上,该信息识别装置还可以包括:第二确定模块76。
第二确定模块76用于将待识别窗口对应的区域作为待识别区域,并确定待识别区域位置信息。
上述实施例,通过将待识别窗口对应的区域作为待识别区域,并确定待识别区域位置信息,实现方式简单。
图11是本公开一示例性实施例示出的另一种信息识别装置的框图,如图11所示,在图7所示实施例的基础上,查找模块71可以包括:获取子模块711和查找子模块712。
获取子模块711用于定时获取每个窗口的属性信息。
例如,每隔500毫秒(ms)获取窗口的属性信息。
查找子模块712用于将待识别窗口属性信息依次与获取子模块711获取的每个窗口的属性信息进行匹配,以定时查找待识别窗口。
在该实施例中,将待识别窗口属性信息依次与获取到的每个窗口的属性信息进行匹配,若匹配失败,则待识别窗口不存在,不进行后续识别操作,若匹配成功,则查找到待识别窗口。
上述实施例,通过定时获取每个窗口的属性信息,可以减少所消耗的资源,通过将待识别窗口属性信息依次与每个窗口的属性信息进行匹配,可以保证待识别窗口的查找准确率。
上述装置中各个单元的功能和作用的实现过程具体详见上述方法中对应步骤的实现过程,在此不再赘述。
在示例性实施例中,还提供了一种计算机可读存储介质,该存储介质存储有计算机程序,该计算机程序用于执行上述信息识别方法,其中,该信息识别方法包括:
根据待识别窗口属性信息查找待识别窗口;
响应于查找到待识别窗口,获取待识别窗口绘制工具;
根据预先确定的待识别区域位置信息,使用待识别窗口绘制工具对待识别区域进行截图,其中,待识别区域位于待识别窗口中;
识别截图内容。
上述计算机可读存储介质可以是只读存储器(ROM)、随机存取存储器(RAM)、光盘只读存储器(CD-ROM)、磁带、软盘和光数据存储设备等。
对于装置实施例而言,由于其基本对应于方法实施例,所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的,其中作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本公开方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其它实施方案。本公开旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由权利要求指出。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。
以上仅为本公开的较佳实施例而已,并不用以限制本公开,凡在本公开的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本公开保护的范围之内。

Claims (8)

1.一种信息识别方法,包括:
确定待识别区域,其中,所述待识别区域位于待识别窗口中;
获取待识别窗口句柄,并根据待识别窗口句柄获取待识别窗口属性信息;
定时获取每个窗口的属性信息;
将所述待识别窗口属性信息依次与所述每个窗口的属性信息进行匹配,以定时查找所述待识别窗口;
响应于查找到所述待识别窗口,则获取待识别窗口句柄;
根据所述待识别窗口句柄,获取待识别窗口设备上下文;
根据所确定出的待识别区域位置信息,使用所述待识别窗口设备上下文对待识别区域进行截图,其中,所述待识别区域位于所述待识别窗口中;
识别截图内容。
2.根据权利要求1所述的方法,所述方法还包括:
将人工选择的位于所述待识别窗口内的区域作为所述待识别区域,并确定所述待识别区域位置信息。
3.根据权利要求1所述的方法,所述方法还包括:
将所述待识别窗口对应的区域作为所述待识别区域,并确定所述待识别区域位置信息。
4.根据权利要求1所述的方法,其中,所述待识别窗口属性信息包括所述待识别窗口的进程标识、父窗口标识、类名、风格、顺序信息和深度中的至少一项。
5.根据权利要求1-4任一项所述的方法,其中,所述待识别区域位置信息包括所述待识别区域设定顶点的坐标以及所述待识别区域的宽度和高度。
6.一种信息识别装置,包括:
查找模块,用于确定待识别区域,其中,所述待识别区域位于待识别窗口中;获取待识别窗口句柄,并根据待识别窗口句柄获取待识别窗口属性信息;定时获取每个窗口的属性信息;将所述待识别窗口属性信息依次与所述每个窗口的属性信息进行匹配,以定时查找所述待识别窗口;
获取模块,用于响应于查找到所述待识别窗口,则获取待识别窗口句柄;根据所述待识别窗口句柄,获取待识别窗口设备上下文;
截图模块,用于根据所确定出的待识别区域位置信息,使用所述获取模块获取的所述待识别窗口绘制工具对待识别区域进行截图,其中,所述待识别区域位于所述待识别窗口中;
识别模块,用于识别所述截图模块的截图内容。
7.一种计算机可读存储介质,所述存储介质存储有计算机程序,所述计算机程序用于执行上述权利要求1-5任一所述的信息识别方法。
8.一种电子设备,包括处理器、存储器及存储在所述存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述权利要求1-5任一所述的信息识别方法。
CN201910883490.7A 2019-09-18 2019-09-18 信息识别方法及装置、电子设备和计算机可读存储介质 Active CN110689009B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910883490.7A CN110689009B (zh) 2019-09-18 2019-09-18 信息识别方法及装置、电子设备和计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910883490.7A CN110689009B (zh) 2019-09-18 2019-09-18 信息识别方法及装置、电子设备和计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN110689009A CN110689009A (zh) 2020-01-14
CN110689009B true CN110689009B (zh) 2021-09-07

Family

ID=69109496

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910883490.7A Active CN110689009B (zh) 2019-09-18 2019-09-18 信息识别方法及装置、电子设备和计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN110689009B (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101079061A (zh) * 2007-04-09 2007-11-28 腾讯科技(深圳)有限公司 一种网页截屏系统及其实现方法
CN102750555A (zh) * 2012-06-28 2012-10-24 北京理工大学 一种应用于即时通讯工具的表情机器人
CN104391797A (zh) * 2014-12-09 2015-03-04 北京奇虎科技有限公司 Gui控件的识别方法和装置
CN107704174A (zh) * 2017-10-12 2018-02-16 威创集团股份有限公司 一种窗口抓取方法及系统、计算机装置及存储器
CN108681428A (zh) * 2018-04-04 2018-10-19 四川巧夺天工信息安全智能设备有限公司 一种windows系统下的滚动截屏方法
CN109032951A (zh) * 2018-08-06 2018-12-18 武汉斗鱼网络科技有限公司 一种检测客户端运行OpenGL版本的方法、系统、服务器及存储介质
CN109857499A (zh) * 2019-01-09 2019-06-07 北京数衍科技有限公司 基于windows系统收银软件屏幕金额获取的通用方法

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6707942B1 (en) * 2000-03-01 2004-03-16 Palm Source, Inc. Method and apparatus for using pressure information for improved computer controlled handwriting recognition, data entry and user authentication
CN105549975A (zh) * 2015-12-15 2016-05-04 北京金山安全软件有限公司 提示类广告窗口的处理方法及装置
CN109542440A (zh) * 2018-11-29 2019-03-29 金蝶软件(中国)有限公司 对窗口的操作方法和装置、计算机装置及可读存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101079061A (zh) * 2007-04-09 2007-11-28 腾讯科技(深圳)有限公司 一种网页截屏系统及其实现方法
CN102750555A (zh) * 2012-06-28 2012-10-24 北京理工大学 一种应用于即时通讯工具的表情机器人
CN104391797A (zh) * 2014-12-09 2015-03-04 北京奇虎科技有限公司 Gui控件的识别方法和装置
CN107704174A (zh) * 2017-10-12 2018-02-16 威创集团股份有限公司 一种窗口抓取方法及系统、计算机装置及存储器
CN108681428A (zh) * 2018-04-04 2018-10-19 四川巧夺天工信息安全智能设备有限公司 一种windows系统下的滚动截屏方法
CN109032951A (zh) * 2018-08-06 2018-12-18 武汉斗鱼网络科技有限公司 一种检测客户端运行OpenGL版本的方法、系统、服务器及存储介质
CN109857499A (zh) * 2019-01-09 2019-06-07 北京数衍科技有限公司 基于windows系统收银软件屏幕金额获取的通用方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
Magnifying Smartphone Screen Using Google Glass for Low-Vision Users;Shrinivas Pundlik 等;《IEEE Transactions on Neural systems and Rehabilitatioin Engineering》;20170131;第25卷(第1期);第49-58页 *
屏幕截图中的文字也来OCR;兰笔小梦;《软件世界》;20051231;第14页 *
截图图像功能区域分割与文字信息识别方法的研究与应用;舒展;《中国优秀硕士学位论文全文数据库 信息科技辑》;20180515;第2018年卷(第05期);第I138-469页 *

Also Published As

Publication number Publication date
CN110689009A (zh) 2020-01-14

Similar Documents

Publication Publication Date Title
CN103079092B (zh) 在视频中获取人物信息的方法和装置
EP3396558B1 (en) Method for user identifier processing, terminal and nonvolatile computer readable storage medium thereof
EP2410493A2 (en) Apparatus and method for providing augmented reality using additional data
US9665574B1 (en) Automatically scraping and adding contact information
KR20190089994A (ko) 이미지들에 기초하여 서비스 동작들을 구현하기 위한 방법 및 디바이스
CN112784529A (zh) 基于BetterScroll的移动端排序表格及其构建方法
CN112418368A (zh) Nfc卡片的处理方法及装置、设备、存储介质
CN110895602B (zh) 身份验证方法、装置、电子设备及存储介质
CN112395182A (zh) 自动化测试方法、装置、设备及计算机可读存储介质
CN110689009B (zh) 信息识别方法及装置、电子设备和计算机可读存储介质
US20200302507A1 (en) Item presentation method, item presentation program, and item presentation apparatus
JP6822484B2 (ja) 情報処理装置、情報処理方法及びプログラム
CN109727056B (zh) 金融机构推荐方法、设备、存储介质及装置
CN106469166B (zh) 一种信息处理方法及装置
CN112749769A (zh) 图形码检测方法、装置、计算机设备及存储介质
CN105791503A (zh) 一种将名片信息存储到通讯录的方法及装置
CN110706035A (zh) 一种更新效果的评价方法、装置、存储介质及电子设备
US11621000B2 (en) Systems and methods for associating a voice command with a search image
CN112333182B (zh) 档案处理方法、装置、服务器及存储介质
CN111639634A (zh) 一种ocr识别方法及电子设备
CN110516412A (zh) 图片原创信息获取方法、装置、计算机设备及存储介质
CN111858994A (zh) 文字检索方法和装置
CN110909739A (zh) 图片识别并操作的方法、装置、计算机设备及存储介质
CN110162718A (zh) 智能化导引方法及装置
CN112751928B (zh) 跨终端信息互联方法、装置、计算机设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant