CN103942212A - 一种用户界面的文字检测方法及装置 - Google Patents

一种用户界面的文字检测方法及装置 Download PDF

Info

Publication number
CN103942212A
CN103942212A CN201310021505.1A CN201310021505A CN103942212A CN 103942212 A CN103942212 A CN 103942212A CN 201310021505 A CN201310021505 A CN 201310021505A CN 103942212 A CN103942212 A CN 103942212A
Authority
CN
China
Prior art keywords
word message
user interface
control
sectional drawing
search
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201310021505.1A
Other languages
English (en)
Other versions
CN103942212B (zh
Inventor
宁海燕
丁如敏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Tencent Cloud Computing Beijing Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201310021505.1A priority Critical patent/CN103942212B/zh
Publication of CN103942212A publication Critical patent/CN103942212A/zh
Application granted granted Critical
Publication of CN103942212B publication Critical patent/CN103942212B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/40Processing or translation of natural language
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/80Information retrieval; Database structures therefor; File system structures therefor of semi-structured data, e.g. markup language structured data such as SGML, XML or HTML

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Machine Translation (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明实施例公开了一种用户界面的文字检测方法及装置,用于检测在用户界面中的文字显示错误。本发明实施例方法包括:获取目标应用中用户界面的所有控件截图;提取所述控件截图中的第一文字信息;将资源文件中相应的第二文字信息与所述第一文字信息进行对比,查找所述第二文字信息与所述第一文字信息不一致的内容。由于本发明获取的是用户界面实际显示的截图信息,因此,当控件截图中的文字信息的显示出现问题,就可以通过与资源文件中原始文字信息的对比检测出来。

Description

一种用户界面的文字检测方法及装置
技术领域
本发明涉及文字处理领域,尤其涉及一种用户界面的文字检测方法及装置。
背景技术
由于终端应用的全球化,对应用软件进行翻译是应用软件跨国普及的一种常用方式;随着应用软件翻译的增多,由计算机智能对应用软件进行翻译成为了行业内技术人员的一种惯用手段,而由于智能翻译技术的不完善,经常会出现一些问题,如漏翻译、文字截断等。
由于出现上述的问题,因此,不得不对智能翻译后的应用软件进行文字检测;传统的人工检测方式虽然检测比较全面,但费时费力,且需要找既懂得翻译的语言又懂得测试该软件的人员,限制较大。
在现有技术中,有一种对应用软件翻译的内容进行智能检测的方法:从应用软件的资源文件中获取与用户界面显示的文字相关的信息,再对比应用软件中用户界面显示的文字信息,从而找出遗漏翻译的文字;但是,这种现有技术只能检测出遗漏翻译的文字,而翻译之后造成的截断或换行的现象时无法检测出来的,因为截断或换行的现象是由于翻译前后两种语言显示出来的长度不一而导致的显示不全的情况,所翻译出来的文字是没有错误的,因此,现有技术无法检测。
发明内容
本发明实施例提供了一种用户界面的文字检测方法及装置,用于检测在用户界面中的文字显示错误。
本发明实施例提供的用户界面的文字检测方法,包括:
获取目标应用中用户界面的所有控件截图;提取所述控件截图中的第一文字信息;将资源文件中相应的第二文字信息与所述第一文字信息进行对比,查找所述第二文字信息与所述第一文字信息不一致的内容。
本发明实施例提供的用户界面的文字检测装置,包括
控件截图单元,用于获取目标应用中用户界面的所有控件截图;
文字提取单元,用于提取所述控件截图中的第一文字信息;
查找单元,用于将资源文件中相应的第二文字信息与所述第一文字信息进行对比,查找所述第二文字信息与所述第一文字信息不一致的内容。
从以上技术方案可以看出,本发明实施例具有以下优点:
在本发明实施例中,获取目标应用中的所有控件截图;提取所述控件截图中的第一文字信息;将资源文件中相应的第二文字信息与所述第一文字信息进行对比,查找所述第二文字信息与所述第一文字信息不一致的内容;由于本发明获取的是用户界面实际显示的截图信息,因此,当控件截图中的文字信息的显示出现问题,就可以通过与资源文件中原始文字信息的对比检测出来。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明第一实施例提供的用户界面的文字检测方法的流程示意图;
图2是本发明第二实施例提供的用户界面的文字检测方法的流程示意图;
图3是本发明第三实施例提供的用户界面的文字检测方法的流程示意图;
图4是本发明实施例用户界面的文字检测装置的结构示意图。
具体实施方式
本发明实施例提供了一种用户界面的文字检测方法及装置,用于检测在用户界面中的文字显示错误。
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1,本发明实施例中用户界面的文字检测方法的一个实施例包括:
101、获取目标应用中用户界面的所有控件截图;
用户界面的文字检测装置获取目标应用中用户界面的所有控件截图,所述控件为用户可与之交互以输入或操作数据的对象,可以表示为用户界面中的图形元素;所述控件一般出现在对话框中或工具栏上,具体的,可以为:按钮、输入框或滚动条等。
所述用户界面为系统和用户之间进行交互和信息交换的媒介,它实现信息的内部形式与人类可以接受形式之间的转换。
102、提取所述控件截图中的第一文字信息;
用户界面的文字检测装置提取所述控件截图中的第一文字信息,所述第一文字信息为在用户界面中显示的文字信息。
具体的,可以对所述控件截图进行关于文字图像的边缘检测,从而提取所述控件截图中的第一文字信息。
103、将资源文件中相应的第二文字信息与所述第一文字信息进行对比;
用户界面的文字检测装置将资源文件中相应的第二文字信息与所述第一文字信息进行对比,查找所述第二文字信息与所述第一文字信息不一致的内容。
所述资源文件中包含着无需重新编辑代码便可以改变的位图、字符串和其它数据。在现有技术中,如果计划将一种外语应用程序本地化(即翻译为本地的语言),可以将用户界面的全部正文串和位图存放在资源文件里,然后直接对资源文件中的正文串和位图本地化,而不是将整个应用程序本地化。
所述第二文字信息为在资源文件存储的要在用户界面中显示的文字信息。可以理解的是,在本发明实施例中的第一文字信息是相对于第二文字信息而言的;其中的“第一”和“第二”与文字信息的具体内容没有任何关系。
在本发明实施例中,获取目标应用中的所有控件截图;提取所述控件截图中的第一文字信息;将资源文件中相应的第二文字信息与所述第一文字信息进行对比,查找所述第二文字信息与所述第一文字信息不一致的内容;由于本发明获取的是用户界面实际显示的截图信息,因此,当控件截图中的文字信息的显示出现问题,就可以通过与资源文件中原始文字信息的对比检测出来。
请参阅图2,下面对本发明用户界面的文字检测方法进行详细描述,本发明实施例中用户界面的文字检测方法的另一个实施例包括:
201、对所述目标应用中用户界面的控件进行深度搜索遍历,并对搜索到的所述控件进行截图;
用户界面的文字检测装置对所述目标应用中用户界面的控件进行深度搜索遍历,并对搜索到的所述控件进行截图,得到所有的控件截图。
具体的,对控件进行深度搜索遍历的具体过程可以为:
1)获取当前用户界面的所有控件,依次执行所述当前用户界面中未被执行的控件的操作,并对执行过操作的控件进行截图;若所述控件的操作为界面跳转操作,则执行步骤2);若所述当前用户界面中没有所述未被执行的控件,则执行步骤3);
2)根据所述跳转操作切换所述当前用户界面,并继续执行步骤1);
3)若当前用户界面为不是第一级的用户界面,则将所述当前用户界面切换至上一级用户界面,并继续执行步骤1);若当前用户界面为第一级用户界面,则搜索流程结束。
具体的,上述第一级的用户界面指的是目标应用中首页的用户界面。
可选的,还可以沿着建立的控件树的深度遍历树的节点,尽可能深的搜索树的分支;当某一控件的所有边都己被遍历过,搜索将回溯到发现控件的那条边的起始控件节点。如果还存在未被操作的控件节点,则选择其中一个作为源节点并重复以上过程,整个进程反复进行直到所有控件节点都被遍历为止。
可以理解的是,在实际应用中,还可以有其它的深度搜索遍历方法,此处具体不作限定。
202、对所述控件截图进行去重处理;
用户界面的文字检测装置对所述控件截图进行去重处理;具体的,可以利用Sikuli对所述控件截图进行去重处理。
Sikuli是一种新型图形化编程技术。它以图像检索技术为基础,提供了一套基于Jython的脚本语言以及集成开发环境,使用者可利用屏幕截图直接引用GUI元素进行编程,完成交互操作。
利用Sikuli对所述控件截图进行去重处理具体可以为:读取截图目录文件夹,比如ALL,把第一张截图拷贝到去重后的文件夹,比如SELECTED,遍历ALL下的所有截图,和最新的SELECTED文件夹下的截图对比,利用Sikuli得到二张对比截图的相似度,如果相似度大于设定的阈值,则不放入SELECTED文件夹,如果小于设定的阈值,则放入SELECTED文件夹,此时SELECTED文件夹得到更新;如此循环,对比完ALL文件夹下的所以截图,最后得到去重后的截图文件夹SELECTED。
在本发明实施例中,用户界面中遍历到的控件截图可能会有重复,对重复的控件截图进行处理还浪费运算资源,因此需要对控件截图去重。
203、使用光学字符识别方法提取所述控件截图中的第一文字信息;
用户界面的文字检测装置使用光学字符识别(OCR,Optical CharacterRecognition)方法提取所述控件截图中的第一文字信息。
具体的,截图去重后,文字检测装置对控件截图进行扫描,通过检测暗、亮的模式确定控件截图中文字信息的形状,然后对控件截图的图像文件进行分析处理,获取具体的文字信息。
204、将资源文件中相应的第二文字信息与所述第一文字信息进行对比;
用户界面的文字检测装置将资源文件中相应的第二文字信息与所述第一文字信息进行对比,查找所述第二文字信息与所述第一文字信息不一致的内容。
具体的,文字检测装置可以对比目标位置中所述第二文字信息和所述第一文字信息;若目标位置中的所述第一文字信息相对于所述第二文字信息的内容缺失,则将相应的第一文字信息标记为错误内容;若目标位置中的所述第二文字信息在所述第一文字信息没有对应的内容,则将相应的第二文字信息标记为漏译内容。
请参阅图3,本发明实施例中用户界面的文字检测方法的另一个实施例包括:
301、使用随机函数点击法对所述目标应用中用户界面的控件进行搜索,并对搜索到的所述控件进行截图;
用户界面的文字检测装置使用随机函数点击法对所述目标应用中用户界面的控件进行搜索,并对搜索到的所述控件进行截图,得到所有的控件截图。
具体的,使用随机函数点击法的具体过程可以为:
使用随机函数生成随机坐标;根据所述随机坐标所述目标应用中的各个用户界面进行点击;对点击生效的控件进行截图。
进一步的,因为软件主要的功能集中在主菜单里,因此除了标准控件的点击,我们还增加了主菜单的点击,并且在点击主菜单后,再利用随机函数生成随机坐标(X,Y),点击应用软件位置(X,Y),同时将随机函数生成随机坐标(X,Y)控制在有效的主菜单坐标范围内。此外,因为软件的某些UI页面点击后,界面没有返回,需要点击手机上的返回键,因此我们将返回键的点击加入随机事件中,避免循环一直在几个页面里。
可以理解的是,在实际应用中,还可以有其它的随机函数遍历方法,此处具体不作限定。
302、对所述控件截图进行去重处理;
用户界面的文字检测装置对所述控件截图进行去重处理;具体的,可以利用Sikuli对所述控件截图进行去重处理。
在本发明实施例中,用户界面中遍历到的控件截图可能会有重复,对重复的控件截图进行处理还浪费运算资源,因此需要对控件截图去重。
303、使用光学字符识别方法提取所述控件截图中的第一文字信息;
用户界面的文字检测装置使用OCR方法提取所述控件截图中的第一文字信息。
具体的,截图去重后,文字检测装置对控件截图进行扫描,通过检测暗、亮的模式确定控件截图中文字信息的形状,然后对控件截图的图像文件进行分析处理,获取具体的文字信息。
304、将资源文件中相应的第二文字信息与所述第一文字信息进行对比;
文字检测装置将资源文件中相应的第二文字信息与所述第一文字信息进行对比,查找所述第二文字信息与所述第一文字信息不一致的内容。
为了便于理解,下面以一具体应用场景进行详细说明,具体为:
1)将遍历得到控件截图,并将其TEXT属性保存在string.xml文件里。
2)读取截图目录文件夹,比如ALL,把第一张截图拷贝到去重后的文件夹,比如SELECTED,遍历ALL下的所有截图,和最新的SELECTED文件夹下的截图对比,利用Sikuli得到二张对比截图的相似度,如果相似度大于设定的阈值,则不放入SELECTED文件夹,如果小于设定的阈值,则放入SELECTED文件夹,此时SELECTED文件夹得到更新;如此循环,对比完ALL文件夹下的所以截图,最后得到去重后的截图文件夹SELECTED。
3)对SELECTED文件夹下的每张截图进行OCR文字识别,并将识别的文字保存到excel文件里,比如selected_string.xml。
将步骤3)得到的selected_string.xml文件和步骤1)得到的string.xml文件对比,如果selected_string.xml文件OCR识别后的文字比string.xml短,则我们可以判断存在文字的截断,并保存到cut_off.xml中;如果selected_string.xml文件存在非string.xml内容,则表示出现遗漏翻译的文字,并保存到miss.xml中。
上面仅以一些例子对本发明实施例中的应用场景进行了说明,可以理解的是,在实际应用中,还可以有更多的应用场景,具体此处不作限定。
下面对用于实现上述用户界面的文字检测方法的用户界面的文字检测装置,进行描述,请参阅图4,本发明实施例中的一种用户界面的文字检测装置,包括:
控件截图单元401,用于获取目标应用中用户界面的所有控件截图;
文字提取单元402,用于提取所述控件截图中的第一文字信息;
查找单元403,用于将资源文件中相应的第二文字信息与所述第一文字信息进行对比,查找所述第二文字信息与所述第一文字信息不一致的内容。
可选的,所述控件截图单元401包括:
第一搜索模块4011,用于对所述目标应用中用户界面的控件进行深度搜索遍历;对搜索到的所述控件进行截图,得到所有的控件截图。
第二搜索模块4012,用于使用随机函数点击法对所述目标应用中用户界面的控件进行搜索;对搜索到的所述控件进行截图,得到所有的控件截图。
可选的,所述装置还进一步包括:
去重处理单元404,用于对所述控件截图进行去重处理。
可选的,所述文字提取单元402还用于:使用光学字符识别OCR方法提取所述控件截图中的第一文字信息。
可选的,所述查找单元403包括:
对比模块4031,用于对比目标位置中所述第二文字信息和所述第一文字信息;
错误查找模块4032,用于若目标位置中的所述第一文字信息相对于所述第二文字信息的内容缺失,则将相应的第一文字信息标记为错误内容;
漏译查找模块4033,用于若目标位置中的所述第二文字信息在所述第一文字信息没有对应的内容,则将相应的第二文字信息标记为漏译内容。
上述各个单元/模块的具体操作过程请参阅方法实施例,此处不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-OnlyMemory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。

Claims (14)

1.一种用户界面的文字检测方法,其特征在于,包括:
获取目标应用中用户界面的所有控件截图;
提取所述控件截图中的第一文字信息;
将资源文件中相应的第二文字信息与所述第一文字信息进行对比,查找所述第二文字信息与所述第一文字信息不一致的内容。
2.根据权利要求1所述的方法,其特征在于,所述获取目标应用中用户界面的所有控件截图,包括:
对所述目标应用中用户界面的控件进行深度搜索遍历;
对搜索到的所述控件进行截图,得到所有的控件截图。
3.根据权利要求2所述的方法,其特征在于,所述对所述目标应用中用户界面的控件进行深度搜索遍历,对搜索到的所述控件进行截图,包括:
1)获取当前用户界面的所有控件,依次执行所述当前用户界面中未被执行的控件的操作,并对执行过操作的控件进行截图;若所述控件的操作为界面跳转操作,则执行步骤2);若所述当前用户界面中没有所述未被执行的控件,则执行步骤3);
2)根据所述跳转操作切换所述当前用户界面,并继续执行步骤1);
3)若当前用户界面为不是第一级的用户界面,则将所述当前用户界面切换至上一级用户界面,并继续执行步骤1);若当前用户界面为第一级用户界面,则搜索流程结束。
4.根据权利要求1所述的方法,其特征在于,所述获取目标应用中用户界面的所有控件截图,包括:
使用随机函数点击法对所述目标应用中用户界面的控件进行搜索;
对搜索到的所述控件进行截图,得到所有的控件截图。
5.根据权利要求3所述的方法,其特征在于,所述使用随机函数点击法对所述目标应用中用户界面的控件进行搜索,对搜索到的所述控件进行截图,包括:
使用随机函数生成随机坐标;
根据所述随机坐标所述目标应用中的各个用户界面进行点击;
对点击生效的控件进行截图。
6.根据权利要求1至5任意一项所述的方法,其特征在于,所述提取所述控件截图中的第一文字信息之前,包括:
对所述控件截图进行去重处理。
7.根据权利要求1至5任意一项所述的方法,其特征在于,所述提取所述控件截图中的第一文字信息,包括:
使用光学字符识别OCR方法提取所述控件截图中的第一文字信息。
8.根据权利要求1至5任意一项所述的方法,其特征在于,所述将资源文件中相应的第二文字信息与所述第一文字信息进行对比,查找所述第二文字信息与所述第一文字信息不一致的内容,包括:
对比目标位置中所述第二文字信息和所述第一文字信息;
若目标位置中的所述第一文字信息相对于所述第二文字信息的内容缺失,则将相应的第一文字信息标记为错误内容;
若目标位置中的所述第二文字信息在所述第一文字信息没有对应的内容,则将相应的第二文字信息标记为漏译内容。
9.一种用户界面的文字检测装置,其特征在于,包括:
控件截图单元,用于获取目标应用中用户界面的所有控件截图;
文字提取单元,用于提取所述控件截图中的第一文字信息;
查找单元,用于将资源文件中相应的第二文字信息与所述第一文字信息进行对比,查找所述第二文字信息与所述第一文字信息不一致的内容。
10.根据权利要求9所述的装置,其特征在于,所述控件截图单元包括:
第一搜索模块,用于对所述目标应用中用户界面的控件进行深度搜索遍历;对搜索到的所述控件进行截图,得到所有的控件截图。
11.根据权利要求9所述的装置,其特征在于,所述控件截图单元包括:
第二搜索模块,用于使用随机函数点击法对所述目标应用中用户界面的控件进行搜索;对搜索到的所述控件进行截图,得到所有的控件截图。
12.根据权利要求9至11任意一项所述的装置,其特征在于,所述装置还包括:
去重处理单元,用于对所述控件截图进行去重处理。
13.根据权利要求9至11任意一项所述的装置,其特征在于,所述文字提取单元还用于:使用光学字符识别方法提取所述控件截图中的第一文字信息。
14.根据权利要求9至11任意一项所述的方法,其特征在于,所述查找单元包括:
对比模块,用于对比目标位置中所述第二文字信息和所述第一文字信息;
错误查找模块,用于若目标位置中的所述第一文字信息相对于所述第二文字信息的内容缺失,则将相应的第一文字信息标记为错误内容;
漏译查找模块,用于若目标位置中的所述第二文字信息在所述第一文字信息没有对应的内容,则将相应的第二文字信息标记为漏译内容。
CN201310021505.1A 2013-01-21 2013-01-21 一种用户界面的文字检测方法及装置 Active CN103942212B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310021505.1A CN103942212B (zh) 2013-01-21 2013-01-21 一种用户界面的文字检测方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310021505.1A CN103942212B (zh) 2013-01-21 2013-01-21 一种用户界面的文字检测方法及装置

Publications (2)

Publication Number Publication Date
CN103942212A true CN103942212A (zh) 2014-07-23
CN103942212B CN103942212B (zh) 2018-01-09

Family

ID=51189882

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310021505.1A Active CN103942212B (zh) 2013-01-21 2013-01-21 一种用户界面的文字检测方法及装置

Country Status (1)

Country Link
CN (1) CN103942212B (zh)

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104391797A (zh) * 2014-12-09 2015-03-04 北京奇虎科技有限公司 Gui控件的识别方法和装置
CN104572454A (zh) * 2014-12-25 2015-04-29 广东欧珀移动通信有限公司 一种定位资源的方法及装置
CN105260301A (zh) * 2015-09-24 2016-01-20 努比亚技术有限公司 用户界面的视效比对测试装置及其实现方法
CN105844281A (zh) * 2016-05-19 2016-08-10 华南理工大学 一种自动获取窗体上设置参数系统与方法
CN107832360A (zh) * 2017-10-24 2018-03-23 广东欧珀移动通信有限公司 评论处理方法及相关设备
CN107844549A (zh) * 2017-10-30 2018-03-27 珠海市魅族科技有限公司 信息保存方法、装置、计算机装置及计算机可读存储介质
CN107918608A (zh) * 2017-12-12 2018-04-17 广东欧珀移动通信有限公司 词条处理方法、移动终端及计算机可读存储介质
CN108205674A (zh) * 2017-12-22 2018-06-26 广州爱美互动网络科技有限公司 社交app的内容识别方法、电子设备、存储介质及系统
CN108228421A (zh) * 2017-12-26 2018-06-29 东软集团股份有限公司 数据监测方法、装置、计算机及存储介质
CN108475335A (zh) * 2016-01-27 2018-08-31 霍尼韦尔国际公司 用于使用光学字符识别&智能字符识别的过程工业中的跳闸现场设备的事后检查分析的方法和工具
CN108595454A (zh) * 2017-12-21 2018-09-28 努比亚技术有限公司 跨应用的搜索推荐方法、终端及计算机可读存储介质
CN110956140A (zh) * 2019-12-02 2020-04-03 支付宝(杭州)信息技术有限公司 图像信息提取方法以及装置
CN109145142B (zh) * 2018-07-24 2020-06-19 维沃移动通信有限公司 一种图片的分享信息的管理方法及终端
CN111767214A (zh) * 2020-06-23 2020-10-13 中国工商银行股份有限公司 软件ui的自动化测试方法及装置
CN111798190A (zh) * 2019-04-03 2020-10-20 阿里巴巴集团控股有限公司 译文文案的处理方法和系统
CN111859999A (zh) * 2020-07-15 2020-10-30 Oppo广东移动通信有限公司 消息翻译方法、装置、存储介质及电子设备
WO2020257970A1 (en) * 2019-06-24 2020-12-30 Citrix Systems, Inc. Previewing application user interface for multiple locales
CN113515443A (zh) * 2021-04-21 2021-10-19 深圳市康冠商用科技有限公司 多国语言自动核对方法、装置、计算机设备及存储介质
CN114296842A (zh) * 2021-07-26 2022-04-08 海信视像科技股份有限公司 显示设备和滚动文本检测方法
WO2022111582A1 (zh) * 2020-11-27 2022-06-02 华为技术有限公司 文本提取方法及装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080295009A1 (en) * 2007-05-24 2008-11-27 Xing Jiang Huang Method and Apparatus for Capturing Graphic User Interface Resource of an Application
CN101571922A (zh) * 2008-05-04 2009-11-04 中兴通讯股份有限公司 一种用于移动终端自动化测试的文字识别工具及其方法
US20110280481A1 (en) * 2010-05-17 2011-11-17 Microsoft Corporation User correction of errors arising in a textual document undergoing optical character recognition (ocr) process
CN102622592A (zh) * 2012-01-19 2012-08-01 北京友录在线科技发展有限公司 一种基于云技术的名片识别方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080295009A1 (en) * 2007-05-24 2008-11-27 Xing Jiang Huang Method and Apparatus for Capturing Graphic User Interface Resource of an Application
CN101571922A (zh) * 2008-05-04 2009-11-04 中兴通讯股份有限公司 一种用于移动终端自动化测试的文字识别工具及其方法
US20110280481A1 (en) * 2010-05-17 2011-11-17 Microsoft Corporation User correction of errors arising in a textual document undergoing optical character recognition (ocr) process
CN102622592A (zh) * 2012-01-19 2012-08-01 北京友录在线科技发展有限公司 一种基于云技术的名片识别方法

Cited By (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104391797B (zh) * 2014-12-09 2017-11-10 北京奇虎科技有限公司 Gui控件的识别方法和装置
CN104391797A (zh) * 2014-12-09 2015-03-04 北京奇虎科技有限公司 Gui控件的识别方法和装置
CN104572454A (zh) * 2014-12-25 2015-04-29 广东欧珀移动通信有限公司 一种定位资源的方法及装置
CN104572454B (zh) * 2014-12-25 2017-08-01 广东欧珀移动通信有限公司 一种定位资源的方法及装置
CN105260301A (zh) * 2015-09-24 2016-01-20 努比亚技术有限公司 用户界面的视效比对测试装置及其实现方法
CN108475335A (zh) * 2016-01-27 2018-08-31 霍尼韦尔国际公司 用于使用光学字符识别&智能字符识别的过程工业中的跳闸现场设备的事后检查分析的方法和工具
CN108475335B (zh) * 2016-01-27 2022-10-14 霍尼韦尔国际公司 用于使用光学字符识别、智能字符识别的过程工业中的跳闸现场设备的事后检查分析的方法
CN105844281A (zh) * 2016-05-19 2016-08-10 华南理工大学 一种自动获取窗体上设置参数系统与方法
CN107832360A (zh) * 2017-10-24 2018-03-23 广东欧珀移动通信有限公司 评论处理方法及相关设备
CN107844549A (zh) * 2017-10-30 2018-03-27 珠海市魅族科技有限公司 信息保存方法、装置、计算机装置及计算机可读存储介质
CN107918608A (zh) * 2017-12-12 2018-04-17 广东欧珀移动通信有限公司 词条处理方法、移动终端及计算机可读存储介质
CN108595454A (zh) * 2017-12-21 2018-09-28 努比亚技术有限公司 跨应用的搜索推荐方法、终端及计算机可读存储介质
CN108595454B (zh) * 2017-12-21 2022-05-13 努比亚技术有限公司 跨应用的搜索推荐方法、终端及计算机可读存储介质
CN108205674A (zh) * 2017-12-22 2018-06-26 广州爱美互动网络科技有限公司 社交app的内容识别方法、电子设备、存储介质及系统
CN108205674B (zh) * 2017-12-22 2022-04-15 广州爱美互动网络科技有限公司 社交app的内容识别方法、电子设备、存储介质及系统
CN108228421A (zh) * 2017-12-26 2018-06-29 东软集团股份有限公司 数据监测方法、装置、计算机及存储介质
CN109145142B (zh) * 2018-07-24 2020-06-19 维沃移动通信有限公司 一种图片的分享信息的管理方法及终端
CN111798190A (zh) * 2019-04-03 2020-10-20 阿里巴巴集团控股有限公司 译文文案的处理方法和系统
CN111798190B (zh) * 2019-04-03 2024-01-23 阿里巴巴集团控股有限公司 译文文案的处理方法和系统
WO2020257970A1 (en) * 2019-06-24 2020-12-30 Citrix Systems, Inc. Previewing application user interface for multiple locales
US11182180B2 (en) 2019-06-24 2021-11-23 Citrix Systems, Inc. Previewing application user interface for multiple locales
CN110956140A (zh) * 2019-12-02 2020-04-03 支付宝(杭州)信息技术有限公司 图像信息提取方法以及装置
CN111767214A (zh) * 2020-06-23 2020-10-13 中国工商银行股份有限公司 软件ui的自动化测试方法及装置
CN111767214B (zh) * 2020-06-23 2023-08-11 中国工商银行股份有限公司 软件ui的自动化测试方法及装置
CN111859999A (zh) * 2020-07-15 2020-10-30 Oppo广东移动通信有限公司 消息翻译方法、装置、存储介质及电子设备
WO2022111582A1 (zh) * 2020-11-27 2022-06-02 华为技术有限公司 文本提取方法及装置
CN113515443A (zh) * 2021-04-21 2021-10-19 深圳市康冠商用科技有限公司 多国语言自动核对方法、装置、计算机设备及存储介质
CN114296842A (zh) * 2021-07-26 2022-04-08 海信视像科技股份有限公司 显示设备和滚动文本检测方法

Also Published As

Publication number Publication date
CN103942212B (zh) 2018-01-09

Similar Documents

Publication Publication Date Title
CN103942212A (zh) 一种用户界面的文字检测方法及装置
US10078632B2 (en) Collecting training data using anomaly detection
RU2643467C1 (ru) Сопоставление разметки для похожих документов
US11256912B2 (en) Electronic form identification using spatial information
US20140301644A1 (en) Extracting Reading Order Text and Semantic Entities
US10235350B2 (en) Detect annotation error locations through unannotated document segment partitioning
Xie et al. Psychologically-inspired, unsupervised inference of perceptual groups of GUI widgets from GUI images
KR20150084706A (ko) 온톨로지의 지식 학습 장치 및 그의 방법
CN112784009A (zh) 一种主题词挖掘方法、装置、电子设备及存储介质
CN105183827A (zh) 基于手写输入的搜索方法及装置
CN104102704A (zh) 系统控件展示方法和装置
Sun et al. Ui components recognition system based on image understanding
CN105373236A (zh) 一种学词方法和装置
CN104598473A (zh) 一种信息处理方法及电子设备
Hoffswell et al. Interactive repair of tables extracted from pdf documents on mobile devices
CN113822013A (zh) 用于文本数据的标注方法、装置、计算机设备及存储介质
CN104933030A (zh) 一种维吾尔语拼写检查方法及装置
Wu et al. Screen correspondence: Mapping interchangeable elements between uis
CN116226681B (zh) 一种文本相似性判定方法、装置、计算机设备和存储介质
CN116595534A (zh) 一种solidity智能合约的缺陷检测方法
CN112783483B (zh) 基于悬浮按钮组件的功能创建方法、装置、设备及介质
US11263392B1 (en) Providing user-specific previews within text
Xiao et al. UI semantic component group detection: Grouping UI elements with similar semantics in mobile graphical user interface
CN115186240A (zh) 基于关联性信息的社交网络用户对齐方法、装置、介质
CN109344254B (zh) 一种地址信息分类方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20240103

Address after: 518000 Tencent Building, No. 1 High-tech Zone, Nanshan District, Shenzhen City, Guangdong Province, 35 Floors

Patentee after: TENCENT TECHNOLOGY (SHENZHEN) Co.,Ltd.

Patentee after: TENCENT CLOUD COMPUTING (BEIJING) Co.,Ltd.

Address before: 518031 East 403 room, Sai Ge science and Technology Park, Futian District Zhenxing Road, Shenzhen, Guangdong, China, 2

Patentee before: TENCENT TECHNOLOGY (SHENZHEN) Co.,Ltd.

TR01 Transfer of patent right