CN111160097B - 一种内容识别方法及装置 - Google Patents

Abstract

本发明公开了一种内容识别方法及装置，包括：识别目标图片中的内容；检测手指在屏幕上的移动信息，其中，移动信息包括手指开始位置以及手指停留位置；将移动信息反馈给识别引擎以使识别引擎提取出开始位置和停留位置之间的目标内容；获取识别引擎提取的目标内容；将目标内容在屏幕上进行展示。通过检测用户手指的移动信息进而确定用户要查看的目标区域，利用识别引擎提取出图片中用户选择的目标区域内的内容进而向用户展示目标内容解决了现有技术中只能检测单个内容而无法检测一句话甚至是图片的问题，增强了用户的体验。

Description

一种内容识别方法及装置

技术领域

本发明涉及电子设备技术领域，尤其涉及一种内容识别方法及装置。

背景技术

目前，随着电子技术的快速发展，内容识别设备在不断满足用户的需求。当在内容识别设备上进行操作时，根据不同的输入操作可以识别不同的内容，为用户提供了便捷的服务，现有技术在图像识别过程中，针对图像上的文字内容，使用手指位置检测来确定自己所需要的文字内容，这种方法只能检测手指停留位置指向的单个内容，比如一个汉字、一个英文单词等，无法检测一句话甚至是图片，给用户的体验很差。

发明内容

针对上述所显示出来的问题，本方法基于将用户手指的移动信息反馈给识别引擎，通过识别引擎提取用户手指移动区域内的内容，进而获取目标内容。

一种内容识别方法，包括以下步骤：

识别目标图片中的内容；

检测手指在屏幕上的移动信息，其中，所述移动信息包括手指开始位置以及手指停留位置；

将所述移动信息反馈给识别引擎以使所述识别引擎提取出所述开始位置和所述停留位置之间的目标内容；

获取所述识别引擎提取的目标内容；

将所述目标内容在所述屏幕上进行展示。

优选的，所述识别所述目标图片中的内容，包括：

当检测到所述目标图片时，激活所述识别引擎；

识别所述目标图片中的所有内容；

将所述所有内容以第一预设比例显示在所述屏幕上。

优选的，所述检测手指在所述屏幕上的移动信息，包括：

当检测到有触摸操作时，检测所述手指在所述屏幕上开始触摸的位置和最终手指停留的位置的时长是否大于等于预设时长；

若是，则记录所述手指移动的开始位置和停留位置；

否则，重复检测所述手指在所述屏幕上停留的时长直到大于等于所述预设时长为止；

基于预先建立的标准坐标系，计算所述手指移动的开始位置和停留位置的坐标信息并将所述坐标信息反馈给所述识别引擎。

优选的，所述方法还包括：

在所述手指移动的开始位置生成追击点，用于跟随所述手指进行移动，设置所述追击点的移动速率为第一移动速率；

检测所述手指在所述屏幕上的开始位置移动到所述停留位置的第二移动速率是否小于等于所述第一移动速率值；

若是，则确定所述手指移动的开始位置和停留位置为目标区域；

否则，重新检测所述手指在所述屏幕上的移动信息，直到确定所述目标区域为止。

优选的，所述将目标内容在所述屏幕上进行展示，包括：

接收所述识别引擎提取的目标区域的内容，其中，所述识别引擎根据所述手指移动的目标区域提取所述目标图片中所述目标区域的内容；

将所述目标区域的内容以第二预设比例显示在所述屏幕上。

一种内容识别装置，该装置包括：

识别模块，用于识别目标图片中的内容；

第一检测模块，用于检测手指在屏幕上的移动信息，其中，所述移动信息包括手指开始位置以及手指停留位置；

反馈模块，用于将所述移动信息反馈给识别引擎以使所述识别引擎提取出所述开始位置和所述停留位置之间的目标内容；

获取模块，用于获取并展示所述目标内容；

展示模块，用于将所述目标内容在所述屏幕上进行展示。

优选的，所述识别模块，包括：

激活模块，用于当检测到所述目标图片时，激活所述识别引擎；

识别子模块，用于识别所述目标图片中的所有内容；

第一显示子模块，用于将所述所有内容以第一预设比例显示在所述屏幕上。

优选的，所述检测模块，包括：

检测子模块，用于当检测到有触摸操作时，检测所述手指在所述屏幕上开始触摸的位置和最终手指停留的位置的时长是否大于等于预设时长；

控制子模块，用于当所述检测子模块检测的时长大于等于所述预设时长时，记录所述手指移动的开始位置和停留位置，否则，重复控制所述检测子模块检测所述手指在所述屏幕上停留的时长直到大于等于所述预设时长为止；

计算子模块，基于预先建立的标准坐标系，计算所述手指移动的开始位置和停留位置的坐标信息并将所述坐标信息反馈给所述识别引擎。

优选的，所述装置还包括：

生成模块，用于在所述手指移动的开始位置生成追击点，以跟随所述手指进行移动，设置所述追击点的移动速率为第一移动速率；

第二检测模块，用于检测所述手指在所述屏幕上的开始位置移动到所述停留位置的第二移动速率是否小于等于所述第一移动速率值；

控制模块，用于当所述第二检测模块检测到的第二移动速率大于等于所述第一移动速率值时，确定所述手指移动的开始位置和停留位置为目标区域，否则，重新控制所述第二检测模块检测所述手指在所述屏幕上的移动信息，直到确定所述目标区域为止。

优选的，所述展示模块，包括：

接收子模块，用于接收所述识别引擎提取的目标区域的内容，其中，所述识别引擎根据所述手指移动的目标区域提取所述目标图片中所述目标区域的内容；

显示子模块，用于将所述目标区域的内容以第二预设比例显示在所述屏幕上。

本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。

下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。

附图说明

图1为本发明所提供的一种内容识别方法的工作流程图；

图2为本发明所提供的一种内容识别方法的另一工作流程图；

图3为本发明所提供的一种内容识别方法的工作流程截图；

图4为本发明所提供的一种内容识别装置的结构图；

图5为本发明所提供的一种内容识别装置的另一结构图。

具体实施方式

这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。

本领域技术人员应当理解的是，本发明中的第一、第二指的是不同应用阶段而已。

目前，随着电子技术的快速发展，内容识别设备在不断满足用户的需求。当在内容识别设备上进行操作时，根据不同的输入操作可以识别不同的内容，为用户提供了便捷的服务，现有技术在图像识别过程中，针对图像上的文字内容，使用手指位置检测来确定自己所需要的文字内容，这种方法只能检测手指停留位置指向的单个内容，比如一个汉字、一个英文单词等，无法检测一句话甚至是图片，给用户的体验很差。为了解决上述问题，本实施例公开了一种基于将用户手指的移动信息反馈给识别引擎，通过识别引擎提取用户手指移动区域内的内容，进而获取目标内容的内容识别方法。

一种内容识别方法，如图1所示，包括以下步骤：

步骤S101、识别目标图片中的内容；

步骤S102、检测手指在屏幕上的移动信息，其中，移动信息包括手指开始位置以及手指停留位置；

步骤S103、将移动信息反馈给识别引擎以使识别引擎提取出开始位置和停留位置之间的目标内容；

步骤S104、获取识别引擎提取的目标内容；

步骤S105、将目标内容在屏幕上进行展示。

上述技术方案的工作原理为：通过识别目标图片中的内容，然后检测用户手指在屏幕上的移动信息，通过将上述移动信息反馈给上述识别引擎来提取出用户手指开始位置以及停留位置之间的内容进而向用户展示所提取的内容。

上述技术方案的有益效果为：通过检测用户手指的移动信息进而确定用户要查看的目标区域，利用识别引擎提取出图片中用户选择的目标区域内的内容进而向用户展示目标内容解决了现有技术中只能检测单个内容而无法检测一句话甚至是图片的问题，增强了用户的体验。

在一个实施例中，如图2所示，识别所述目标图片中的内容，包括：

步骤S201、当检测到目标图片时，激活识别引擎；

步骤S202、识别目标图片中的所有内容；

步骤S203、将所有内容以第一预设比例显示在屏幕上；

特别的，上述第一预设比例可以为1∶1，即目标图片的大小与上述屏幕上显示的目标图片的比例为1∶1。

上述技术方案的有益效果为：在检测到目标图片的同时激活上述识别引擎可以使识别引擎第一时间内识别目标图片的内容并且更快速的提取用户手指移动区域的内容，以第一预设比例在屏幕上显示可以使用户更清晰的看到图片的内容同事也可以更准确地检测用户地手指移动信息进而来确定目标区域。

在一个实施例中，检测手指在所述屏幕上的移动信息，包括：

当检测到有触摸操作时，检测手指在所述屏幕上开始触摸的位置和最终手指停留的位置的时长是否大于等于预设时长；

若是，则记录手指移动的开始位置和停留位置；

否则，重复检测手指在屏幕上停留的时长直到大于等于预设时长为止；

基于预先建立的标准坐标系，计算手指移动的开始位置和停留位置的坐标信息并将坐标信息反馈给识别引擎；

特别的，上述的预设时长可以为500ms，当用户刚开始触摸屏幕时，捕捉用户触摸时间大于等于500ms的触点为开始位置。

上述技术方案的有益效果为：通过检测用户手指触摸的位置时长是否大于等于预设时长来确定用户的开始位置和停留位置，避免了检测错误的问题同时提高了检测的准确率，给予预先建立的坐标系来确定用户手指移动的坐标信息可以更精确的确定用户手指移动的开始位置和停留位置，使上述识别引擎提取的目标区域的内容也更加偏向于用于所期望的内容。

在一个实施例中，所述方法还包括：

在手指移动的开始位置生成追击点，用于跟随手指进行移动，设置追击点的移动速率为第一移动速率；

检测手指在屏幕上的开始位置移动到停留位置的第二移动速率是否小于等于第一移动速率值；

若是，则确定手指移动的开始位置和停留位置为目标区域；

否则，重新检测手指在所述屏幕上的移动信息，直到确定目标区域为止；

特别的，上述第一移动速率可以为30mm/s，即用户手指在屏幕上移动的第二移动速率小于等于30mm/s时，记录用户手指移动的区域，知道确定了用户手指的停留位置进而获取用户从开始位置到停留位置的目标区域。

上述技术方案的有益效果为：进一步的确定了用户所要识别的目标区域，提高了容错率和识别度。同时也避免了用户由于失误而在屏幕上触摸的点大于等于预设时长而开始检测开始位置的情况。进一步的增强了用户体验。

在一个实施例中，将目标内容在所述屏幕上进行展示，包括：

接收识别引擎提取的目标区域的内容，其中，识别引擎根据手指移动的目标区域提取目标图片中所述目标区域的内容；

将目标区域的内容以第二预设比例显示在屏幕上；

特别的，上述第二比例可以为1∶2。

上述技术方案的有益效果为：使用户可以直观的看到自己所要看的目标内容，设置预设第二比例可以让用户根据目标区域内的内容和图片中的所有内容进行对照，也可以重新选择目标区域来识别其中的内容。

在一个实施例中，如图3所示，包括：

第1步：识别到当前整体图片；

第2步：识别手指在当前图片上移动的开始位置和停留位置；

第3步：将手指移动的开始位置和停留位置坐标反馈给引擎。

第4步：引擎通过整体图片的内容与坐标区域进行比对，给出坐标区域内的内容；

(手指移动停留位置定义：当检测手指从移动状态变为在某一坐标上停留超过500ms)。

上述技术方案的工作原理和有益效果为：通过识别目标图片中的内容，然后检测用户手指在屏幕上的移动信息，通过将上述移动信息反馈给上述识别引擎以确定目标区域进而来提取出目标区域内的内容然后向用户展示所提取的内容，相比于现有技术，通过检测用户手指的移动信息进而确定用户要查看的目标区域，利用识别引擎提取出图片中用户选择的目标区域内的内容进而向用户展示目标内容解决了现有技术中只能检测单个内容而无法检测一句话甚至是图片的问题，增强了用户的体验。

本实施例还提供了一种内容识别装置，如图4所示，该装置包括：

识别模块401，用于识别目标图片中的内容；

第一检测模块402，用于检测手指在屏幕上的移动信息，其中，移动信息包括手指开始位置以及手指停留位置；

反馈模块403，用于将移动信息反馈给识别引擎以使识别引擎提取出开始位置和停留位置之间的目标内容；

获取模块404，用于获取并展示目标内容；

展示模块405，用于将目标内容在屏幕上进行展示。

在一个实施例中，如图5所示，识别模块，包括：

激活模块501，用于当检测到目标图片时，激活识别引擎；

识别子模块502，用于识别目标图片中的所有内容；

第一显示子模块503，用于将所有内容以第一预设比例显示在屏幕上。

在一个实施例中，检测模块，包括：

检测子模块，用于当检测到有触摸操作时，检测手指在屏幕上开始触摸的位置和最终手指停留的位置的时长是否大于等于预设时长；

控制子模块，用于当检测子模块检测的时长大于等于预设时长时，记录手指移动的开始位置和停留位置，否则，重复控制所述检测子模块检测所述手指在所述屏幕上停留的时长直到大于等于所述预设时长为止；

计算子模块，基于预先建立的标准坐标系，计算手指移动的开始位置和停留位置的坐标信息并将坐标信息反馈给识别引擎。

在一个实施例中，装置还包括：

生成模块，用于在手指移动的开始位置生成追击点，以跟随手指进行移动，设置追击点的移动速率为第一移动速率；

第二检测模块，用于检测手指在屏幕上的开始位置移动到停留位置的第二移动速率是否小于等于所述第一移动速率值；

控制模块，用于当第二检测模块检测到的第二移动速率大于等于第一移动速率值时，确定手指移动的开始位置和停留位置为目标区域，否则，重新控制第二检测模块检测手指在屏幕上的移动信息，直到确定目标区域为止。

在一个实施例中，展示模块，包括：

接收子模块，用于接收识别引擎提取的目标区域的内容，其中，识别引擎根据手指移动的目标区域提取目标图片中目标区域的内容；

显示子模块，用于将目标区域的内容以第二预设比例显示在屏幕上。

本领域技术用户员在考虑说明书及实践这里公开的公开后，将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求指出。

应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (6)

1.一种内容识别方法，其特征在于，包括以下步骤：

识别目标图片中的内容；

检测手指在屏幕上的移动信息，其中，所述移动信息包括手指开始位置以及手指停留位置；

将所述移动信息反馈给识别引擎以使所述识别引擎提取出所述开始位置和所述停留位置之间的目标内容；

获取所述识别引擎提取的目标内容；

将所述目标内容在所述屏幕上进行展示；

在所述手指移动的开始位置生成追击点，用于跟随所述手指进行移动，设置所述追击点的移动速率为第一移动速率；

检测所述手指在所述屏幕上的开始位置移动到所述停留位置的第二移动速率是否小于等于所述第一移动速率值；

若是，则确定所述手指移动的开始位置和停留位置为目标区域；

否则，重新检测所述手指在所述屏幕上的移动信息，直到确定所述目标区域为止；

其中，所述检测手指在所述屏幕上的移动信息，包括：

当检测到有触摸操作时，检测所述手指在所述屏幕上开始触摸的位置和最终手指停留的位置的时长是否大于等于预设时长；

若是，则记录所述手指移动的开始位置和停留位置；

否则，重复检测所述手指在所述屏幕上停留的时长直到大于等于所述预设时长为止；

基于预先建立的标准坐标系，计算所述手指移动的开始位置和停留位置的坐标信息并将所述坐标信息反馈给所述识别引擎。

2.根据权利要求1所述内容识别方法，其特征在于，所述识别所述目标图片中的内容，包括：

当检测到所述目标图片时，激活所述识别引擎；

识别所述目标图片中的所有内容；

将所述所有内容以第一预设比例显示在所述屏幕上。

3.根据权利要求1所述内容识别方法，其特征在于，所述将目标内容在所述屏幕上进行展示，包括：

接收所述识别引擎提取的目标区域的内容，其中，所述识别引擎根据所述手指移动的目标区域提取所述目标图片中所述目标区域的内容；

将所述目标区域的内容以第二预设比例显示在所述屏幕上。

4.一种内容识别装置，其特征在于，该装置包括：

识别模块，用于识别目标图片中的内容；

第一检测模块，用于检测手指在屏幕上的移动信息，其中，所述移动信息包括手指开始位置以及手指停留位置；

反馈模块，用于将所述移动信息反馈给识别引擎以使所述识别引擎提取出所述开始位置和所述停留位置之间的目标内容；

获取模块，用于获取并展示所述目标内容；

展示模块，用于将所述目标内容在所述屏幕上进行展示；

生成模块，用于在所述手指移动的开始位置生成追击点，以跟随所述手指进行移动，设置所述追击点的移动速率为第一移动速率；

第二检测模块，用于检测所述手指在所述屏幕上的开始位置移动到所述停留位置的第二移动速率是否小于等于所述第一移动速率值；

控制模块，用于当所述第二检测模块检测到的第二移动速率大于等于所述第一移动速率值时，确定所述手指移动的开始位置和停留位置为目标区域，否则，重新控制所述第二检测模块检测所述手指在所述屏幕上的移动信息，直到确定所述目标区域为止；

其中，所述检测模块，包括：

检测子模块，用于当检测到有触摸操作时，检测所述手指在所述屏幕上开始触摸的位置和最终手指停留的位置的时长是否大于等于预设时长；

控制子模块，用于当所述检测子模块检测的时长大于等于所述预设时长时，记录所述手指移动的开始位置和停留位置，否则，重复控制所述检测子模块检测所述手指在所述屏幕上停留的时长直到大于等于所述预设时长为止；

计算子模块，基于预先建立的标准坐标系，计算所述手指移动的开始位置和停留位置的坐标信息并将所述坐标信息反馈给所述识别引擎。

5.根据权利要求4所述内容识别装置，其特征在于，所述识别模块，包括：

激活模块，用于当检测到所述目标图片时，激活所述识别引擎；

识别子模块，用于识别所述目标图片中的所有内容；

第一显示子模块，用于将所述所有内容以第一预设比例显示在所述屏幕上。

6.根据权利要求4所述内容识别装置，其特征在于，所述展示模块，包括：

接收子模块，用于接收所述识别引擎提取的目标区域的内容，其中，所述识别引擎根据所述手指移动的目标区域提取所述目标图片中所述目标区域的内容；

显示子模块，用于将所述目标区域的内容以第二预设比例显示在所述屏幕上。

Images