CN104598289B - 一种识别方法及一种电子设备 - Google Patents

Abstract

本申请公开了一种识别方法及一种电子设备，所述电子设备具有一图像采集单元，该识别方法是应用于该电子设备的，该方法包括：获取用户对待识别对象的第一操作；通过所述图像采集单元采集所述第一操作的第一图像；基于所述第一图像，确定所述第一图像所在的第一区域；根据所述第一区域响应所述第一操作。

Description

一种识别方法及一种电子设备

技术领域

本申请属于图像识别领域，尤其涉及一种识别方法及一种电子设备。

背景技术

目前，对于将文本资料中的信息进行提取和识别，可以利用电子设备所具有的摄像头完成。例如，利用摄像头采集得到包含需要记录的电话号码的图像，并根据图像获得电话号码，进而用户可以对电话号码进行保存，又如，利用摄像头采集得到包含需要查询的英文单词的图像，并根据图像获得英文单词，在对英文单词进行翻译之后，将结果返回给用户；又如，利用摄像头采集得到包含有一定信息的二维码的图像，对该二维码进行解析，并解析后的二维码获得其中包含的信息，将信息反馈给客户等。

本申请发明人在实现本申请实施例技术方案的过程中，至少发现现有技术中存在如下技术问题：

现有技术中，由于在获取待识别对象的过程中，例如，获取摄像头采集区域内所包含的多个字符串中的一个字符串作为待识别对象，需要用户手动的对摄像头的位置进行不断的调整，从而仅能通过手动方式将待识别对象定位在目标框中，所以，存在无法自动识别出待识别对象的技术问题；

进一步地，由于存在无法自动识别出待识别对象的技术问题，所以，现有技术中还存在识别效率低的技术问题。

发明内容

本发明实施例提供一种识别方法及一种电子设备，用于解决现有技术中为了将待识别对象定位在目标框中，需要用户手动的对摄像头的位置进行不断的调整，而存在的无法自动识别出待识别对象的技术问题，实现了通过识别第一定位物体以进行定位，并基于所述第一定位物体的位置对待识别对象进行自动识别的技术效果。

一种识别方法，应用于电子设备中，所述电子设备具有一图像采集单元，所述方法包括：

获取用户对待识别对象的第一操作；

通过所述图像采集单元采集所述第一操作的第一图像；

基于所述第一图像，确定所述第一图像所在的第一区域；

根据所述第一区域响应所述第一操作。

进一步地，所述获取用户对待识别对象的第一操作具体为：

获取所述用户在所述待识别对象上划定一个范围区域的所述第一操作；或

获取所述用户在所述待识别对象上指定一个位置的所述第一操作。

进一步地，所述通过所述图像采集单元采集所述第一操作的第一图像，具体为：

当所述第一操作为在所述待识别对象上划定一个范围区域的所述第一操作时，通过所述图像采集单元采集所述第一操作所划定的第一区域的所述第一图像；

当所述第一操作为在所述待识别对象上指定一个位置的所述第一操作时，通过所述图像采集单元采集所述第一操作所指定的第一位置的所述第一图像。

进一步地，所述通过所述图像采集单元采集所述第一操作的第一图像具体为：

通过所述图像采集单元采集所述第一操作所在的第一位置的所述第一图像；或

通过所述图像采集单元采集所述第一操作所在的第一区域的所述第一图像。

进一步地，所述基于所述第一图像，确定所述第一图像所在的第一区域，具体包括：

基于所述第一图像，判断在所述第一图像上的执行所述第一操作的操作体是否为符合规则的第一操作体；

基于所述第一操作体，获取所述第一操作体所在的第一区域。

进一步地，所述基于所述第一操作体，获得所述第一操作体所在的第一区域，具体包括：

从所述第一图像中获得所述第一操作体的第一操作体图像；

基于所述第一操作体图像中的每个像素点的位置信息，获得所述第一操作体在所述第一图像中的第一位置信息。

进一步地，所述根据第一区域响应所述第一操作，具体为：

根据所述第一区域响应翻译，或者转文字输出，或者二维码识别的所述第一操作。

另一方面，本申请还提供了一种电子设备，所述电子设备包括有一图像采集单元，所述电子设备还包括：

第一获取单元，用于获取用户在所述待识别对象上的第一操作；

采集单元，用于通过所述图像采集单元采集所述第一操作的第一图像；

确定单元，用于基于所述第一图像，确定所述第一图像所在的第一区域；

响应单元，用于根据所述第一区域响应所述第一操作。

进一步地，所述第一获取单元具体用于：

获取所述用户在所述待识别对象上划定一个范围区域的所述第一操作；或

获取所述用户在所述待识别对象上指定一个位置的所述第一操作。

进一步地，所述采集单元具体用于：

当所述第一操作为在所述待识别对象上划定一个范围区域的所述第一操作时，通过所述图像采集单元采集所述第一操作所划定的第一区域的所述第一图像；

当所述第一操作为在所述待识别对象上指定一个位置的所述第一操作时，通过所述图像采集单元采集所述第一操作所指定的位置的所述第一图像。

进一步地，所述采集单元具体用于：

通过所述图像采集单元采集所述第一操作所在的所述第一位置的所述第一图像；或

通过所述图像采集单元采集所述第一操作所在的第一区域的所述第一图像。

进一步地，所述确定单元具体包括：

第一判断单元，用于基于所述第一图像，判断在所述第一图像上的执行所述第一操作的操作体是否为符合规则的第一操作体；

第二获取单元，用于基于所述第一操作体，获取所述第一操作体所在的第一区域。

进一步地，所述第二获取单元具体包括：

第一获取子单元，用于从所述第一图像中获得所述第一操作体的第一操作体图像；

第二获取子单元，用于基于所述第一操作体图像中的每个像素点的位置信息，获得所述第一操作体在所述第一图像中的第一位置信息。

进一步地，所述响应单元具体用于：

根据所述第一区域响应翻译，或者转文字输出，或者二维码识别的所述第一操作。

本申请实施例中通过获取用户的第一操作，通过图像采集单元采集该第一操作的第一图像，然后，基于该第一图像，确定该第一图像所在的第一区域，根据该第一区域能够响应该第一操作，解决了现有技术中由于在获取待识别对象的过程中，需要用户手动的对摄像头的位置进行不断的调整，从而仅能通过手动方式将待识别对象定位在目标框中，存在的无法自动识别出待识别对象的技术问题，实现了基于第一定位物体对待识别对象进行自动识别的技术效果；

进而，由于从第一图像中获得第一操作体的第一操作图像，并基于该第一操作体图像中的每个像素点的位置信息，获得该第一操作体在第一图像中的第一位置信息，解决了现有技术存在的识别效率低的技术问题，从而实现了快速高效的对待识别对象进行识别的技术效果，从而使得用户体验好。

附图说明

图1为本发明一实施例中一种识别方法的流程图；

图2为本发明一实施例中用户划定区域的示意图；

图3为本发明一实施例中级联分类器工作原理图；

图4为本发明一实施例中Haar特征的示意图；

图5为本发明一实施例中用户指定位置的示意图；

图6为本发明一实施例中电子设备的结构图。

具体实施方式

本发明实施例提供一种识别方法及电子设备，用于解决现有技术中为了将待识别对象定位在目标框中，需要用户手动的对摄像头的位置进行不断的调整，而存在的无法自动识别出待识别对象的技术问题，实现了通过识别第一定位物体以进行定位，并基于所述第一定位物体的位置对待识别对象进行自动识别的技术效果。

本发明实施例中的技术方案为解决上述问题，总体思路如下：

当获得一用户在该电子设备上进行第一操作时，通过该电子设备上的图像采集单元来采集该第一操作的第一图像，接着，基于获得的第一图像，从而确定该第一图像所在的第一区域，最后，根据该第一图像上的第一区域来响应该用户的第一操作，进而实现了对待识别对象进行识别的技术效果。

为了更好的理解上述技术方案，下面将结合说明书附图以及具体的实施方式对上述技术方案进行详细的说明。

本申请一实施例公开了一种识别方法，应用于电子设备中，所述电子设备具有一图像采集单元，具体的，所述电子设备可以为包含有一摄像头的手机、平板电脑或阅读器等。

下面以所述电子设备为具有一摄像头的手机为例，对上述方案进行详细的说明。

如图1所示，所述识别方法包括：

S101，获取用户对待识别对象的第一操作；

S102，通过所述图像采集单元采集所述第一操作的第一图像；

S103，基于所述第一图像，确定所述第一图像所在的第一区域；

S104，根据所述第一区域响应所述第一操作。

其中，获取用户对待识别对象的第一操作具体为：获取所述用户在所述待识别对象上划定一个范围区域的所述第一操作；或获取所述用户在所述待识别对象上指定一个位置的所述第一操作。

下面首先以获取用户在待识别对象上划定一个范围区域的第一操作为例进行详细描述。

如图2所示，用户通过手指在具有大量字符串中确定一个或多个字符串，可以是通过在需要进行识别的字符串的边界做划定范围区域的划定手势的操作，由图2可以看出，该圈框内的字符串便是需要进行识别的字符串，在确定了该圈框内的字符串之后，可以通过自适应调整机制调整该摄像头的焦距，以便能够将用户划定的圈框内的字符串识别的更加清楚。

在通过自适应调整机制调整该电子设备的摄像头的焦距，识别用户通过手指划定的圈框内的字符串时，通过图像采集单元采集该第一操作所划定的第一区域的第一图像，也就是，通过摄像头采集用户的这个划定圈框的操作在镜头内的一个区域的图像，例如，获得包含有英文字符串“word”在划定的圈框内的图像。

因此，在S102中，通过该图像采集单元采集该第一操作的第一图像。具体为：通过图像采集单元采集用户的第一操作所在的第一区域的第一图像。

接着，在S103中，确定所述第一图像所在的第一区域具体包括：

基于所述第一图像，判断在所述第一图像上的执行所述第一操作的操作体为符合规则的第一操作体；

在确定该第一操作体为符合规则的第一操作体时，基于所述第一操作体，获取所述第一操作体所在的所述第一区域。

在具体实施过程中，该基于第一图像，判断在该第一图像上的执行该第一操作的操作体是否为符合规则的第一操作体。在该实现过程可以参照人脸识别技术，例如，基于代数特征的人脸识别方法，或神经网络的人脸识别方法，或线段Hausdorff距离的人脸识别方法，或利用Adaboost进行人脸识别的方法，在本申请实施例中将人脸特征或人脸样本用手指特征或手指样本进行替换，从而通过采用变型后的方法，则可以识别确定出该第一操作体为手指。

下面本申请实施例以上述判断步骤中采用利用Adaboost进行识别的方法为例进行详细说明。

在获得第一图像之后，将第一图像作为测试样本，通过分类器进行处理，分类器会基于预先的训练，在第一图像中提取出一些特征，基于这些特征就可以确定出手指部分和非手指部分。在实际中，仅利用一个弱分类器进行识别，并不会获得满意的识别结果，为了准确和快速的识别出手指，会利用级联分类器对图像进行筛选和识别。级联分类器就是将多个强分类器连接在一起进行操作。其中，每个强分类器又是由若干个弱分类器加权组成，一般情况下，一个强分类器包含20个左右的弱分类器，然后再将10个左右的强分类器级联起来，就构成了一个级联分类器。如图3所示，级联分类器的工作原理具体为：每个强分类器（以系统中存在包括强分类器1、强分类器2、强分类器3的三个强分类器为例）都会对待检测样本进行分析处理，其中，每一强分类器都比前一个强分类器复杂，并且，每一个强分类器对负样本的判别准确度非常高，一旦发现检测到的样本为负样本，就不会再继续调用下面的强分类器对其进行检测，只有正样本才会送到下一个强分类器进行再次检测，这样就保证了最后输出的正样本的伪正的可能性非常低。

在对分类器的训练过程中，本申请实施例采用的是利用样本的Harr特征对分类器进行训练的方法。Harr特征也称为输入图像的矩形特征，目前常用的Haar特征为：线性特征、边缘特征、点特征（中心特征）或对角线特征，如图4所示。在训练过程中，训练样本分为正样本和负样本，正样本为手指图片，负样本为其它任意图片，且所有训练样本图片都需要被归一化为同样的尺寸大小，即规定待检测子窗口大小，例如，20×20像素或24×24像素，接着，对每一幅训练样本图片（即正样本图片和负样本图片）提取Haar特征，其中，每一个Haar特征都对应着一个弱分类器，且每一个弱分类器都是根据其对应的Haar特征值来训练的，所述特征值的计算方法为黑色填充区域的像素值之和与白色填充区域的像素值之和的差值，针对所述Haar特征及其特征值可以区分出正样本和负样本，即，可以基于特征值的大小训练弱分类器区分出正样本和负样本，在训练获得多个弱分类器之后，将其按一定的权重叠加起来，得到最终想要的强分类器。

在基于获得的第一图像，判断该第一图像上执行该第一操作的操作体是否为符合规则的第一操作体之后，接着执行，在确定该第一操作体为符合规则的第一操作体时，基于该第一操作体，获取该第一操作体所在的第一区域的步骤。

在确定该第一操作体为符合规则的第一操作体之后，基于该第一操作体，获取该第一操作体所在的第一区域，具体包括：

从所述第一图像中获得所述第一操作体的第一操作体图像；

基于所述第一操作体图像中的每个像素点的位置信息，获得所述第一操作体在所述第一图像中的第一位置信息。

在具体实施过程中，在获得到的第一图像中，识别出手指部分，并将包含有该第一操作体的图像作为第一操作体图像，接着，基于手指部分的图像中的每个像素点的位置信息，获得手指部分在第一图像中的位置，例如，在第一图像中构建由X轴和Y轴组成的坐标系，则第一图像中的每个像素点都具有其固定的横纵坐标值，进而，由第一图像中组成手指部分图像的每个像素点的横纵坐标值，通过计算可以获得手指部分图像的质心坐标值，从而，获得手指在第一图像中的位置。

在获得第一操作体在第一图像中的位置之后，从而获得了在该第一操作体所在第一区域。

最后，执行S104，根据所述第一区域，响应该第一操作。

其中，响应该第一操作具体为根据该第一区域响应翻译，或者转文字输出，或者二维码识别的第一操作。

在具体的实施方式中，在上述确定的第一区域中，对在第一区域内的待识别对象进行翻译等操作，当然，该字符串可以包含汉字、字母、数字或符号等，在将字符串分解成至少一个单个的字符之后，可以采用特征值识别方法对其进行识别。特征值识别方法的过程为：对获得的包含单个字符的图像进行二值化处理，获得仅包含黑色和白色两个色彩值的图像，并对该图像中每个像素点赋予特征值0和1，白色记为0，黑色记为1，在完成对图像赋值之后，将赋值图像与标准字符的特征值模板进行比对，若相应区域的特征值一样，则可以判断出该字符即为对应的标准字符，最终，获得对应第一字符串图像的第一标准字符串作为识别结果，例如，采用结构模式识别的方法、统计模式识别的方法或将两者的结合进行识别的方法，本申请实施例不再对其他地方进行赘述。另外，在获得标准字符串作为识别结果之后，可以基于该标准字符串进行翻译或检索，并将翻译或检索后的结果进行输出，还可以对标准字符串进行存储记录。

如果当该待识别对象是二维码时，可以对该二维码图像进行分析，获得二维码图像中包含的位置探测图形、位置探测图形分隔符、校正图形、格式信息、数据区域、版本信息以及纠错码字等信息，接着，基于对上述信息的分析处理，获得二维码图像包含的内容，并将该内容或与该内容相关的信息作为识别结果，进行输出。

另外，在本申请实施例中，该待识别对象还可以为图像或条形码等等，当该待识别对象为图像时，当识别出是用户手指的操作，并在该图像的周围划定范围区域之后，基于该圈框内包含的图像进行识别，其具体的识别方法可以参照人脸识别的方法或手指识别的方法，最终，获得与该图像对应的相关信息，并可以基于该相关信息，将与该图像相关的网页或名称或解释作为结果，进行输出。

上述是通过划定一个范围区域，对划定的范围区域的待识别对象，例如是字符串或者二维码等进行的识别，下面具体介绍通过另一种方式对待识别对象进行的识别。

该方式中具体是在获取用户对待识别对象的第一操作之后，获取该用户在该识别对象上指定一个位置的所述第一操作

具体如图5所示，通过用户手指在待识别的字符串上方进行由左及右的滑动操作，或者形成在单个字符上的点击操作，被用户通过手指滑过的位置，以及被用户点击过的字符便是用户指定的待识别对象。在确定用户通过指定在字符串上的位置确定为待识别的字符串之后，同时自适应调整机制调整摄像头的焦距，以便能够对用户指定的字符串识别地更加清楚。

当该获取待识别对象的第一操作为在待识别对象上指定一个位置的第一操作时，通过该图像采集单元采集该第一操作所指定的第一位置的第一图像，具体地，也是通过该图像采集单元采集该第一操作所在的第一位置的第一图像。

在通过用户在待识别对象上指定一个位置的第一操作，获取该第一操作的第一图像之后，从而，确定该第一图像所在的第一位置。

在确定该第一图像所在的第一位置的过程中，具体包括：

基于该第一图像，判断该第一图像上的执行该第一操作的操作体是否为符合规则的第一操作体；在确定该第一操作体为符合规则的第一操作体时，基于该第一操作体，获取该第一操作体所在的第一区域。

具体的实现过程在这里就不再赘述了。

当然，在判断该第一图像上该第一操作的操作体是否为符合规则的第一操作体之后，基于该第一操作体，获取该第一操作体所在的第一位置。

在获取该第一操作体所在的第一位置的过程中，是通过从第一图像中获得该第一操作体的第一操作图像，然后，基于该第一操作体图像中的每个像素点的位置信息，获得该第一操作体在该第一图像中的第一位置信息。从而能够获得该第一操作体所在的第一位置。最后，根据该第一位置，响应该第一操作，具体地，响应该第一操作具体为响应翻译，或者转文字输出，或者二维码识别的第一操作。

具体的识别过程也不再赘述了。

基于相同的发明构思，本申请另一实施例提供一种电子设备，所述电子设备具有一图像采集单元，如图6所示，所述电子设备包括：

第一获取单元601，用于获取用户对待识别对象的第一操作；

采集单元602，用于通过所述图像采集单元采集所述第一操作的第一图像；

确定单元603，用于基于所述第一图像，确定所述第一图像所在的第一区域；

响应单元604，用于根据所述第一区域响应所述第一操作。

进一步地，该第一获取单元601具体用于：获取所述用户在所述待识别对象上划定一个范围区域的所述第一操作；或获取所述用户在所述待识别对象上指定一个位置的所述第一操作。

进一步地，该采集单元602具体用于：当所述第一操作为在所述待识别对象上划定一个范围区域的所述第一操作时，通过所述图像采集单元采集所述第一操作所划定的第一区域的所述第一图像；当所述第一操作为在所述待识别对象上指定一个位置的所述第一操作时，通过所述图像采集单元采集所述第一操作所指定的第一位置的所述第一图像。

进一步地，采集单元具体用于：通过所述图像采集单元采集所述第一操作所在的所述第一区域的所述第一图像；或通过所述图像采集单元采集所述第一操作所在的所述第一位置的所述第一图像。

进一步地，确定单元603具体包括：第一确定子单元，用于基于所述第一图像，确定在所述第一图像上的执行所述第一操作的操作体为符合规则的第一操作体；第二获取单元，用于基于所述第一操作体，获取所述第一操作体所在的第一区域。

进一步地，该第二获取单元具体包括：第一获取子单元，用于从所述第一图像中获得所述第一操作体的第一操作体图像；第二获取子单元，用于基于所述第一操作体图像中的每个像素点的位置信息，获得所述第一操作体在所述第一图像中的第一位置信息。

进一步地，该响应单元604具体用于：根据所述第一区域响应翻译，或者转文字输出，或者二维码识别的所述第一操作。

由于本实施例所介绍的电子设备为实施本申请实施例中识别方法所采用的电子设备，故而基于本申请实施例中识别方法，本领域所属技术人员能够了解本申请实施例中电子设备的具体实施方式以及其各种变化形式，所以在此对于该电子设备不再详细介绍。只要本领域所属技术人员实施本申请实施例中识别方法所采用的电子设备，都属于本申请所欲保护的范围。

本申请实施例中提供的一个或多个技术方案，至少具有如下技术效果或优点：

本申请实施例中通过获取用户的第一操作，通过图像采集单元采集该第一操作的第一图像，然后，基于该第一图像，确定该第一图像所在的第一区域，根据该第一区域能够响应该第一操作，解决了现有技术中由于在获取待识别对象的过程中，需要用户手动的对摄像头的位置进行不断的调整，从而仅能通过手动方式将待识别对象定位在目标框中，存在的无法自动识别出待识别对象的技术问题，实现了基于第一定位物体对待识别对象进行自动识别的技术效果；

进而，由于从第一图像中获得第一操作体的第一操作图像，并基于该第一操作体图像中的每个像素点的位置信息，获得该第一操作体在第一图像中的第一位置信息，解决了现有技术存在的识别效率低的技术问题，从而实现了快速高效的对待识别对象进行识别的技术效果，从而使得用户体验好。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (12)

1.一种识别方法，应用于电子设备中，所述电子设备具有一图像采集单元，所述方法包括：

获取用户对待识别对象的第一操作；

通过所述图像采集单元采集所述第一操作的第一图像；

基于所述第一图像，确定所述第一图像所在的第一区域，具体包括：

基于所述第一图像，判断在所述第一图像上的执行所述第一操作的操作体是否为符合规则的第一操作体；

在确定所述第一操作体为符合规则的第一操作体时，基于所述第一操作体，获取所述第一操作体所在的所述第一区域；

根据所述第一区域响应所述第一操作。

2.如权利要求1所述的方法，其特征在于，所述获取用户对待识别对象的第一操作具体为：

获取所述用户在所述待识别对象上划定一个范围区域的所述第一操作；或

获取所述用户在所述待识别对象上指定一个位置的所述第一操作。

3.如权利要求2所述的方法，其特征在于，所述通过所述图像采集单元采集所述第一操作的第一图像，具体为：

当所述第一操作为在所述待识别对象上划定一个范围区域的所述第一操作时，通过所述图像采集单元采集所述第一操作所划定的第一区域的所述第一图像；

当所述第一操作为在所述待识别对象上指定一个位置的所述第一操作时，通过所述图像采集单元采集所述第一操作所指定的第一位置的所述第一图像。

4.如权利要求1所述的方法，其特征在于，所述通过所述图像采集单元采集所述第一操作的第一图像具体为：

通过所述图像采集单元采集所述第一操作所在的所述第一区域的所述第一图像；或

通过所述图像采集单元采集所述第一操作所在的第一位置的所述第一图像。

5.如权利要求1所述的方法，其特征在于，所述基于所述第一操作体，获得所述第一操作体所在的所述第一区域，具体包括：

从所述第一图像中获得所述第一操作体的第一操作体图像；

基于所述第一操作体图像中的每个像素点的位置信息，获得所述第一操作体在所述第一图像中的第一位置信息。

6.如权利要求1-5中任一权利要求所述的方法，其特征在于，所述根据所述第一区域响应所述第一操作，具体为：

根据所述第一区域响应翻译，或者转文字输出，或者二维码识别的所述第一操作。

7.一种电子设备，所述电子设备包括一图像采集单元，所述电子设备还包括：

第一获取单元，用于获取用户对待识别对象的第一操作；

采集单元，用于通过所述图像采集单元采集所述第一操作的第一图像；

确定单元，用于基于所述第一图像，确定所述第一图像所在的第一区域，所述确定单元具体包括：

第一判断单元，用于基于所述第一图像，判断在所述第一图像上的执行所述第一操作的操作体是否为符合规则的第一操作体；

第二获取单元，用于在确定所述第一操作为符合规则的第一操作体时，基于所述第一操作体，获取所述第一操作体所在的第一区域；

响应单元，用于根据所述第一区域响应所述第一操作。

8.如权利要求7所述的电子设备，其特征在于，所述第一获取单元具体用于：

获取所述用户在所述待识别对象上划定一个范围区域的所述第一操作；或

获取所述用户在所述待识别对象上指定一个位置的所述第一操作。

9.如权利要求8所述的电子设备，其特征在于，所述采集单元具体用于：

当所述第一操作为在所述待识别对象上划定一个范围区域的所述第一操作时，通过所述图像采集单元采集所述第一操作所划定的第一区域的所述第一图像；

当所述第一操作为在所述待识别对象上指定一个位置的所述第一操作时，通过所述图像采集单元采集所述第一操作所指定的第一位置的所述第一图像。

10.如权利要求7所述的电子设备，其特征在于，所述采集单元具体用于：

通过所述图像采集单元采集所述第一操作所在的所述第一区域的所述第一图像；或

通过所述图像采集单元采集所述第一操作所在的第一位置的所述第一图像。

11.如权利要求7所述的电子设备，其特征在于，所述第二获取单元具体包括：

第一获取子单元，用于从所述第一图像中获得所述第一操作体的第一操作体图像；

第二获取子单元，用于基于所述第一操作体图像中的每个像素点的位置信息，获得所述第一操作体在所述第一图像中的第一位置信息。

12.如权利要求7-11中任一权利要求所述的电子设备，其特征在于，所述响应单元具体用于：

根据所述第一区域响应翻译，或者转文字输出，或者二维码识别的所述第一操作。