CN108595009A - 一种人机交互控制方法及电子终端 - Google Patents

Abstract

本发明公开了一种人机交互控制方法及电子终端。所述方法应用于一电子终端，所述电子终端具有第一操作模式和第二操作模式，所述电子终端包括检测部件，所述方法包括：通过所述检测部件检测用户眼球的运动；根据所述用户眼球的运动判断是否需要切换所述电子终端的操作模式；以及，如果是，则根据所述用户眼球的运动将所述电子终端在所述第一操作模式和所述第二操作模式之间切换。

Description

一种人机交互控制方法及电子终端

本申请为申请日为2012年02月29日，申请号为：201210050728.6，发明名称为：一种人机交互控制方法及电子终端的分案申请。

技术领域

本发明涉及计算机技术领域，尤其涉及一种人机交互控制方法及电子终端。

背景技术

随着计算机技术的发展和消费者需求的增多，越来越多的电子产品问世，例如眼镜式的电子终端，用户可直接戴在眼睛上就可观看到镜片屏幕上显示的内容，所以方便用户使用，用户体验好，但是，现有技术中的眼镜式的电子终端的镜片屏幕的透明度不可调节，制造时透明度低，当用户需要看周围环境，即需要看真实世界时，就需要将该眼镜式的电子终端摘掉，所以这种频繁摘戴会很繁琐，给使用者造成不便。

另外，在现有技术中，电子终端的模式切换，例如从2D模式到3D模式的切换，一般都是通过遥控器或者应用程序或者相关按键来切换的，以上方式虽然可以进行模式切换，但是需要用到的装置多，而且不够人性化，所以使用并不方便。

发明内容

本发明提供一种人机交互控制方法及电子终端，用以解决现有技术中存在的电子终端模式切换繁琐，不够人性化，用户体验差等技术问题。

本发明一方面提供了一种人机交互控制方法，应用于一电子终端，所述电子终端具有第一操作模式和第二操作模式，所述电子终端包括检测部件，所述方法包括：通过所述检测部件检测用户眼球的运动；根据所述用户眼球的运动判断是否需要切换所述电子终端的操作模式；以及，如果是，则根据所述用户眼球的运动将所述电子终端在所述第一操作模式和所述第二操作模式之间切换。

优选地，所述检测用户眼球的运动具体为检测用户的瞳距。

优选地，所述电子终端为眼镜式电子终端，所述眼镜式电子终端包括镜片，当所述第一操作模式为真实场景模式，且所述第二操作模式为终端场景模式时，通过调整所述镜片的透明度来切换所述电子终端的操作模式。

优选地，所述电子为眼镜式电子终端，所述眼镜式电子终端包括镜片，当所述第一操作模式为真实场景模式，且所述第二操作模式为终端场景模式时，通过将所述镜片分区来切换所述电子终端的操作模式。

优选地，所述电子终端为眼镜式电子终端，所述眼镜式电子终端包括镜片，所述镜片上具有指示标识，当所述用户眼球的运动为看所述指示标识时，则确定需要切换所述电子终端的操作模式。

优选地，当第一操作模式为2D模式，且所述第二操作模式为3D模式时，通过调整所述电子终端的显示单元的显示模式来切换所述电子终端的操作模式。

本发明另一方面还提供一种电子终端，具有第一操作模式和第二操作模式，所述电子终端包括：检测部件，用于检测用户眼球的运动；以及，处理单元，用于根据所述用户眼球的运动判断是否需要切换所述电子终端的操作模式；如果是，则所述处理单元根据所述用户眼球的运动将所述电子终端在所述第一操作模式和所述第二操作模式之间切换。

优选地，所述电子终端还包括结构部件，用于将所述电子终端佩戴于用户的身体上。

优选地，当所述第一操作模式为真实场景模式，且所述第二操作模式为终端场景模式时，所述电子终端还包括透明度可变的镜片，所述处理单元包括调整模块，所述调整模块调整所述镜片的透明度以切换所述电子终端的操作模式。

优选地，第一操作模式为真实场景模式，且所述第二操作模式为终端场景模式时，所述电子终端还包括镜片，所述处理单元包括镜片分区单元，所述镜片分区单元将所述镜片分区以切换所述电子终端的操作模式。

优选地，所述电子终端还包括镜片，所述镜片上具有指示标识，当所述检测部件检测用户眼球的运动为看所述指示标识时，所述处理单元确定需要切换所述电子终端的操作模式。

优选地，在所述第一操作模式为2D模式，且所述第二操作模式为3D模式时，所述电子终端还包括显示单元，所述处理单元包括显示模式切换单元，用于切换所述显示单元的显示模式以切换所述电子终端的操作模式。

本发明有益效果如下：

本发明一实施例通过检测用户眼球的运动，然后根据眼球的运动来判断是否要切换电子终端的操作模式，所以不需要用户做额外的动作，只需要自然的移动眼睛即可控制电子终端，一方面因为用户是自然的动作，所以非常方便，而且更贴近和符合用户的实际需要，也更人性化；另一方面，不需要遥控器等额外的装置，所以电子终端结构简单。

进一步，本发明一实施例中还通过眼球的运动调整电子终端的镜片的透明度来切换电子终端的操作模式，所以使调节操作易用，并使得眼镜式电子终端更容易在看环境和电子终端场景间自由调节，免去频繁摘戴。

更进一步，本发明一实施例中还在镜片上标有指示标识，当用户的视线落在该指示标识时，则确定需要切换电子终端的操作模式，而视线停留在镜片的其他地方时，则不触发切换，如此，便可以避免误切换。

附图说明

图1为本发明一实施例中的人机交互控制方法流程图；

图2为本发明一实施例中的电子终端的功能框图；

图3为本发明一实施例中的眼镜式电子终端的功能框图；

图4A-图4B为本发明一实施例中的放大图像的原理图。

具体实施方式

本发明一实施例提供一种人机交互控制方法，应用于一电子终端，该电子终端例如为手机、平板电脑、眼镜式电子终端或掌上游戏机或其他电子终端。该电子终端具有第一操作模式和第二操作模式，该电子终端还包括检测部件，请参考图1，图1为本实施例中人机交互控制方法的流程图，该方法包括：

步骤101：通过检测部件检测用户眼球的运动；

步骤102：根据用户眼球的运动判断是否需要切换电子终端的操作模式；

步骤103：如果是，则根据眼球的运动将电子终端在第一操作模式和第二操作模式之间切换。

为了更清楚的说明本发明的技术方案，以下将举具体的实例来详细说明。

在第一实施例中，例如当电子终端为眼镜式电子终端时，眼镜式电子终端包括镜片和结构部件，例如镜架，结构部件便于用户将眼镜式电子终端佩戴于眼睛上，而检测部件，例如摄像头设置在结构部件上，方便检测用户眼球的运动，在本实施例中，例如在镜片上显示一指示标识，当检测到用户眼球的运动为看该指示标识时，即用户的视线焦点在该指示标识上时，则可以确定需要切换电子终端的操作模式，操作模式例如是2D模式、3D模式，或为真实场景模式、终端场景模式。

进一步，当用户的视线焦点在该指示标识上时，可表示用户的瞳距达到一预定值，据此可确定将电子终端的操作模式切换到哪一种模式上，例如当第一操作模式为真实场景模式，第二操作模式为终端场景模式时，瞳距小表示眼睛在看近处，则需要切换成第二操作模式，瞳距远表示在看远处，则需要切换成第一操作模式。在本实施例中，可通过调整镜片的透明度来切换该眼镜式电子终端的操作模式，具体为：当需要将眼镜式电子终端的操作模式切换为第一操作模式时，就将镜片的透明度调高，便于用户看周围环境，即真实场景；当需要将眼镜式电子终端的操作模式切换为第二操作模式时，就将镜片的透明度调低，方便用户看清镜片上的内容，如此便可避免用户频繁的摘戴该眼镜式电子终端。

在另一实施例中，可通过将镜片分区来切换眼镜式电子终端的操作模式，例如，当眼镜式电子终端处于第一操作模式时，这时用户视线焦点在该指示标识上，并且表示需要将眼镜式电子终端切换为第二操作模式，这时可通过分区调整镜片的透明度来实现，例如将镜片的上半部的透明度调高，将镜片的下半部的透明度调低或者保持不变，这样用户可直接从镜片的上半部看真实场景，也可通过镜片的下半部看镜片上显示的内容。

在另一实施例中，镜片上不需要任何指示标识，检测部件只要检测用户的瞳距的变化，例如计算瞳距，当瞳距小于一预定值时，表示用户需要看镜片上的内容，当瞳距大于该预定值时，表示用户需要看周围环境，例如当第一操作模式为真实场景模式，第二操作模式为终端场景模式时，瞳距小表示眼睛在看近处，则需要切换成第二操作模式，瞳距远表示在看远处，则需要切换成第一操作模式。在本实施例中，可通过调整镜片的透明度来切换该眼镜式电子终端的操作模式，具体为：当需要将眼镜式电子终端的操作模式切换为第一操作模式时，就将镜片的透明度调高，便于用户看周围环境，即真实场景；当需要将眼镜式电子终端的操作模式切换为第二操作模式时，就将镜片的透明度调低，方便用户看清镜片上的内容，如此便可避免用户频繁的摘戴该眼镜式电子终端。当然，也可通过将镜片分区来切换电子终端的操作模式，该方式已在前述介绍过，所以在此不再详述。

在另一实施例中，检测部件不需要计算瞳距，只要检测用户眼球的运动，看用户的视点是在镜片的内容上还是内容外，当检测到用户的视点是在内容上时，就切换眼镜式电子终端的操作模式为终端场景模式，当检测到用户的视点是在内容外时，就切换眼镜式电子终端的操作模式为真实场景模式，同样可通过调整镜片的透明度或者将镜片分区来切换眼镜式电子终端的操作模式，前述已详细介绍过这两种方式，在此不再详述。

在另一实施例中，当第一操作模式为2D模式，且第二操作模式为3D模式时，可通过调整电子终端的显示单元的显示模式来切换电子终端的操作模式，例如当用户眼球的运动为看镜片上的指示标识时，就将3D模式切换为2D模式，或者例如当检测到用户的瞳距变小到一预定值时，就将2D模式切换为3D模式，本实施例与前述各实施例的差别在于操作模式不同，切换模式(通过调整镜片的显示模式来切换)不同，所以通过对前述各实施例的描述，本领域技术人员可清楚了解本实施例中的方法，所以在此不再赘述。

本发明另一实施例中还提供一种电子终端，该电子终端具有第一操作模式和第二操作模式，请参考图2，图2为本实施例中的电子终端的功能框图，在图2中只示出了与本发明相关的部分，电子终端还包括其他功能模块，如显示单元、输入装置等。该电子终端包括：检测部件201，用于检测用户眼球的运动；以及，处理单元202，用于根据用户眼球的运动判断是否需要切换电子终端的操作模式；如果是，则处理单元202根据用户眼球的运动将电子终端在第一操作模式和第二操作模式之间切换。

检测部件201例如为摄像头或其他测量眼球运动的装置，例如瞳距仪等。

在一实施例中，例如当电子终端为眼镜式电子终端时，眼镜式电子终端包括镜片和结构部件，例如镜架，结构部件便于用户将眼镜式电子终端佩戴于眼睛上，而检测部件，例如摄像头设置在结构部件上，方便检测用户眼球的运动。

进一步，镜片上显示一指示标识，当检测到用户眼球的运动为看该指示标识时，即用户的视线焦点在该指示标识上时，则可以确定需要切换电子终端的操作模式，操作模式例如是2D模式、3D模式，或为真实场景模式、终端场景模式。

在进一步的实施例中，镜片是透明度可变的镜片，当第一操作模式为真实场景模式，第二操作模式为终端场景模式时，可通过调整镜片的透明度来切换该眼镜式电子终端的操作模式，具体为：当需要将眼镜式电子终端的操作模式切换为第一操作模式时，就将镜片的透明度调高，便于用户看周围环境，即真实场景；当需要将眼镜式电子终端的操作模式切换为第二操作模式时，就将镜片的透明度调低，方便用户看清镜片上的内容，如此便可避免用户频繁的摘戴该眼镜式电子终端。

在另一实施例中，例如，当眼镜式电子终端处于第一操作模式时，这时确定需要将眼镜式电子终端切换为第二操作模式，可通过分区调整镜片的透明度来实现，例如将镜片的上半部的透明度调高，将镜片的下半部的透明度调低或者保持不变，这样用户可直接从镜片的上半部看真实场景，也可通过镜片的下半部看镜片上显示的内容。

在另一实施例中，电子终端还包括显示单元，而处理单元包括显示模式切换单元，当第一操作模式为2D模式，且第二操作模式为3D模式时，可通过调整显示单元的显示模式来切换电子终端的操作模式，例如当用户眼球的运动为看镜片上的指示标识时，就将3D模式切换为2D模式，或者例如当检测到用户的瞳距变小到一预定值时，就将2D模式切换为3D模式。

在以上各实施例中，当电子终端为眼镜式电子终端时，且当第二模式为终端场景模式时，用户是在观看眼镜式电子终端的镜片上的内容，用户看到的内容可以是直接显示在镜片上的，也可以是虚拟的显示在空间中，距离较用户眼睛有一定距离，所以用户看起来会更舒服，在下文中，将参考附图详细描述本发明的优选实施例。注意，在本说明书和附图中，具有基本上相同步骤和元素用相同的附图标记来表示，且对这些步骤和元素的重复解释将被省略。

在本发明的以下实施例中，图3示出了根据本发明一个实施例的眼镜式电子终端300的示例性框图。如图3所示，眼镜式电子终端300包括图像处理单元310、第一显示单元320、第一光学系统330和第一视窗340。

图像处理单元310可提供第一图像。第一图像可以是，例如，图片、视频图像或者文本，图片，文本和图片的组合等。图像处理单元310可以是眼镜式电子终端的中央处理单元(例如CPU)，可替换地，也可以是在物理或逻辑上独立设置的图像处理单元。

第一显示单元320可显示图像处理单元310提供的第一图像。根据本发明的一个示例，第一显示单元320可以是其屏幕的尺寸小于现有电子终端的屏幕的尺寸的微型显示单元。在本发明的实施例中，该第一显示单元320的尺寸为与该眼镜式电子终端的镜片尺寸一致。该镜片与人眼的标准尺寸相符。此外，根据本发明的另一实施例，第一显示单元320具有较高的分辨率。具体地，第一显示单元320的屏幕的分辨率可高于现有电子终端的屏幕的分辨率。例如，第一显示单元320可采用符合高清或全高清标准的分辨率。

第一光学系统330可接收从第一显示单元320发出的光线，并对从第一显示单元320发出的光线进行光路转换，以形成第一放大虚像，其中第一光学系统330与第一显示单元320之间的光路的长度小于第一光学系统的焦距。也就是说，第一光学系统330具有正屈光力。可预先设定第一光学系统330的放大倍数。可替换地，第一光学系统330可包括第一调节部件以调整第一光学系统330的放大倍数，稍后将对此进行详细描述。第一放大虚像的面积大于第一显示单元的显示区域的面积。

根据本发明的一个示例，第一光学系统330至少包括具有正屈光力的透镜组件。图4A是示出根据本发明的一个示例的透镜组件的示意图。如图4A所示，透镜组件可包括一个凸透镜410。凸透镜410可接收从第一显示单元发320出的光线，并对从第一显示单元320发出的光线进行光路转换，以形成第一放大虚像420。

虽然在图4A中以一条光线为例描述了对从第一显示单元320发出的光线进行的光路转换，但是应注意实际上从第一显示单元320发出的为由多条光线构成的一组光线，并且该组光线通过凸透镜410进行光路转换，以形成第一放大虚像420。

此外，为了减少像差、避免色散等对成像造成的干扰，带给用户更好的视觉体验，也可由包含凸透镜和凹透镜的多个透镜形成透镜组件。如上所述，该多个透镜形成透镜组件具有正屈光力，即，可等效为凸透镜。图4B是示出根据本发明的另一示例的透镜组件的示意图。如图4B所示，透镜组件可包括单凸透镜420、单凸透镜430和凹凸镜440。

图像处理单元310、第一显示单元320和第一光学系统330可设置在眼镜式电子终端300的内部。第一视窗340可是设置在眼镜式电子终端的第一外表面上，当用户佩戴上所述眼镜式电子终端时，所述第一视窗340正对着用户的眼睛。用户能够通过第一光学系统观看到第一放大虚像。根据本发明的一个示例，第一视窗340的大小可与人眼的大小相对应，优选的，第一视窗340可以与眼镜式电子终端的镜片大小一致。

根据本发明的一个示例，在眼镜式电子终端中，第一显示单元320设置在第一光学系统330的一侧，第一光学系统330允许用户在与第一显示单元320相对的、该第一光学系统330的另一侧，观看第一放大虚像。

通过上述本发明实施例提供的眼镜式电子终端，用户可观看的图像尺寸不受眼镜式电子终端自身镜片(即屏幕)尺寸的限制，用户可通过该眼镜式电子终端观看到具有较大尺寸的显示图像。换句话说，当用户佩戴上该眼镜式电子终端时，看到显示图像的尺寸比所述眼镜式电子终端的镜片(即，屏幕)的尺寸大，同时看到的显示图像的距离大于人眼到镜片(佩戴上该眼镜式电子终端)的距离。

本发明一实施例通过检测用户眼球的运动，然后根据眼球的运动来判断是否要切换电子终端的操作模式，所以不需要用户做额外的动作，只需要自然的移动眼睛即可控制电子终端，一方面因为用户是自然的动作，所以非常方便，而且更贴近和符合用户的实际需要，也更人性化；另一方面，不需要遥控器等额外的装置，所以电子终端结构简单。

进一步，本发明一实施例中还通过眼球的运动调整电子终端的镜片的透明度来切换电子终端的操作模式，所以使调节操作易用，并使得眼镜式电子终端更容易在看环境和电子终端场景间自由调节，免去频繁摘戴。

更进一步，本发明一实施例中还在镜片上标有指示标识，当用户的视线落在该指示标识时，则确定需要切换电子终端的操作模式，而视线停留在镜片的其他地方时，则不触发切换，如此，便可以避免误切换。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (10)

1.一种人机交互控制方法，应用于一电子终端，所述电子终端具有第一操作模式和第二操作模式，所述电子终端包括检测部件，其特征在于，所述方法包括：

通过所述检测部件检测用户眼球的运动；

根据所述用户眼球的运动判断是否需要切换所述电子终端的操作模式；以及

如果是，则根据所述用户眼球的运动将所述电子终端在所述第一操作模式和所述第二操作模式之间切换；

其中，所述电子终端为眼镜式电子终端，所述眼镜式电子终端包括镜片，所述镜片上具有指示标识，当所述用户眼球的运动为看所述指示标识时，确定需要切换所述电子终端的操作模式。

2.如权利要求1所述的方法，其特征在于，所述检测用户眼球的运动具体为检测用户的瞳距。

3.如权利要求1所述的方法，其特征在于，当所述第一操作模式为真实场景模式，且所述第二操作模式为终端场景模式时，通过调整所述镜片的透明度来切换所述电子终端的操作模式。

4.如权利要求1所述的方法，其特征在于，当所述第一操作模式为真实场景模式，且所述第二操作模式为终端场景模式时，通过将所述镜片分区来切换所述电子终端的操作模式。

5.如权利要求1所述的方法，其特征在于，当所述第一操作模式为2D模式，且所述第二操作模式为3D模式时，通过调整所述电子终端的显示单元的显示模式来切换所述电子终端的操作模式。

6.一种电子终端，具有第一操作模式和第二操作模式，其特征在于，所述电子终端包括：

检测部件，用于检测用户眼球的运动；以及

处理单元，用于根据所述用户眼球的运动判断是否需要切换所述电子终端的操作模式；如果是，则所述处理单元根据所述用户眼球的运动将所述电子终端在所述第一操作模式和所述第二操作模式之间切换；

其中，所述电子终端为眼镜式电子终端，所述眼镜式电子终端包括镜片，所述镜片上具有指示标识，当所述用户眼球的运动为看所述指示标识时，则确定需要切换所述电子终端的操作模式。

7.如权利要求6所述的电子终端，其特征在于，所述电子终端还包括结构部件，用于将所述电子终端佩戴于用户的身体上。

8.如权利要求6所述的电子终端，其特征在于，当所述第一操作模式为真实场景模式，且所述第二操作模式为终端场景模式时，所述处理单元包括调整模块，所述调整模块调整所述镜片的透明度以切换所述电子终端的操作模式。

9.如权利要求6所述的电子终端，其特征在于，所述第一操作模式为真实场景模式，且所述第二操作模式为终端场景模式时，所述处理单元包括镜片分区单元，所述镜片分区单元将所述镜片分区以切换所述电子终端的操作模式。

10.如权利要求6所述的电子终端，其特征在于，在所述第一操作模式为2D模式，且所述第二操作模式为3D模式时，所述电子终端还包括显示单元，所述处理单元包括显示模式切换单元，用于切换所述显示单元的显示模式以切换所述电子终端的操作模式。