CN104375647A - 用于电子设备的交互方法及电子设备 - Google Patents

Abstract

本发明提供了一种用于电子设备的交互方法及电子设备。所述方法包括：识别到要作用于电子设备的交互界面的操作物；判断操作物的模式；根据交互界面显示的内容与操作物之间的预定对应关系，刷新交互界面显示的内容，刷新后的交互界面显示的内容与所述操作物的模式相关联；接收操作物针对交互界面显示的内容的触控输入；响应于触控输入而执行相应功能。利用本发明的方法和设备，操作电子设备的过程中不需要用户视觉引导来进行触摸位置确认就可以准确触摸电子设备的交互界面并进行操作。对于车载系统的用户而言，利用该方法可极大降低驾驶过程中使用车载信息/多媒体系统的安全隐患。

Description

用于电子设备的交互方法及电子设备

技术领域

本发明涉及电子设备领域，具体而言，涉及一种用于电子设备的交互方法及相关电子设备。

背景技术

诸如手机、平板电脑或导航仪等的电子设备通常通过如显示屏的人机交互界面向用户提供信息并接受来自用户的操作输入。如图1所示，人机交互过程中，用户将操作物移向交互界面。这时，用户需要通过视觉引导进行触摸位置确认。例如，用户需关注显示屏，然后借助视觉确定如手指的操作物是否准确地位于显示屏上相应的功能图标位置，然后才可以点击图标激活相应功能。对于汽车车载信息/多媒体系统，这个过程需要用户将目光从关注车外的路况/车况转移到车内的交互界面上，以确定图标位置，然后通过操作物点击图标来激活功能。这段时间无论多短，都会让车辆实际上处于无人操控的状态，由此带来的潜在安全风险是不能忽视的。

中国专利申请No.201210046901.5公开了一种电子设备及其信息处理方法。根据该方法，电子设备检查触摸体的触摸手势以相应地确定触摸点，并判断触摸点是否满足预定条件。当触摸点满足预定条件时，生成用于在触摸点处提供非视觉反馈的反馈指令，然后在触摸点处执行非视觉反馈。利用该方法，电子设备可以根据用户的触摸手势确定触摸点，只有在触摸点与预设的反馈点重合时，电子设备才可为用户提供如振动或温度反馈的非视觉反馈。如果触摸点与预设反馈点不重合，则电子设备无法进行操作。这样一来，在没有视觉引导的情况下，用户并不是总能激活所需的功能。所以，上述发明提供的方法不能真正解决无需视觉引导而与电子设备交互的问题。因而，利用上述发明的电子设备应用于车载系统时，依然存在风险隐患。

中国专利申请No.201310740326.3公开了一种触控操作的处理方法。根据该方法，进入悬浮模式后，执行如下的悬浮触控步骤：检测触控物在距屏幕非零距离的位置，确定所述非零距离的位置映射在屏幕上的对应位置，判断所述对应位置是否落入悬浮区域，如果是，则响应感应到的触控物的动作。根据该方法，用户无需触摸屏幕即可对屏幕进行悬浮操作。但是，用户的悬浮操作依然需要在视觉引导下完成。

为此，需要一种使用户可在没有视觉引导的情况下准确与电子设备进行交互的方法及相应的电子设备。

发明内容

鉴于此，本发明提供一种用于电子设备的交互方法以及一种电子设备。用户利用根据本发明的交互方法及电子设备，可以无需视觉引导而准确触摸电子设备的交互界面并进行操作。

根据本发明的一方面，提供一种用于的电子设备交互方法。该方法包括如下步骤：识别到要作用于电子设备的交互界面的操作物；判断操作物的模式；根据交互界面显示的内容与操作物之间的预定对应关系，刷新交互界面显示的内容，刷新后的交互界面显示的内容与所述操作物的模式相关联；接收操作物针对交互界面显示的内容的触控输入；响应于触控输入而执行相应功能。

优选地，判断操作物模式包括确定操作物的悬浮位置。

优选地，判断操作物模式还包括确定操作物的各个部分。

优选地，确定操作物的各个部分包括根据操作物的各个部分与主体部分之间的位置关系确定操作物的各个部分。

优选地，确定操作物的各个部分包括根据各个部分的指向矢量确定所述各个部分。

优选地，刷新交互界面上显示的内容包括重新给图标赋予新的坐标值并动态刷新交互界面，所述重新赋予的坐标值与操作物部分对应。

优选地，刷新交互界面上显示的内容包括显示与操作物部分对应的内容。

优选地，交互界面显示的内容与操作物之间的预定对应关系预先在电子设备中设定或调整。

根据本发明的另一方面，提供一种电子设备。该电子设备包括：识别单元，用于识别要作用于电子设备的交互界面的操作物；判断单元，用于判断操作物模式；刷新单元，用于根据交互界面显示的内容与操作物之间的预定对应关系，刷新交互界面显示的内容，刷新后的交互界面显示的内容与所述操作物的模式相关联；接收模块，用于接收操作物针对交互界面显示的内容的触控输入；执行单元，用于响应于触控输入而执行相应功能。

在用户不能或不便通过视觉查看交互界面的情况下，利用本发明的电子设备及其操作方法，用户在操作电子设备的过程中不需要通过视觉引导来进行触摸位置确认就可以准确触摸电子设备的交互界面并进行操作。对于车载系统的用户而言，利用该方法可极大降低驾驶过程中使用车载信息/多媒体系统的安全隐患。

附图说明

图1示出了在视觉引导下与电子设备进行交互的传统方法；

图2示出根据本发明实施例用于电子设备的交互方法的流程图；

图3示出根据本发明实施例判断操作物模式的方法；

图4示出根据本发明实施例判断操作物模式的另一方法；

图5示出根据本发明实施例在交互界面上显示的图标与操作物之间的对应关系；

图6示出了根据本发明实施例的电子设备。

具体实施方式

下面参考附图并结合具体实施例对本发明的技术方案进行详细描述。提供这些示例性实施例的目的是为了使得本领域普通技术人员能够清楚地理解本发明，并且能够根据这里的描述实现本发明。附图和具体实施例并非意在对本发明进行限定；本发明的范围由所附权利要求限定。

本发明提供的用于电子设备的交互方法及电子设备，允许用户在没有视觉引导的情况下准确地确认触摸位置并触摸电子设备的交互界面，以激活交互界面显示的内容并执行相应功能。

图2是根据本发明实施例用于电子设备的交互方法的流程图。在用户未对电子设备进行任何操作时，电子设备的交互界面处于未触发状态，交互界面上显示的内容如各图标按预定的位置排列而处于预设位置。在没有视觉引导的情况下，用户将操作物移向电子设备。当操作物与交互界面的距离小于预定距离时，如20mm，在步骤S100，电子设备可以识别到操作物。在一个实施例中，电子设备通过用户手指与电子设备触摸屏之间的耦合电容感应到手指在距触摸屏非零距离的位置，并确定该非零距离位置映射在触摸屏上的位置。在另一个实施例中，电子设备通过红外方式感应手指在距触摸屏非零距离的位置。对操作物位置的感应可以通过任何可实现悬浮识别的技术来实现，本发明对此不作限定。

识别到要作用于电子设备的交互界面的操作物后，如图2所示，根据本发明的操作方法，在步骤S200，电子设备判断操作物的模式。操作物模式判断的目的不仅是要确定操作物各部分的悬浮位置，而且要根据操作物各部分的悬浮位置之间的关系确定操作物的各个部分，以便随后进行操作物各部分与电子设备交互界面上显示的内容之间的匹配。

确定操作物的悬浮位置可以包括确定操作物的悬浮坐标(x，y)。根据本发明的一个实施例，操作物可以是用户的手。这时，电子设备确定手掌与各个手指的悬浮坐标。根据本发明的另一个实施例，操作物可以是触笔，这时，电子设备确定触笔尖端部分的悬浮坐标。根据本发明的又一个实施例，操作物是包含特定图形的导体，这时，电子设备确定该导体各图形部分的悬浮坐标。根据本发明，操作物是可用于操控交互界面的任何物体。这时，电子设备确定该物体各个部分的悬浮坐标。

然后，电子设备根据操作物各部分的悬浮位置之间的关系确定操作物的各个部分。

根据本发明一个实施例，操作物是手。这时，操作物包括多个部分(手指)，需要分别确定各个手指。如图3所示，一种确定各个手指的方法包括如下步骤：

S210：确定手掌与各个手指的悬浮坐标。

例如，如图3所示，手掌坐标为0，各个手指的坐标分别为a、b、c、d和e。

S220：通过感应面积而识别手掌为大物体，根据手掌与各个手指坐标的相对位置关系判断用户是从哪个方向将手伸向交互界面。由于车载系统使用者(司机、乘员)与电子设备位置相对固定，合理设定司机与而乘员会使用不同的手与电子设备进行交互。

例如，在左驾驶的情况下，图3所示情况可判断为司机的右手。

S230：以手掌位置为基准，用手指坐标与手掌连线与参考线夹角来判断各手指坐标顺序。

例如，图3中，坐标a与手掌坐标0之间的夹角为α1，坐标b与手掌坐标0之间的夹角为α2，坐标c与手掌坐标0之间的夹角为α3，坐标d与手掌坐标0之间的夹角为α4，坐标e与手掌坐标0之间的夹角为α5。α1为负值，α2到α5逐个增大。

S240:根据手指顺序和左右手判断，确定各坐标对应的手指。

例如，根据上述各个夹角可判断，图3的坐标a对应的为右手拇指，坐标b到e依次对应右手的食指、中指、无名指和小指。

根据本发明的另一个实施例，如图4所示，另一种确定各个手指的方法包括如下步骤：

S310：通过确定不同高度的悬浮点坐标，得出所有手指的方向矢量。

例如，通过如图4所示手指上位于不同高度h1和h2的两个点的悬浮坐标的连线可以得出该手指的指向矢量。

S320：根据手指指向矢量判断用户是从哪个方向将手伸向触摸屏。

例如，手指指向矢量指向左方的话，说明用户是从左侧伸手，这则说明用户伸出的是右手。

S330：判定左右手后(以右手为例)，先找出悬浮坐标x值最小的拇指。

S340:计算其他手指与拇指坐标距离，确定各坐标对应的手指。

确定操作物的各个部分还可以通过本领域技术人员熟知的其他算法完成，在此不做具体描述。在操作物只包括一个部分的情况下，确定操作物的悬浮坐标后无需进行确认操作物各部分的步骤。

继续参考图1，判断操作物模式的步骤完成以后，在步骤S300，电子设备根据交互界面上显示的内容与操作物/操作物各部分之间的预定对应关系对显示内容显示进行刷新。

具体而言，在给定交互界面下，交互界面上显示的图标的位置坐标是固定值。在获取操作物悬浮坐标并确定操作物各部分后，可以对图标位置的坐标重新赋值。然后，根据对图标位置新赋予的坐标，动态刷新交互界面。刷新的频率可以根据交互界面的扫描频率而设定。

可以在电子设备中预先设定用户界面上显示的图标与操作物的各部分之间的对应关系。根据本发明的一个实施例，如图5所示，操作物是手的情况下，可以设定食指对应图标1、中指对应图标2、无名指对应图标3、小指对应图标4，等等。每一显示界面显示的可通过本发明方法操控的图标的数目不大于操作物部分的数目。

在图标数目大于操作物部分的情况下，则采取分级图标的形式。例如，在第一显示界面上显示图标1至4。如果用户用食指靠近屏幕，则电子设备通过根据手指与图标之间的关联关系刷新显示屏将图标1移动到食指的位置。在食指点击图标1后，进入下一级第二显示界面，该界面上显示的图标1.1对应食指，图标1.2对应中指，图标1.3对应无名指，图标1.4对应小指，如此等等。

操作物部分与图标之间的对应关系还可以采取本领域技术人员熟知的其他方法预先存储在电子设备中，也可以根据需要改变操作物部分与图标之间的对应关系，对此本发明不做具体限定。

根据本发明的一个实施例，电子设备根据图标与操作物的各部分之间的对应关系以及要作用于交互界面的操作物部分，确定与该部分对应的图标。例如，当用户将手伸向交互界面时，确定与食指对应的是图标1。同时，电子设备根据该操作物部分的位置，对所确定的图标位置的坐标重新赋值。然后，电子设备刷新该图标的位置，将该图标移动到与操作物部分对应的位置。也就是说，电子设备根据操作物的悬浮坐标主动调整用户希望触摸的图标的位置。这样一来，即便用户不看交互界面，也可准确地触摸到希望触摸的图标。

根据本发明的另一实施例，操作物是包含特定图形的导体。这时，根据导体的悬浮坐标通过刷新将将交互界面上的图标移动到导体位置。根据另一个例子，电子设备可以根据该包含特定图形的导体在交互界面上显示与操作物部分对应的内容，随后可用导体触摸该显示的内容并激活相应功能。该实施例可用于简单的身份识别类交互。

如图1所示，在完成交互界面刷新后，在步骤S400，用户用操作物触摸图标，对电子设备进行触控输入。随后，在步骤S500，电子设备响应于触控输入而执行相应功能。

本发明实施例的用于电子设备的交互方法可用于用户不能或不便通过视觉查看交互界面的情况。利用上述方法，在用户与电子设备交互的过程中，不需要用户视觉引导来进行触摸位置确认。相反，用户在没有视觉引导的情况下，将手伸向电子设备，并用特定手指触摸经刷新后自动匹配到该手指下方且与该手指对应的图标，由此即可激活对应功能。对于车载系统的用户而言，利用该方法可极大降低驾驶过程中使用车载信息/多媒体系统的安全隐患。

上面描述了根据本发明用于电子设备的交互方法。接下来参考图6描述根据本发明的电子设备。

该电子设备例如可以是便携式终端，如智能手机、平板电脑或导航仪等。该电子设备包括如显示屏的人机交互界面，用于向用户提供信息并接受来自用户的操作输入。

如图6所示，根据本发明实施例的电子设备600包括：识别单元610，用于识别要作用于电子设备的交互界面的操作物；判断单元620，用于判断操作物模式；刷新单元630，用于根据交互界面显示的内容与操作物之间的预定对应关系，刷新交互界面显示的内容，刷新后的交互界面显示的内容与所述操作物的模式相关联；接收单元640，用于接收所述操作物针对交互界面显示的内容的触控输入；以及执行单元650，用于响应于所述触控输入而执行相应功能。

识别单元610可以利用如电容、红外线或可实现悬浮识别的任何其他技术方法来识别操作物的悬浮位置。

判断单元620设备判断操作物的模式。具体而言，判断单元620不仅确定操作物的悬浮位置，而且要确定操作物的各个部分。

判断单元620确定操作物部分的方式已在用于电子设备的交互方法中详细描述，在此不再赘述。

判断单元620完成对操作物悬浮位置的判断后，刷新单元630对交互界面上显示的内容进行刷新。具体而言，判断单元620确定手指模式定义后，刷新单元630根据交互界面显示的内容与操作物之间的预定对应关系，对图标位置的坐标重新赋值。然后，根据对图标位置新赋予的坐标，动态刷新交互界面。刷新的频率可以根据触摸屏的扫描频率而设定。

随后，接收单元640接收用户在未视觉关注交互界面的情况下进行的操控输入，然后执行单元650激活与相应图标对应的功能。

在用户不能或不便通过视觉查看交互界面的情况下，根据本发明的电子设备可以主动识别用户操作，通过对操作物模式进行判断，电子设备可将与操作物对应的图标自动移动到操作物下方。然后，用户通过点击电子设备交互界面即可激活对应功能。对于车载系统的用户而言，利用该方法可极大降低驾驶过程中使用车载信息/多媒体系统的安全隐患。

以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (16)

1.一种用于电子设备的交互方法，所述电子设备包括交互界面，所述方法包括：

识别到要作用于电子设备的交互界面的操作物；

判断操作物的模式；

根据交互界面显示的内容与操作物之间的预定对应关系，刷新交互界面显示的内容，刷新后的交互界面显示的内容与所述操作物的模式相关联；

接收所述操作物针对交互界面显示的内容的触控输入；

响应于所述触控输入而执行相应功能。

2.根据权利要求1所述的方法，其中判断操作物的模式包括确定所述操作物的悬浮位置。

3.根据权利要求2所述的方法，其中判断操作物的模式还包括确定所述操作物的各个部分。

4.根据权利要求3所述的方法，其中确定操作物的各个部分包括根据所述操作物的各个部分与主体部分之间的位置关系确定所述操作物的各个部分。

5.根据权利要求3所述的方法，其中确定操作的各个部分包括根据所述各个部分的指向矢量确定所述各个部分。

6.根据权利要求1所述的方法，其中刷新交互界面上显示的内容包括重新给图标赋予新的坐标值并动态刷新所述交互界面，重新赋予的坐标值与所述操作物部分对应。

7.根据权利要求1所述的方法，其中刷新交互界面上显示的内容包括显示与操作物部分对应的内容。

8.根据权利要求1所述的方法，其中交互界面显示的内容与操作物之间的预定对应关系预先在电子设备中设定或调整。

9.一种电子设备，包括：

识别单元，用于识别要作用于电子设备的交互界面的操作物；

判断单元，用于判断操作物模式；

刷新单元，用于根据交互界面显示的内容与操作物之间的预定对应关系，刷新交互界面显示的内容，刷新后的交互界面显示的内容与所述操作物的模式相关联；

接收模块，用于接收所述操作物针对交互界面显示的内容的触控输入；

执行单元，用于响应于所述触控输入而执行相应功能。

10.根据权利要求9所述的电子设备，其中所述判断单元确定所述操作物的悬浮位置。

11.根据权利要求10所述的电子设备，其中所述判断单元确定所述操作物的各个部分。

12.根据权利要求11所述的电子设备，其中所述判断单元根据所述操作物的各个部分与主体部分之间的位置关系确定所述操作物的各个部分。

13.根据权利要求11所述的电子设备，其中所述判断单元根据所述各个部分的指向矢量确定所述各个部分。

14.根据权利要求9所述的电子设备，其中所述刷新单元重新给图标赋予新的坐标值并动态刷新所述交互界面，重新赋予的坐标值与所述操作物部分对应。

15.根据权利要求9所述的电子设备，其中所述刷新单元在交互界面上显示与操作物部分对应的内容。

16.根据权利要求9所述的电子设备，其中交互界面显示的内容与操作物之间的预定对应关系预先在电子设备中设定或调整。