CN109690446B - 一种交互方法及电子设备 - Google Patents

一种交互方法及电子设备 Download PDF

Info

Publication number
CN109690446B
CN109690446B CN201680089221.8A CN201680089221A CN109690446B CN 109690446 B CN109690446 B CN 109690446B CN 201680089221 A CN201680089221 A CN 201680089221A CN 109690446 B CN109690446 B CN 109690446B
Authority
CN
China
Prior art keywords
electronic device
user
electronic equipment
touch screen
acceleration sensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201680089221.8A
Other languages
English (en)
Other versions
CN109690446A (zh
Inventor
余尚春
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of CN109690446A publication Critical patent/CN109690446A/zh
Application granted granted Critical
Publication of CN109690446B publication Critical patent/CN109690446B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures

Abstract

本申请实施例提供一种交互方法及电子设备,涉及通信领域,在不增加电子设备成本的前提下,实现触摸屏失灵时精确的人机交互。本申请实施例提供的方案包括:判断电子设备的触摸屏是否处于失灵状态;若电子设备的触摸屏处于失灵状态,通过加速度传感器采集使用电子设备的用户的操作手势,执行操作手势指示的操作。本申请用于人机交互。

Description

一种交互方法及电子设备
本申请要求于2016年09月26日提交中国专利局、申请号为201610852609.0、发明名称为“一种可穿戴设备的交互方法”的中国专利申请的优先权,其全部内容通过引用结合在本申请中。
技术领域
本申请涉及通信领域,尤其涉及一种交互方法及电子设备。
背景技术
目前,随着电子设备防水性能的提升,越来越多的电子设备支持水下运行。例如,智能穿戴设备如手环、手表,都可支持游泳追踪功能,可以做到在水下50米、100米等深度下长时间静置都不会进水。
然而,电子设备所采用的电容式触摸屏,在沾水后触摸检测功能将无法正常工作,会出现失效、不灵敏、误检测等现象,只有将水擦干后才能恢复正常。当然,电子设备的触摸屏在其他场景下,也可能出现失灵的情况。为了保证电子设备在水下与用户的正常交互,业界产品通常通过增加至少一个物理按键的方式进行人机交互。
但是,增加物理按键进行人机交互的方案,增加了硬件成本,对防水性能提出了更高的要求也增加了防水成本。
发明内容
本申请实施例提供一种交互方法及电子设备,在不增加电子设备成本的前提下,实现触摸屏失灵时精确的人机交互。
为达到上述目的,本申请的实施例采用如下技术方案:
第一方面,提供一种交互方法,应用于电子设备,该电子设备包括加速度传感器。该方法具体包括:判断电子设备的触摸屏是否处于失灵状态;若电子设备的触摸屏处于失灵状态,通过加速度传感器采集使用电子设备的用户的操作手势,执行操作手势指示的操作。
这样一来,在电子设备的触摸屏失灵时,用户可以通过不同的操作手势响电子设备发出交互指令,电子设备通过加速度传感器采集用户的操作手势进行交互指令的响应,完成了人机交互。该人机交互过程中,由电子设备中已有的加速度传感器实现,并不增加电子设备的硬件或者防水成本;而且用户的手势操作并不会由于触摸屏处于失灵状态存在不灵敏或者误差等现象造成采集不精确;因此,本申请提供的人机交互方案实现了在不增加电子设备成本的前提下,触摸屏失灵时的人机交互。
其中,失灵状态是指电子设备的触摸屏不能正常进行人机交互,导致误识别的状态。失灵状态可以包括但不限于沾水状态、触摸屏故障状态等。
结合第一方面,在一种可能的实现方式中,该电子设备还包括触摸感应传感器,在判断电子设备的触摸屏是否处于失灵状态之后,该方法还可以包括:若电子设备的触摸屏处于失灵状态,关闭触摸感应传感器。电子设备的触摸屏处于失灵状态时,触摸感应传感器无法精确的采集用户的触摸操作,此时关闭触摸感应传感器,以关闭电子设备的触摸交互功能,避免电子设备的触摸屏处于失灵状态下时的误检测,使得电子设备仅依靠加速度传感器进行人机交互,提高了电子设备在其触摸屏处于失灵状态下时人机交互的精确度。
结合第一方面或上述任一种可能的实现方式,在另一种可能的实现方式中,当失灵状态为沾水状态时,提供一种判断电子设备的触摸屏是否处于失灵状态的具体实现方式,具体包括:接收用户输入的水下活动监测启动指示。当接收到用户输入的水下活动监测启动指示时,说明电子设备即刻进行水下活动。其中,水下活动可以包括但不限于游泳、潜水等活动。水下活动监测可以包括在用户进行水下活动时,通过加速度感应器采集并记录用户的水下活动距离、水下活动速度等参数。用户可以在触摸操作模式下,通过触摸电子设备触摸屏中,游泳图标开始按钮,或者,水下活动监测启动指示区域,以输入水下活动监测启动指示。当然,用户也可以通过预设的物理按键输入水下活动监测启动指示,或者,用户也可以通过其他方式输入水下活动监测启动指示,本申请对此不进行具体限定。实现由于用户进行水下活动时使用电子设备导致触摸屏沾水时,在不增加电子设备成本的前提下,进行人机交互。
结合第一方面或上述任一种可能的实现方式,在另一种可能的实现方式中,当失灵状态为沾水状态时,提供一种判断电子设备的触摸屏是否处于失灵状态的具体实现方式,具体包括:通过加速度传感器监测用户在水下使用电子设备。由于不同运动状态下,电子设备中的加速度传感器采集到的加速度信号不同,通过事先采集不同运动状态的加速度信号,通过神经网络等算法对采集的不同运动状态的加速度信号进行训练学习,提取出运动的特征,预置在电子设备中。在实际应用中,电子设备通过其中的加速度传感器,采集用户运动时的加速度信号,提取特征值,当特征值符合水下运动的特征时,即可确定用户在水下使用电子设备。实现由于用户进行水下活动时使用电子设备导致触摸屏沾水时,在不增加电子设备成本的前提下,进行人机交互。
结合第一方面或上述任一种可能的实现方式,在另一种可能的实现方式中,当失灵状态为沾水状态时,提供一种判断电子设备的触摸屏是否处于失灵状态的具体实现方式,具体包括:电子设备还包括触摸感应传感器,通过触摸感应传感器获取的用户的触摸参数满足失灵状态触摸条件。触摸屏失灵状态下,用于的触摸操作参数(例如触摸点数量、触摸点面积等)与非失灵状态下不同,因此,在通过触摸感应传感器获取的用户的触摸参数满足失灵状态触摸条件时,即可确定电子设备处于失灵状态。实现电子设备自动检测到触摸屏沾水时,在不增加电子设备成本的前提下,进行人机交互。
需要说明的是,对于判断电子设备的触摸屏是否处于失灵状态的方式可以有多种,并不限于上述几种描述的实现方式,本申请对此并不进行具体限定。
结合第一方面或上述任一种可能的实现方式,在另一种可能的实现方式中,通过加速度传感器采集使用电子设备的用户的操作手势,执行用户的操作手势所指示的操作,具体可以包括:通过加速度传感器采集用户输入的启动手势交互指示;在采集到启动手势交互指示之后,通过加速度传感器采集用户的操作手势,执行操作手势指示的操作。在采集到用户输入的启动手势交互指示之后,再通过加速度传感器采集用户的操作手势,执行操作手势指示的操作,避免了将用户的非人机交互操作手势误判断为进行人机交互的操作手机的误操作,提高了触摸屏沾水失灵时人机交互的准确度。
结合第一方面或上述任一种可能的实现方式,在另一种可能的实现方式中,在通过加速度传感器采集使用电子设备的用户的操作手势,执行用户的操作手势所指示的操作之后,该方法还可以包括:通过加速度传感器采集用户输入的退出手势交互指示;在采集到该退出手势交互指示之后,关闭加速度传感器采集用户的操作手势。在采集到用户输入的退出手势交互指示之后,关闭加速度传感器采集用户的操作手势,避免了将用户的非人机交互操作手势误判断为进行人机交互的操作手机的误操作,提高了触摸屏沾水失灵时人机交互的准确度。
结合第一方面或上述任一种可能的实现方式,在另一种可能的实现方式中,在判断电子设备的触摸屏是否处于失灵状态之后,该方法还可以包括:若电子设备的触摸屏处于失灵状态,向该电子设备的用户显示提示信息,该提示信息用于提示电子设备进入手机交互模型。以便于电子设备的用户通过操作手势与电子设备进行人机交互。
可选的,向该电子设备的用户显示提示信息之后,还可以向电子设备的用户显示操作手势的定义,以及每个操作手势对应的操作。
可选的,向该电子设备的用户显示提示信息之后,还可以向电子设备的用户显示操作手势的调试界面,用于对每个操作手势进行调试。
可选的,在对操作手势调试时,可以动态向用户示意操作手势。可选的,在对操作手势调试时,可以提示用户输入操作手势,通过加速度传感器对用户输入的用于调试的操作手势进行采集,并判断用户输入的操作手势是否可识别。若用户输入的操作手势可识别,向用户输出匹配指示,若用户输入的操作手势不可识别,向用户输出重新输入用于调试的操作手势的提示。
结合第一方面或上述任一种可能的实现方式,在另一种可能的实现方式中,在通过加速度传感器采集使用电子设备的用户的操作手势,执行用户的操作手势所指示的操作之前,该方法还可以包括:接收电子设备的用户输入的预设操作手势的指示,然后通过加速度传感器采集用户输入的预设操作手机及其指示的操作进行存储。
结合第一方面或上述任一种可能的实现方式,在另一种可能的实现方式中,在通过加速度传感器采集使用电子设备的用户的操作手势,执行用户的操作手势所指示的操作之后,该方法还包括:判断电子设备的触摸屏是否处于失灵状态;若电子设备的触摸屏处于失灵状态,继续执行通过加速度传感器采集使用电子设备的用户的操作手势,执行用户的操作手势所指示的操作;若电子设备的触摸屏未处于失灵状态,退出通过加速度传感器采集使用电子设备的用户的操作手势,通过触摸感应传感器进行人机交互。
其中,在通过触摸感应传感器进行人机交互之前,若触摸感应传感器关闭,则先打开触摸感应传感器,再通过触摸感应传感器进行人机交互。
结合第一方面或上述任一种可能的实现方式,在另一种可能的实现方式中,电子设备可以为可穿戴设备。可选的,可穿戴设备可以为智能手表或者运动手环。
第二方面,本申请提供一种电子设备,该电子设备可以实现上述方法示例中的功能,所述功能可以通过硬件实现,也可以通过硬件执行相应的软件实现。所述硬件或软件包括一个或多个上述功能相应的模块。
结合第二方面,在一种可能的实现方式中,该电子设备的结构中包括处理器和收发器,该处理器被配置为支持该电子设备执行上述方法中相应的功能。该收发器用于支持该电子设备与其他设备之间的通信。该电子设备还可以包括存储器,该存储器用于与处理器耦合,其保存该电子设备必要的程序指令和数据。
第三方面,本申请提供了一种计算机存储介质,用于储存为上述电子设备所用的计算机软件指令,其包含用于执行上述方面所设计的程序。
上述第二方面及第三物方面提供的方案,与上述第一方面提供的交互方法的原理相同,因此可以与第一方面达到相同的有益效果,此处不再进行赘述。
附图说明
图1为本申请实施例提供的一种电子设备示意图;
图2为本申请实施例提供的一种电子设备的结构示意图;
图3为本申请实施例提供的一种交互方法的流程示意图;
图4为本申请实施例提供的一种电子设备显示界面示意图;
图5为本发明实施例提供的一种监测用户在水下使用电子设备的流程示意图;
图6为本申请实施例提供的另一种交互方法的流程示意图;
图7为本申请实施例提供的另一种电子设备显示界面示意图;
图8为本申请实施例提供的另一种电子设备的结构示意图;
图9为本申请实施例提供的再一种电子设备的结构示意图。
具体实施方式
本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
由于电容触摸屏在沾水时,触摸操作失灵会影响用户与电子设备的人机交互。目前,业界通过增加物理按键解决这一问题的方法。但是,增加物理按键,对电子设备的硬件成本及防水成本都会增加。
基于此,本申请的基本原理是:在电子设备触摸屏失灵时,通过电子设备中已有的加速度传感器采集用户的操作手势,进行操作手势指示的操作,实现人机交互。因此,在触摸屏失灵时,用户可以通过不同的操作手势响电子设备发出交互指令,电子设备通过加速度传感器采集用户的操作手势进行交互指令的响应,完成了人机交互。该人机交互过程中,由电子设备中已有的加速度传感器实现,并不增加电子设备的硬件或者防水成本;而且用户的手势操作并不会由于触摸屏处于失灵状态存在不灵敏或者误差等现象造成采集不精确;因此,本申请提供的方案实现了在不增加电子设备成本的前提下,触摸屏沾水失灵时的人机交互。
本申请实施例提供的交互方法,可以应用于电子设备中。该电子设备可以包括但不限于可穿戴设备、用户终端等。该可穿戴设备可以包括但不限于智能手表、运动手环等。
其中,用户终端可以包括但不限于手机、平板电脑等。
图1示意了一种电子设备10,该电子设备10中包括加速度传感器101(位于电子设备10内部,未图示),用户佩戴电子设备10,通过电子设备10中的加速度传感器101进行动作记录。
其中,电子设备10还可以通过蓝牙技术或者红外技术或者其他无线技术与终端进行通信交互,实现数据同步、参数配置等功能。当然,电子设备10也可以通过通过蓝牙技术或者红外技术或者其他无线技术或者有线技术,与计算机实现数据同步、参数配置等功能。本申请实施例对于电子设备10的具体内容不进行限定。
需要说明的是,图1只是以示例的形式,对本申请方案的应用场景进行描述。
本申请实施例提供的交互方法,由本申请实施例提供的电子设备20执行。电子设备20可以为图1中所示的电子设备10,也可以为其他电子设备,本申请对此不进行具体限定。
图2示出的是与本申请各实施例相关的电子设备20的结构示意图。如图2所示,该电子设备20可以包括:处理器201、存储器202、触摸感应传感器203、加速度传感器204及触摸屏205。
下面结合图2对电子设备20的各个构成部件进行具体的介绍:
存储器202,可以是易失性存储器(英文全称:volatile memory),例如随机存取存储器(英文全称:random-access memory,RAM);或者非易失性存储器(英文全称:non-volatile memory),例如只读存储器(英文全称:read-only memory,ROM),快闪存储器(英文全称:flash memory),硬盘(英文全称:hard disk drive,HDD)或固态硬盘(英文全称:solid-state drive,SSD);或者上述种类的存储器的组合,用于存储可实现本申请方法的相关应用程序、以及配置文件。
处理器201是电子设备20的控制中心,可能是一个中央处理器(英文全称:centralprocessing unit,CPU),也可以是特定集成电路(英文全称:Application SpecificIntegrated Circuit,ASIC),或者是被配置成实施本申请实施例的一个或多个集成电路,例如:一个或多个微处理器(英文全称:digital singnal processor,DSP),或,一个或者多个现场可编程门阵列(英文全称:Field Programmable Gate Array,FPGA)。处理器201可以通过运行或执行存储在存储器202内的软件程序和/或模块,以及调用存储在存储器202内的数据,执行电子设备20的各种功能。
触摸感应传感器203用于通过触摸屏205采集使用电子设备20的用户的触摸操作,触摸感应传感器203在采集到用户的触摸操作后,将触摸操作反馈至处理器201,使得处理器201执行触摸操作指示的功能。触摸屏205还用于向用户呈现信息。
加速度传感器204用于采集使用电子设备20的用户的运动形式的操作,触摸感应传感器203在采集到用户的运动形式的操作后,将运动形式的操作反馈至处理器201,使得处理器201执行运动形式的操作指示的功能。
具体的处理器201通过运行或执行存储在存储器202内的软件程序和/或模块,以及调用存储在存储器202内的数据,执行如下功能:判断电子设备20的触摸屏是否处于失灵状态;若电子设备20的触摸屏处于失灵状态,通过加速度传感器204采集使用电子设备的用户的操作手势,执行操作手势指示的操作。
下面结合附图,对本申请的实施例进行具体阐述。
一方面,本申请实施例提供一种交互方法,应用于电子设备,该电子设备包括加速度传感器。如图3所示,该方法可以包括:
S301、判断电子设备的触摸屏是否处于失灵状态。
其中,失灵状态是指电子设备的触摸屏由于沾水、或者沾污渍、或者故障,或者其他原因导致无法准确识别用户的触摸操作的状态。失灵状态可以包括但不限于沾水状态、故障状态等等。
需要说明的是,对于失灵状态的具体类型,可以根据实际需求设定,本申请实施例对此不进行具体限定。凡是电子设备的触摸屏失灵无法准确进行触摸操作时,均可以采用本申请的方案进行准确的人机交互。
具体的,根据触摸屏失灵状态的类型不同,执行S301的过程也将不同。当失灵状态为沾水状态时,S301中判断电子设备的触摸屏是否处于失灵状态可以包括但不限于下述三种实现方案:
实现方案1、
接收电子设备的用户输入的水下活动监测启动指示。
具体的,当接收到用户输入的水下活动监测启动指示时,说明电子设备即刻进行水下活动。水下活动可以包括但不限于游泳、潜水等活动。
水下活动监测可以包括在用户进行水下活动时,通过加速度感应器采集并记录用户的水下活动距离、水下活动速度等参数。用户可以在触摸操作模式下,通过触摸电子设备触摸屏中,游泳图标开始按钮,或者,水下活动监测启动指示区域,以输入水下活动监测启动指示。当然,用户也可以通过预设的物理按键输入水下活动监测启动指示,或者,用户也可以通过其他方式输入水下活动监测启动指示,本申请对此不进行具体限定。
示例性的,假设用户使用的电子设备为运动手环,用户可以在图4中(a)所示的界面中触摸选择“锻炼”模式,进入“锻炼”模式的下一级菜单。由于运动手环的触摸屏尺寸小,“锻炼”模式的下一级菜单中需要滑动屏幕显示如图4中的(b)至(d)所示的锻炼方式。用户在如图4中(d)显示的界面下,触摸选择游泳,则输入了水下活动监测启动指示。
实现方案2、
通过加速度传感器监测用户在水下使用电子设备。
具体的,由于不同运动状态下,电子设备中的加速度传感器采集到的加速度信号不同,如图5所示,通过加速度传感器监测用户在水下使用电子设备的过程具体可以包括:
S51、采集不同运动状态下的加速度数据。
其中,不同运动状态至少包括电子设备可以监测的所有运动。例如走路、跑步、骑车、游泳、潜水等。
S52、对不同运动状态下的加速度数据进行训练分析,提取运动状态的识别特征并保存。
其中,训练分析的方法包括神经网络等算法。本申请实施例对于训练分析的方法不进行具体限定。
S53、通过通过电子设备中的加速度传感器,采集用户运动时的加速度信号,提取特征值。
S54、将用户运动时的加速度信号与电子设备中存储的水下运动状态识别特征进行对比。
具体的,在S54中,若S53中用户运动时的加速度信号与S52中电子设备中存储的水下运动状态识别特征匹配,则执行S55;否则重新执行S53。
S55、确定用户在水下使用电子设备。
进一步的,在S55之后,重新执行S53,实时采集用户使用电子设备的环境。
实现方案3、
电子设备还包括触摸感应传感器,通过触摸感应传感器获取的用户的触摸参数满足失灵状态触摸条件。
具体的,触摸屏失灵状态下,用于的触摸操作参数(例如触摸点数量、触摸点面积等)与非失灵状态下不同,因此,在通过触摸感应传感器获取的用户的触摸参数满足失灵状态触摸条件时,即可确定电子设备处于失灵状态。
可选的,当触摸屏的失灵状态为沾到污渍时,S301中的检测与上述实现方案3类似,此处不再进行赘述。
可选的,当触摸屏的失灵状态为触摸屏故障时,S301中的检测可以在电子设备中设置监测电路用于判断触摸屏是否故障,此处不进行赘述。凡是可以用来判断触摸屏是否故障的实现方法,都可以用于实现S301的功能。
S302、若电子设备的触摸屏处于失灵状态,通过加速度传感器采集使用电子设备的用户的操作手势,执行操作手势指示的操作。
其中,操作手势是用户对电子设备实施的操作行为,操作手势可以量化为电子设备可识别的参数集合。该参数集合中可以包括但不限于运动轨迹、起始点、是否旋转、旋转方向、旋转角度、位移距离等等。本申请实施例对于操作手势的量化内容不进行具体限定。
示例性的,操作手势可以为手腕内翻、手腕外翻、单次敲击、等。
需要说明的是,上述操作手势的示例只是举例进行说明,并不是对操作手势内容的具体限定。操作手势的内容,可以在实际应用中根据实际需求定义,本申请对此不进行具体限定。
操作手势指示的操作,是指用户执行操作手势时向电子设备发送的交互指令的响应操作。
示例性的,操作手势手腕内翻指示的操作可以为当前显示内容的下一页或者下一选项;操作手势手腕外翻指示的操作可以为当前显示内容的上一页或者上一选项;操作手势单次敲击指示的操作可以为确认或选择当前显示内容。
需要说明的是,上述操作手势指示的操作只是的示例只是举例进行说明,并不是对操作手势指示的操作的具体限定。操作手势指示的操作的内容,可以在实际应用中根据实际需求定义,本申请对此不进行具体限定。
还需要说明的是,操作手势以及操作手势指示的操作可以预先设置存储在电子设备中,也可以根据用户的输入存储在电子设备中,本申请实施例对此不进行具体限定。
可选的,在S302中,当判断电子设备的触摸屏处于失灵状态后,通过加速度传感器采集用户的操作手势,执行操作手势指示的操作的实现方式可以包括下述两种:
第一种实现方式、当判断电子设备的触摸屏处于失灵状态后,则通过加速度传感器采集使用电子设备的用户的操作手势,执行用户的操作手势所指示的操作。也就是说,在判断电子设备的触摸屏处于失灵状态后,采集到的用户的所有操作手势,都为用于人机交互的操作手势。
第二种实现方式、当判断电子设备的触摸屏处于失灵状态后,先通过加速度传感器采集用户输入的启动手势交互指示;在采集到用户输入的启动手势交互指示之后,通过加速度传感器采集用户的操作手势,执行操作手势指示的操作。
进一步的,若在S302中,通过上述第二种实现方式实现通过加速度传感器采集用户的操作手势,执行操作手势指示的操作,还需通过加速度传感器采集用户输入的退出手势交互指示;在采集到用户输入的退出手势交互指示之后,暂停“通过加速度传感器采集用户的操作手势,执行操作手势指示的操作”。
本申请实施例提供的交互方法,在电子设备的触摸屏失灵时,用户可以通过不同的操作手势响电子设备发出交互指令,电子设备通过加速度传感器采集用户的操作手势进行交互指令的响应,完成了人机交互。该人机交互过程中,由电子设备中已有的加速度传感器实现,并不增加电子设备的硬件或者防水成本;而且用户的手势操作并不会由于触摸屏处于失灵状态存在不灵敏或者误差等现象造成采集不精确;因此,本申请提供的人机交互方案实现了在不增加电子设备成本的前提下,触摸屏失灵时的人机交互。
进一步的,在S301之后,若判断电子设备的触摸屏未处于失灵状态,则重新执行S301,直至判断电子设备的触摸屏处于失灵状态时执行S302。
进一步的,具有触摸屏的电子设备还包括触摸感应传感器。如图6所示,在S301判断电子设备的触摸屏是否处于失灵状态之后,所述方法还可以包括:
S303、若电子设备的触摸屏处于失灵状态,关闭触摸感应传感器。
通过执行S303,在电子设备的触摸屏处于失灵状态时,仅通过加速度传感器执行本申请的方案进行人机交互,避免失灵的触摸屏出现误检测,以提高人机交互的准确度。
需要说明的是,S303与S302的可以同时执行,也可以先后执行,本申请对此不进行具体限定。当S303与S302先后执行时,其先后顺序可以根据实际需求确定,本申请实施例对此也不进行具体限定,图1中仅仅是举例说明,对于步骤间的执行顺序并不进行限定。
进一步的,如图6所示,在S301中判断电子设备的触摸屏是否处于失灵状态之后,S302之前,该方法还可以包括:
S304、若电子设备的触摸屏处于失灵状态,向用户显示提示信息。
其中,该提示信息用于提示电子设备进入手机交互模型。
可选的,该提示信息可以为灯光提示,包括灯光的闪烁频率或者灯光的颜色等。对于将灯光题述作为提示信息体现的具体含义,可以在电子设备的用户使用手册中进行具体说明。
可选的,该提示信息可以为显示内容提示,通过电子设备的显示屏向用户呈现。显示内容可以包括文字或者图形或者其他,本申请实施例对此不进行具体限定。
需要说明的是,上述对于提示信息的描述,只是示例性说明,并不是对提示信息内容及形式的具体限定。
进一步的,在S304中向用户显示提示信息时,还可以向用户显示操作手势的定义。具体的向用户显示操作手势的定义的实现过程本申请实施例不进行限定。
进一步的,在S302之后,或者在S303之后,所述方法还包括S305。
S305、电子设备重新判断电子设备的触摸屏是否处于失灵状态。
具体的,若在S305中判断电子设备的触摸屏处于失灵状态,则继续执行S302或者S302和S303。若在S305中判断电子设备的触摸屏未处于失灵状态,所述方法还包括S306,在S306之后,重新执行S301。
S306、停止通过通过加速度传感器采集使用电子设备的用户的操作手势,使用触摸感应传感器进行人机交互。
下面通过示例对本申请实施例执行过程中,以电子设备为智能手表为例,在智能手表执行本申请实施例的方案时,都智能手表的显示内容进行说明。
示例性的,如图7中(a)所示,用户触摸选择智能手表显示界面中的游泳选项,启动游泳运动监测。此时,智能手表判断智能手表的触摸屏处于失灵状态,向用户输出提示信息,提示用户当前仅支持手势操作,如图7中(b)所示。然后,智能手表对用户的游泳过程进行监测,向用户呈现相关数据,如图7中(c)所示。之后,若用户通过连续三次敲击输入启动手势交互指示,智能手表向用户显示进入手势交互模式,如图7中(d)所示。之后,智能手表采集用户输入的操作手势并进行对应的操作。若用户再通过连续三次敲击输入退出手势交互指示,智能手表向用户显示退出手势交互模式,如图7中(e)所示。之后,用户通过双击操作输入退出游泳运动监测,智能手表则重新进入触屏人机交互模式。
上述主要从电子设备的工作过程的角度对本申请实施例提供的方案进行了介绍。可以理解的是,电子设备为了实现上述功能,其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
本申请实施例可以根据上述方法示例对电子设备进行功能模块的划分,例如,可以对应各个功能划分各个功能模块,也可以将两个或两个以上的功能集成在一个处理模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。需要说明的是,本申请实施例中对模块的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
在采用对应各个功能划分各个功能模块的情况下,图8示出了上述实施例中所涉及的电子设备80的一种可能的结构示意图。电子设备80包括:判断单元801,采集单元802,执行单元803。判断单元801用于支持电子设备80执行图3或图6中的过程S201;采集单元802及执行单元803用于支持电子设备80执行图3或图6中的过程S302。其中,上述方法实施例涉及的各步骤的所有相关内容均可以援引到对应功能模块的功能描述,在此不再赘述。
在采用集成的单元的情况下,图9示出了上述实施例中所涉及的电子设备90的一种可能的结构示意图。电子设备90可以包括:处理模块901、采集模块902。处理模块901用于对电子设备90的动作进行控制管理。例如,处理模块901用于通过采集模块902支持电子设备90执行图3或图6中的过程S301及S302。电子设备90还可以包括存储模块903,用于存储电子设备90的程序代码和数据。
其中,处理模块901可以为图2所示的电子设备20的实体结构中的处理器201,可以是处理器或控制器。例如可以是CPU,通用处理器,DSP,ASIC,FPGA或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框,模块和电路。所述处理器101也可以是实现计算功能的组合,例如包含一个或多个微处理器组合,DSP和微处理器的组合等等。采集模块502可以为图2所示的电子设备20的实体结构中的触摸感应传感器203、加速度传感器20。存储模块903可以是图2所示的电子设备20的实体结构中的存储器202。
当处理模块901为处理器,采集模块902为触摸感应传感器、加速度传感器,存储模块903为存储器时,本申请实施例图8所涉及的电子设备90可以为图2所示的电子设备20。
本申请实施例提供的电子设备可以用于实施上述本申请各实施例实现的方法,为了便于说明,仅示出了与本申请实施例相关的部分,具体技术细节未揭示的,请参照本申请各实施例。
结合本申请公开内容所描述的方法或者算法的步骤可以硬件的方式来实现,也可以是由处理器执行软件指令的方式来实现。软件指令可以由相应的软件模块组成,软件模块可以被存放于RAM、闪存、ROM、可擦除可编程只读存储器(Erasable Programmable ROM,EPROM)、电可擦可编程只读存储器(Electrically EPROM,EEPROM)、寄存器、硬盘、移动硬盘、只读光盘(CD-ROM)或者本领域熟知的任何其它形式的存储介质中。一种示例性的存储介质耦合至处理器,从而使处理器能够从该存储介质读取信息,且可向该存储介质写入信息。当然,存储介质也可以是处理器的组成部分。处理器和存储介质可以位于ASIC中。另外,该ASIC可以位于核心网接口设备中。当然,处理器和存储介质也可以作为分立组件存在于核心网接口设备中。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
本领域技术人员应该可以意识到,在上述一个或多个示例中,本申请所描述的功能可以用硬件、软件、固件或它们的任意组合来实现。当使用软件实现时,可以将这些功能存储在计算机可读介质中或者作为计算机可读介质上的一个或多个指令或代码进行传输。计算机可读介质包括计算机存储介质和通信介质,其中通信介质包括便于从一个地方向另一个地方传送计算机程序的任何介质。存储介质可以是通用或专用计算机能够存取的任何可用介质。所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理包括,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
上述以软件功能单元的形式实现的集成的单元,可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random Access Memory,简称RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (7)

1.一种交互方法,应用于电子设备,所述电子设备包括加速度传感器,其特征在于,所述方法包括:
判断所述电子设备的触摸屏是否处于失灵状态;
若所述电子设备的触摸屏处于失灵状态,所述电子设备进入手势交互模式;所述手势交互模式包括:通过所述加速度传感器采集使用所述电子设备的用户的操作手势,执行所述操作手势指示的操作;
若所述电子设备的触摸屏未处于失灵状态,所述电子设备进入触屏人机交互模式;
所述判断所述电子设备的触摸屏处于失灵状态,包括:
通过所述加速度传感器监测所述用户在水下使用所述电子设备;
所述通过所述加速度传感器监测所述用户在水下使用所述电子设备包括:
通过所述加速度传感器,采集所述用户运动时的加速度信号,提取特征值,当所述特征值符合水下运动的特征时,确定所述用户在水下使用所述电子设备;
所述电子设备进入手势交互模式,包括:
通过所述加速度传感器采集所述用户输入的启动手势交互指示;
响应于所述启动手势交互指示,所述电子设备进入手势交互模式;
所述通过所述加速度传感器采集使用所述电子设备的用户的操作手势,执行所述用户的操作手势所指示的操作,包括:
通过所述加速度传感器采集所述用户输入的退出手势交互指示;
响应于所述退出手势交互指示,所述电子设备退出手势交互模式。
2.根据权利要求1所述的方法,其特征在于,所述电子设备还包括触摸感应传感器,在所述判断所述电子设备的触摸屏是否处于失灵状态之后,所述方法还包括:
若所述电子设备的触摸屏处于失灵状态,关闭所述触摸感应传感器。
3.根据权利要求1或2所述的方法,其特征在于,在所述判断所述电子设备的触摸屏是否处于失灵状态之后,所述方法还包括:
若所述电子设备的触摸屏处于失灵状态,向所述用户显示提示信息,所述提示信息用于提示所述电子设备进入手机交互模型。
4.一种电子设备,所述电子设备包括加速度传感器,其特征在于,所述电子设备包括:
判断单元,用于判断所述电子设备的触摸屏是否处于失灵状态;若所述判断单元判断所述电子设备的触摸屏处于失灵状态,所述电子设备进入手势交互模式;若所述判断单元判断所述电子设备的触摸屏未处于失灵状态,所述电子设备进入触屏人机交互模式;
所述判断单元判断所述电子设备的触摸屏处于失灵状态包括:
所述判断单元通过采集单元通过所述加速度传感器监测用户在水下使用所述电子设备;
所述判断单元通过所述加速度传感器监测所述用户在水下使用所述电子设备包括:
所述判断单元通过所述采集单元通过所述加速度传感器,采集所述用户运动时的加速度信号,提取特征值,当所述特征值符合水下运动的特征时,确定所述用户在水下使用所述电子设备;
采集单元,用于若所述判断单元判断所述电子设备的触摸屏处于失灵状态,通过所述加速度传感器采集使用所述电子设备的用户的操作手势;
执行单元,用于执行所述采集单元采集的所述操作手势指示的操作;
所述电子设备进入手势交互模式,包括:
所述采集单元通过所述加速度传感器采集所述用户输入的启动手势交互指示;
响应于所述启动手势交互指示,所述电子设备进入手势交互模式;
所述通过所述加速度传感器采集使用所述电子设备的用户的操作手势,包括:
所述采集单元通过所述加速度传感器采集所述用户输入的退出手势交互指示;
响应于所述退出手势交互指示,所述电子设备退出手势交互模式。
5.根据权利要求4所述的电子设备,其特征在于,所述电子设备还包括触摸感应传感器,所述执行单元还用于:
若所述判断单元判断所述电子设备的触摸屏处于失灵状态,关闭所述触摸感应传感器。
6.根据权利要求4或5所述的电子设备,其特征在于,所述电子设备还包括显示单元,用于若所述判断单元判断所述电子设备的触摸屏处于失灵状态,向所述用户显示提示信息,所述提示信息用于提示所述电子设备进入手机交互模型。
7.一种电子设备,其特征在于,所述电子设备包括处理器、存储器和加速度传感器;
所述存储器用于存储计算机执行指令,当所述电子设备运行时,所述处理器执行所述存储器存储的所述计算机执行指令,以使所述电子设备执行如权利要求1-3任意一项所述的交互方法。
CN201680089221.8A 2016-09-26 2016-11-30 一种交互方法及电子设备 Active CN109690446B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201610852609 2016-09-26
CN2016108526090 2016-09-26
PCT/CN2016/108110 WO2018053936A1 (zh) 2016-09-26 2016-11-30 一种交互方法及电子设备

Publications (2)

Publication Number Publication Date
CN109690446A CN109690446A (zh) 2019-04-26
CN109690446B true CN109690446B (zh) 2021-06-01

Family

ID=61690694

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680089221.8A Active CN109690446B (zh) 2016-09-26 2016-11-30 一种交互方法及电子设备

Country Status (2)

Country Link
CN (1) CN109690446B (zh)
WO (1) WO2018053936A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111752380B (zh) * 2019-04-08 2024-03-19 广东小天才科技有限公司 一种基于腕式穿戴设备的交互方法及腕式穿戴设备
CN115129144A (zh) * 2021-03-25 2022-09-30 华为技术有限公司 可穿戴设备的控制方法以及可穿戴设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005063092A (ja) * 2003-08-11 2005-03-10 Keio Gijuku ハンドパターンスイッチ装置
CN103279189A (zh) * 2013-06-05 2013-09-04 合肥华恒电子科技有限责任公司 一种便携式电子设备的交互装置及其交互方法
CN103309834A (zh) * 2012-03-15 2013-09-18 中兴通讯股份有限公司 一种控制方法、控制装置和电子设备
CN104850332A (zh) * 2015-03-19 2015-08-19 惠州Tcl移动通信有限公司 智能终端控制方法以及智能终端
CN105760005A (zh) * 2014-12-19 2016-07-13 宏达国际电子股份有限公司 触控显示装置及其控制方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016047153A1 (en) * 2014-09-26 2016-03-31 Rakuten, Inc. Method and system for sensing water, debris or other extraneous objects on a display screen
US9684405B2 (en) * 2014-11-12 2017-06-20 Rakuten Kobo, Inc. System and method for cyclic motion gesture
US20160162146A1 (en) * 2014-12-04 2016-06-09 Kobo Incorporated Method and system for mobile device airspace alternate gesture interface and invocation thereof
CN105824401A (zh) * 2015-06-24 2016-08-03 维沃移动通信有限公司 一种移动终端的控制方法及其移动终端

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005063092A (ja) * 2003-08-11 2005-03-10 Keio Gijuku ハンドパターンスイッチ装置
CN103309834A (zh) * 2012-03-15 2013-09-18 中兴通讯股份有限公司 一种控制方法、控制装置和电子设备
CN103279189A (zh) * 2013-06-05 2013-09-04 合肥华恒电子科技有限责任公司 一种便携式电子设备的交互装置及其交互方法
CN105760005A (zh) * 2014-12-19 2016-07-13 宏达国际电子股份有限公司 触控显示装置及其控制方法
CN104850332A (zh) * 2015-03-19 2015-08-19 惠州Tcl移动通信有限公司 智能终端控制方法以及智能终端

Also Published As

Publication number Publication date
CN109690446A (zh) 2019-04-26
WO2018053936A1 (zh) 2018-03-29

Similar Documents

Publication Publication Date Title
CN103106024B (zh) 触摸屏终端中的文本输入方法及其装置
KR101802876B1 (ko) 다문자 연속 쓰기의 핸드라이팅 입력방법
US20190174419A1 (en) Adjusting mobile device state based on user intentions and/or identity
CN105573538B (zh) 滑动断线补偿方法及电子设备
US9746929B2 (en) Gesture recognition using gesture elements
CN106485124B (zh) 一种移动终端的操作控制方法及移动终端
CN104216642B (zh) 一种终端控制方法
US20120032903A1 (en) Information processing apparatus, information processing method, and computer program
US8436829B1 (en) Touchscreen keyboard simulation for performance evaluation
US10228795B2 (en) Gesture recognition and control based on finger differentiation
CN107087075B (zh) 一种基于屏幕指纹识别的提示方法及移动终端
CN103631365A (zh) 一种终端输入控制方法及装置
WO2018007594A1 (en) Method and computer program for monitoring touchscreen events of a handheld device
CN109690446B (zh) 一种交互方法及电子设备
CN107135660B (zh) 一种防误触方法、装置及电子设备
CN104077065A (zh) 触摸屏终端显示虚拟键盘的方法及触摸屏终端
CN105808129B (zh) 一种利用手势快速开启软件功能的方法和装置
CN103761041A (zh) 一种信息处理方法及电子设备
CN105183217A (zh) 触控显示设备及触控显示方法
CN108846339B (zh) 一种文字识别方法、装置、电子设备和存储介质
CN109999506A (zh) 目标事件的交互控制方法与装置、存储介质、电子设备
CN107656691A (zh) 一种侧边栏的显示方法、装置、设备和存储介质
US10733280B2 (en) Control of a mobile device based on fingerprint identification
CN104598078B (zh) 一种触摸屏检测方法及终端
CN110456978B (zh) 一种用于触摸终端的触摸控制方法、系统、终端及介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant