CN106095307B - 旋转手势识别装置及方法 - Google Patents

旋转手势识别装置及方法 Download PDF

Info

Publication number
CN106095307B
CN106095307B CN201610382529.3A CN201610382529A CN106095307B CN 106095307 B CN106095307 B CN 106095307B CN 201610382529 A CN201610382529 A CN 201610382529A CN 106095307 B CN106095307 B CN 106095307B
Authority
CN
China
Prior art keywords
pressing area
profile
center
gesture
parameter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610382529.3A
Other languages
English (en)
Other versions
CN106095307A (zh
Inventor
王伦奎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nubia Technology Co Ltd
Original Assignee
Nubia Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nubia Technology Co Ltd filed Critical Nubia Technology Co Ltd
Priority to CN201610382529.3A priority Critical patent/CN106095307B/zh
Publication of CN106095307A publication Critical patent/CN106095307A/zh
Application granted granted Critical
Publication of CN106095307B publication Critical patent/CN106095307B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开一种旋转手势识别装置,包括:获取模块,用于当检测到触摸屏上的触摸操作时,实时获取包含按压区域轮廓和按压区域的质心的第一参数;计算模块,用于根据获取到的在指定时间段内的第一参数中的按压区域轮廓和按压区域的质心,计算得到第二参数;判断模块,用于根据计算得到的第二参数,以及预置的手势识别机制,判断所述触摸操作对应的手势是否为旋转手势。本发明还公开一种旋转手势识别方法。本发明实现了对旋转手势的识别,使得终端能够使用旋转手势触发特定的功能。

Description

旋转手势识别装置及方法
技术领域
本发明涉及移动终端领域,尤其涉及一种旋转手势识别装置及方法。
背景技术
移动通讯的迅速发展,引起整个社会方方面面不同程度的改变,目前移动终端已成为绝大多数人生活中不可或缺的一部分。未来移动终端的人机交互将以自然性、多通道性、协作性为主要发展方向,试图通过手势、语音、表情等人类自然的交流方式形成多通道、多模式的用户与移动终端的自然对话,以提高用户的体验效果。
目前的移动终端大多为触摸屏,用户可以通过在触摸屏上执行手势以触发相应的功能,通常用到的手势包括:按压手势、滑动手势、点击手势等等,然而,随着移动终端的功能的增多,这些手势已经不能满足用户日常使用的需求,还需要研究出更多的手势,例如用户还可以执行旋转手势,然而,由于目前并没有有效的识别旋转手势的方法,使得还不能使用旋转手势触发特定的功能。
发明内容
本发明的主要目的在于提出一种旋转手势识别装置及方法,旨在解决现有技术中没有有效识别旋转手势的方法,使得不能使用旋转手势触发特定的功能的技术问题。
为实现上述目的,本发明提供一种旋转手势识别装置,所述旋转手势识别装置包括:
获取模块,用于当检测到触摸屏上的触摸操作时,实时获取包含按压区域轮廓和按压区域的质心的第一参数;
计算模块,用于根据获取到的在指定时间段内的第一参数中的按压区域轮廓和按压区域的质心,计算得到第二参数;
判断模块,用于根据计算得到的第二参数,以及预置的手势识别机制,判断所述触摸操作对应的手势是否为旋转手势。
可选的,所述获取模块包括:
第一过滤单元,用于将所述触摸操作对应的实时的按压区域,方格化后进行杂质过滤处理;
第一计算单元,用于计算过滤后的按压区域的质心,以及根据当前设置的边界点稀疏度,计算由过滤后的按压区域的边界点组成的按压区域轮廓。
可选的,所述计算模块包括:
第二过滤单元,用于将获取到的按压区域轮廓对应的图形中,与预置的按压区域图形不符的按压区域轮廓过滤掉;
第二计算单元,用于根据在所述指定时间段内获取到的各个按压区域轮廓,及其对应的按压区域的质心,计算经过滤后的各个按压区域轮廓对应的偏移速率和质心运动速率;
第三计算单元,用于根据计算得到的各个偏移速率和质心运动速率,计算在所述指定时间段内所述第二参数中的平均偏移速率、平均质心运动速率,并根据所述指定时间段内按压区域的质心,计算所述第二参数中的质心偏移量。
可选的,所述第二计算单元包括:
第一计算子单元,用于对于在所述指定时间段内的任一按压区域轮廓,从穿过所述按压区域轮廓对应的按压区域的质心,并相交于所述按压区域轮廓的至少一个边界点的多条线段中,计算最长的两条线段各自沿预置的虚拟y轴的向量,并将计算得到的两个向量相加后的向量,与所述虚拟y轴的夹角作为所述按压区域轮廓的偏移角度;
第二计算子单元,用于根据计算得到的所述指定时间段内各个按压区域轮廓的偏移角度,计算依次间隔指定时长的两个时刻对应的偏移速率,以及根据所述指定时间段内各个按压区域轮廓对应的质心,计算依次间隔指定时长的两个时刻对应的质心运动速率。
可选的,所述判断模块包括:
确定单元,用于在所述质心偏移量大于0且小于或等于第一阈值、所述平均偏移速率大于或等于第二阈值且小于或等于第三阈值、所述平均质心运动速率大于或等于第四阈值且小于或等于第五阈值时,确定所述触摸操作对应的手势为旋转手势。
为实现上述目的,本发明还提供一种旋转手势识别方法,所述旋转手势识别方法包括:
当检测到触摸屏上的触摸操作时,实时获取包含按压区域轮廓和按压区域的质心的第一参数;
根据获取到的在指定时间段内的第一参数中的按压区域轮廓和按压区域的质心,计算得到第二参数;
根据计算得到的第二参数,以及预置的手势识别机制,判断所述触摸操作对应的手势是否为旋转手势。
可选的,所述当检测到触摸屏上的触摸操作时,实时获取包含按压区域轮廓和按压区域的质心的第一参数包括:
将所述触摸操作对应的实时的按压区域,方格化后进行杂质过滤处理,并计算过滤后的按压区域的质心,以及根据当前设置的边界点稀疏度,计算由过滤后的按压区域的边界点组成的按压区域轮廓。
可选的,所述根据获取到的在指定时间段内的第一参数中的按压区域轮廓和按压区域的质心,计算得到第二参数包括:
将获取到的按压区域轮廓对应的图形中,与预置的按压区域图形不符的按压区域轮廓过滤掉;
根据在所述指定时间段内获取到的各个按压区域轮廓,及其对应的按压区域的质心,计算经过滤后的各个按压区域轮廓对应的偏移速率和质心运动速率;
根据计算得到的各个偏移速率和质心运动速率,计算在所述指定时间段内所述第二参数中的平均偏移速率、平均质心运动速率,并根据所述指定时间段内按压区域的质心,计算所述第二参数中的质心偏移量。
可选的,所述根据在所述指定时间段内获取到的各个按压区域轮廓,及其对应的按压区域的质心,计算经过滤后的各个按压区域轮廓对应的偏移速率和质心运动速率包括:
对于在所述指定时间段内的任一按压区域轮廓,从穿过所述按压区域轮廓对应的按压区域的质心,并相交于所述按压区域轮廓的至少一个边界点的多条线段中,计算最长的两条线段各自沿预置的虚拟y轴的向量,并将计算得到的两个向量相加后的向量,与所述虚拟y轴的夹角作为所述按压区域轮廓的偏移角度;
根据计算得到的所述指定时间段内各个按压区域轮廓的偏移角度,计算依次间隔指定时长的两个时刻对应的偏移速率,以及根据所述指定时间段内各个按压区域轮廓对应的质心,计算依次间隔指定时长的两个时刻对应的质心运动速率。
可选的,所述根据计算得到的第二参数,以及预置的手势识别机制,判断所述触摸操作对应的手势是否为旋转手势包括:
在所述质心偏移量大于0且小于或等于第一阈值、所述平均偏移速率大于或等于第二阈值且小于或等于第三阈值、所述平均质心运动速率大于或等于第四阈值且小于或等于第五阈值时,确定所述触摸操作对应的手势为旋转手势。
本发明提出的旋转手势识别装置及方法,根据获取到的在指定时间段内的第一参数中的按压区域轮廓和按压区域的质心,计算得到第二参数,并根据计算得到的第二参数,以及预置的手势识别机制,判断当前的触摸操作对应的手势是否为旋转手势,以使终端根据判断出的旋转手势,作出相应的处理操作,为用户扩展了对操作简单且灵活、触摸面积小的旋转手势的支持,且终端对该旋转手势的识别准确度较高。
附图说明
图1为实现本发明各个实施例一个移动终端的硬件结构示意图;
图2为如图1所示的移动终端的无线通信系统示意图;
图3为本发明旋转手势识别装置第一实施例的功能模块示意图;
图4为本发明中旋转手势作用在终端的触摸屏上的示意图;
图5为本发明中将方格化后的按压区域进行杂质过滤并计算质心和按压区域轮廓的处理结果示意图;
图6为本发明旋转手势识别装置第一实施例中计算模块的功能模块示意图;
图7为本发明中计算按压区域的偏移角度的计算原理示意图;
图8为本发明中旋转手势在智能手表上的一个应用场景示意图;
图9为本发明旋转手势识别装置第二实施例中获取模块的功能模块示意图;
图10为本发明旋转手势识别方法第一实施例的流程示意图;
图11为图10中步骤S20的流程示意图;
图12为本发明旋转手势识别方法第二实施例中获取第一参数的流程示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
现在将参考附图描述实现本发明各个实施例的移动终端。在后续的描述中,使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明的说明,其本身并没有特定的意义。因此,“模块”与“部件”可以混合地使用。
移动终端可以以各种形式来实施。例如,本发明中描述的终端可以包括诸如移动电话、智能电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、导航装置等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。下面,假设终端是移动终端。然而,本领域技术人员将理解的是,除了特别用于移动目的的元件之外,根据本发明的实施方式的构造也能够应用于固定类型的终端。
图1为实现本发明各个实施例一个移动终端的硬件结构示意图。
移动终端100可以包括无线通信单元110、A/V(音频/视频)输入单元120、用户输入单元130、感测单元140、输出单元150、存储器160、接口单元170、控制器180和电源单元190等等。图1示出了具有各种组件的移动终端,但是应理解的是,并不要求实施所有示出的组件。可以替代地实施更多或更少的组件。将在下面详细描述移动终端的元件。
无线通信单元110通常包括一个或多个组件,其允许移动终端100与无线通信系统或网络之间的无线电通信。例如,无线通信单元可以包括广播接收模块111、移动通信模块112、无线互联网模块113、短程通信模块114和位置信息模块115中的至少一个。
广播接收模块111经由广播信道从外部广播管理服务器接收广播信号和/或广播相关信息。广播信道可以包括卫星信道和/或地面信道。广播管理服务器可以是生成并发送广播信号和/或广播相关信息的服务器或者接收之前生成的广播信号和/或广播相关信息并且将其发送给终端的服务器。广播信号可以包括TV广播信号、无线电广播信号、数据广播信号等等。而且,广播信号可以进一步包括与TV或无线电广播信号组合的广播信号。广播相关信息也可以经由移动通信网络提供,并且在该情况下,广播相关信息可以由移动通信模块112来接收。广播信号可以以各种形式存在,例如,其可以以数字多媒体广播(DMB)的电子节目指南(EPG)、数字视频广播手持(DVB-H)的电子服务指南(ESG)等等的形式而存在。广播接收模块111可以通过使用各种类型的广播装置接收信号广播。特别地,广播接收模块111可以通过使用诸如多媒体广播-地面(DMB-T)、数字多媒体广播-卫星(DMB-S)、数字视频广播-手持(DVB-H),前向链路媒体(MediaFLO@)的数据广播装置、地面数字广播综合服务(ISDB-T)等等的数字广播装置接收数字广播。广播接收模块111可以被构造为适合提供广播信号的各种广播装置以及上述数字广播装置。经由广播接收模块111接收的广播信号和/或广播相关信息可以存储在存储器160(或者其它类型的存储介质)中。
移动通信模块112将无线电信号发送到基站(例如,接入点、节点B等等)、外部终端以及服务器中的至少一个和/或从其接收无线电信号。这样的无线电信号可以包括语音通话信号、视频通话信号、或者根据文本和/或多媒体消息发送和/或接收的各种类型的数据。
无线互联网模块113支持移动终端的无线互联网接入。该模块可以内部或外部地耦接到终端。该模块所涉及的无线互联网接入技术可以包括WLAN(无线LAN)(Wi-Fi)、Wibro(无线宽带)、Wimax(全球微波互联接入)、HSDPA(高速下行链路分组接入)等等。
短程通信模块114是用于支持短程通信的模块。短程通信技术的一些示例包括蓝牙TM、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、紫蜂TM等等。
位置信息模块115是用于检查或获取移动终端的位置信息的模块。位置信息模块的典型示例是GPS(全球定位装置)。根据当前的技术,位置信息模块115计算来自三个或更多卫星的距离信息和准确的时间信息并且对于计算的信息应用三角测量法,从而根据经度、纬度和高度准确地计算三维当前位置信息。当前,用于计算位置和时间信息的方法使用三颗卫星并且通过使用另外的一颗卫星校正计算出的位置和时间信息的误差。此外,位置信息模块115能够通过实时地连续计算当前位置信息来计算速度信息。
A/V输入单元120用于接收音频或视频信号。A/V输入单元120可以包括相机121和麦克风122,相机121对在视频捕获模式或图像捕获模式中由图像捕获装置获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元151上。经相机121处理后的图像帧可以存储在存储器160(或其它存储介质)中或者经由无线通信单元110进行发送,可以根据移动终端的构造提供两个或更多相机121。麦克风122可以在电话通话模式、记录模式、语音识别模式等等运行模式中经由麦克风接收声音(音频数据),并且能够将这样的声音处理为音频数据。处理后的音频(语音)数据可以在电话通话模式的情况下转换为可经由移动通信模块112发送到移动通信基站的格式输出。麦克风122可以实施各种类型的噪声消除(或抑制)算法以消除(或抑制)在接收和发送音频信号的过程中产生的噪声或者干扰。
用户输入单元130可以根据用户输入的命令生成键输入数据以控制移动终端的各种操作。用户输入单元130允许用户输入各种类型的信息,并且可以包括键盘、锅仔片、触摸板(例如,检测由于被接触而导致的电阻、压力、电容等等的变化的触敏组件)、滚轮、摇杆等等。特别地,当触摸板以层的形式叠加在显示单元151上时,可以形成触摸屏。
感测单元140检测移动终端100的当前状态,(例如,移动终端100的打开或关闭状态)、移动终端100的位置、用户对于移动终端100的接触(即,触摸输入)的有无、移动终端100的取向、移动终端100的加速或将速移动和方向等等,并且生成用于控制移动终端100的操作的命令或信号。例如,当移动终端100实施为滑动型移动电话时,感测单元140可以感测该滑动型电话是打开还是关闭。另外,感测单元140能够检测电源单元190是否提供电力或者接口单元170是否与外部装置耦接。
接口单元170用作至少一个外部装置与移动终端100连接可以通过的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。识别模块可以是存储用于验证用户使用移动终端100的各种信息并且可以包括用户识别模块(UIM)、客户识别模块(SIM)、通用客户识别模块(USIM)等等。另外,具有识别模块的装置(下面称为“识别装置”)可以采取智能卡的形式,因此,识别装置可以经由端口或其它连接装置与移动终端100连接。接口单元170可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到移动终端100内的一个或多个元件或者可以用于在移动终端和外部装置之间传输数据。
另外,当移动终端100与外部底座连接时,接口单元170可以用作允许通过其将电力从底座提供到移动终端100的路径或者可以用作允许从底座输入的各种命令信号通过其传输到移动终端的路径。从底座输入的各种命令信号或电力可以用作用于识别移动终端是否准确地安装在底座上的信号。输出单元150被构造为以视觉、音频和/或触觉方式提供输出信号(例如,音频信号、视频信号、警报信号、振动信号等等)。输出单元150可以包括显示单元151、音频输出模块152等等。
显示单元151可以显示在移动终端100中处理的信息。例如,当移动终端100处于电话通话模式时,显示单元151可以显示与通话或其它通信(例如,文本消息收发、多媒体文件下载等等)相关的用户界面(UI)或图形用户界面(GUI)。当移动终端100处于视频通话模式或者图像捕获模式时,显示单元151可以显示捕获的图像和/或接收的图像、示出视频或图像以及相关功能的UI或GUI等等。
同时,当显示单元151和触摸板以层的形式彼此叠加以形成触摸屏时,显示单元151可以用作输入装置和输出装置。显示单元151可以包括液晶显示器(LCD)、薄膜晶体管LCD(TFT-LCD)、有机发光二极管(OLED)显示器、柔性显示器、三维(3D)显示器等等中的至少一种。这些显示器中的一些可以被构造为透明状以允许用户从外部观看,这可以称为透明显示器,典型的透明显示器可以例如为TOLED(透明有机发光二极管)显示器等等。根据特定想要的实施方式,移动终端100可以包括两个或更多显示单元(或其它显示装置),例如,移动终端可以包括外部显示单元(未示出)和内部显示单元(未示出)。触摸屏可用于检测触摸输入压力以及触摸输入位置和触摸输入面积。
音频输出模块152可以在移动终端处于呼叫信号接收模式、通话模式、记录模式、语音识别模式、广播接收模式等等模式下时,将无线通信单元110接收的或者在存储器160中存储的音频数据转换音频信号并且输出为声音。而且,音频输出模块152可以提供与移动终端100执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出模块152可以包括拾音器、蜂鸣器等等。
存储器160可以存储由控制器180执行的处理和控制操作的软件程序等等,或者可以暂时地存储已经输出或将要输出的数据(例如,电话簿、消息、静态图像、视频等等)。而且,存储器160可以存储关于当触摸施加到触摸屏时输出的各种方式的振动和音频信号的数据。
存储器160可以包括至少一种类型的存储介质,所述存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如,SD或DX存储器等等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘等等。而且,移动终端100可以与通过网络连接执行存储器160的存储功能的网络存储装置协作。
控制器180通常控制移动终端的总体操作。例如,控制器180执行与语音通话、数据通信、视频通话等等相关的控制和处理。另外,控制器180可以包括用于再现(或回放)多媒体数据的多媒体模块181,多媒体模块181可以构造在控制器180内,或者可以构造为与控制器180分离。控制器180可以执行模式识别处理,以将在触摸屏上执行的手写输入或者图片绘制输入识别为字符或图像。
电源单元190在控制器180的控制下接收外部电力或内部电力并且提供操作各元件和组件所需的适当的电力。
这里描述的各种实施方式可以以使用例如计算机软件、硬件或其任何组合的计算机可读介质来实施。对于硬件实施,这里描述的实施方式可以通过使用特定用途集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理装置(DSPD)、可编程逻辑装置(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器、被设计为执行这里描述的功能的电子单元中的至少一种来实施,在一些情况下,这样的实施方式可以在控制器180中实施。对于软件实施,诸如过程或功能的实施方式可以与允许执行至少一种功能或操作的单独的软件模块来实施。软件代码可以由以任何适当的编程语言编写的软件应用程序(或程序)来实施,软件代码可以存储在存储器160中并且由控制器180执行。
至此,已经按照其功能描述了移动终端。下面,为了简要起见,将描述诸如折叠型、直板型、摆动型、滑动型移动终端等等的各种类型的移动终端中的滑动型移动终端作为示例。因此,本发明能够应用于任何类型的移动终端,并且不限于滑动型移动终端。
需要说明的是,图1所示的移动终端还可以用于识别旋转手势,具体的该移动终端包括的虚拟功能模块如下:
获取模块400,用于当检测到触摸屏上的触摸操作时,实时获取包含按压区域轮廓和按压区域的质心的第一参数;
计算模块500,用于根据获取到的在指定时间段内的第一参数中的按压区域轮廓和按压区域的质心,计算得到第二参数;
判断模块600,用于根据计算得到的第二参数,以及预置的手势识别机制,判断所述触摸操作对应的手势是否为旋转手势。
在图1所示的移动终端中,输出单元150中还包括触摸芯片153,该触摸芯片153与触摸屏连接,且该触摸芯片153实时获取到触摸屏上的触摸操作对应的触摸数据后,上传至移动终端的控制器180中的获取模块400,获取模块400将根据上传的触摸数据进行按压区域的确定、计算质心及按压区域轮廓的过程,以实时获取该触摸操作在不同时刻的第一参数。此外,获取模块400还可设置在该触摸芯片153上,由该触摸芯片153根据实时获取到的触摸数据进行按压区域的确定、计算质心及按压区域轮廓的过程,并实时向移动终端的控制器180上报第一参数。
移动终端在获取到该触摸操作在不同时刻的第一参数之后,由该控制器180中包含的虚拟模块即计算模块500,根据获取到的在指定时间段内的第一参数中的按压区域轮廓和按压区域的质心,计算得到第二参数,以便该控制器180中包含的虚拟模块即判断模块600,根据计算得到的第二参数,以及预置的手势识别机制,判断该触摸操作对应的手势是否为旋转手势。
如图1中所示的移动终端100可以被构造为利用经由帧或分组发送数据的诸如有线和无线通信系统以及基于卫星的通信系统来操作。
现在将参考图2描述其中根据本发明的移动终端能够操作的通信系统。
这样的通信系统可以使用不同的空中接口和/或物理层。例如,由通信系统使用的空中接口包括例如频分多址(FDMA)、时分多址(TDMA)、码分多址(CDMA)和通用移动通信系统(UMTS)(特别地,长期演进(LTE))、全球移动通信系统(GSM)等等。作为非限制性示例,下面的描述涉及CDMA通信系统,但是这样的教导同样适用于其它类型的装置。
参考图2,CDMA无线通信系统可以包括多个移动终端100、多个基站(BS)270、基站控制器(BSC)275和移动交换中心(MSC)280。MSC280被构造为与公共电话交换网络(PSTN)290形成接口。MSC280还被构造为与可以经由回程线路耦接到基站270的BSC275形成接口。回程线路可以根据若干己知的接口中的任一种来构造,所述接口包括例如E1/T1、ATM,IP、PPP、帧中继、HDSL、ADSL或xDSL。将理解的是,如图2中所示的装置可以包括多个BSC275。
每个BS270可以服务一个或多个分区(或区域),由多向天线或指向特定方向的天线覆盖的每个分区放射状地远离BS270。或者,每个分区可以由用于分集接收的两个或更多天线覆盖。每个BS270可以被构造为支持多个频率分配,并且每个频率分配具有特定频谱(例如,1.25MHz,5MHz等等)。
分区与频率分配的交叉可以被称为CDMA信道。BS270也可以被称为基站收发器子装置(BTS)或者其它等效术语。在这样的情况下,术语"基站"可以用于笼统地表示单个BSC275和至少一个BS270。基站也可以被称为"蜂窝站"。或者,特定BS270的各分区可以被称为多个蜂窝站。
如图2中所示,广播发射器(BT)295将广播信号发送给在装置内操作的移动终端100。如图1中所示的广播接收模块111被设置在移动终端100处以接收由BT295发送的广播信号。在图2中,示出了几个全球定位装置(GPS)卫星300。卫星300帮助定位多个移动终端100中的至少一个。
在图2中,描绘了多个卫星300,但是可以理解的是,可以利用任何数目的卫星获得有用的定位信息。如图1中所示的位置信息模块115通常被构造为与卫星300配合以获得想要的定位信息。替代GPS跟踪技术或者在GPS跟踪技术之外,可以使用可以跟踪移动终端的位置的其它技术。另外,至少一个GPS卫星300可以选择性地或者额外地处理卫星DMB传输。
作为无线通信系统的一个典型操作,BS270接收来自各种移动终端100的反向链路信号。移动终端100通常参与通话、消息收发和其它类型的通信。特定基站270接收的每个反向链路信号被在特定BS270内进行处理。获得的数据被转发给相关的BSC275。BSC提供通话资源分配和包括BS270之间的软切换过程的协调的移动管理功能。BSC275还将接收到的数据路由到MSC280,其提供用于与PSTN290形成接口的额外的路由服务。类似地,PSTN290与MSC280形成接口,MSC与BSC275形成接口,并且BSC275相应地控制BS270以将正向链路信号发送到移动终端100。
基于上述移动终端硬件结构、通信系统的结构,提出本发明装置及方法的各个实施例。
本发明进一步提供一种旋转手势识别装置,如图3所示,示出了本发明旋转手势识别装置第一实施例的功能模块示意图,旋转手势识别装置包括:
获取模块400,用于当检测到触摸屏上的触摸操作时,实时获取包含按压区域轮廓和按压区域的质心的第一参数;
旋转手势识别装置可设置在终端上,终端可以为手机、智能穿戴设备(如智能手表、智能眼镜等)、平板电脑、掌上电脑等任意的安装有触摸屏及触摸芯片153的设备。
用户在终端的触摸屏上进行触摸操作,例如,手指按压触摸屏不放开,并以一定的角度顺时针或逆时针旋转手指,这一触摸操作对应的手势即为旋转手势,如图4所示,示出了旋转手势作用在终端的触摸屏上的示意图,其中,图4中的虚线小方框为手指按压触摸屏时的按压区域,按压区域对应按压手指上的指纹覆盖平面。
当用户在终端的触摸屏上进行触摸操作时,终端可通过设置其上的触摸芯片153检测到该触摸操作,并实时获取到该触摸操作对应的按压区域,然后由终端的获取模块400根据获取到的按压区域,计算得到按压区域的按压区域轮廓(如图5(d)中虚线框所示),以及按压区域的质心(如图5(d)中实线框所示)。可将触摸屏对应的触摸区域进行坐标化,从而通过按压区域的各个边界点的坐标定位按压区域轮廓,通过质心所在位置处的坐标点定位按压区域的质心。
计算模块500,用于根据获取到的在指定时间段内的第一参数中的按压区域轮廓和按压区域的质心,计算得到第二参数;
指定时间段可根据触摸操作的起始时间点和结束时间点来确定,也可以由终端设置选取该触摸操作期间的一部分时间段。在本实施例中,第二参数可包括平均偏移速率、平均质心运动速率、质心偏移量,其中,偏移速率是指同一触摸操作对应的两个时刻的按压区域轮廓,相对移动时的夹角偏移速率;质心运动速率是指同一触摸操作对应的两个时刻的按压区域轮廓,相对移动时其质心移动的速率;质心偏移量是指同一触摸操作对应的两个时刻的按压区域轮廓,相对移动时其质心移动的距离。
进一步地,参照图6,计算模块500包括:
第二过滤单元501,用于将获取到的按压区域轮廓对应的图形中,与预置的按压区域图形不符的按压区域轮廓过滤掉;
在获取按压区域时,可将手指按压触摸屏得到的按压区域进行方格化处理,由于方格化处理之后的按压区域,其图形趋向于圆角矩形或椭圆等长轴凸多边形,因而,在对获取到的各个按压区域进行处理之前,第二过滤单元501可将与预置的按压区域图形不符的按压区域过滤掉,而不对过滤掉的按压区域进行后续处理。预置的按压区域图形可包括圆角矩形或椭圆等长轴凸多边形;被过滤掉的按压区域的图形,常见的有凹多边形、三角形、正方形等。
第二计算单元502,用于根据在该指定时间段内获取到的各个按压区域轮廓,及其对应的按压区域的质心,计算经过滤后的各个按压区域轮廓对应的偏移速率和质心运动速率;
进一步地,第二计算单元502包括:
第一计算子单元,用于对于在所述指定时间段内的任一按压区域轮廓,从穿过所述按压区域轮廓对应的按压区域的质心,并相交于所述按压区域轮廓的至少一个边界点的多条线段中,计算最长的两条线段各自沿预置的虚拟y轴的向量,并将计算得到的两个向量相加后的向量,与所述虚拟y轴的夹角作为所述按压区域轮廓的偏移角度;
第二计算子单元,用于根据计算得到的所述指定时间段内各个按压区域轮廓的偏移角度,计算依次间隔指定时长的两个时刻对应的偏移速率,以及根据该指定时间段内各个按压区域轮廓对应的质心,计算依次间隔指定时长的两个时刻对应的质心运动速率。
首先需要计算该指定时间段内不同时刻的按压区域的偏移角度,以一个按压区域为例,第一计算子单元具体包括:(1)参照图7,在方格化后的按压区域轮廓上任取一点a1,过a1及对应的质心o画一条直线,画出的直线与该按压区域轮廓相交于另一点b1,从而得到分割按压区域轮廓的线段d1;对于该按压区域轮廓上的其他点(有限个数的点),参照点a1的方法得到其他的、分割该按压区域轮廓的线段d2…dm;
(2)从分割按压区域轮廓的线段d1,d2,…dm中,选取长度最长的两个线段dx和dy;
如果长度最长的线段有多个,则从中任选一条,以图7中的线段a2b2为最长的线段为例;然后从剩余的线段中选取最长的线段作为线段a2b2的次长线段,如果次长线段也有多个,例如线段a3b3和a1b1,则通过比较(a2a3+b2b3)和(a2a1+b2b1)的长度大小,选取长度较小的一方对应的线段为次长线段。假设(a2a3+b2b3)>(a2a1+b2b1),则选取(a2a1+b2b1)对应的线段a1b1为次长线段。由此可确定本实施例中,dx为线段a2b2,dy为线段a1b1。
(3)在以触摸屏的触摸区域建立的坐标系中,计算线段dx和dy沿y轴的向量px和py;
(4)将向量px和py相加得到向量p,以向量p与y轴的夹角α为该按压区域的偏移角度。
根据坐标系中向量的计算方法,第二计算单元502可通过线段dx和dy各自的两个端点的坐标点,计算出线段dx和dy沿y轴的向量px和py,并进一步计算得到向量px和py相加后得到的向量p,以及向量p与y轴的夹角α。由此便可得到各个按压区域轮廓对应的偏移角度。
计算得到该指定时间段内不同时刻的按压区域轮廓的偏移角度后,第二计算子单元可根据间隔△t时长(即指定时长)的两个时刻对应的偏移角度α1、α2,计算偏移速率va,并根据间隔△t时长的两个时刻的质心移动距离o1o2,计算质心运动速率vo。其中,va=(α1-α2)/△t,vo=o1o2/△t。参照该计算方法,可计算获得该指定时间段内,依次间隔△t时长的两个时刻对应的偏移速率va和质心运动速率vo。
第三计算单元503,用于根据计算得到的各个偏移速率和质心运动速率,计算在该指定时间段内第二参数中的平均偏移速率、平均质心运动速率,并根据所述指定时间段内按压区域的质心,计算所述第二参数中的质心偏移量。
判断模块600,用于根据计算得到的第二参数,以及预置的手势识别机制,判断该触摸操作对应的手势是否为旋转手势。
该手势识别机制用于根据设定的多个阈值,对旋转手势对应的第二参数的取值进行限定,以通过阈值比较,判断计算得到的第二参数对应的触摸操作的手势是否为旋转手势。
进一步地,判断模块600包括:
确定单元,用于在质心偏移量大于0且小于或等于第一阈值、平均偏移速率大于或等于第二阈值且小于或等于第三阈值、平均质心运动速率大于或等于第四阈值且小于或等于第五阈值时,确定该触摸操作对应的手势为旋转手势。
第一阈值,第二阈值、第三阈值、第四阈值、第五阈值均为预先设置的固定值,用于表示相应参数取值的上限或下限,其取值可根据大量实验数据进行设定。一般地,第一阈值的取值较小,质心偏移量大于0且小于或等于第一阈值能够过滤掉滑动触摸操作对应的手势;限定平均偏移速率大于或等于第二阈值且小于或等于第三阈值,是因为手指的旋转速率一般均在一定的范围内;限定平均质心运动速率大于或等于第四阈值且小于或等于第五阈值,能够与质心偏移量大于0且小于或等于第一阈值一起过滤掉画圆弧的手势等情况。
在另一实施例中,第二参数还包括偏移速率的方差和质心运动速率的方差,这两个方差可根据计算得到的各个偏移速率和质心运动速率,以及计算得到的在该指定时间段内的平均偏移速率、平均质心运动速率,通过方差计算公式分别计算得到。在该实施例中,在质心偏移量大于0且小于或等于第一阈值、平均偏移速率大于或等于第二阈值且小于或等于第三阈值、平均质心运动速率大于或等于第四阈值且小于或等于第五阈值、偏移速率的方差大于或等于第六阈值且小于或等于第七阈值、质心运动速率的方差大于或等于第八阈值且小于或等于第九阈值时,确定单元确定该触摸操作对应的手势为旋转手势。计算得到的偏移速率的方差和质心运动速率的方差,是用来进一步判断该触摸操作对应的手势是否为旋转手势,以提高手势识别的准确度。
第六阈值,第七阈值、第八阈值、第九阈值均为预先设置的固定值,用于表示相应参数取值的上限或下限,其取值可根据大量实验数据进行设定。该实施例中,在判断触摸操作对应的手势是否为旋转手势时,增加对偏移速率的方差和质心运动速率的方差的是否在设定范围的判断,能够提高手势识别的准确度。
在确定出该触摸操作对应的手势是旋转手势后,终端即可根据预置的响应机制,执行相应的处理指令,例如,可通过旋转手势控制终端变更显示界面为横屏显示或竖屏显示,或控制智能手表等终端进行时间的调整、定时等(如图8所示),或控制终端以旋转手势的角度进行显示界面角度的调整等。
本发明提出的旋转手势识别装置,根据获取到的在指定时间段内的第一参数中的按压区域轮廓和按压区域的质心,计算得到第二参数,并根据计算得到的第二参数,以及预置的手势识别机制,判断当前的触摸操作对应的手势是否为旋转手势,以使终端根据判断出的旋转手势,作出相应的处理操作,为用户扩展了对操作简单且灵活、触摸面积小的旋转手势的支持,且终端对该旋转手势的识别准确度较高。
进一步地,基于上述旋转手势识别装置第一实施例提出本发明旋转手势识别装置第二实施例,其区别在于,实时获取的按压区域轮廓和按压区域的质心,由设置在终端上的触摸芯片153处理得到并实时上报给终端的控制器180。参照图9,获取模块400包括:
第一过滤单元401,用于将该触摸操作对应的实时的按压区域,方格化后进行杂质过滤处理;
终端通过设置其上的触摸芯片153,获取到该触摸操作对应的实时的按压区域后,由该触摸芯片153的第一过滤单元401对按压区域进行方格化处理,并过滤掉方格化后的边缘杂质,如图5中(a)-(b)-(c)过程的示意图。
第一计算单元402,用于计算过滤后的按压区域的质心,以及根据当前设置的边界点稀疏度,计算由过滤后的按压区域的边界点组成的按压区域轮廓。
过滤掉杂质后,该触摸芯片153的第一计算单元402,利用已有的质心计算方法即可计算得到过滤后的按压区域的质心,且在计算质心的过程中,第一计算单元402也可获得该按压区域的按压区域轮廓,其中,按压区域轮廓是由过滤杂质后的按压区域的边界点组成。
对边界点稀疏度的设置,可由用户在相应设置项中设置具体的稀疏度。边界点稀疏度的取值较小时,一个按压区域轮廓包含的相应按压区域的每个边界上的点的个数较少,例如,在边界点稀疏度取值最小时,按压区域轮廓可能仅包含相应按压区域的每个边界上的一个点。边界点稀疏度的取值较大时,一个按压区域轮廓包含的相应按压区域的每个边界上的点的个数较多,在该情况下,由于按压区域轮廓包含的数据相对较多,有利于更准确地识别出触摸操作对应的手势,但在终端自身的处理能力较低时,再处理较多的数据以识别手势,会降低手势识别的效率。因而,对边界点稀疏度的设置,还可由终端根据当前自身的处理能力自行设置。
本发明提出的旋转手势识别装置,由设置在终端上的触摸芯片153,对实时获取到的按压区域进行处理,得到实时的按压区域轮廓和按压区域的质心,并实时上报给终端的控制器180,实现了触摸芯片153对新增的旋转手势识别的支持和集成,提高了终端的手势识别处理速率;另外,可根据当前设置的边界点稀疏度,计算过滤后的按压区域的按压区域轮廓,使得终端能够根据需求兼顾手势识别的准确度和处理效率。
本发明进一步提供了旋转手势识别方法第一实施例,对应上述旋转手势识别装置第一实施例。如图10所示,示出了本发明旋转手势识别方法第一实施例的流程示意图,旋转手势识别方法包括:
S10、当检测到触摸屏上的触摸操作时,实时获取包含按压区域轮廓和按压区域的质心的第一参数;
旋转手势识别方法基于终端来实施,终端可以为手机、智能穿戴设备(如智能手表、智能眼镜等)、平板电脑、掌上电脑等任意的安装有触摸屏及触摸芯片153的设备。
用户在终端的触摸屏上进行触摸操作,例如,手指按压触摸屏不放开,并以一定的角度顺时针或逆时针旋转手指,这一触摸操作对应的手势即为旋转手势,如图4所示,示出了旋转手势作用在终端的触摸屏上的示意图,其中,图4中的虚线小方框为手指按压触摸屏时的按压区域,按压区域对应按压手指上的指纹覆盖平面。
当用户在终端的触摸屏上进行触摸操作时,终端可通过设置其上的触摸芯片153检测到该触摸操作,并实时获取到该触摸操作对应的按压区域,然后由终端根据获取到的按压区域,计算得到按压区域的按压区域轮廓(如图5(d)中虚线框所示),以及按压区域的质心(如图5(d)中实线框所示)。可将触摸屏对应的触摸区域进行坐标化,从而通过按压区域的各个边界点的坐标定位按压区域轮廓,通过质心所在位置处的坐标点定位按压区域的质心。
S20、根据获取到的在指定时间段内的第一参数中的按压区域轮廓和按压区域的质心,计算得到第二参数;
指定时间段可根据触摸操作的起始时间点和结束时间点来确定,也可以由终端设置选取该触摸操作期间的一部分时间段。在本实施例中,第二参数可包括平均偏移速率、平均质心运动速率、质心偏移量,其中,偏移速率是指同一触摸操作对应的两个时刻的按压区域轮廓,相对移动时的夹角偏移速率;质心运动速率是指同一触摸操作对应的两个时刻的按压区域轮廓,相对移动时其质心移动的速率;质心偏移量是指同一触摸操作对应的两个时刻的按压区域轮廓,相对移动时其质心移动的距离。
进一步地,参照图11,上述步骤S20具体包括:
S21、将获取到的按压区域轮廓对应的图形中,与预置的按压区域图形不符的按压区域轮廓过滤掉;
在获取按压区域时,可将手指按压触摸屏得到的按压区域进行方格化处理,由于方格化处理之后的按压区域,其图形趋向于圆角矩形或椭圆等长轴凸多边形,因而,在对获取到的各个按压区域进行处理之前,可将与预置的按压区域图形不符的按压区域过滤掉,而不对过滤掉的按压区域进行后续处理。预置的按压区域图形可包括圆角矩形或椭圆等长轴凸多边形;被过滤掉的按压区域的图形,常见的有凹多边形、三角形、正方形等。
S22、根据在该指定时间段内获取到的各个按压区域轮廓,及其对应的按压区域的质心,计算经过滤后的各个按压区域轮廓对应的偏移速率和质心运动速率;
进一步地,上述步骤S22具体包括:
对于在所述指定时间段内的任一按压区域轮廓,从穿过所述按压区域轮廓对应的按压区域的质心,并相交于所述按压区域轮廓的至少一个边界点的多条线段中,计算最长的两条线段各自沿预置的虚拟y轴的向量,并将计算得到的两个向量相加后的向量,与所述虚拟y轴的夹角作为所述按压区域轮廓的偏移角度;根据计算得到的所述指定时间段内各个按压区域轮廓的偏移角度,计算依次间隔指定时长的两个时刻对应的偏移速率,以及根据该指定时间段内各个按压区域轮廓对应的质心,计算依次间隔指定时长的两个时刻对应的质心运动速率。
首先需要计算该指定时间段内不同时刻的按压区域的偏移角度,以一个按压区域为例,具体包括:(1)参照图7,在方格化后的按压区域轮廓上任取一点a1,过a1及对应的质心o画一条直线,画出的直线与该按压区域轮廓相交于另一点b1,从而得到分割按压区域轮廓的线段d1;对于该按压区域轮廓上的其他点(有限个数的点),参照点a1的方法得到其他的、分割该按压区域轮廓的线段d2…dm;
(2)从分割按压区域轮廓的线段d1,d2,…dm中,选取长度最长的两个线段dx和dy;
如果长度最长的线段有多个,则从中任选一条,以图7中的线段a2b2为最长的线段为例;然后从剩余的线段中选取最长的线段作为线段a2b2的次长线段,如果次长线段也有多个,例如线段a3b3和a1b1,则通过比较(a2a3+b2b3)和(a2a1+b2b1)的长度大小,选取长度较小的一方对应的线段为次长线段。假设(a2a3+b2b3)>(a2a1+b2b1),则选取(a2a1+b2b1)对应的线段a1b1为次长线段。由此可确定本实施例中,dx为线段a2b2,dy为线段a1b1。
(3)在以触摸屏的触摸区域建立的坐标系中,计算线段dx和dy沿y轴的向量px和py;
(4)将向量px和py相加得到向量p,以向量p与y轴的夹角α为该按压区域的偏移角度。
根据坐标系中向量的计算方法,可通过线段dx和dy各自的两个端点的坐标点,计算出线段dx和dy沿y轴的向量px和py,并进一步计算得到向量px和py相加后得到的向量p,以及向量p与y轴的夹角α。由此便可得到各个按压区域轮廓对应的偏移角度。
计算得到该指定时间段内不同时刻的按压区域轮廓的偏移角度后,可根据间隔△t时长(即指定时长)的两个时刻对应的偏移角度α1、α2,计算偏移速率va,并根据间隔△t时长的两个时刻的质心移动距离o1o2,计算质心运动速率vo。其中,va=(α1-α2)/△t,vo=o1o2/△t。参照该计算方法,可计算获得该指定时间段内,依次间隔△t时长的两个时刻对应的偏移速率va和质心运动速率vo。
S23、根据计算得到的各个偏移速率和质心运动速率,计算在该指定时间段内第二参数中的平均偏移速率、平均质心运动速率,并根据所述指定时间段内按压区域的质心,计算所述第二参数中的质心偏移量。
S30、根据计算得到的第二参数,以及预置的手势识别机制,判断该触摸操作对应的手势是否为旋转手势。
该手势识别机制用于根据设定的多个阈值,对旋转手势对应的第二参数的取值进行限定,以通过阈值比较,判断计算得到的第二参数对应的触摸操作的手势是否为旋转手势。
进一步地,上述步骤S30具体包括:
在质心偏移量大于0且小于或等于第一阈值、平均偏移速率大于或等于第二阈值且小于或等于第三阈值、平均质心运动速率大于或等于第四阈值且小于或等于第五阈值时,确定该触摸操作对应的手势为旋转手势。
第一阈值,第二阈值、第三阈值、第四阈值、第五阈值均为预先设置的固定值,用于表示相应参数取值的上限或下限,其取值可根据大量实验数据进行设定。一般地,第一阈值的取值较小,质心偏移量大于0且小于或等于第一阈值能够过滤掉滑动触摸操作对应的手势;限定平均偏移速率大于或等于第二阈值且小于或等于第三阈值,是因为手指的旋转速率一般均在一定的范围内;限定平均质心运动速率大于或等于第四阈值且小于或等于第五阈值,能够与质心偏移量大于0且小于或等于第一阈值一起过滤掉画圆弧的手势等情况。
在另一实施例中,第二参数还包括偏移速率的方差和质心运动速率的方差,这两个方差可根据计算得到的各个偏移速率和质心运动速率,以及计算得到的在该指定时间段内的平均偏移速率、平均质心运动速率,通过方差计算公式分别计算得到。在该实施例中,在质心偏移量大于0且小于或等于第一阈值、平均偏移速率大于或等于第二阈值且小于或等于第三阈值、平均质心运动速率大于或等于第四阈值且小于或等于第五阈值、偏移速率的方差大于或等于第六阈值且小于或等于第七阈值、质心运动速率的方差大于或等于第八阈值且小于或等于第九阈值时,确定该触摸操作对应的手势为旋转手势。计算得到的偏移速率的方差和质心运动速率的方差,是用来进一步判断该触摸操作对应的手势是否为旋转手势,以提高手势识别的准确度。
第六阈值,第七阈值、第八阈值、第九阈值均为预先设置的固定值,用于表示相应参数取值的上限或下限,其取值可根据大量实验数据进行设定。该实施例中,在判断触摸操作对应的手势是否为旋转手势时,增加对偏移速率的方差和质心运动速率的方差的是否在设定范围的判断,能够提高手势识别的准确度。
在确定出该触摸操作对应的手势是旋转手势后,终端即可根据预置的响应机制,执行相应的处理指令,例如,可通过旋转手势控制终端变更显示界面为横屏显示或竖屏显示,或控制智能手表等终端进行时间的调整、定时等(如图8所示),或控制终端以旋转手势的角度进行显示界面角度的调整等。
本发明提出的旋转手势识别方法,根据获取到的在指定时间段内的第一参数中的按压区域轮廓和按压区域的质心,计算得到第二参数,并根据计算得到的第二参数,以及预置的手势识别机制,判断当前的触摸操作对应的手势是否为旋转手势,以使终端根据判断出的旋转手势,作出相应的处理操作,为用户扩展了对操作简单且灵活、触摸面积小的旋转手势的支持,且终端对该旋转手势的识别准确度较高。
进一步地,对应上述旋转手势识别装置第二实施例,基于上述旋转手势识别方法第一实施例提出本发明旋转手势识别方法第二实施例,其区别在于,实时获取的按压区域轮廓和按压区域的质心,由设置在终端上的触摸芯片153处理得到并实时上报给终端的控制器180。参照图12,上述步骤S10具体包括:
S11、将该触摸操作对应的实时的按压区域,方格化后进行杂质过滤处理;
终端通过设置其上的触摸芯片153,获取到该触摸操作对应的实时的按压区域后,由该触摸芯片153对按压区域进行方格化处理,并过滤掉方格化后的边缘杂质,如图5中(a)-(b)-(c)过程的示意图。
S12、计算过滤后的按压区域的质心,以及根据当前设置的边界点稀疏度,计算由过滤后的按压区域的边界点组成的按压区域轮廓。
过滤掉杂质后,通过该触摸芯片153,利用已有的质心计算方法即可计算得到过滤后的按压区域的质心,且在计算质心的过程中,也可获得该按压区域的按压区域轮廓,其中,按压区域轮廓是由过滤杂质后的按压区域的边界点组成。
对边界点稀疏度的设置,可由用户在相应设置项中设置具体的稀疏度。边界点稀疏度的取值较小时,一个按压区域轮廓包含的相应按压区域的每个边界上的点的个数较少,例如,在边界点稀疏度取值最小时,按压区域轮廓可能仅包含相应按压区域的每个边界上的一个点。边界点稀疏度的取值较大时,一个按压区域轮廓包含的相应按压区域的每个边界上的点的个数较多,在该情况下,由于按压区域轮廓包含的数据相对较多,有利于更准确地识别出触摸操作对应的手势,但在终端自身的处理能力较低时,再处理较多的数据以识别手势,会降低手势识别的效率。因而,对边界点稀疏度的设置,还可由终端根据当前自身的处理能力自行设置。
本发明提出的旋转手势识别方法,由设置在终端上的触摸芯片153,对实时获取到的按压区域进行处理,得到实时的按压区域轮廓和按压区域的质心,并实时上报给终端的控制器180,实现了触摸芯片153对新增的旋转手势识别的支持和集成,提高了终端的手势识别处理速率;另外,可根据当前设置的边界点稀疏度,计算过滤后的按压区域的按压区域轮廓,使得终端能够根据需求兼顾手势识别的准确度和处理效率。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (8)

1.一种旋转手势识别装置,其特征在于,所述旋转手势识别装置包括:
获取模块,用于当检测到触摸屏上的触摸操作时,实时获取包含按压区域轮廓和按压区域的质心的第一参数;
所述获取模块包括第一过滤单元,用于将所述触摸操作对应的实时的按压区域,方格化后进行杂质过滤处理;
第一计算单元,用于计算过滤后的按压区域的质心,以及根据当前设置的边界点稀疏度,计算由过滤后的按压区域的边界点组成的按压区域轮廓;
计算模块,用于根据获取到的在指定时间段内的第一参数中的按压区域轮廓和按压区域的质心,计算得到第二参数;
判断模块,用于根据计算得到的第二参数,以及预置的手势识别机制,判断所述触摸操作对应的手势是否为旋转手势。
2.如权利要求1所述的旋转手势识别装置,其特征在于,所述计算模块包括:
第二过滤单元,用于将获取到的按压区域轮廓对应的图形中,与预置的按压区域图形不符的按压区域轮廓过滤掉;
第二计算单元,用于根据在所述指定时间段内获取到的各个按压区域轮廓,及其对应的按压区域的质心,计算经过滤后的各个按压区域轮廓对应的偏移速率和质心运动速率;
第三计算单元,用于根据计算得到的各个偏移速率和质心运动速率,计算在所述指定时间段内所述第二参数中的平均偏移速率、平均质心运动速率,并根据所述指定时间段内按压区域的质心,计算所述第二参数中的质心偏移量。
3.如权利要求2所述的旋转手势识别装置,其特征在于,所述第二计算单元包括:
第一计算子单元,用于对于在所述指定时间段内的任一按压区域轮廓,从穿过所述按压区域轮廓对应的按压区域的质心,并相交于所述按压区域轮廓的至少一个边界点的多条线段中,计算最长的两条线段各自沿预置的虚拟y轴的向量,并将计算得到的两个向量相加后的向量,与所述虚拟y轴的夹角作为所述按压区域轮廓的偏移角度;
第二计算子单元,用于根据计算得到的所述指定时间段内各个按压区域轮廓的偏移角度,计算依次间隔指定时长的两个时刻对应的偏移速率,以及根据所述指定时间段内各个按压区域轮廓对应的质心,计算依次间隔指定时长的两个时刻对应的质心运动速率。
4.如权利要求2所述的旋转手势识别装置,其特征在于,所述判断模块包括:
确定单元,用于在所述质心偏移量大于0且小于或等于第一阈值、所述平均偏移速率大于或等于第二阈值且小于或等于第三阈值、所述平均质心运动速率大于或等于第四阈值且小于或等于第五阈值时,确定所述触摸操作对应的手势为旋转手势。
5.一种旋转手势识别方法,其特征在于,所述旋转手势识别方法包括:
当检测到触摸屏上的触摸操作时,实时获取包含按压区域轮廓和按压区域的质心的第一参数;
将所述触摸操作对应的实时的按压区域,方格化后进行杂质过滤处理;
计算过滤后的按压区域的质心,以及根据当前设置的边界点稀疏度,计算由过滤后的按压区域的边界点组成的按压区域轮廓;
根据获取到的在指定时间段内的第一参数中的按压区域轮廓和按压区域的质心,计算得到第二参数;
根据计算得到的第二参数,以及预置的手势识别机制,判断所述触摸操作对应的手势是否为旋转手势。
6.如权利要求5所述的旋转手势识别方法,其特征在于,所述根据获取到的在指定时间段内的第一参数中的按压区域轮廓和按压区域的质心,计算得到第二参数包括:
将获取到的按压区域轮廓对应的图形中,与预置的按压区域图形不符的按压区域轮廓过滤掉;
根据在所述指定时间段内获取到的各个按压区域轮廓,及其对应的按压区域的质心,计算经过滤后的各个按压区域轮廓对应的偏移速率和质心运动速率;
根据计算得到的各个偏移速率和质心运动速率,计算在所述指定时间段内所述第二参数中的平均偏移速率、平均质心运动速率,并根据所述指定时间段内按压区域的质心,计算所述第二参数中的质心偏移量。
7.如权利要求6所述的旋转手势识别方法,其特征在于,所述根据在所述指定时间段内获取到的各个按压区域轮廓,及其对应的按压区域的质心,计算经过滤后的各个按压区域轮廓对应的偏移速率和质心运动速率包括:
对于在所述指定时间段内的任一按压区域轮廓,从穿过所述按压区域轮廓对应的按压区域的质心,并相交于所述按压区域轮廓的至少一个边界点的多条线段中,计算最长的两条线段各自沿预置的虚拟y轴的向量,并将计算得到的两个向量相加后的向量,与所述虚拟y轴的夹角作为所述按压区域轮廓的偏移角度;
根据计算得到的所述指定时间段内各个按压区域轮廓的偏移角度,计算依次间隔指定时长的两个时刻对应的偏移速率,以及根据所述指定时间段内各个按压区域轮廓对应的质心,计算依次间隔指定时长的两个时刻对应的质心运动速率。
8.如权利要求6所述的旋转手势识别方法,其特征在于,所述根据计算得到的第二参数,以及预置的手势识别机制,判断所述触摸操作对应的手势是否为旋转手势包括:
在所述质心偏移量大于0且小于或等于第一阈值、所述平均偏移速率大于或等于第二阈值且小于或等于第三阈值、所述平均质心运动速率大于或等于第四阈值且小于或等于第五阈值时,确定所述触摸操作对应的手势为旋转手势。
CN201610382529.3A 2016-06-01 2016-06-01 旋转手势识别装置及方法 Active CN106095307B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610382529.3A CN106095307B (zh) 2016-06-01 2016-06-01 旋转手势识别装置及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610382529.3A CN106095307B (zh) 2016-06-01 2016-06-01 旋转手势识别装置及方法

Publications (2)

Publication Number Publication Date
CN106095307A CN106095307A (zh) 2016-11-09
CN106095307B true CN106095307B (zh) 2019-05-31

Family

ID=57448650

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610382529.3A Active CN106095307B (zh) 2016-06-01 2016-06-01 旋转手势识别装置及方法

Country Status (1)

Country Link
CN (1) CN106095307B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106598231B (zh) * 2016-11-22 2019-12-10 深圳市元征科技股份有限公司 手势识别方法及装置
CN110402427B (zh) * 2017-03-15 2022-05-31 三菱电机株式会社 触摸手势判定装置、触摸手势判定方法、记录有触摸手势判定程序的记录介质和触摸面板输入装置
CN108803979A (zh) * 2017-04-28 2018-11-13 北京搜狗科技发展有限公司 切换显示模式的方法和装置、用于切换显示模式的装置
CN111435283A (zh) * 2019-01-11 2020-07-21 敦泰电子有限公司 一种操作意图确定方法、装置及电子设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102169379A (zh) * 2010-02-25 2011-08-31 禾瑞亚科技股份有限公司 辨识旋转手势的方法与装置
CN102736838A (zh) * 2011-03-31 2012-10-17 比亚迪股份有限公司 多点旋转运动的识别方法和装置
CN104423656A (zh) * 2013-08-20 2015-03-18 中兴通讯股份有限公司 误触摸识别方法和装置
CN105373323A (zh) * 2014-08-25 2016-03-02 联想(北京)有限公司 用于操作电子设备的方法、操作装置和电子设备

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW201319921A (zh) * 2011-11-07 2013-05-16 Benq Corp 觸控螢幕畫面控制方法及觸控螢幕畫面顯示方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102169379A (zh) * 2010-02-25 2011-08-31 禾瑞亚科技股份有限公司 辨识旋转手势的方法与装置
CN102736838A (zh) * 2011-03-31 2012-10-17 比亚迪股份有限公司 多点旋转运动的识别方法和装置
CN104423656A (zh) * 2013-08-20 2015-03-18 中兴通讯股份有限公司 误触摸识别方法和装置
CN105373323A (zh) * 2014-08-25 2016-03-02 联想(北京)有限公司 用于操作电子设备的方法、操作装置和电子设备

Also Published As

Publication number Publication date
CN106095307A (zh) 2016-11-09

Similar Documents

Publication Publication Date Title
CN106453941B (zh) 双屏操作方法及移动终端
CN104899062B (zh) 应用启动方法及装置
CN104750420B (zh) 截屏方法及装置
CN105718027B (zh) 后台应用程序的管理方法及移动终端
CN105094613B (zh) 终端控制装置及方法
CN105404484B (zh) 终端分屏装置及方法
CN104898959B (zh) 一种调整虚拟按钮位置的方法和装置
CN106657667A (zh) 一种显示屏的点亮装置和方法
CN106101423B (zh) 分屏区域大小调整装置及方法
CN105843508B (zh) 移动终端及其截屏方法
CN104731411B (zh) 移动终端的单击动作识别方法及装置
CN105141738B (zh) 一种音量调节方法及装置
CN104850343B (zh) 启动单手操作模式的方法和装置
CN105739896B (zh) 移动终端及其触控操作方法
CN106843724A (zh) 一种移动终端屏幕防误触装置及方法、移动终端
CN105278752B (zh) 一种触摸操作装置及方法
CN106095307B (zh) 旋转手势识别装置及方法
CN104866136B (zh) 一种确定终端操作模式的方法及装置
CN105739873B (zh) 一种截屏方法及终端
CN104915063B (zh) 控制智能终端的方法和装置
CN105117155B (zh) 移动终端及其操控方法
CN105094543B (zh) 终端操作指令输入方法及装置
CN106657602A (zh) 一种基于接近传感器的通话灭屏系统及移动终端
CN104866175B (zh) 移动终端单手模式实现方法及移动终端
CN106406621B (zh) 一种移动终端及其处理触控操作的方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant