CN107015631A - 一种手势模拟方法、装置及系统 - Google Patents

一种手势模拟方法、装置及系统 Download PDF

Info

Publication number
CN107015631A
CN107015631A CN201610058945.8A CN201610058945A CN107015631A CN 107015631 A CN107015631 A CN 107015631A CN 201610058945 A CN201610058945 A CN 201610058945A CN 107015631 A CN107015631 A CN 107015631A
Authority
CN
China
Prior art keywords
user
terminal
gesture
action message
finger
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610058945.8A
Other languages
English (en)
Inventor
邵世卓
王灵军
张超
张智伟
冯钟航
黄家良
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Gree Electric Appliances Inc of Zhuhai
Original Assignee
Gree Electric Appliances Inc of Zhuhai
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Gree Electric Appliances Inc of Zhuhai filed Critical Gree Electric Appliances Inc of Zhuhai
Priority to CN201610058945.8A priority Critical patent/CN107015631A/zh
Publication of CN107015631A publication Critical patent/CN107015631A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Telephone Function (AREA)

Abstract

本发明公开一种手势模拟方法、装置及系统。其中,该方法包括:监控终端上用户的操作;在确定用户需要进行手势模拟操作时,采集用户的动作信息;基于所述动作信息在所述终端上执行对应的手势模拟操作。应用本发明的技术方案,判断和确认用户手势动作意图并启动手机内置的应用程序进行手势模拟,从而使得用户在使用智能触控手机时,可实现单手全方位触控操作。

Description

一种手势模拟方法、装置及系统
技术领域
本发明涉及终端技术领域,具体而言,涉及一种手势模拟方法、装置及系统。
背景技术
从上世纪至今,手机等移动终端从高端、稀缺设备发展到现在的大众化、平民化设备,人们日常生活中早已离不开手机,而手机作为一种通讯设备也逐步演化成集通讯、娱乐、生活于一体的新型设备,人们每天都需要长时间地使用手机。同时,在材料和工艺水平的高速发展下,手机从原来的机械按键、小屏幕到现在的触屏、大屏幕,而且屏幕尺寸仍保持增大的势头。因此,用户在使用手机时,有时候不再像过往一样可以完全单手操作,在大部分操作中都需要使用双手才可以实现一整套流程的操作,这在很大程度上约束了用户的行动,极不方便于日常生活。
针对现有技术中手机屏幕较大不便于用户单手操作的难题,目前尚未提出有效的解决方案。
发明内容
本发明实施例中提供一种手势模拟方法、装置及系统,以解决现有技术中手机屏幕较大不便于用户单手操作的难题。
为解决上述技术问题,本发明提供了一种手势模拟方法,其中,该方法包括:监控终端上用户的操作;在确定用户需要进行手势模拟操作时,采集用户的动作信息;基于所述动作信息在所述终端上执行对应的手势模拟操作。
进一步地,监控终端上用户的操作包括:通过压力传感器监控终端上用户操作的压力值;其中,两个所述压力传感器分别设置在所述终端的两侧;在所述压力值达到临界值且维持指定时长后,确定用户需要进行手势模拟操作。
进一步地,监控终端上用户的操作包括:接收到用户触发机械按键的信号后,确定用户需要进行手势模拟操作;其中,所述机械按键设置在所述终端上。
进一步地,通过压力传感器监控终端上用户操作的压力值,在所述压力值达到临界值且维持指定时长后,确定用户需要进行手势模拟操作,包括:通过设置在所述终端一侧的第一压力传感器监控该侧用户操作的第一压力值,通过设置在所述终端另一侧的第二压力传感器监控该侧用户操作的第二压力值,判断下述条件是否成立:所述第一压力值>第一临界值,所述第二压力值>第二临界值;如果均成立且且维持指定时长,则确定用户需要进行手势模拟操作。
进一步地,采集用户的动作信息包括:通过视频信号采集仪采集所述终端正前方的视频信号;对所述视频信号进行解析得到所述动作信息。
进一步地,采集用户的动作信息包括:通过悬浮触碰传感器采集所述终端正前方的动作信息。
进一步地,基于所述动作信息在所述终端上执行对应的手势模拟操作,包括:基于所述动作信息判断用户手指是否处于终端屏幕的预设需求范围;如果是,则执行与所述动作信息对应的手势模拟操作,如果否,则暂停操作直至所述用户手指处于所述预设需求范围。
进一步地,所述动作信息至少包括:用户手指的移动动作、点击动作。
本发明还提供了一种手势模拟装置,其中,该装置包括:监控模块,用于监控终端上用户的操作;采集模块,用于在确定用户需要进行手势模拟操作时,采集用户的动作信息;手势模拟模块,用于基于所述动作信息在所述终端上执行对应的手势模拟操作。
进一步地,所述监控模块,还用于通过压力传感器监控终端上用户操作的压力值;其中,两个所述压力传感器分别设置在所述终端的两侧;在所述压力值达到临界值且维持指定时长后,确定用户需要进行手势模拟操作。
进一步地,所述监控模块,还用于接收到用户触发机械按键的信号后,确定用户需要进行手势模拟操作;其中,所述机械按键设置在所述终端上。
进一步地,所述采集模块,还用于通过视频信号采集仪采集所述终端正前方的视频信号;对所述视频信号进行解析得到所述动作信息。
进一步地,所述采集模块,还用于通过悬浮触碰传感器采集所述终端正前方的动作信息。
进一步地,所述手势模拟模块包括:信息判断单元,用于基于所述动作信息判断用户手指是否处于终端屏幕的预设需求范围;手势模拟单元,用于在所述信息判断单元的判断结果为是的情况下,执行与所述动作信息对应的手势模拟操作;暂停处理单元,在所述信息判断单元的判断结果为否的情况下,则暂停操作直至所述用户手指处于所述预设需求范围。
本发明还提供了一种手势模拟系统,其中,该系统包括:视频信号采集仪,用于在确定用户需要进行手势模拟操作时,采集终端正前方的视频信号,并转发至信号处理模块;所述信号处理模块,用于将所述视频信号解析为动作信息;手势模拟模块,用于基于所述动作信息在终端上执行对应的手势模拟操作。
进一步地,所述系统还包括:压力传感器,用于监控终端上用户操作的压力值;在所述压力值达到临界值且维持指定时长后,触发所述视频信号采集仪;其中,两个所述压力传感器分别设置在所述终端的两侧;或者,机械按键,用于被用户按压后,触发所述视频信号采集仪;其中,所述机械按键设置在所述终端上。
进一步地,所述信号处理模块,还用于将所述视频信号解析为动作信息,基于所述动作信息判断用户手指是否处于终端屏幕的预设需求范围;如果是,则触发所述手势模拟模块;如果否,则暂停操作直至所述用户手指处于所述预设需求范围;其中,所述动作信息至少包括:用户手指的移动动作、点击动作。
本发明还提供了一种手势模拟系统,其中,该系统包括:悬浮触碰感应器,用于在确定用户需要进行手势模拟操作时,采集终端正前方的动作信息,并转发至信号处理模块;所述信号处理模块,用于将所述视频信号解析为动作信息;手势模拟模块,用于基于所述动作信息在终端上执行对应的手势模拟操作。
进一步地,所述系统还包括:压力传感器,用于监控终端上用户操作的压力值;在所述压力值达到临界值且维持指定时长后,触发所述悬浮触碰感应器;其中,两个所述压力传感器分别设置在所述终端的两侧;或者,机械按键,用于被用户按压后,触发所述悬浮触碰感应器;其中,所述机械按键设置在所述终端上。
进一步地,所述信号处理模块,还用于基于所述动作信息判断用户手指是否处于终端屏幕的预设需求范围;如果是,则触发所述手势模拟模块;如果否,则暂停操作直至所述用户手指处于所述预设需求范围;其中,所述动作信息至少包括:用户手指的移动动作、点击动作。
应用本发明的技术方案,判断和确认用户手势动作意图并启动手机内置的应用程序进行手势模拟,从而使得用户在使用智能触控手机时,可实现单手全方位触控操作。
附图说明
图1是根据本发明实施例一的手势模拟方法流程图;
图2是根据本发明实施例二的手势模拟装置的结构框图;
图3是根据本发明实施例三的手势模拟系统的结构框图;
图4是根据本发明实施例三的手势模拟系统的操作示意图;
图5是根据本发明实施例三的预设需求范围的示意图;
图6是根据本发明实施例四的手势模拟系统的结构框图;
图7是根据本发明实施例四的信号处理模块的工作流程图;
图8是根据本发明实施例四的手机范围示意图。
具体实施方式
下面结合附图和具体实施例对本发明作进一步详细描述,但不作为对本发明的限定。
实施例一
图1是根据本发明实施例一的手势模拟方法流程图,如图1所示,该方法包括以下步骤:
步骤S102,监控终端上用户的操作;
步骤S104,在确定用户需要进行手势模拟操作时,采集用户的动作信息;
步骤S106,基于上述动作信息在终端上执行对应的手势模拟操作。
通过上述方法,判断和确认用户手势动作意图并启动手机内置的应用程序进行手势模拟,从而使得用户在使用智能触控手机时,可实现单手全方位触控操作。
在步骤S102中,可通过两种方式实现用户操作的监控:
第一种,通过压力传感器监控终端上用户操作的压力值;其中,两个压力传感器分别设置在终端的左右两侧(即用户手持手机时所接触的左右两端);在上述压力值达到临界值且维持指定时长后,确定用户需要进行手势模拟操作。
具体地:通过设置在终端一侧的第一压力传感器监控该侧用户操作的第一压力值,通过设置在终端另一侧的第二压力传感器监控该侧用户操作的第二压力值,判断下述条件是否成立:第一压力值>第一临界值,第二压力值>第二临界值;如果均成立且且维持指定时长,则确定用户需要进行手势模拟操作。其中,第一临界值和第二临界值可设置为相等。
第二种,接收到用户触发机械按键的信号后,确定用户需要进行手势模拟操作;其中,在终端的一侧(便于用户单手操作的位置)设置一个机械按键,或者在终端的两侧分别设置一个机械按键。
基于上述两种方式可实现用户操作的实时监控,从而准确判定用户当前是否需要进行手势模拟操作,触发手势模拟操作,提高用户体验。
在步骤S104中,可通过两种方式实现用户动作信息的采集:
第一种,通过视频信号采集仪采集终端正前方的视频信号;对视频信号进行解析得到动作信息。一般情况下,视频信号采集仪设置在手机的正面位置。
第二种,通过悬浮触碰传感器采集终端正前方的动作信息。一般情况下悬浮触碰传感器集成在手机显示屏中。
基于上述两种方式可实现用户动作信息的采集,之后可基于动作信息判断用户手指是否处于终端屏幕的预设需求范围;如果是,则执行与动作信息对应的手势模拟操作,如果否,则暂停操作直至用户手指处于预设需求范围。其中,预设需求范围可根据实际需求进行设定和调整。上述动作信息至少包括:用户手指的移动动作、点击动作等。
实施例二
图2是根据本发明实施例二的手势模拟装置的结构框图,如图2所示,该装置包括:
监控模块20,用于监控终端上用户的操作;
采集模块21,用于在确定用户需要进行手势模拟操作时,采集用户的动作信息;
手势模拟模块22,用于基于上述动作信息在终端上执行对应的手势模拟操作。
通过上述装置,判断和确认用户手势动作意图并启动手机内置的应用程序进行手势模拟,从而使得用户在使用智能触控手机时,可实现单手全方位触控操作。
一实施例中,上述监控模块20,还用于通过压力传感器监控终端上用户操作的压力值;其中,两个上述压力传感器分别设置在上述终端的两侧;在上述压力值达到临界值且维持指定时长后,确定用户需要进行手势模拟操作。
一实施例中,上述监控模块20,还用于接收到用户触发机械按键的信号后,确定用户需要进行手势模拟操作;其中,上述机械按键设置在上述终端上。
基于此,可实现用户操作的实时监控,从而准确判定用户当前是否需要进行手势模拟操作,触发手势模拟操作,提高用户体验。
一实施例中,上述采集模块21,还用于通过视频信号采集仪采集上述终端正前方的视频信号;对上述视频信号进行解析得到上述动作信息。或者,上述采集模块21,还用于通过悬浮触碰传感器采集上述终端正前方的动作信息。从而准确判断用户的操作意图并触发手势模拟操作。
一实施例中,上述手势模拟模块22包括:信息判断单元,用于基于动作信息判断用户手指是否处于终端屏幕的预设需求范围;手势模拟单元,用于在信息判断单元的判断结果为是的情况下,执行与动作信息对应的手势模拟操作;暂停处理单元,在信息判断单元的判断结果为否的情况下,则暂停操作直至用户手指处于上述预设需求范围。其中,预设需求范围可根据实际需求进行设定和调整。上述动作信息至少包括:用户手指的移动动作、点击动作等。
实施例三
图3是根据本发明实施例三的手势模拟系统的结构框图,如图3所示,该系统包括:压力传感器或者机械按键(图3中以压力传感器进行示例说明)、视频信号采集仪、信号处理模块和手势模拟模块。其中,两个压力传感器分别安装在手机两侧,视频信号采集仪安装在手机的正面,信号处理模块与手势模拟模块为手机内置程序模块。下面对各个结构的功能进行解释说明。
机械按键,用于被用户按压后,触发视频信号采集仪;其中,机械按键设置在终端上。
压力传感器,用于监控终端上用户操作的压力值;在压力值达到临界值且维持指定时长后,触发视频信号采集仪;其中,两个压力传感器分别设置在终端的两侧。
视频信号采集仪,用于在确定用户需要进行手势模拟操作时,采集终端正前方的视频信号,并转发至信号处理模块。
信号处理模块,用于将视频信号解析为动作信息;还用于将视频信号解析为动作信息,基于动作信息判断用户手指是否处于终端屏幕的预设需求范围;如果是,则触发手势模拟模块;如果否,则暂停操作直至用户手指处于预设需求范围;其中,动作信息至少包括:用户手指的移动动作、点击动作。
手势模拟模块,用于基于动作信息在终端上执行对应的手势模拟操作。
图4是根据本发明实施例三的手势模拟系统的操作示意图,如图4所示,压力传感器检测当前手机用户握持手机时对手机的压力值,通过信号处理模块的逻辑判断是否处于开启全方位触控的范围,确认开启后通过视频信号采集仪采集超出设定屏幕范围的实时手指位移、动作数据,进而通过手机内置程序模块进行模拟手势动作,根据一定的位移比例实现全方位触控。
下面对手势模拟系统中各个结构主要负责的工作进行介绍。
1、压力传感器
在正常情况下,用户单只手掌持握手机的力度较轻,处于一种比较轻松的状态。当遇到手指无法靠近的区域时,用户的迫切情绪会引导手掌进行紧握手机并再次尝试触控。此刻处于两侧的压力传感器检测外界的压力后迅速将信号传输给信号处理模块。
2、视频信号采集仪
视频信号采集仪主要功能是对手机屏幕前视频信号进行监测、采集并传输给信号处理模块。当信号处理模块检测到压力传感器传输过来的压力值,判断压力是否处于设定的压力范围内,如果是则认为用户可能处于需要进行全方位触控的状态下,此时开启视频信号采集仪进行视频监控、采集数据并传输给信号处理模块。
3、信号处理模块
1)处理压力传感器传输过来的压力值,并智能判断当前用户是否达到设定的压力临界值。假设设定压力临界值为Ft,那么当压力传感器检测到的压力值F≥Ft时,系统开启;当F<Ft时,系统不作处理。
2)对视频信号采集仪进行调度控制其开关,当压力值达到临界值时,开启视频信号采集仪,并保持;当压力值小于临界值时,将关闭视频信号采集仪。
3)接收视频信号采集仪传输回来的信号,并进行数据解析从而确认用户是否处于需求范围内,当视频信号采集仪检测到手指位置处于需求范围,则智能开启模拟系统进行全方位模拟,当离开需求范围时,则暂停模拟,当离开时间超出设定值T时,完全关闭模拟系统。
图5是根据本发明实施例三的预设需求范围的示意图,如图5所示,针对不同屏幕大小的手机,设定不同的需求范围,这样可适应不同用户群。假设女性用户使用时,手掌宽度、长度可能较小,那么需求范围则会比男性用户要大。
4)如果是处于需求范围内,则开启手势模拟模块,解析视频信号采集仪传输的信号为手势模拟模块可识别的数据,并持续将数据传输给手势模拟模块。
4、手势模拟模块
该模块主要用于接收信号处理模块发送的数据,通过程序逻辑处理数据后在现实手机显示屏幕上显示模拟的手势动作,例如手指在需求范围内移动,那么在手机屏幕的显示应呈现手指移动的轨迹,手指作出点击动作时,手机屏幕上呈现明显的点击痕迹,并且点击处完全和手指直接点击效果一致。
在本实施例中,压力传感器可替换成机械按键,通过用户主动去启停系统,生产成本较低,且几乎可适用于所有人群,没有很明显的界定。视频信号采集仪可替换成红外探头,通过红外线检测手指的位移以及点击动作以进行手势模拟。理论上红外线可以较准确地检测手指位移,但手指点击动作很难判断精准。
实施例四
图6是根据本发明实施例四的手势模拟系统的结构框图,如图6所示,该系统包括:压力传感器或者机械按键(图6中以压力传感器进行示例说明)、悬浮触碰感应器、信号处理模块和手势模拟模块。其中,两个压力传感器分别安装在手机两侧,悬浮触碰传感器集成在手机显示屏中,信号处理模块和手势模拟模块为手机内置逻辑程序模块。下面对各个结构的功能进行解释说明。
压力传感器,用于监控终端上用户操作的压力值;在压力值达到临界值且维持指定时长后,触发悬浮触碰感应器;其中,两个压力传感器分别设置在终端的两侧;或者,
机械按键,用于被用户按压后,触发悬浮触碰感应器;其中,机械按键设置在终端上。
悬浮触碰感应器,用于在确定用户需要进行手势模拟操作时,采集终端正前方的动作信息,并转发至信号处理模块。
信号处理模块,用于将视频信号解析为动作信息;还用于基于动作信息判断用户手指是否处于终端屏幕的预设需求范围;如果是,则触发手势模拟模块;如果否,则暂停操作直至用户手指处于预设需求范围;其中,动作信息至少包括:用户手指的移动动作、点击动作。
手势模拟模块,用于基于动作信息在终端上执行对应的手势模拟操作。
下面对手势模拟系统中各个结构主要负责的工作进行介绍。
1、压力传感器
在正常情况下,人体单只手掌持握手机的力度较轻,处于一种比较轻松的状态。当遇到手指无法靠近的区域时,人的迫切情绪会引导手掌进行紧握手机并会持续尝试进行触碰。此刻处于两侧的压力传感器检测外界的压力会突然剧增,压力传感器迅速将压力信号传输给信号处理模块。
2、信号处理模块
信号处理模块主要接收机身两侧的压力传感器传输过来的压力值,并根据压力值的大小、持续的时间进行逻辑判断用户是否需要进行全方位触控,并且根据判断结果启停悬浮触碰传感器。
图7是根据本发明实施例四的信号处理模块的工作流程图,如图7所示,假定右手使用时,默认设置左侧压力临界值为Fα,右侧压力临界值为Fβ,临界值是程序逻辑判断是否需要启动还是停止悬浮触碰监视的依据。假设左侧当前压力值超过临界值Fα并持续时间Tα,右侧当前压力值超过临界值Fβ并持续时间Tβ时,开启悬浮触碰监视。该流程包括以下步骤:
步骤S701,开始。
步骤S702a,左侧压力传感器检测压力值F1
步骤S702b,右侧压力传感器检测压力值F2
步骤S703,上述两个压力值均传送至信号处理模块。
步骤S704,判断:F1≥Fα&&T≥Tα,且F2≥Fβ&&T≥Tβ,如果是,则执行步骤S705,如果否,则执行步骤S706。
步骤S705,开启悬浮触碰传感器。
步骤S706,关闭悬浮触碰传感器。
步骤S707,结束。
2、悬浮触碰传感器
悬浮触碰传感器处于关闭状态,由信号处理模块进行激发。当开启悬浮触碰传感器时,悬浮触碰传感器可监视悬浮在屏幕上方的手指的位置及点击动作,并将手指的动作信息实时传输给手势模拟模块。
4、手势模拟模块
手势模拟模块主要功能分别为:
1)智能学习。
每个用户使用手机的习惯都会存在差异,而本方案的手势模拟模块会智能地记录当前用户使用手机时的是否经常性地使用单手操作,使用单手操作时的压力值及压力持续时间数据,在屏幕的什么范围进行单手触控,并通过数据分析从而智能调整全方位触控的生效条件,如压力临界值、手指正常可触碰范围、可接触触碰范围,这些条件都会在实际的模拟过程中生效并起作用。
2)接收悬浮触碰传感器发送过来的手指动作数据,通过程序逻辑处理后在手机的屏幕中上显示虚拟的手指移动、点击动作,具体会在屏幕中呈现出一个虚拟的指纹图案,该指纹图案会随着手指的微小移动而按设定的比例进行移动。
图8是根据本发明实施例四的手机范围示意图,如图8所示,假设:手指从坐标A开始移动,当位置超出了可接触触碰的范围但还在能正常触碰的范围内,这时就需要开启手势模拟,指纹图案也同时出现在A坐标;当手指继续向正常可触碰范围的边缘移动并达到最大值(坐标B)时,模拟出来的距离实际可达到坐标C,所以实际移动距离=手指移动距离x模拟比例值,模拟比例值是系统设定的,但会根据用户的习惯进行智能调整。
3)随着手指的点击而进行点击,假如虚拟指纹已移动到一个手机APP上,手指进行点击动作,那么该手机APP也会被打开,和实际的屏幕接触操作效果是完全一致的。
在本实施例中,压力传感器可替换成机械按键,通过用户主动去启停系统,生产成本较低,且几乎可适用于所有人群,没有很明显的界定。
从以上的描述中可知,本发明判断和确认人体手势动作意图并启动手机内置的应用程序进行手势模拟从而实现了在手机上全方位触控操作。
当然,以上是本发明的优选实施方式。应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明基本原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也视为本发明的保护范围。

Claims (20)

1.一种手势模拟方法,其特征在于,所述方法包括:
监控终端上用户的操作;
在确定用户需要进行手势模拟操作时,采集用户的动作信息;
基于所述动作信息在所述终端上执行对应的手势模拟操作。
2.根据权利要求1所述的方法,其特征在于,监控终端上用户的操作包括:
通过压力传感器监控终端上用户操作的压力值;其中,两个所述压力传感器分别设置在所述终端的两侧;
在所述压力值达到临界值且维持指定时长后,确定用户需要进行手势模拟操作。
3.根据权利要求1所述的方法,其特征在于,监控终端上用户的操作包括:
接收到用户触发机械按键的信号后,确定用户需要进行手势模拟操作;其中,所述机械按键设置在所述终端上。
4.根据权利要求2所述的方法,其特征在于,通过压力传感器监控终端上用户操作的压力值,在所述压力值达到临界值且维持指定时长后,确定用户需要进行手势模拟操作,包括:
通过设置在所述终端一侧的第一压力传感器监控该侧用户操作的第一压力值,通过设置在所述终端另一侧的第二压力传感器监控该侧用户操作的第二压力值,判断下述条件是否成立:
所述第一压力值>第一临界值,所述第二压力值>第二临界值;
如果均成立且且维持指定时长,则确定用户需要进行手势模拟操作。
5.根据权利要求1所述的方法,其特征在于,采集用户的动作信息包括:
通过视频信号采集仪采集所述终端正前方的视频信号;对所述视频信号进行解析得到所述动作信息。
6.根据权利要求1所述的方法,其特征在于,采集用户的动作信息包括:
通过悬浮触碰传感器采集所述终端正前方的动作信息。
7.根据权利要求1所述的方法,其特征在于,基于所述动作信息在所述终端上执行对应的手势模拟操作,包括:
基于所述动作信息判断用户手指是否处于终端屏幕的预设需求范围;
如果是,则执行与所述动作信息对应的手势模拟操作,如果否,则暂停操作直至所述用户手指处于所述预设需求范围。
8.根据权利要求1所述的方法,其特征在于,所述动作信息至少包括:用户手指的移动动作、点击动作。
9.一种手势模拟装置,其特征在于,所述装置包括:
监控模块,用于监控终端上用户的操作;
采集模块,用于在确定用户需要进行手势模拟操作时,采集用户的动作信息;
手势模拟模块,用于基于所述动作信息在所述终端上执行对应的手势模拟操作。
10.根据权利要求9所述的装置,其特征在于,
所述监控模块,还用于通过压力传感器监控终端上用户操作的压力值;其中,两个所述压力传感器分别设置在所述终端的两侧;在所述压力值达到临界值且维持指定时长后,确定用户需要进行手势模拟操作。
11.根据权利要求9所述的装置,其特征在于,
所述监控模块,还用于接收到用户触发机械按键的信号后,确定用户需要进行手势模拟操作;其中,所述机械按键设置在所述终端上。
12.根据权利要求9所述的装置,其特征在于,
所述采集模块,还用于通过视频信号采集仪采集所述终端正前方的视频信号;对所述视频信号进行解析得到所述动作信息。
13.根据权利要求9所述的装置,其特征在于,
所述采集模块,还用于通过悬浮触碰传感器采集所述终端正前方的动作信息。
14.根据权利要求9所述的装置,其特征在于,所述手势模拟模块包括:
信息判断单元,用于基于所述动作信息判断用户手指是否处于终端屏幕的预设需求范围;
手势模拟单元,用于在所述信息判断单元的判断结果为是的情况下,执行与所述动作信息对应的手势模拟操作;
暂停处理单元,在所述信息判断单元的判断结果为否的情况下,则暂停操作直至所述用户手指处于所述预设需求范围。
15.一种手势模拟系统,其特征在于,所述系统包括:
视频信号采集仪,用于在确定用户需要进行手势模拟操作时,采集终端正前方的视频信号,并转发至信号处理模块;
所述信号处理模块,用于将所述视频信号解析为动作信息;
手势模拟模块,用于基于所述动作信息在终端上执行对应的手势模拟操作。
16.根据权利要求15所述的系统,其特征在于,所述系统还包括:
压力传感器,用于监控终端上用户操作的压力值;在所述压力值达到临界值且维持指定时长后,触发所述视频信号采集仪;其中,两个所述压力传感器分别设置在所述终端的两侧;或者,
机械按键,用于被用户按压后,触发所述视频信号采集仪;其中,所述机械按键设置在所述终端上。
17.根据权利要求15所述的系统,其特征在于,
所述信号处理模块,还用于将所述视频信号解析为动作信息,基于所述动作信息判断用户手指是否处于终端屏幕的预设需求范围;如果是,则触发所述手势模拟模块;如果否,则暂停操作直至所述用户手指处于所述预设需求范围;其中,所述动作信息至少包括:用户手指的移动动作、点击动作。
18.一种手势模拟系统,其特征在于,所述系统包括:
悬浮触碰感应器,用于在确定用户需要进行手势模拟操作时,采集终端正前方的动作信息,并转发至信号处理模块;
所述信号处理模块,用于将所述视频信号解析为动作信息;
手势模拟模块,用于基于所述动作信息在终端上执行对应的手势模拟操作。
19.根据权利要求18所述的系统,其特征在于,所述系统还包括:
压力传感器,用于监控终端上用户操作的压力值;在所述压力值达到临界值且维持指定时长后,触发所述悬浮触碰感应器;其中,两个所述压力传感器分别设置在所述终端的两侧;或者,
机械按键,用于被用户按压后,触发所述悬浮触碰感应器;其中,所述机械按键设置在所述终端上。
20.根据权利要求18所述的系统,其特征在于,
所述信号处理模块,还用于基于所述动作信息判断用户手指是否处于终端屏幕的预设需求范围;如果是,则触发所述手势模拟模块;如果否,则暂停操作直至所述用户手指处于所述预设需求范围;其中,所述动作信息至少包括:用户手指的移动动作、点击动作。
CN201610058945.8A 2016-01-28 2016-01-28 一种手势模拟方法、装置及系统 Pending CN107015631A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610058945.8A CN107015631A (zh) 2016-01-28 2016-01-28 一种手势模拟方法、装置及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610058945.8A CN107015631A (zh) 2016-01-28 2016-01-28 一种手势模拟方法、装置及系统

Publications (1)

Publication Number Publication Date
CN107015631A true CN107015631A (zh) 2017-08-04

Family

ID=59439221

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610058945.8A Pending CN107015631A (zh) 2016-01-28 2016-01-28 一种手势模拟方法、装置及系统

Country Status (1)

Country Link
CN (1) CN107015631A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110194208A (zh) * 2019-05-16 2019-09-03 上海蔚来汽车有限公司 汽车的多功能方向盘及汽车

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012108885A (ja) * 2010-10-05 2012-06-07 Immersion Corp 物理モデルに基づくジェスチャ認識
CN103118166A (zh) * 2012-11-27 2013-05-22 广东欧珀移动通信有限公司 一种基于压力感应实现单手操作手机的方法
CN103295029A (zh) * 2013-05-21 2013-09-11 深圳Tcl新技术有限公司 手势控制终端的交互方法及装置
CN104238746A (zh) * 2014-08-25 2014-12-24 联想(北京)有限公司 信息处理方法及电子设备
CN104360736A (zh) * 2014-10-30 2015-02-18 广东美的制冷设备有限公司 基于手势的终端控制方法和系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012108885A (ja) * 2010-10-05 2012-06-07 Immersion Corp 物理モデルに基づくジェスチャ認識
CN103118166A (zh) * 2012-11-27 2013-05-22 广东欧珀移动通信有限公司 一种基于压力感应实现单手操作手机的方法
CN103295029A (zh) * 2013-05-21 2013-09-11 深圳Tcl新技术有限公司 手势控制终端的交互方法及装置
CN104238746A (zh) * 2014-08-25 2014-12-24 联想(北京)有限公司 信息处理方法及电子设备
CN104360736A (zh) * 2014-10-30 2015-02-18 广东美的制冷设备有限公司 基于手势的终端控制方法和系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110194208A (zh) * 2019-05-16 2019-09-03 上海蔚来汽车有限公司 汽车的多功能方向盘及汽车
CN110194208B (zh) * 2019-05-16 2023-10-10 上海蔚来汽车有限公司 汽车的多功能方向盘及汽车

Similar Documents

Publication Publication Date Title
CN104090652B (zh) 一种语音输入方法和装置
CN105690385B (zh) 基于智能机器人的应用调用方法与装置
US20130222338A1 (en) Apparatus and method for processing a plurality of types of touch inputs
CN101339453B (zh) 基于交互式输入设备的模拟鼠标输入方法
CN102016765A (zh) 用于识别手持设备的用户的方法和系统
CN105786245B (zh) 一种触摸屏操作控制方法和装置
CN108319366A (zh) 一种防沉迷的控制方法以及系统
EP2175344A3 (en) Method and apparatus for displaying graphical user interface depending on a user&#39;s contact pattern
CN110517685A (zh) 语音识别方法、装置、电子设备及存储介质
CN101668351A (zh) 便携式电子装置及其模式切换方法
CN106393113A (zh) 机器人和机器人的交互控制方法
CN106990888A (zh) 一种应用显示控制方法及装置
CN108115695A (zh) 一种情感色彩表达系统及机器人
CN105072264A (zh) 基于三轴加速度传感器的智能腕表控制方法及系统
CN104423876B (zh) 移动终端及其操作处理方法
CN109753777A (zh) 一种身份识别方法、装置、存储介质及移动终端
CN105930062B (zh) 查看文件夹中文件的方法及装置
CN108133708B (zh) 一种语音助手的控制方法、装置及移动终端
CN104601795B (zh) 一种智能手机用户左右手识别方法
CN110766057A (zh) 一种手势识别装置及方法
CN107015631A (zh) 一种手势模拟方法、装置及系统
CN105511672B (zh) 手持式装置模拟虚拟指向杆的方法
CN107179863A (zh) 一种触摸屏的控制方法、装置及终端
CN105435449A (zh) 一种游戏物品使用方法及装置
CN106572252A (zh) 一种非接触式智能终端及其控制方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170804