CN105334962A - 采用手势缩放屏幕图像的方法及系统 - Google Patents

采用手势缩放屏幕图像的方法及系统 Download PDF

Info

Publication number
CN105334962A
CN105334962A CN201510731771.2A CN201510731771A CN105334962A CN 105334962 A CN105334962 A CN 105334962A CN 201510731771 A CN201510731771 A CN 201510731771A CN 105334962 A CN105334962 A CN 105334962A
Authority
CN
China
Prior art keywords
screen picture
user
type
hand
palm
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510731771.2A
Other languages
English (en)
Inventor
黄源浩
肖振中
钟亮洪
许宏淮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Orbbec Co Ltd
Original Assignee
Shenzhen Orbbec Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Orbbec Co Ltd filed Critical Shenzhen Orbbec Co Ltd
Priority to CN201510731771.2A priority Critical patent/CN105334962A/zh
Publication of CN105334962A publication Critical patent/CN105334962A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明涉及一种采用手势缩放屏幕图像的方法,包括如下步骤:检测手掌形态;当所述手掌形态从第一手型变换为第二手型时,将屏幕图像设置为可缩放状态;若所述手掌形态保持为第二手型,并在预设方向上发生位移,则放大或缩小所述屏幕图像。上述采用手势缩放屏幕图像的方法,通过检测手掌形态从第一手型变化到第二手型,可以将屏幕图像切换到可缩放状态,然后保持第二手型在预设方向上移动,就可以方便地对屏幕图像进行缩放。该预设方向可以是面对用户的前后方向,手掌的移动符合用户的习惯操作,而且与屏幕图像的缩放操作自然对应,非常方便。

Description

采用手势缩放屏幕图像的方法及系统
技术领域
本发明涉及手势控制,特别是涉及一种采用手势缩放屏幕图像的方法及系统。
背景技术
随着图像识别技术的发展,体用人体动作来实现对智能设备的远距离的操控,特别是在远距离对具有图形界面的智能设备进行操控的技术已经被实现。
传统针对远距离的图像界面的操作,一般是模拟触摸屏的操作。特别是,当检测手势的方式是基于图像识别时,手势的操作会局限于在某个平面内的移动,并没有很好地利用三维空间内的移动。
发明内容
基于此,有必要提供一种采用手势缩放屏幕图像的方法,其可以利用手势的三维信息进行缩放操作,简化手势操作。
一种采用手势缩放屏幕图像的方法,包括如下步骤:
检测手掌形态;
当所述手掌形态从第一手型变换为第二手型时,将屏幕图像设置为可缩放状态;
若所述手掌形态保持为第二手型,并在预设方向上发生位移,则放大或缩小所述屏幕图像。
在其中一个实施例中,以发生位移前的位置作为参考:发生第一方向的位移时,放大所述屏幕图像;发生与所述第一方向相反的第二方向的位移时,缩小所述屏幕图像。
在其中一个实施例中,所述第一方向为面对用户并远离用户的方向,所述第二方向为面对用户并靠近用户的方向;或者所述第一方向为面对用户并靠近用户的方向,所述第二方向为面对用户并远离用户的方向。
在其中一个实施例中,所述位移的大小与缩放比例线性相关。
在其中一个实施例中,所述第一手型为手掌张开,所述第二手型为抓握。
在其中一个实施例中,还包括,当保持第二手型在与所述预设方向垂直的平面内移动时,则移动所述屏幕图像。
在其中一个实施例中,还包括,根据手掌的位置在屏幕上显示光标位置。
在其中一个实施例中,以所述光标所在位置为缩放中心进行缩放。
在其中一个实施例中,还包括,当从第二手型变换为第一手型时,则解除屏幕图像的可缩放状态,并以当前缩放比例显示屏幕图像。
一种采用手势缩放屏幕图像的系统,包括:摄像装置,用于摄取用户手势;
显示器,用于显示屏幕画面及屏幕光标;处理系统,用于执行上述的采用手势缩放屏幕图像的方法。
上述采用手势缩放屏幕图像的方法及系统,通过检测手掌形态从第一手型变化到第二手型,可以将屏幕图像切换到可缩放状态,然后保持第二手型在预设方向上移动,就可以方便地对屏幕图像进行缩放。该预设方向可以是面对用户的前后方向,手掌的移动符合用户的习惯操作,而且与屏幕图像的缩放操作自然对应,非常方便。
附图说明
图1为一实施例的采用手势缩放屏幕图像的方法流程图;
图2为手型变换示意图;
图3a和图3b为手势前后移动的示意图。
具体实施方式
以下结合附图和实施例进行进一步说明。
图1为一实施例的采用手势缩放屏幕图像的方法流程图。该方法包括如下步骤。
步骤S100:检测手掌形态。图像识别方法可以识别出人体的多个特征部位,比如面部、形体以及手掌形态等。手掌形态是指手型,例如五指并拢展开、五指分开展开、抓握、大拇指竖起其他四指紧握等等。
步骤S200:当所述手掌形态从第一手型变换为第二手型时,将屏幕图像设置为可缩放状态。
利用手势进行多种操作时,可以使用多种手掌形态。手掌形态也根据操作的不同发生多种变化。本实施例中,当手掌形态从第一手型变换为第二手型时,将屏幕图像设置为可缩放状态。第一手型和第二手型可以是上述手掌形态或其他可能的手掌形态中的任意两种的组合。在一个实施例中,第一手型是手掌张开,第二手型是抓握,则表示当用户的手掌由张开转换为抓握时,可以将屏幕图像设置为可缩放状态。
屏幕图像在可缩放状态下,能够进行缩放。
步骤S300:若所述手掌形态保持为第二手型,并在预设方向上发生位移,则放大或缩小所述屏幕图像。手掌形态保持为第二手型时,屏幕图像保持在可缩放状态下。当用户保持第二手型在预设的方向上发生位移时,执行具体的缩放操作。
预设的方向一般是用户方便操作的方向,但并不限于该方向。一般的方便用户操作的方向是用户面对的方向,在该方向上的移动也就是(对用户来说的)前后移动。当用户保持第二手型前后移动时,可以执行放大或缩小屏幕图像的操作。
以发生位移前的位置作为参考:发生第一方向的位移时,放大所述屏幕图像;发生与所述第一方向相反的第二方向的位移时,缩小所述屏幕图像。在屏幕图像刚刚进入缩放状态时,将手掌所处的位置作为参考,当手掌发生位移后,就可以判断手掌在哪个方向上发生了位移。
用户手掌的移动有可能并不是完全与预设的方向相同,只要手掌移动的在该预设方向上存在分量即可。例如用户的手掌可能是向右前方移动,其具有向右和向前的两个方向的分量,此时也认为向前移动。
预设的方向可以是两个完全相反的方向,以分别对应缩小和放大的需求。具体地,所述第一方向为面对用户并远离用户的方向,所述第二方向为面对用户并靠近用户的方向。也即,当用户的手掌向前移动时放大屏幕图像,当用户的手掌向后移动时缩小屏幕图像。
或者也可以反过来,所述第一方向为面对用户并靠近用户的方向,所述第二方向为面对用户并远离用户的方向。也即,当用户的手掌向前移动时缩小屏幕图像,当用户的手掌向后移动时放大屏幕图像。
对于需要检测前后移动距离的情况,可以采用能够获得深度图像的系统和方法。深度图像包含图像中的物体与摄像装置之间的距离信息,也即深度信息。当手掌前后运动时,图像中与手掌对应区块的深度会发生相应的变化。利用该深度信息的变化能够判断手掌的前后移动。
上述手掌移动的位移的大小与缩放比例线性相关。例如,移动1厘米缩放10%,且移动10厘米缩放100%。手掌移动的位移的大小与缩放比例也可以是其他的非线性关系,例如在移动的一段初始距离内,每单位距离的缩放比例更小,随着距离的增加,每单位的缩放比例变大。手掌移动的位移的大小与缩放比例的对应关系可以根据需要进行调整,并不限于上述。
进一步地,还包括步骤S400:当保持第二手型在与所述预设方向垂直的平面内移动时,则移动所述屏幕图像。用户手掌的移动有可能并不是完全在某个平面内,只要手掌移动的在该平面上存在分量即可。例如用户的手掌可能是向右前方移动,其具有向右和向前的两个方向的分量,此时也认为在前方某个与向前方向垂直的平面内向右移动。
手掌形态保持为第二手型时,还可使屏幕图像处于可移动状态。当用户手掌在设定的平面内发生移动时,根据手掌在设定的平面内移动的距离和方向,相应地将屏幕图像移动对应的距离和方向。
进一步地,还包括步骤S500:根据手掌的位置在屏幕上显示光标位置。光标的位置能够提示用户当前焦点所在位置,并以所述光标所在位置为缩放中心进行缩放。获得光标提示后,用户可以针对性地对想要关注的区域进行缩放。
上述步骤S300、S400以及S500没有先后顺序,且步骤S400和步骤S500并非必需。
进一步地,还包括S600:当从第二手型变换为第一手型时,则解除屏幕图像的可缩放状态,并以当前缩放比例显示屏幕图像。
当用户将屏幕缩放到合适的大小及移动到合适的位置后,将手掌形态由第二手型变换为第一手型,屏幕图像以最后确定的缩放比例和位置固定显示。
以下以一个具体的用户操作实例为例进行说明,该实例用于解释上述实施例的方法,不构成对上述实施例方法的限制。
如图2所示,用于实施上述方法的系统包括但不限于:显示器1、摄像装置2以及处理系统(图未示,可以内置于显示器1中或外接)。显示器1用于显示屏幕图像,摄像装置2用于拍摄用户3的动作,处理系统则用于获得摄像装置2的图像数据,然后执行上述实施例的方法。当然,处理系统还可以执行其他的方法。
当显示器1上播放屏幕图像(图2中没有示意屏幕图像,而是示意用户的手型)时,用户3产生对屏幕图像进行缩放的需求。用户3抬手放置在合适的位置,并将手掌形态置为手掌展开的状态,如图2中用户3处和显示器1处虚线所示的手型。
然后,用户3将手抓握,也即形成一个抓握手型,如图2中用户3处和显示器1处实线所示的手型。做出该动作后,摄像装置2捕捉到了连续的手型变换的图像,也即手掌从展开形态变换为抓握形态的过程图像。处理系统经过图像处理,正确识别了手型后,将该手势解释为缩放开始。此时屏幕图像处于可缩放的状态。
如图3a和图3b所示,用户3保持抓握状态不变,向前推动手臂(如图3a,可以想象成推开),此时屏幕图像在推动手臂的过程中逐渐缩小。用户3还可以向后收回手臂(如图3b,可以想象成拉近),此时屏幕图像在收回手臂的过程中逐渐放大。
在手臂推动或收回的过程中,用户3也可以停下来,保持抓握手型不变,然后上下左右移动,屏幕图像则可以随之上下左右移动。
在检测到抓握手型时,处理系统将用户3手掌所处的位置映射到屏幕上的位置,并以光标进行指示。当进行缩放时,以光标所指示的位置为中心进行放大或缩小。
最后,当图像已经缩放到合适的比例,并且移动到合适的位置后,用户3将手掌展开,解除屏幕图像的可缩放状态。屏幕图像以最后的比例和位置显示在显示器1上。
以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种采用手势缩放屏幕图像的方法,包括如下步骤:
检测手掌形态;
当所述手掌形态从第一手型变换为第二手型时,将屏幕图像设置为可缩放状态;
若所述手掌形态保持为第二手型,并在预设方向上发生位移,则放大或缩小所述屏幕图像。
2.根据权利要求1所述的采用手势缩放屏幕图像的方法,其特征在于,以发生位移前的位置作为参考:发生第一方向的位移时,放大所述屏幕图像;发生与所述第一方向相反的第二方向的位移时,缩小所述屏幕图像。
3.根据权利要求1所述的采用手势缩放屏幕图像的方法,其特征在于,所述第一方向为面对用户并远离用户的方向,所述第二方向为面对用户并靠近用户的方向;或者所述第一方向为面对用户并靠近用户的方向,所述第二方向为面对用户并远离用户的方向。
4.根据权利要求1所述的采用手势缩放屏幕图像的方法,其特征在于,所述位移的大小与缩放比例线性相关。
5.根据权利要求1所述的采用手势缩放屏幕图像的方法,其特征在于,所述第一手型为手掌张开,所述第二手型为抓握。
6.根据权利要求1所述的采用手势缩放屏幕图像的方法,其特征在于,还包括,当保持第二手型在与所述预设方向垂直的平面内移动时,则移动所述屏幕图像。
7.根据权利要求1所述的采用手势缩放屏幕图像的方法,其特征在于,还包括,根据手掌的位置在屏幕上显示光标位置。
8.根据权利要求7所述的采用手势缩放屏幕图像的方法,其特征在于,以所述光标所在位置为缩放中心进行缩放。
9.根据权利要求1所述的采用手势缩放屏幕图像的方法,其特征在于,还包括,当从第二手型变换为第一手型时,则解除屏幕图像的可缩放状态,并以当前缩放比例显示屏幕图像。
10.一种采用手势缩放屏幕图像的系统,其特征在于,包括:
摄像装置,用于摄取用户手势;
显示器,用于显示屏幕画面及屏幕光标;
处理系统,用于执行权利要求1~9任一项所述的采用手势缩放屏幕图像的方法。
CN201510731771.2A 2015-11-02 2015-11-02 采用手势缩放屏幕图像的方法及系统 Pending CN105334962A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510731771.2A CN105334962A (zh) 2015-11-02 2015-11-02 采用手势缩放屏幕图像的方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510731771.2A CN105334962A (zh) 2015-11-02 2015-11-02 采用手势缩放屏幕图像的方法及系统

Publications (1)

Publication Number Publication Date
CN105334962A true CN105334962A (zh) 2016-02-17

Family

ID=55285561

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510731771.2A Pending CN105334962A (zh) 2015-11-02 2015-11-02 采用手势缩放屏幕图像的方法及系统

Country Status (1)

Country Link
CN (1) CN105334962A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105892671A (zh) * 2016-04-22 2016-08-24 广东小天才科技有限公司 一种根据手掌状态产生操作指令的方法和系统
CN108763514A (zh) * 2018-05-30 2018-11-06 维沃移动通信有限公司 一种信息显示方法及移动终端
CN109343754A (zh) * 2018-08-27 2019-02-15 维沃移动通信有限公司 一种图像显示方法及终端
US11068048B2 (en) 2016-11-25 2021-07-20 Samsung Electronics Co., Ltd. Method and device for providing an image

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102236414A (zh) * 2011-05-24 2011-11-09 北京新岸线网络技术有限公司 三维显示空间中的图片操作方法和系统
CN102375538A (zh) * 2010-08-17 2012-03-14 Lg电子株式会社 显示设备及其控制方法
CN102469206A (zh) * 2010-11-18 2012-05-23 西安龙飞软件有限公司 一种利用手势对手机实现控制的方法
US20130229345A1 (en) * 2012-03-01 2013-09-05 Laura E. Day Manual Manipulation of Onscreen Objects
CN104360738A (zh) * 2014-11-06 2015-02-18 苏州触达信息技术有限公司 图形用户界面的空间手势控制方法
CN104978017A (zh) * 2014-04-14 2015-10-14 冠捷投资有限公司 利用使用者手势操控显示装置的功能选单的方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102375538A (zh) * 2010-08-17 2012-03-14 Lg电子株式会社 显示设备及其控制方法
CN102469206A (zh) * 2010-11-18 2012-05-23 西安龙飞软件有限公司 一种利用手势对手机实现控制的方法
CN102236414A (zh) * 2011-05-24 2011-11-09 北京新岸线网络技术有限公司 三维显示空间中的图片操作方法和系统
US20130229345A1 (en) * 2012-03-01 2013-09-05 Laura E. Day Manual Manipulation of Onscreen Objects
CN104978017A (zh) * 2014-04-14 2015-10-14 冠捷投资有限公司 利用使用者手势操控显示装置的功能选单的方法
CN104360738A (zh) * 2014-11-06 2015-02-18 苏州触达信息技术有限公司 图形用户界面的空间手势控制方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105892671A (zh) * 2016-04-22 2016-08-24 广东小天才科技有限公司 一种根据手掌状态产生操作指令的方法和系统
US11068048B2 (en) 2016-11-25 2021-07-20 Samsung Electronics Co., Ltd. Method and device for providing an image
CN108763514A (zh) * 2018-05-30 2018-11-06 维沃移动通信有限公司 一种信息显示方法及移动终端
CN108763514B (zh) * 2018-05-30 2021-01-26 维沃移动通信有限公司 一种信息显示方法及移动终端
CN109343754A (zh) * 2018-08-27 2019-02-15 维沃移动通信有限公司 一种图像显示方法及终端

Similar Documents

Publication Publication Date Title
US10095033B2 (en) Multimodal interaction with near-to-eye display
EP2942936B1 (en) Zoom input and camera selection
CN204046697U (zh) 一种图文采集识别装置
CN105334962A (zh) 采用手势缩放屏幕图像的方法及系统
KR101425929B1 (ko) 디스플레이 기능을 갖춘 휴대 기기
CN102614019B (zh) 手术机器人系统及其自适应控制方法
KR101797260B1 (ko) 정보 처리 장치, 정보 처리 시스템 및 정보 처리 방법
CN103929583B (zh) 一种控制智能终端的方法及智能终端
KR101631011B1 (ko) 제스처 인식 장치 및 제스처 인식 장치의 제어 방법
EP2584446A3 (en) Gui applications for use with 3d remote controller
CN111050017A (zh) 图文拍照设备
CN104378545A (zh) 一种拍照处理方法和系统
CN103838366A (zh) 脸部表情控制系统、表情控制的方法及其电脑系统
CN102281399A (zh) 一种带触摸屏的数字摄影设备及其变焦方法
EP3096216A1 (en) Information processing device, information processing program, and information processing method
CN102945077B (zh) 一种图片查看方法、装置及智能终端
CN102929547A (zh) 智能终端无接触交互方法
CN110326292A (zh) 图像显示装置以及图像显示方法及程序
CN106200942B (zh) 信息处理方法及电子设备
CN105404384A (zh) 手势操作方法、利用手势定位屏幕光标的方法及手势系统
CN105892881A (zh) 人机交互方法及装置、移动设备
CN102915193A (zh) 一种网页浏览方法、装置及智能终端
CN103699331A (zh) 一种控制屏幕画面缩放的手势方法
KR101902418B1 (ko) 휴대단말기의 이미지 편집장치 및 방법
JP6367759B2 (ja) 表示画像ズーム端末、表示画像ズーム方法及び表示画像ズームプログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20160217