CN113050868A - 一种可屏幕内触发边缘手势的控制方法 - Google Patents

一种可屏幕内触发边缘手势的控制方法 Download PDF

Info

Publication number
CN113050868A
CN113050868A CN202110372598.7A CN202110372598A CN113050868A CN 113050868 A CN113050868 A CN 113050868A CN 202110372598 A CN202110372598 A CN 202110372598A CN 113050868 A CN113050868 A CN 113050868A
Authority
CN
China
Prior art keywords
gesture
edge
screen
virtual screen
received
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110372598.7A
Other languages
English (en)
Inventor
刘杰
盖鑫
戴国忠
鹿保军
付强
田丰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Institute of Software of CAS
Hitevision Co Ltd
Original Assignee
Institute of Software of CAS
Hitevision Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Institute of Software of CAS, Hitevision Co Ltd filed Critical Institute of Software of CAS
Priority to CN202110372598.7A priority Critical patent/CN113050868A/zh
Publication of CN113050868A publication Critical patent/CN113050868A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces

Abstract

本发明公开了一种可屏幕内触发边缘手势的控制方法,其步骤包括:当在屏幕边缘区域接收到单次或多次手势轨迹时,则利用手势识别模块将接收的手势轨迹识别为对应的边缘手势,并利用边缘手势控制模块触发该边缘手势所映射的功能;当在屏幕内部区域接收到预定义手势或输入信息时,首先在屏幕上绘制虚拟屏幕边缘,生成一虚拟屏幕;然后当在该虚拟屏幕的边缘接收到单次或多次手势轨迹时,则利用手势识别模块将接收的手势轨迹识别为对应的边缘手势,并利用边缘手势控制模块触发该边缘手势所映射的功能;当在该虚拟屏幕的内部区域接收到输入手势轨迹时,则利用手势识别模块识别该输入手势轨迹对应的手势,并利用手势控制模块触发该手势所映射的功能。

Description

一种可屏幕内触发边缘手势的控制方法
技术领域
本发明涉及一种可屏幕内触发边缘手势的控制方法,属于软件技术领域。
背景技术
传统可屏幕内触发边缘手势的控制方法一般是首先接收对显示屏特殊区域(边缘区域)发出的第一触控操作,其次是根据第一触控操作的幅度,检测在特殊区域上滑动产生的第一位移,判断第一位移是否满足预设的第一距离阈值;若满足,则触发边缘手势控制;若不满足,则触发内部手势控制。
传统边缘控制手势往往需要在屏幕特殊区域(边缘区域)内才能触发控制,而在屏幕内部区域无法触发边缘手势,因为其手势的轨迹必须与屏幕边缘相接触,从而使得滑动操作在边缘区域产生的第一位移满足预设的第一距离阈值,这就在一定程度上限制了边缘手势的应用场景。但是在大屏幕应用场景下,屏幕边缘之间相距较远,使用者需要移动较远距离才可触及屏幕边缘区域,这就大大降低了边缘手势控制的交互效率与实用性。
发明内容
针对现有技术的不足,本发明的目的在于提供一种可屏幕内触发边缘手势的控制方法。本发明通过提供在屏幕内部也可触发屏幕边缘的手势控制的方案,从而提高在大尺寸屏幕交互场景中的手势控制可用性与易用性。
本发明中,在屏幕边缘处,当手势的起点或终点接触屏幕边缘时,则被判定为边缘手势,并通过与预设的边缘手势模板相匹配,并触发相应的边缘手势所映射的功能;在屏幕内部(非边缘处)首先通过手形或多指手势界定虚拟屏幕边缘,然后通过单指或多指操作在虚拟屏幕边缘上触发边缘手势模板匹配过程,识别为相应的边缘手势后,触发该边缘手指所映射的功能。
本发明的技术方案为:
一种可屏幕内触发边缘手势的控制方法,其步骤包括:
当在设定的屏幕边缘区域接收到单次或多次手势轨迹时,则利用手势识别模块将接收的手势轨迹识别为对应的边缘手势,并利用边缘手势控制模块触发该边缘手势所映射的功能;
当在设定的屏幕内部区域接收到预定义手势或输入信息时,首先在屏幕上绘制虚拟屏幕边缘,生成一个虚拟屏幕;然后当在绘制的该虚拟屏幕的边缘接收到单次或多次手势轨迹时,则利用手势识别模块将接收的手势轨迹识别为对应的边缘手势,并利用边缘手势控制模块触发该边缘手势所映射的功能;当在绘制的该虚拟屏幕的内部区域接收到输入手势轨迹时,则利用手势识别模块识别该输入手势轨迹对应的手势,并利用手势控制模块触发该手势所映射的功能。
进一步的,所述预定义手势是两个手指同时输入,当在屏幕内部区域检测到两个手指同时按下时,对两个手指按下去后产生的触点进行连线作为虚拟屏幕边缘。
进一步的,当已绘制一个虚拟屏幕后,在该屏幕内部的其他区域有使用边缘手势需求时,选中该虚拟屏幕的边缘并对其放大、缩小、左右滑动或上下滑动,在该屏幕上得到目标虚拟屏幕。
进一步的,所述虚拟屏幕的边缘为直线或非直线边缘。
进一步的,通过输入的手势轨迹与虚拟屏幕边缘的距离判定当前输入的手势轨迹是否为边缘手势。
一种服务器,其特征在于,包括存储器和处理器,所述存储器存储计算机程序,所述计算机程序被配置为由所述处理器执行,所述计算机程序包括用于执行上述方法中各步骤的指令。
一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现上述方法的步骤。
本发明具有以下优点:
本发明通过将屏幕边缘手势拓展到屏幕内部,使得在大尺寸显示屏场景下,在屏幕的任何位置都能够触发屏幕边缘手势或边缘区域功能,提高了边缘手势在大显示屏应用场景下交互效率及实用性。
附图说明
图1是屏幕边缘区域中的手势操作示意图;
图2是屏幕内部区域中虚拟屏幕边缘的绘制示意图;
图3是屏幕内部区域中的虚拟屏幕边缘区域的手势操作示意图;
图4是手势输入后的处理流程示意图。
具体实施方式
以下结合具体实例和附图对本发明进行详细说明。
1.在屏幕边缘区域
手势轨迹单次或多次接触屏幕边缘区域,如图1所示,则启动手势识别模块,将其识别为边缘手势,然后便可触发边缘手势控制模块来映射控制不同的手势轨迹。
2.在屏幕内部区域
目前常见的用户通过边缘手势来快速选择常见功能选项的方法为功能按钮放在屏幕底部,这使得用户可使用的边缘手势控制区域仅仅局限在底部一个区域,所以当处于大屏幕环境之下或者用户位于屏幕中间时,用户需要移动才能通过边缘手势控制来快速选择功能选项。
1)首先通过预定义的手形或多指手势来进行虚拟屏幕边缘区域的绘制,比如预定义的手势是两个手指,则当在屏幕内部区域检测到预定义手势时(即两个手指同时按下),对两个手指按下去后产生的触点进行连线作为虚拟屏幕边缘的一条边(两个触点作为这条边的端点),再以这条边的一个端点为固定点,与该边垂直或近似垂直90度的方向再用两个手指(其中一个手指按在固定点的位置)按下去后产生的触点进行连线作为虚拟屏幕边缘的另一条边,此时产生的两条边最大程度垂直且相交于固定点(两条边一定相交于固定点,但不一定垂直90度,只能是最大程度垂直90度),继而触发矩形补全算法,将已经有两条边的虚拟屏幕补全为一个矩形,虚拟屏幕边缘在屏幕上以线条绘制标识,如图2所示。并且用户可以选中该虚拟屏幕的边缘对其进行放大、缩小、左右滑动或上下滑动操作,以达到界定虚拟屏幕边缘的效果,此时线条区域的内部作为虚拟屏幕内部区域,如图2所示。从而通过绘制虚拟屏幕边缘的方法来扩充用户可使用的边缘手势控制区域,提升用户在大屏环境下操作的交互体验和交互效率。
2)当用户成功绘制一个虚拟屏幕边缘区域后,又产生了在屏幕内部的其他区域使用边缘手势的需求,此时可通过双击第一步产生的线条绘制标识来选中虚拟屏幕边缘,进一步地可放大、缩小、左右滑动、上下滑动虚拟屏幕边缘,达到重复编辑虚拟屏幕边缘区域的效果,从而可以减少用户的重复操作。
3)通过单指或多指手势与虚拟屏幕边缘的距离来进行边缘手势识别判定,在虚拟屏幕边缘触发手势控制如图3所示。
当手势有单次或多次与虚拟屏幕边缘接触时,则将手势识别为边缘手势;
当手势未与虚拟屏幕边缘接触时,则识别为普通手势;
其处理流程如图4所示。
首先对于输入手势,判断其是否符合虚拟边缘触发手势,如果符合,则判断屏幕上是否已存在虚拟屏幕;如果不存在,则进一步判断输入信息是否为虚拟屏幕绘制信息,如果是,则在屏幕上绘制虚拟屏幕边缘,生成一虚拟屏幕;然后当在绘制的该虚拟屏幕的边缘接收到单次或多次手势轨迹时,则利用手势识别模块将接收的手势轨迹识别为对应的边缘手势,并利用边缘手势控制模块触发该边缘手势所映射的功能;当在绘制的该虚拟屏幕的内部区域接收到输入手势轨迹时,则利用手势识别模块识别该输入手势轨迹对应的手势,并利用手势控制模块触发该手势所映射的功能。如果在屏幕上已存在虚拟屏幕;则消除该虚拟屏幕并根据当前输入手势重新生成一虚拟屏幕。
如果当前输入手势不符合虚拟边缘触发手势,则识别该输入手势是否位于屏幕的设定物理边缘区域,如果是,则利用手势识别模块将接收的手势轨迹识别为对应的边缘手势,并利用边缘手势控制模块触发该边缘手势所映射的功能。如果该输入手势不位于屏幕的设定物理边缘区域,则进一步判断是否在屏幕上已绘制虚拟屏幕的边缘,如果是,则利用手势识别模块将接收的手势轨迹识别为对应的边缘手势,并利用边缘手势控制模块触发该边缘手势所映射的功能;当在绘制的该虚拟屏幕的内部区域接收到输入手势轨迹时,则利用手势识别模块识别该输入手势轨迹对应的手势,并利用手势控制模块触发该手势所映射的功能。
本发明也可拓展到非直线边缘形状(如曲线边缘)的边缘手势及边缘区域功能映射。
以上所述仅为本发明的较佳实施方式而已,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (7)

1.一种可屏幕内触发边缘手势的控制方法,其步骤包括:
当在设定的屏幕边缘区域接收到单次或多次手势轨迹时,则利用手势识别模块将接收的手势轨迹识别为对应的边缘手势,并利用边缘手势控制模块触发该边缘手势所映射的功能;
当在设定的屏幕内部区域接收到预定义手势或输入信息时,首先在屏幕上绘制虚拟屏幕边缘,生成一虚拟屏幕;然后当在该虚拟屏幕的边缘接收到单次或多次手势轨迹时,则利用手势识别模块将接收的手势轨迹识别为对应的边缘手势,并利用边缘手势控制模块触发该边缘手势所映射的功能;当在该虚拟屏幕的内部区域接收到输入手势轨迹时,则利用手势识别模块识别该输入手势轨迹对应的手势,并利用手势控制模块触发该手势所映射的功能。
2.如权利要求1所述的方法,其特征在于,所述预定义手势是两个手指同时输入,当在屏幕内部区域检测到两个手指同时按下时,对两个手指按下去后产生的触点进行连线作为虚拟屏幕边缘。
3.如权利要求1或2所述的方法,其特征在于,当已绘制一个虚拟屏幕后,在该屏幕内部的其他区域有使用边缘手势需求时,选中该虚拟屏幕的边缘并对其放大、缩小、左右滑动或上下滑动,在该屏幕上得到目标虚拟屏幕。
4.如权利要求1所述的方法,其特征在于,所述虚拟屏幕的边缘为直线或非直线边缘。
5.如权利要求1所述的方法,其特征在于,通过输入的手势轨迹与虚拟屏幕边缘的距离判定当前输入的手势轨迹是否为边缘手势。
6.一种服务器,其特征在于,包括存储器和处理器,所述存储器存储计算机程序,所述计算机程序被配置为由所述处理器执行,所述计算机程序包括用于执行权利要求1至5任一所述方法中各步骤的指令。
7.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至5任一所述方法的步骤。
CN202110372598.7A 2021-04-07 2021-04-07 一种可屏幕内触发边缘手势的控制方法 Pending CN113050868A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110372598.7A CN113050868A (zh) 2021-04-07 2021-04-07 一种可屏幕内触发边缘手势的控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110372598.7A CN113050868A (zh) 2021-04-07 2021-04-07 一种可屏幕内触发边缘手势的控制方法

Publications (1)

Publication Number Publication Date
CN113050868A true CN113050868A (zh) 2021-06-29

Family

ID=76518874

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110372598.7A Pending CN113050868A (zh) 2021-04-07 2021-04-07 一种可屏幕内触发边缘手势的控制方法

Country Status (1)

Country Link
CN (1) CN113050868A (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104281395A (zh) * 2013-07-08 2015-01-14 联想(北京)有限公司 交互信息处理方法和电子设备
CN110275665A (zh) * 2019-05-23 2019-09-24 深圳龙图腾创新设计有限公司 一种触摸屏操作方法、电子设备及存储介质
CN111427500A (zh) * 2020-03-20 2020-07-17 Oppo广东移动通信有限公司 触摸屏手势操作控制方法、装置、终端设备以及存储介质

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104281395A (zh) * 2013-07-08 2015-01-14 联想(北京)有限公司 交互信息处理方法和电子设备
CN110275665A (zh) * 2019-05-23 2019-09-24 深圳龙图腾创新设计有限公司 一种触摸屏操作方法、电子设备及存储介质
CN111427500A (zh) * 2020-03-20 2020-07-17 Oppo广东移动通信有限公司 触摸屏手势操作控制方法、装置、终端设备以及存储介质

Similar Documents

Publication Publication Date Title
US11592980B2 (en) Techniques for image-based search using touch controls
CN107632895B (zh) 一种信息共享方法及移动终端
CN106484266B (zh) 一种文本处理方法及装置
US9069386B2 (en) Gesture recognition device, method, program, and computer-readable medium upon which program is stored
JP6427559B6 (ja) 手書き入力のための永久同期システム
US10248635B2 (en) Method for inserting characters in a character string and the corresponding digital service
WO2016206279A1 (zh) 触控显示装置及其触控方法
US20150154444A1 (en) Electronic device and method
US20140298223A1 (en) Systems and methods for drawing shapes and issuing gesture-based control commands on the same draw grid
US9025878B2 (en) Electronic apparatus and handwritten document processing method
CN110045840B (zh) 一种书写轨迹关联的方法、装置、终端设备和存储介质
WO2019062243A1 (zh) 触摸操作的识别方法、装置及电子设备
US20150077358A1 (en) Electronic device and method of controlling the same
CN107450824B (zh) 一种对象删除方法和终端
KR101158679B1 (ko) 직접입력 방식의 전자문서 상의 도형입력 방법, 그리고 직접입력 방식의 전자문서 상의 도형입력 프로그램을 기록한 컴퓨터로 판독가능한 기록매체
CN105653193A (zh) 一种搜索的方法及终端
JP2000268130A (ja) 文字軌跡検出方法、文字軌跡検出装置および記憶媒体
WO2017143575A1 (zh) 对图片的内容进行检索的方法、便携式电子设备和图形用户界面
CN105446629A (zh) 内容面板的切换方法、装置及终端
CN104020989A (zh) 基于远程应用的控制方法和系统
WO2016145827A1 (zh) 终端的控制方法及装置
JP2023533281A (ja) デバイス制御方法及び装置、記憶媒体並びに電子デバイス
CN104460999A (zh) 一种带拐点的手势识别方法及装置
CN113050868A (zh) 一种可屏幕内触发边缘手势的控制方法
CN116311526A (zh) 图像区域确定方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210629

RJ01 Rejection of invention patent application after publication