CN112306237A - 基于电磁波反射的三维触控方法、触控设备、存储介质 - Google Patents

基于电磁波反射的三维触控方法、触控设备、存储介质 Download PDF

Info

Publication number
CN112306237A
CN112306237A CN202011131795.1A CN202011131795A CN112306237A CN 112306237 A CN112306237 A CN 112306237A CN 202011131795 A CN202011131795 A CN 202011131795A CN 112306237 A CN112306237 A CN 112306237A
Authority
CN
China
Prior art keywords
electromagnetic wave
hand
user
dimensional
method based
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011131795.1A
Other languages
English (en)
Inventor
陈龙
周阳
罗益峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Lango Electronic Science and Technology Co Ltd
Original Assignee
Guangzhou Lango Electronic Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Lango Electronic Science and Technology Co Ltd filed Critical Guangzhou Lango Electronic Science and Technology Co Ltd
Priority to CN202011131795.1A priority Critical patent/CN112306237A/zh
Publication of CN112306237A publication Critical patent/CN112306237A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/046Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by electromagnetic means

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明提供一种基于电磁波反射的三维触控方法、触控设备、存储介质,其中方法包括:电磁波识别模组远程捕获用户的手部原始位置;继续捕获用户的手势动作,将手部的移动距离转换成空间坐标;将空间坐标转成对应的系统交互事件。本发明的基于电磁波反射的三维触控方法,采用电磁波识别模组可以实现远程捕获手势,实现远程触屏操作。空间坐标的Z值变化,实现了远近操作。使得触屏不仅限于在某一个水平面上的上下左右移动、拖拽、点击等二维手势动作,丰富了操作手势。

Description

基于电磁波反射的三维触控方法、触控设备、存储介质
技术领域
本发明涉及触控技术领域,特别涉及一种基于电磁波反射的三维触控方法、触控设备、存储介质。
背景技术
当前社会科技蓬勃发展,大量的智能设备层出不穷。而智能设备最常用的人机交互方式通常是通过点击触摸屏,或操作其他外接物理设备完成。受限于传统交互设备的物理特性,用户必须近距离直接接触设备,且只能进行有限的交互动作。比如触摸屏类设备,必须近距离物理触屏,才能对设备进行人机交互。比如电脑类设备,需要通过鼠标进行人机交互。还有其他传统设备,用户都需要与其近距离物理接触。交互方式也仅局限于某一个水平面上的上下左右移动,拖拽,点击等二维手势动作。
发明内容
本发明的目的是提供一种基于电磁波反射的三维触控方法、触控设备、存储介质,可以解决现有技术中只能近距离人机交互的问题。
本发明的目的是通过以下技术方案实现的:
第一方面,本发明提供一种基于电磁波反射的三维触控方法,包括以下步骤:
步骤S1、电磁波识别模组远程捕获用户的手部原始位置;
步骤S2、继续捕获用户的手势动作,将手部的移动距离转换成空间坐标;
步骤S3、将空间坐标转成对应的系统交互事件。
进一步的,所述的远程捕获和识别用户的手部原始位置包括:
步骤S101、建立空间坐标系和用户的三维手势的坐标系原点;
步骤S102、电磁波识别模组发射电磁波,当发射的电磁波经过用户手部反射后,回传到电磁波识别模组中的传感器,利用传感器获得三维手势的坐标系原点相对空间坐标原点的位置,作为用户的手部原始位置,用空间坐标(X1,Y1,Z1)表示。
进一步的,所述的空间坐标系以触控设备的显示屏水平方向作为X轴,以显示屏竖直方向作为Y轴,以垂直显示屏平面的方向为Z轴。
进一步的,所述的将手部的移动距离转换成空间坐标包括:
电磁波识别模组捕获移动后的手部位置,用空间坐标(X2,Y2,Z2)表示;
手部的移动位置用空间坐标表示为(X2-X1,Y2-Y1,Z2-Z1)。
第二方面,本发明提供一种基于电磁波反射的三维触控设备,包括电磁波识别模组;所述的电磁波识别模组用于远程捕获用户的手部原始位置及移动后的手部位置,并将移动距离转化为空间坐标值,进而将空间坐标值转换成对应的系统交互事件。
进一步的,还包括显示屏,所述的显示屏用于显示触控设备的画面。
进一步的,所述的电磁波识别模组包括电磁波发射/接收模块、传感器、计算模块和交互执行模块;所述的电磁波发射/接收模块用于发射电磁波和接收返回的电磁波;所述的传感器根据从发射电磁波到接收到返回的电磁波所用的时间,测量出用户的手部原始位置和移动后的手部位置;所述的计算模块将手部移动距离转换成空间坐标;所述的交互执行模块根据空间坐标执行交互事件。
第三方面,本发明提供一种存储介质,所述的存储介质中存有计算机程序,其特征在于,运行所述计算机程序后可以实现上述基于电磁波反射的三维触控方法。
本发明的基于电磁波反射的三维触控方法,采用电磁波识别模组可以实现远程捕获手势,实现远程触屏操作。空间坐标的Z值变化,实现了远近操作。使得触屏不仅限于在某一个水平面上的上下左右移动、拖拽、点击等二维手势动作,丰富了操作手势。
附图说明
图1为本发明的空间坐标系建立示意图;
图2为本发明的三维触控方法流程示意图。
具体实施方式
下面结合附图对本公开实施例进行详细描述。
以下通过特定的具体实例说明本公开的实施方式,本领域技术人员可由本说明书所揭露的内容轻易地了解本公开的其他优点与功效。显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。本公开还可以通过另外不同的具体实施方式加以实施或应用,本说明书中的各项细节也可以基于不同观点与应用,在没有背离本公开的精神下进行各种修饰或改变。需说明的是,在不冲突的情况下,以下实施例及实施例中的特征可以相互组合。基于本公开中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本公开保护的范围。
本发明的基于电磁波反射的三维触控方法,包括以下步骤:
步骤S1、电磁波识别模组远程捕获和识别用户的手部原始位置。
进一步的,在本申请的优选实施方式中,远程捕获和识别用户的手部原始位置包括:
步骤S101、建立空间坐标系和用户的三维手势的坐标系原点。
触控设备的电磁波识别模组先建立空间坐标系,如图1所示。以触控设备的显示屏水平方向作为X轴,以显示屏竖直方向作为Y轴,以垂直显示屏平面的方向为Z轴。同时,选用户手部某一位置作为用户的三维手势的坐标系原点。
步骤S102、电磁波识别模组发射电磁波,当发射的电磁波经过用户手部反射后,回传到电磁波识别模组中的传感器,利用传感器获得三维手势的坐标系原点相对空间坐标原点的位置,作为用户的手部原始位置。用户的手部原始位置用空间坐标(X1,Y1,Z1)表示。
传感器根据电磁波发射至返回的时间来计算用户手部距离空间原点的距离。
步骤S2、继续捕获用户的手势动作,将手部的移动距离转换成空间坐标。
进一步的,在本申请的优选实施方式中,将手部的移动距离转换成空间坐标具体包括:电磁波识别模组继续捕获移动后的手部位置,用空间坐标(X2,Y2,Z2)表示。手部的移动距离,也就是三维手势的坐标系原点相对于空间坐标系原点的移动距离用坐标表示为(X2-X1,Y2-Y1,Z2-Z1)。X2-X1相当于三维手势的坐标系原点在水平方向相对于空间坐标系的偏移位置,Y2-Y1相当于三维手势的坐标系原点在竖直方向相对于空间坐标系的偏移位置,Z2-Z1相当于三维手势的坐标系原点在垂直显示屏平面的方向相对于空间坐标系的偏移位置。设X2-X1=X,Y2-Y1=Y,Z2-Z1=Z。则手部的移动距离转换成空间坐标为(X,Y,Z)。
步骤S3、将空间坐标转成对应的系统交互事件。
交互事件是指具体的触控操作,如果X变化,表示需要在显示屏上水平滑动;如果Y变化,表示需要在显示屏上垂直滑动;如果Z变化,表示进行远近操作。
由此可见,采用电磁波识别模组可以实现远程捕获手势,实现远程触屏操作。空间坐标的Z值变化,实现了远近操作。使得触屏不仅限于在某一个水平面上的上下左右移动、拖拽、点击等二维手势动作,丰富了操作手势。
本发明还提供一种基于电磁波反射的三维触控设备,至少包括电磁波识别模组和显示屏。所述的电磁波识别模组用于远程捕获和识别用户的手势动作,并将手势动作转化为空间坐标值,进而将空间坐标值转换成对应的系统交互事件。所述的显示屏用于显示画面。
进一步的,在本申请的优选实施例中,所述的电磁波识别模组包括电磁波发射/接收模块、传感器、计算模块和交互执行模块。所述的电磁波发射/接收模块用于发射电磁波和接收返回的电磁波。所述的传感器根据从发射电磁波到接收到返回的电磁波所用的时间,测量出用户的手部原始位置和移动后的手部位置。所述的计算模块将手部移动距离转换成空间坐标。所述的交互执行模块根据空间坐标执行交互事件。所述的移动距离是指移动后的手部位置相对于手部原始位置的移动距离。
本发明还提供一种存储介质,所述的存储介质中存有计算机程序,运行所述计算机程序后可以实现下面的方法:
步骤S1、电磁波识别模组远程捕获用户的手部原始位置;
步骤S2、继续捕获用户的手势动作,将手部的移动距离转换成空间坐标;
步骤S3、将空间坐标转成对应的系统交互事件。
进一步的,在本申请的优选实施方式中,所述的远程捕获和识别用户的手部原始位置包括:
步骤S101、建立空间坐标系和用户的三维手势的坐标系原点;
步骤S102、电磁波识别模组发射电磁波,当发射的电磁波经过用户手部反射后,回传到电磁波识别模组中的传感器,利用传感器获得三维手势的坐标系原点相对空间坐标原点的位置,作为用户的手部原始位置,用空间坐标(X1,Y1,Z1)表示。
进一步的,在本申请的优选实施方式中,所述的空间坐标系以触控设备的显示屏水平方向作为X轴,以显示屏竖直方向作为Y轴,以垂直显示屏平面的方向为Z轴。
进一步的,在本申请的优选实施方式中,所述的将手部的移动距离转换成空间坐标包括:
电磁波识别模组捕获移动后的手部位置,用空间坐标(X2,Y2,Z2)表示;
手部的移动位置用空间坐标表示为(X2-X1,Y2-Y1,Z2-Z1)。
以上仅为说明本发明的实施方式,并不用于限制本发明,对于本领域的技术人员来说,凡在本发明的精神和原则之内,不经过创造性劳动所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (8)

1.基于电磁波反射的三维触控方法,其特征在于,包括以下步骤:
步骤S1、电磁波识别模组远程捕获用户的手部原始位置;
步骤S2、继续捕获用户的手势动作,将手部的移动距离转换成空间坐标;
步骤S3、将空间坐标转成对应的系统交互事件。
2.根据权利要求1所述的基于电磁波反射的三维触控方法,其特征在于,所述的远程捕获和识别用户的手部原始位置包括:
步骤S101、建立空间坐标系和用户的三维手势的坐标系原点;
步骤S102、电磁波识别模组发射电磁波,当发射的电磁波经过用户手部反射后,回传到电磁波识别模组中的传感器,利用传感器获得三维手势的坐标系原点相对空间坐标原点的位置,作为用户的手部原始位置,用空间坐标(X1,Y1,Z1)表示。
3.根据权利要求2所述的基于电磁波反射的三维触控方法,其特征在于,所述的空间坐标系以触控设备的显示屏水平方向作为X轴,以显示屏竖直方向作为Y轴,以垂直显示屏平面的方向为Z轴。
4.根据权利要求1所述的基于电磁波反射的三维触控方法,其特征在于,所述的将手部的移动距离转换成空间坐标包括:
电磁波识别模组捕获移动后的手部位置,用空间坐标(X2,Y2,Z2)表示;
手部的移动位置用空间坐标表示为(X2-X1,Y2-Y1,Z2-Z1)。
5.基于电磁波反射的三维触控设备,其特征在于,包括电磁波识别模组;所述的电磁波识别模组用于远程捕获用户的手部原始位置及移动后的手部位置,并将移动距离转化为空间坐标值,进而将空间坐标值转换成对应的系统交互事件。
6.根据权利要求5所述的基于电磁波反射的三维触控设备,其特征在于,还包括显示屏,所述的显示屏用于显示触控设备的画面。
7.根据权利要求5或6所述的基于电磁波反射的三维触控设备,其特征在于,所述的电磁波识别模组包括电磁波发射/接收模块、传感器、计算模块和交互执行模块;所述的电磁波发射/接收模块用于发射电磁波和接收返回的电磁波;所述的传感器根据从发射电磁波到接收到返回的电磁波所用的时间,测量出用户的手部原始位置和移动后的手部位置;所述的计算模块将手部移动距离转换成空间坐标;所述的交互执行模块根据空间坐标执行交互事件。
8.一种存储介质,所述的存储介质中存有计算机程序,其特征在于,运行所述计算机程序后可以实现权利要求1至4任一项所述的基于电磁波反射的三维触控方法。
CN202011131795.1A 2020-10-21 2020-10-21 基于电磁波反射的三维触控方法、触控设备、存储介质 Pending CN112306237A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011131795.1A CN112306237A (zh) 2020-10-21 2020-10-21 基于电磁波反射的三维触控方法、触控设备、存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011131795.1A CN112306237A (zh) 2020-10-21 2020-10-21 基于电磁波反射的三维触控方法、触控设备、存储介质

Publications (1)

Publication Number Publication Date
CN112306237A true CN112306237A (zh) 2021-02-02

Family

ID=74328619

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011131795.1A Pending CN112306237A (zh) 2020-10-21 2020-10-21 基于电磁波反射的三维触控方法、触控设备、存储介质

Country Status (1)

Country Link
CN (1) CN112306237A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116681435A (zh) * 2023-01-03 2023-09-01 黑龙江圣轨科技有限公司 一种基于区块链的网络数据安全监测系统及方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102469206A (zh) * 2010-11-18 2012-05-23 西安龙飞软件有限公司 一种利用手势对手机实现控制的方法
CN102999152A (zh) * 2011-09-09 2013-03-27 康佳集团股份有限公司 一种手势动作识别方法和系统
US20130296057A1 (en) * 2012-05-03 2013-11-07 Wms Gaming Inc. Gesture fusion
CN106527671A (zh) * 2015-09-09 2017-03-22 广州杰赛科技股份有限公司 一种设备隔空控制方法
CN108052202A (zh) * 2017-12-11 2018-05-18 深圳市星野信息技术有限公司 一种3d交互方法、装置、计算机设备及存储介质
CN111258427A (zh) * 2020-01-17 2020-06-09 哈尔滨拓博科技有限公司 一种基于双目相机手势交互的黑板控制方法及控制系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102469206A (zh) * 2010-11-18 2012-05-23 西安龙飞软件有限公司 一种利用手势对手机实现控制的方法
CN102999152A (zh) * 2011-09-09 2013-03-27 康佳集团股份有限公司 一种手势动作识别方法和系统
US20130296057A1 (en) * 2012-05-03 2013-11-07 Wms Gaming Inc. Gesture fusion
CN106527671A (zh) * 2015-09-09 2017-03-22 广州杰赛科技股份有限公司 一种设备隔空控制方法
CN108052202A (zh) * 2017-12-11 2018-05-18 深圳市星野信息技术有限公司 一种3d交互方法、装置、计算机设备及存储介质
CN111258427A (zh) * 2020-01-17 2020-06-09 哈尔滨拓博科技有限公司 一种基于双目相机手势交互的黑板控制方法及控制系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116681435A (zh) * 2023-01-03 2023-09-01 黑龙江圣轨科技有限公司 一种基于区块链的网络数据安全监测系统及方法

Similar Documents

Publication Publication Date Title
US10521021B2 (en) Detecting, representing, and interpreting three-space input: gestural continuum subsuming freespace, proximal, and surface-contact modes
US9495013B2 (en) Multi-modal gestural interface
US8681098B2 (en) Detecting, representing, and interpreting three-space input: gestural continuum subsuming freespace, proximal, and surface-contact modes
US10162429B2 (en) Gesture enabled keyboard
US8493341B2 (en) Optical touch display device and method thereof
EP2270630A2 (en) Gesture recognition method and touch system incorporating the same
JP5807686B2 (ja) 画像処理装置、画像処理方法及びプログラム
US8648808B2 (en) Three-dimensional human-computer interaction system that supports mouse operations through the motion of a finger and an operation method thereof
EP2427857A1 (en) Gesture-based control systems including the representation, manipulation, and exchange of data
CN103970264B (zh) 手势辨识与控制方法及其装置
KR20090038413A (ko) 멀티 터치 기반 대형 인터랙티브 디스플레이 시스템 및 그 방법
EP2577432A2 (en) Virtual touch interface
JP2010217719A (ja) 装着型表示装置、その制御方法及びプログラム
CN112068698A (zh) 一种交互方法、装置及电子设备、计算机存储介质
CN103019518A (zh) 一种自动调整人机交互界面的方法
CN104899361A (zh) 一种远程操控方法及装置
CN101833401B (zh) 光学触控显示装置及其操作方法
CN102968245B (zh) 鼠标触摸协同控制方法、装置及智能电视交互方法、系统
CN112306237A (zh) 基于电磁波反射的三维触控方法、触控设备、存储介质
TW201439813A (zh) 顯示設備及其控制系統和方法
CN102520794A (zh) 手势辨识系统及方法
CN116301321A (zh) 一种智能穿戴设备的控制方法及相关设备
CN114706487A (zh) 字符输入方法、装置、电子设备及可读存储介质
JP2018063555A (ja) 情報処理装置、情報処理方法及びプログラム
Kojima et al. Hand manipulation of virtual objects in wearable augmented reality

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: Room 238, room 406, No.1, Yichuang street, Huangpu District, Guangzhou, Guangdong 510000

Applicant after: Guangzhou langguo Electronic Technology Co.,Ltd.

Address before: 510000 unit a and B, zone 02, 4th floor, No. 136, Gaopu Road, high tech Development Zone, Tianhe District, Guangzhou City, Guangdong Province

Applicant before: GUANGZHOU LANGO ELECTRONIC SCIENCE & TECHNOLOGY Co.,Ltd.