CN112306237A - 基于电磁波反射的三维触控方法、触控设备、存储介质 - Google Patents
基于电磁波反射的三维触控方法、触控设备、存储介质 Download PDFInfo
- Publication number
- CN112306237A CN112306237A CN202011131795.1A CN202011131795A CN112306237A CN 112306237 A CN112306237 A CN 112306237A CN 202011131795 A CN202011131795 A CN 202011131795A CN 112306237 A CN112306237 A CN 112306237A
- Authority
- CN
- China
- Prior art keywords
- electromagnetic wave
- hand
- user
- dimensional
- method based
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 18
- 230000009471 action Effects 0.000 claims abstract description 10
- 230000007474 system interaction Effects 0.000 claims abstract description 8
- 230000003993 interaction Effects 0.000 claims description 13
- 238000004590 computer program Methods 0.000 claims description 6
- 238000004364 calculation method Methods 0.000 claims description 5
- 230000002452 interceptive effect Effects 0.000 claims description 3
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/046—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by electromagnetic means
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- General Physics & Mathematics (AREA)
- Electromagnetism (AREA)
- Position Input By Displaying (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明提供一种基于电磁波反射的三维触控方法、触控设备、存储介质，其中方法包括：电磁波识别模组远程捕获用户的手部原始位置；继续捕获用户的手势动作，将手部的移动距离转换成空间坐标；将空间坐标转成对应的系统交互事件。本发明的基于电磁波反射的三维触控方法，采用电磁波识别模组可以实现远程捕获手势，实现远程触屏操作。空间坐标的Z值变化，实现了远近操作。使得触屏不仅限于在某一个水平面上的上下左右移动、拖拽、点击等二维手势动作，丰富了操作手势。
Description
技术领域
本发明涉及触控技术领域，特别涉及一种基于电磁波反射的三维触控方法、触控设备、存储介质。
背景技术
当前社会科技蓬勃发展，大量的智能设备层出不穷。而智能设备最常用的人机交互方式通常是通过点击触摸屏，或操作其他外接物理设备完成。受限于传统交互设备的物理特性，用户必须近距离直接接触设备，且只能进行有限的交互动作。比如触摸屏类设备，必须近距离物理触屏，才能对设备进行人机交互。比如电脑类设备，需要通过鼠标进行人机交互。还有其他传统设备，用户都需要与其近距离物理接触。交互方式也仅局限于某一个水平面上的上下左右移动，拖拽，点击等二维手势动作。
发明内容
本发明的目的是提供一种基于电磁波反射的三维触控方法、触控设备、存储介质，可以解决现有技术中只能近距离人机交互的问题。
本发明的目的是通过以下技术方案实现的：
第一方面，本发明提供一种基于电磁波反射的三维触控方法，包括以下步骤：
步骤S1、电磁波识别模组远程捕获用户的手部原始位置；
步骤S2、继续捕获用户的手势动作，将手部的移动距离转换成空间坐标；
步骤S3、将空间坐标转成对应的系统交互事件。
进一步的，所述的远程捕获和识别用户的手部原始位置包括：
步骤S101、建立空间坐标系和用户的三维手势的坐标系原点；
步骤S102、电磁波识别模组发射电磁波，当发射的电磁波经过用户手部反射后，回传到电磁波识别模组中的传感器，利用传感器获得三维手势的坐标系原点相对空间坐标原点的位置，作为用户的手部原始位置，用空间坐标(X1,Y1,Z1)表示。
进一步的，所述的空间坐标系以触控设备的显示屏水平方向作为X轴，以显示屏竖直方向作为Y轴，以垂直显示屏平面的方向为Z轴。
进一步的，所述的将手部的移动距离转换成空间坐标包括：
电磁波识别模组捕获移动后的手部位置，用空间坐标(X2,Y2,Z2)表示；
手部的移动位置用空间坐标表示为(X2-X1,Y2-Y1,Z2-Z1)。
第二方面，本发明提供一种基于电磁波反射的三维触控设备，包括电磁波识别模组；所述的电磁波识别模组用于远程捕获用户的手部原始位置及移动后的手部位置，并将移动距离转化为空间坐标值，进而将空间坐标值转换成对应的系统交互事件。
进一步的，还包括显示屏，所述的显示屏用于显示触控设备的画面。
进一步的，所述的电磁波识别模组包括电磁波发射/接收模块、传感器、计算模块和交互执行模块；所述的电磁波发射/接收模块用于发射电磁波和接收返回的电磁波；所述的传感器根据从发射电磁波到接收到返回的电磁波所用的时间，测量出用户的手部原始位置和移动后的手部位置；所述的计算模块将手部移动距离转换成空间坐标；所述的交互执行模块根据空间坐标执行交互事件。
第三方面，本发明提供一种存储介质，所述的存储介质中存有计算机程序，其特征在于，运行所述计算机程序后可以实现上述基于电磁波反射的三维触控方法。
本发明的基于电磁波反射的三维触控方法，采用电磁波识别模组可以实现远程捕获手势，实现远程触屏操作。空间坐标的Z值变化，实现了远近操作。使得触屏不仅限于在某一个水平面上的上下左右移动、拖拽、点击等二维手势动作，丰富了操作手势。
附图说明
图1为本发明的空间坐标系建立示意图；
图2为本发明的三维触控方法流程示意图。
具体实施方式
下面结合附图对本公开实施例进行详细描述。
以下通过特定的具体实例说明本公开的实施方式，本领域技术人员可由本说明书所揭露的内容轻易地了解本公开的其他优点与功效。显然，所描述的实施例仅仅是本公开一部分实施例，而不是全部的实施例。本公开还可以通过另外不同的具体实施方式加以实施或应用，本说明书中的各项细节也可以基于不同观点与应用，在没有背离本公开的精神下进行各种修饰或改变。需说明的是，在不冲突的情况下，以下实施例及实施例中的特征可以相互组合。基于本公开中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本公开保护的范围。
本发明的基于电磁波反射的三维触控方法，包括以下步骤：
步骤S1、电磁波识别模组远程捕获和识别用户的手部原始位置。
进一步的，在本申请的优选实施方式中，远程捕获和识别用户的手部原始位置包括：
步骤S101、建立空间坐标系和用户的三维手势的坐标系原点。
触控设备的电磁波识别模组先建立空间坐标系，如图1所示。以触控设备的显示屏水平方向作为X轴，以显示屏竖直方向作为Y轴，以垂直显示屏平面的方向为Z轴。同时，选用户手部某一位置作为用户的三维手势的坐标系原点。
步骤S102、电磁波识别模组发射电磁波，当发射的电磁波经过用户手部反射后，回传到电磁波识别模组中的传感器，利用传感器获得三维手势的坐标系原点相对空间坐标原点的位置，作为用户的手部原始位置。用户的手部原始位置用空间坐标(X1,Y1,Z1)表示。
传感器根据电磁波发射至返回的时间来计算用户手部距离空间原点的距离。
步骤S2、继续捕获用户的手势动作，将手部的移动距离转换成空间坐标。
进一步的，在本申请的优选实施方式中，将手部的移动距离转换成空间坐标具体包括：电磁波识别模组继续捕获移动后的手部位置，用空间坐标(X2,Y2,Z2)表示。手部的移动距离，也就是三维手势的坐标系原点相对于空间坐标系原点的移动距离用坐标表示为(X2-X1,Y2-Y1,Z2-Z1)。X2-X1相当于三维手势的坐标系原点在水平方向相对于空间坐标系的偏移位置，Y2-Y1相当于三维手势的坐标系原点在竖直方向相对于空间坐标系的偏移位置，Z2-Z1相当于三维手势的坐标系原点在垂直显示屏平面的方向相对于空间坐标系的偏移位置。设X2-X1＝X，Y2-Y1＝Y，Z2-Z1＝Z。则手部的移动距离转换成空间坐标为(X,Y,Z)。
步骤S3、将空间坐标转成对应的系统交互事件。
交互事件是指具体的触控操作，如果X变化，表示需要在显示屏上水平滑动；如果Y变化，表示需要在显示屏上垂直滑动；如果Z变化，表示进行远近操作。
由此可见，采用电磁波识别模组可以实现远程捕获手势，实现远程触屏操作。空间坐标的Z值变化，实现了远近操作。使得触屏不仅限于在某一个水平面上的上下左右移动、拖拽、点击等二维手势动作，丰富了操作手势。
本发明还提供一种基于电磁波反射的三维触控设备，至少包括电磁波识别模组和显示屏。所述的电磁波识别模组用于远程捕获和识别用户的手势动作，并将手势动作转化为空间坐标值，进而将空间坐标值转换成对应的系统交互事件。所述的显示屏用于显示画面。
进一步的，在本申请的优选实施例中，所述的电磁波识别模组包括电磁波发射/接收模块、传感器、计算模块和交互执行模块。所述的电磁波发射/接收模块用于发射电磁波和接收返回的电磁波。所述的传感器根据从发射电磁波到接收到返回的电磁波所用的时间，测量出用户的手部原始位置和移动后的手部位置。所述的计算模块将手部移动距离转换成空间坐标。所述的交互执行模块根据空间坐标执行交互事件。所述的移动距离是指移动后的手部位置相对于手部原始位置的移动距离。
本发明还提供一种存储介质，所述的存储介质中存有计算机程序，运行所述计算机程序后可以实现下面的方法：
步骤S1、电磁波识别模组远程捕获用户的手部原始位置；
步骤S2、继续捕获用户的手势动作，将手部的移动距离转换成空间坐标；
步骤S3、将空间坐标转成对应的系统交互事件。
进一步的，在本申请的优选实施方式中，所述的远程捕获和识别用户的手部原始位置包括：
步骤S101、建立空间坐标系和用户的三维手势的坐标系原点；
步骤S102、电磁波识别模组发射电磁波，当发射的电磁波经过用户手部反射后，回传到电磁波识别模组中的传感器，利用传感器获得三维手势的坐标系原点相对空间坐标原点的位置，作为用户的手部原始位置，用空间坐标(X1,Y1,Z1)表示。
进一步的，在本申请的优选实施方式中，所述的空间坐标系以触控设备的显示屏水平方向作为X轴，以显示屏竖直方向作为Y轴，以垂直显示屏平面的方向为Z轴。
进一步的，在本申请的优选实施方式中，所述的将手部的移动距离转换成空间坐标包括：
电磁波识别模组捕获移动后的手部位置，用空间坐标(X2,Y2,Z2)表示；
手部的移动位置用空间坐标表示为(X2-X1,Y2-Y1,Z2-Z1)。
以上仅为说明本发明的实施方式，并不用于限制本发明，对于本领域的技术人员来说，凡在本发明的精神和原则之内，不经过创造性劳动所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
Claims (8)
1.基于电磁波反射的三维触控方法，其特征在于，包括以下步骤：
步骤S1、电磁波识别模组远程捕获用户的手部原始位置；
步骤S2、继续捕获用户的手势动作，将手部的移动距离转换成空间坐标；
步骤S3、将空间坐标转成对应的系统交互事件。
2.根据权利要求1所述的基于电磁波反射的三维触控方法，其特征在于，所述的远程捕获和识别用户的手部原始位置包括：
步骤S101、建立空间坐标系和用户的三维手势的坐标系原点；
步骤S102、电磁波识别模组发射电磁波，当发射的电磁波经过用户手部反射后，回传到电磁波识别模组中的传感器，利用传感器获得三维手势的坐标系原点相对空间坐标原点的位置，作为用户的手部原始位置，用空间坐标(X1,Y1,Z1)表示。
3.根据权利要求2所述的基于电磁波反射的三维触控方法，其特征在于，所述的空间坐标系以触控设备的显示屏水平方向作为X轴，以显示屏竖直方向作为Y轴，以垂直显示屏平面的方向为Z轴。
4.根据权利要求1所述的基于电磁波反射的三维触控方法，其特征在于，所述的将手部的移动距离转换成空间坐标包括：
电磁波识别模组捕获移动后的手部位置，用空间坐标(X2,Y2,Z2)表示；
手部的移动位置用空间坐标表示为(X2-X1,Y2-Y1,Z2-Z1)。
5.基于电磁波反射的三维触控设备，其特征在于，包括电磁波识别模组；所述的电磁波识别模组用于远程捕获用户的手部原始位置及移动后的手部位置，并将移动距离转化为空间坐标值，进而将空间坐标值转换成对应的系统交互事件。
6.根据权利要求5所述的基于电磁波反射的三维触控设备，其特征在于，还包括显示屏，所述的显示屏用于显示触控设备的画面。
7.根据权利要求5或6所述的基于电磁波反射的三维触控设备，其特征在于，所述的电磁波识别模组包括电磁波发射/接收模块、传感器、计算模块和交互执行模块；所述的电磁波发射/接收模块用于发射电磁波和接收返回的电磁波；所述的传感器根据从发射电磁波到接收到返回的电磁波所用的时间，测量出用户的手部原始位置和移动后的手部位置；所述的计算模块将手部移动距离转换成空间坐标；所述的交互执行模块根据空间坐标执行交互事件。
8.一种存储介质，所述的存储介质中存有计算机程序，其特征在于，运行所述计算机程序后可以实现权利要求1至4任一项所述的基于电磁波反射的三维触控方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011131795.1A CN112306237B (zh) | 2020-10-21 | 2020-10-21 | 基于电磁波反射的三维触控方法、触控设备、存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011131795.1A CN112306237B (zh) | 2020-10-21 | 2020-10-21 | 基于电磁波反射的三维触控方法、触控设备、存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN112306237A true CN112306237A (zh) | 2021-02-02 |
| CN112306237B CN112306237B (zh) | 2024-10-18 |
Family
ID=74328619
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011131795.1A Active CN112306237B (zh) | 2020-10-21 | 2020-10-21 | 基于电磁波反射的三维触控方法、触控设备、存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112306237B (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116681435A (zh) * | 2023-01-03 | 2023-09-01 | 黑龙江圣轨科技有限公司 | 一种基于区块链的网络数据安全监测系统及方法 |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102469206A (zh) * | 2010-11-18 | 2012-05-23 | 西安龙飞软件有限公司 | 一种利用手势对手机实现控制的方法 |
| CN102999152A (zh) * | 2011-09-09 | 2013-03-27 | 康佳集团股份有限公司 | 一种手势动作识别方法和系统 |
| US20130296057A1 (en) * | 2012-05-03 | 2013-11-07 | Wms Gaming Inc. | Gesture fusion |
| CN106527671A (zh) * | 2015-09-09 | 2017-03-22 | 广州杰赛科技股份有限公司 | 一种设备隔空控制方法 |
| CN108052202A (zh) * | 2017-12-11 | 2018-05-18 | 深圳市星野信息技术有限公司 | 一种3d交互方法、装置、计算机设备及存储介质 |
| CN109753157A (zh) * | 2019-01-11 | 2019-05-14 | 京东方科技集团股份有限公司 | 显示屏的手势控制方法及装置 |
| CN110780735A (zh) * | 2019-09-25 | 2020-02-11 | 苏州联游信息技术有限公司 | 一种手势交互ar投影方法及装置 |
| CN111258427A (zh) * | 2020-01-17 | 2020-06-09 | 哈尔滨拓博科技有限公司 | 一种基于双目相机手势交互的黑板控制方法及控制系统 |
-
2020
- 2020-10-21 CN CN202011131795.1A patent/CN112306237B/zh active Active
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102469206A (zh) * | 2010-11-18 | 2012-05-23 | 西安龙飞软件有限公司 | 一种利用手势对手机实现控制的方法 |
| CN102999152A (zh) * | 2011-09-09 | 2013-03-27 | 康佳集团股份有限公司 | 一种手势动作识别方法和系统 |
| US20130296057A1 (en) * | 2012-05-03 | 2013-11-07 | Wms Gaming Inc. | Gesture fusion |
| CN106527671A (zh) * | 2015-09-09 | 2017-03-22 | 广州杰赛科技股份有限公司 | 一种设备隔空控制方法 |
| CN108052202A (zh) * | 2017-12-11 | 2018-05-18 | 深圳市星野信息技术有限公司 | 一种3d交互方法、装置、计算机设备及存储介质 |
| CN109753157A (zh) * | 2019-01-11 | 2019-05-14 | 京东方科技集团股份有限公司 | 显示屏的手势控制方法及装置 |
| CN110780735A (zh) * | 2019-09-25 | 2020-02-11 | 苏州联游信息技术有限公司 | 一种手势交互ar投影方法及装置 |
| CN111258427A (zh) * | 2020-01-17 | 2020-06-09 | 哈尔滨拓博科技有限公司 | 一种基于双目相机手势交互的黑板控制方法及控制系统 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116681435A (zh) * | 2023-01-03 | 2023-09-01 | 黑龙江圣轨科技有限公司 | 一种基于区块链的网络数据安全监测系统及方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN112306237B (zh) | 2024-10-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10235412B2 (en) | Detecting, representing, and interpreting three-space input: gestural continuum subsuming freespace, proximal, and surface-contact modes | |
| US9495013B2 (en) | Multi-modal gestural interface | |
| US8681098B2 (en) | Detecting, representing, and interpreting three-space input: gestural continuum subsuming freespace, proximal, and surface-contact modes | |
| EP2427857B1 (en) | Gesture-based control systems including the representation, manipulation, and exchange of data | |
| CN102799317B (zh) | 智能互动投影系统 | |
| US10162429B2 (en) | Gesture enabled keyboard | |
| US8493341B2 (en) | Optical touch display device and method thereof | |
| JP5807686B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
| CN102446032B (zh) | 基于摄像头的信息输入方法及终端 | |
| EP2270630A2 (en) | Gesture recognition method and touch system incorporating the same | |
| US8648808B2 (en) | Three-dimensional human-computer interaction system that supports mouse operations through the motion of a finger and an operation method thereof | |
| KR20090038413A (ko) | 멀티 터치 기반 대형 인터랙티브 디스플레이 시스템 및 그 방법 | |
| WO2011156111A2 (en) | Virtual touch interface | |
| JP2010217719A (ja) | 装着型表示装置、その制御方法及びプログラム | |
| CN112068698A (zh) | 一种交互方法、装置及电子设备、计算机存储介质 | |
| CN103019518A (zh) | 一种自动调整人机交互界面的方法 | |
| CN101833401B (zh) | 光学触控显示装置及其操作方法 | |
| CN112306237B (zh) | 基于电磁波反射的三维触控方法、触控设备、存储介质 | |
| TW201439813A (zh) | 顯示設備及其控制系統和方法 | |
| KR20180036205A (ko) | 시뮬레이션용 스마트 테이블 장치 | |
| CN116301321A (zh) | 一种智能穿戴设备的控制方法及相关设备 | |
| CN114706487A (zh) | 字符输入方法、装置、电子设备及可读存储介质 | |
| JP2018063555A (ja) | 情報処理装置、情報処理方法及びプログラム | |
| Kojima et al. | Hand manipulation of virtual objects in wearable augmented reality | |
| CN107977071B (zh) | 一种适用于空间系统的操作方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB02 | Change of applicant information | ||
| CB02 | Change of applicant information |
Address after: Room 238, room 406, No.1, Yichuang street, Huangpu District, Guangzhou, Guangdong 510000 Applicant after: Guangzhou langguo Electronic Technology Co.,Ltd. Address before: 510000 unit a and B, zone 02, 4th floor, No. 136, Gaopu Road, high tech Development Zone, Tianhe District, Guangzhou City, Guangdong Province Applicant before: GUANGZHOU LANGO ELECTRONIC SCIENCE & TECHNOLOGY Co.,Ltd. |
|
| GR01 | Patent grant |