CN103995620A - 一种空中触控系统 - Google Patents

一种空中触控系统 Download PDF

Info

Publication number
CN103995620A
CN103995620A CN201310638317.3A CN201310638317A CN103995620A CN 103995620 A CN103995620 A CN 103995620A CN 201310638317 A CN201310638317 A CN 201310638317A CN 103995620 A CN103995620 A CN 103995620A
Authority
CN
China
Prior art keywords
processing module
execution module
camera
angle
display screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201310638317.3A
Other languages
English (en)
Inventor
刘美鸿
高炜
徐万良
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SHENZHEN CLOUDCUBE INFORMATION TECHNOLOGY Co Ltd
Original Assignee
SHENZHEN CLOUDCUBE INFORMATION TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SHENZHEN CLOUDCUBE INFORMATION TECHNOLOGY Co Ltd filed Critical SHENZHEN CLOUDCUBE INFORMATION TECHNOLOGY Co Ltd
Priority to CN201310638317.3A priority Critical patent/CN103995620A/zh
Priority to PCT/CN2014/082897 priority patent/WO2015081705A1/zh
Publication of CN103995620A publication Critical patent/CN103995620A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开一种空中触控系统，包括：用于实时获取视野范围内人的位置图像的3D摄像头；用于根据所述位置图像计算出人的手指在屏幕上空的位置以及运动轨迹的第一处理模块；用于根据手指在屏幕上空的位置以及运动轨迹生成对应的操作指令，并执行所述操作指令的第一执行模块；用于根据所述位置图像计算人眼相对于显示屏幕的夹角的第二处理模块；用于根据所述夹角调整显示屏的动态光栅的倾斜角度以适应人眼的位置的第二执行模块；用于根据所述夹角对虚拟3D场景进行旋转，使得人眼可从不同角度观看场景获得全息3D体验的第三执行模块；通过上述方式，本发明不但可以实现空中输入，而且可以使得用户运动过程中仍然能够获得全息3D效果体验。

Description

一种空中触控系统
技术领域
本发明涉及手写输入技术领域，特别是涉及一种空中触控系统。
背景技术
现有的电子设备中比较常见的输入方式包括键盘输入、语音输入和手写输入。其中，手写输入装置一般包括：手写笔和手写板或触摸屏。然而，手写笔和手写板或触摸屏是近距离输入设备，无法完成远距离输入，在用户距离电子设备超出一定的距离或者用户的手被其他东西占用，将不便于完成对电子设备进行操控。
为解决上述技术问题，本发明提供一种空中触控系统。
发明内容
本发明提供一种空中触控系统，利用在显示屏的前端设置的3D摄像头获取人的位置图像，并根据所述位置图像生成人的手指位置及运动轨迹对应的操作指令，根据人眼与显示屏的夹角对显示屏的动态光栅的倾斜角度进行调整以及对3D场景进行旋转，使得本发明提供的空中触控系统不但可以空中输入，而且可以使得用户运动过程中仍然能够获得全息3D效果体验。
为解决上述技术问题，本发明提供一种空中触控系统，包括：
3D摄像头，所述3D摄像头设置于显示屏的前端面上，用于实时获取视野范围内人的位置图像；
第一处理模块，与所述3D摄像头电连接，用于根据所述位置图像计算出人的手指在屏幕上空的位置以及运动轨迹；
第一执行模块，与所述第一处理模块电连接，用于根据手指在屏幕上空的位置以及运动轨迹生成对应的操作指令，并执行所述操作指令；
第二处理模块，与所述3D摄像头电连接，用于根据所述位置图像计算人眼相对于显示屏幕的夹角；
第二执行模块，与所述第二处理模块电连接，用于根据所述夹角调整显示屏的动态光栅的倾斜角度以适应人眼的位置；
第三执行模块，与所述第二处理模块电连接，用于根据所述夹角对虚拟3D场景进行旋转，使得人眼可从不同角度观看场景获得全息3D体验。
本发明的有益效果是：区别于现有技术的情况，本发明提供的一种空中触控系统，利用在显示屏的前端设置的3D摄像头获取人的位置图像，并根据所述位置图像生成人的手指位置及运动轨迹对应的操作指令，根据人眼与显示屏的夹角对显示屏的动态光栅的倾斜角度进行调整以及对3D场景进行旋转，使得本发明提供的空中触控系统不但可以实现空中输入操作指令，而且可以使得用户能够在运动过程中获得全息3D效果体验。
附图说明
图1是本发明的空中触控系统的一实施例的结构示意图。
具体实施方式
请参见图1，图1是本发明的空中触控系统的一实施例的结构示意图。如图1所示，本发明提供的空中触控系统包括3D摄像头11、第一处理模块12、第一执行模块13、第二处理模块14、第二执行模块15和第三执行模块16。
在本实施例中，3D摄像头11设置于显示屏的前端面上，作为输入设备，用于实时获取视野范围内人的位置图像；第一处理模块12与3D摄像头11电连接，第一处理模块12用于根据3D摄像头11获取到的人的位置图像计算出人的手指在屏幕上空的位置，而连续的位置坐标勾勒出了人手的运动轨迹；第一执行模块13与第一处理模块12电连接，第一执行模块13用于根据手指在屏幕上空的位置以及运动轨迹生成对应的点击或者划动的动作，并执行所述操作指令；第二处理模块14与3D摄像头11电连接，第二处理模块14用于根据人的位置图像计算人眼相对于显示屏幕的夹角，具体的，第二处理模块14根据3D摄像头11获取到的人的位置图像可以得到人眼到显示屏中心的连线与显示屏之间的夹角；第二执行模块15与第二处理模块14电连接，第二执行模块15用于根据夹角调整显示屏的动态光栅的倾斜角度以适应人眼的位置；第三执行模块16与第二处理模块14电连接，用于根据夹角对虚拟3D场景进行旋转，使得人眼可从不同角度观看场景获得全息3D体验。
通过上述方式，本发明提供的一种空中触控系统，利用在显示屏的前端设置的3D摄像头获取人的位置图像，并根据所述位置图像生成人的手指位置及运动轨迹对应的操作指令，根据人眼与显示屏的夹角对显示屏的动态光栅的倾斜角度进行调整以及对3D场景进行旋转，使得本发明提供的空中触控系统不但可以实现空中输入操作指令，而且可以使得用户能够在运动过程中获得全息3D效果体验。
以上所述仅为本发明的实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (1)

1.一种空中触控系统，其特征在于，所述空中触控系统包括：
3D摄像头，所述3D摄像头设置于显示屏的前端面上，用于实时获取视野范围内人的位置图像；
第一处理模块，与所述3D摄像头电连接，用于根据所述位置图像计算出人的手指在屏幕上空的位置以及运动轨迹；
第一执行模块，与所述第一处理模块电连接，用于根据手指在屏幕上空的位置以及运动轨迹生成对应的操作指令，并执行所述操作指令；
第二处理模块，与所述3D摄像头电连接，用于根据所述位置图像计算人眼相对于显示屏幕的夹角；
第二执行模块，与所述第二处理模块电连接，用于根据所述夹角调整显示屏的动态光栅的倾斜角度以适应人眼的位置；
第三执行模块，与所述第二处理模块电连接，用于根据所述夹角对虚拟3D场景进行旋转，使得人眼可从不同角度观看场景获得全息3D体验。
CN201310638317.3A 2013-12-02 2013-12-02 一种空中触控系统 Pending CN103995620A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201310638317.3A CN103995620A (zh) 2013-12-02 2013-12-02 一种空中触控系统
PCT/CN2014/082897 WO2015081705A1 (zh) 2013-12-02 2014-07-24 一种空中触控系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310638317.3A CN103995620A (zh) 2013-12-02 2013-12-02 一种空中触控系统

Publications (1)

Publication Number Publication Date
CN103995620A true CN103995620A (zh) 2014-08-20

Family

ID=51309806

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310638317.3A Pending CN103995620A (zh) 2013-12-02 2013-12-02 一种空中触控系统

Country Status (2)

Country Link
CN (1) CN103995620A (zh)
WO (1) WO2015081705A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105704470A (zh) * 2015-11-26 2016-06-22 中国传媒大学 一种全息视频预览方法
CN105704469A (zh) * 2015-11-26 2016-06-22 中国传媒大学 一种全息视频播放方法
CN106055108A (zh) * 2016-06-10 2016-10-26 北京行云时空科技有限公司 一种虚拟触摸屏的操控方法和系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102027434A (zh) * 2008-03-17 2011-04-20 索尼计算机娱乐美国有限责任公司 具有集成摄像头的控制器以及和交互式应用相接口的方法
CN102253713A (zh) * 2011-06-23 2011-11-23 康佳集团股份有限公司 面向三维立体影像显示系统
CN102508546A (zh) * 2011-10-31 2012-06-20 冠捷显示科技（厦门）有限公司 一种3d虚拟投影及虚拟触摸的用户交互界面及实现方法
CN103248905A (zh) * 2013-03-22 2013-08-14 深圳市云立方信息科技有限公司 一种模仿全息3d场景的显示装置和视觉显示方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130050069A1 (en) * 2011-08-23 2013-02-28 Sony Corporation, A Japanese Corporation Method and system for use in providing three dimensional user interface
US9734393B2 (en) * 2012-03-20 2017-08-15 Facebook, Inc. Gesture-based control system
CN102981616B (zh) * 2012-11-06 2017-09-22 中兴通讯股份有限公司 增强现实中对象的识别方法及系统和计算机
CN103176605A (zh) * 2013-03-27 2013-06-26 刘仁俊 一种手势识别控制装置及控制方法
CN103279191B (zh) * 2013-06-18 2016-01-06 北京科技大学 一种基于手势识别技术的3d虚拟交互方法及系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102027434A (zh) * 2008-03-17 2011-04-20 索尼计算机娱乐美国有限责任公司 具有集成摄像头的控制器以及和交互式应用相接口的方法
CN102253713A (zh) * 2011-06-23 2011-11-23 康佳集团股份有限公司 面向三维立体影像显示系统
CN102508546A (zh) * 2011-10-31 2012-06-20 冠捷显示科技（厦门）有限公司 一种3d虚拟投影及虚拟触摸的用户交互界面及实现方法
CN103248905A (zh) * 2013-03-22 2013-08-14 深圳市云立方信息科技有限公司 一种模仿全息3d场景的显示装置和视觉显示方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105704470A (zh) * 2015-11-26 2016-06-22 中国传媒大学 一种全息视频预览方法
CN105704469A (zh) * 2015-11-26 2016-06-22 中国传媒大学 一种全息视频播放方法
CN106055108A (zh) * 2016-06-10 2016-10-26 北京行云时空科技有限公司 一种虚拟触摸屏的操控方法和系统

Also Published As

Publication number Publication date
WO2015081705A1 (zh) 2015-06-11

Similar Documents

Publication Publication Date Title
US11532127B2 (en) Virtual object driving method, apparatus, electronic device, and readable storage medium
KR101171660B1 (ko) 증강현실의 포인팅 장치
CN102638653B (zh) 一种基于Kinect的自动面部追踪方法
CN103529944B (zh) 一种基于Kinect的人体动作识别方法
CN111294665B (zh) 视频的生成方法、装置、电子设备及可读存储介质
CN104050859A (zh) 可交互数字化立体沙盘系统
Rautaray et al. Real time multiple hand gesture recognition system for human computer interaction
CN109145802B (zh) 基于Kinect的多人手势人机交互方法及装置
KR102147430B1 (ko) 가상 공간 멀티 터치 인터랙션 장치 및 방법
CN104063039A (zh) 一种穿戴式计算机智能终端的人机交互方法
CN110069101B (zh) 一种穿戴式计算设备和一种人机交互方法
CN104090465B (zh) 一种三维交互式投影成像方法
CN104460967A (zh) 一种人体上肢骨骼手势识别方法
US11397478B1 (en) Systems, devices, and methods for physical surface tracking with a stylus device in an AR/VR environment
CN102184342B (zh) 一种虚实融合的手功能康复训练系统及方法
US20150277570A1 (en) Providing Onscreen Visualizations of Gesture Movements
EP2767888A3 (en) Method for user input from alternative touchpads of a handheld computerized device
CN103995620A (zh) 一种空中触控系统
CN109395375A (zh) 一种基于增强现实与移动交互的三维游戏接口设计方法
CN106125927B (zh) 图像处理系统及方法
CN110717993A (zh) 一种分体式ar眼镜系统的交互方法、系统及介质
Edelmann et al. The dabr-a multitouch system for intuitive 3d scene navigation
CN111901518B (zh) 显示方法、装置和电子设备
CN113496168B (zh) 手语数据采集方法、设备、存储介质
CN203849701U (zh) 基于非触摸的手势控制视频监控系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20140820