CN102508546A - 一种3d虚拟投影及虚拟触摸的用户交互界面及实现方法 - Google Patents

一种3d虚拟投影及虚拟触摸的用户交互界面及实现方法 Download PDF

Info

Publication number
CN102508546A
CN102508546A CN2011103365456A CN201110336545A CN102508546A CN 102508546 A CN102508546 A CN 102508546A CN 2011103365456 A CN2011103365456 A CN 2011103365456A CN 201110336545 A CN201110336545 A CN 201110336545A CN 102508546 A CN102508546 A CN 102508546A
Authority
CN
China
Prior art keywords
virtual
user
user interface
binocular images
display device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011103365456A
Other languages
English (en)
Other versions
CN102508546B (zh
Inventor
陈阳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
TPV Display Technology Xiamen Co Ltd
Original Assignee
TPV Display Technology Xiamen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by TPV Display Technology Xiamen Co Ltd filed Critical TPV Display Technology Xiamen Co Ltd
Priority to CN201110336545.6A priority Critical patent/CN102508546B/zh
Publication of CN102508546A publication Critical patent/CN102508546A/zh
Application granted granted Critical
Publication of CN102508546B publication Critical patent/CN102508546B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

本发明公开一种3D虚拟投影及虚拟触摸的用户交互界面及实现方法，包括深度探测器、双眼图像视差计算模块、双眼图像处理模块、3D显示设备、手势识别模块、摄像头和虚拟触摸控制器。深度探测器探测得到用户头部和手部与3D显示设备距离信息；双眼图像视差计算模块根据距离信息计算双眼图像视差，双眼图像处理模块根据双眼图像视差信息处理图像，再将处理后的图像发送给3D显示设备虚拟投影在用户臂长范围；手势识别模块根据深度探测器和摄像头识别到用户手指移动轨迹，虚拟触摸控制器根据用户手势及移动轨迹做出相应的反应。本发明不仅可以实现增加一种带反馈的，虚拟投影、虚拟触摸的3D用户界面，而且带给用户使用方便和全新的交互体验。

Description

一种3D虚拟投影及虚拟触摸的用户交互界面及实现方法
技术领域
本发明涉及显示设备，尤其涉及一种在显示设备中实现3D虚拟投影及虚拟触摸的用户交互界面及实现方法。
背景技术
目前，已经有出现在虚拟屏幕上实现触摸的操作，但还没有在3D虚拟显示的用户交互界面上实现虚拟触摸操作。
例如，专利号为200910197205.2，专利名称为“一种可视可操作无实体的触摸屏系统”中，公开了一种可视可操作无实体的触摸屏系统，该系统由一台计算机，两个网络摄像头，一个头戴式显示器，以及一个标定参照物组成，该参照物标定了一个虚拟触摸屏。用户可以通过头戴式显示器观察含有虚拟触摸屏的现实世界。并且可以直接用手操作没有实体的触摸屏。本发明采用两个摄像头进行实时的图像采集。计算机系统根据摄像头输入的图像。在标定参照物的配合下进行空间定标与指尖位置动作识别，并且合成相应的图像。头戴式显示器把含有虚拟触摸屏的图像输出给用户。用户通过头戴式显示器直接观察到虚拟触摸屏的反馈。该专利中，虽然实现了在虚拟屏幕上进行触摸的操作，但未实现在3D虚拟显示的用户交互界面上实现虚拟触摸工作。
发明内容
为了克服现有技术的不足，本发明的目的在于提供一种给用户带来全新的交互体验的3D虚拟投影及虚拟触摸的用户交互界面及实现方法。
本发明的技术方案为：一种3D虚拟投影及虚拟触摸的用户交互界面，其包括以下部件： 
深度探测器：用于探测用户头部及手部与3D显示设备的距离信息；
双眼图像视差计算模块：根据接收的距离信息计算出将用户交互界面通过3D显示虚拟投影到距用户头部臂长范围的双眼图像视差；
双眼图像处理模块：将左右眼显示的图像处理达到双眼图像视差计算模块计算的双眼图像视差，再将处理后的图像发送给3D显示设备；
3D显示设备：把双眼图像处理模块进行处理过的双眼视差图像以3D显示，使用户交互界面以3D虚拟投影的方式显示在用户头部臂长范围内；
手势识别模块：使用摄像头摄取用户手部运动轨迹，并结合深度探测器得到的用户手部与3D显示设备的距离信息，识别手势；
摄像头：摄取用户手部的运动轨迹；
虚拟触摸控制器：接收手势识别模块的信息，并做出相应反应； 
其中，所述深度探测器的输出端与双眼图像视差计算模块的输入端连接，双眼图像视差计算模块的输出端与双眼图像处理模块的输入端连接；双眼图像处理模块的输出端与3D显示设备连接；手势识别模块的输入端分别与深度探测器和摄像头连接，手势识别模块的输出端与虚拟触摸控制器连接。
所述3D显示设备为电视机、电脑、一体机或手机等手持显示设备。
本发明中， 3D虚拟投影及虚拟触摸的用户交互界面的实现方法包括以下步骤：
1）、深度探测器探测得到用户头部和手部与3D显示设备距离信息，并将探测的距离信息发送给双眼图像视差计算模块；
2）、双眼图像视差计算模块根据接收的距离信息计算出将用户交互界面通过3D显示虚拟投影到用户头部臂长范围的双眼图像视差，并将双眼图像视差信息发送给双眼图像处理模块；
3）、双眼图像处理模块根据接收的双眼图像视差信息，将左右眼显示的图像处理达到双眼视差模块计算的双眼图像视差，再将处理后的图像发送给3D显示设备；
4）、3D显示模块接收双眼图像处理模块发送的处理好的3D图像，以3D方式显示并将图像虚拟投影在用户臂长范围；
5）、手势识别模块根据深度探测器和摄像头识别到用户手势及手指移动轨迹，并将接收的信息发送给虚拟触摸控制器，虚拟触摸控制器根据用户手势及移动轨迹做出相应的反应。
本发明所述步骤5中，当用户做出手势动作时，深度探测器探测用户手指到3D显示设备的距离，并将获取的距离信息发送给手势识别模块；摄像头摄取用户手势动作的图像，也将获取的信息发送给手势识别模块，手势识别模块接收两者的信息后，与3D虚拟显示的用户交互界面的位置做比对，判断用户是否触摸到3D虚拟显示的用户交互界面，并将判断结果发送给虚拟触摸控制器，若有触摸到，则虚拟触摸控制器做出反应，在用户手指触摸到的3D虚拟显示的用户交互界面上产生诸如水波纹或高亮等变化；若没触摸到，虚拟触摸控制器则不反应；
当用户手指在3D虚拟显示的用户交互界面上移动时，摄像头摄取手指移动轨迹，并将获取的信息发送给手势识别模块，手势识别模块判别用户的手势，并将判断结构发送给虚拟触摸控制器，虚拟触摸控制器收到信息后，做出相应反应。
采用本发明的技术方案，综合利用深度探测技术，3D显示技术以及手势识别技术，创造出一种全新的3D虚拟触摸交互方式，克服目前触摸不能离开屏幕，而手势不能与交互的对象距离较远的问题；用户不仅可以实现在虚拟屏幕上进行触摸操作，还可实现3D虚拟投影。本发明不仅可以实现增加一种带反馈的，虚拟投影、虚拟触摸的3D用户界面，而且带给用户使用方便和全新的交互体验。 
附图说明
下面结合附图和具体实施方式对本发明作进一步详细的说明：
图1是发明的结构示意图；
图2是本发明的流程图。
具体实施方式
下面结合具体实施方式对本发明作进一步详细的说明：
如图1或图2所示，本发明的技术方案为：一种3D虚拟投影及虚拟触摸的用户交互界面，其包括以下部件： 
深度探测器1：用于探测用户头部及手部与3D显示设备4的距离信息；
双眼图像视差计算模块2：根据接收的距离信息计算出将用户交互界面通过3D显示虚拟投影到距用户头部臂长范围的双眼图像视差；
双眼图像处理模块3：将左右眼显示的图像处理达到双眼图像视差计算模块2计算的双眼图像视差，再将处理后的图像发送给3D显示设备4；
3D显示设备4：把双眼图像处理模块3进行处理过的双眼视差图像以3D显示，使用户交互界面以3D虚拟投影的方式显示在用户头部臂长范围内；
手势识别模块5：使用摄像头摄取用户手部运动轨迹，并结合深度探测器得到的用户手部与3D显示设备的距离信息，识别手势；
摄像头6：摄取用户手部的运动轨迹；
虚拟触摸控制器7：接收手势识别模块的信息，并做出相应反应； 
其中，所述深度探测器1的输出端与双眼图像视差计算模块2的输入端连接，双眼图像视差计算模块2的输出端与双眼图像处理模块3的输入端连接；双眼图像处理模块3的输出端与3D显示设备4连接；手势识别模块5的输入端分别与深度探测器1和摄像头6连接，手势识别模块5的输出端与虚拟触摸控制器7连接。
所述3D显示设备4为电视机、电脑、一体机或手机等手持显示设备。
本发明中， 3D虚拟投影及虚拟触摸的用户交互界面的实现方法包括以下步骤：
1）、深度探测器1探测得到用户头部和手部与3D显示设备4距离信息，并将探测的距离信息发送给双眼图像视差计算模块2；
2）、双眼图像视差计算模块2根据接收的距离信息计算出将用户交互界面通过3D显示虚拟投影到用户头部臂长范围的双眼图像视差，并将双眼图像视差信息发送给双眼图像处理模块3；
3）、双眼图像处理模块3根据接收的双眼图像视差信息，将左右眼显示的图像处理达到双眼视差模块计算2的双眼图像视差，再将处理后的图像发送给3D显示设备4；
4）、3D显示模块4接收双眼图像处理模块3发送的处理好的3D图像，以3D方式显示并将图像虚拟投影在用户臂长范围；
5）、手势识别模块5根据深度探测器1和摄像头6识别到用户手势及手指移动轨迹，并将接收的信息发送给虚拟触摸控制器7，虚拟触摸控制器7根据用户手势及移动轨迹做出相应的反应。
本发明所述步骤5中，当用户做出手势动作时，深度探测器1探测用户手指到3D显示设备4的距离，并将获取的距离信息发送给手势识别模块5；摄像头6摄取用户手势动作的图像，也将获取的信息发送给手势识别模块5，手势识别模块5接收两者的信息后，与3D虚拟显示的用户交互界面的位置做比对，判断用户是否触摸到3D虚拟显示的用户交互界面，并将判断结果发送给虚拟触摸控制器7，若有触摸到，则虚拟触摸控制器7做出反应，在用户手指触摸到的3D虚拟显示的用户交互界面上产生诸如水波纹或高亮等变化；若没触摸到，虚拟触摸控制器7则不反应；
当用户手指在3D虚拟显示的用户交互界面上移动时，摄像头6摄取手指移动轨迹，并将获取的信息发送给手势识别模块5，手势识别模块5判别用户的手势，并将判断结构发送给虚拟触摸控制器7，虚拟触摸控制器7收到信息后，做出相应反应。例如若用户触摸到的是按键，虚拟触摸控制器7则响应这个按键功能；若触摸到的是缩放按键，则虚拟触摸控制器7响应屏幕缩放功能。若手势识别模块5检测到触摸有手的位移，则虚拟触摸控制器7根据预先设定的手势定义做出相应反应。 
采用本发明的技术方案，综合利用深度探测技术，3D显示技术以及手势识别技术，创造出一种全新的3D虚拟触摸交互方式，克服目前触摸不能离开屏幕，而手势不能与交互的对象距离较远的问题，给用户提供一种带反馈的，虚拟投影、虚拟触摸的3D用户界面，而且带给用户使用方便和全新的交互体验。

Claims (4)

1.一种3D虚拟投影及虚拟触摸的用户交互界面，其特征在于：其包括以下部件： 
深度探测器：用于探测用户头部和手部与3D显示设备的距离信息；
双眼图像视差计算模块：根据接收的距离信息计算出将用户交互界面通过3D显示虚拟投影到距用户头部臂长范围内的双眼图像视差；
双眼图像处理模块：将左右眼显示的图像进行处理达到双眼图像视差计算模块计算的双眼图像视差，再将处理后的图像发送给3D显示设备；
3D显示设备：把双眼图像处理模块处理过的双眼视差图像以3D显示，使用户交互界面以3D虚拟投影的方式显示在用户头部臂长范围内；
手势识别模块：使用摄像头摄取用户手部运动轨迹，并结合深度探测器得到的用户手部与3D显示设备的距离信息，识别手势；
摄像头：摄取用户手部的运动轨迹；
虚拟触摸控制器：接收手势识别模块的信息，并做出相应反应； 
其中，所述深度探测器的输出端与双眼图像视差计算模块的输入端连接，双眼图像视差计算模块的输出端与双眼图像处理模块的输入端连接；双眼图像处理模块的输出端与3D显示设备连接；手势识别模块的输入端分别与深度探测器和摄像头连接，手势识别模块的输出端与虚拟触摸控制器连接。
2.根据权利要求1所述的3D虚拟投影及虚拟触摸的用户交互界面，其特征在于：所述3D显示设备为电视机、电脑、一体机、手机或手持显示设备。
3.一种3D虚拟投影及虚拟触摸的用户交互界面的实现方法，其特征在于：所述实现方法包括以下步骤：
1）深度探测器探测得到用户头部和手部与3D显示设备距离信息，并将探测的距离信息发送给双眼图像视差计算模块；
2）双眼图像视差计算模块根据接收的距离信息计算出将用户交互界面通过3D显示虚拟投影到用户头部臂长范围的双眼图像视差，并将双眼图像视差信息发送给双眼图像处理模块；
3）双眼图像处理模块根据接收的双眼图像视差信息，将左右眼显示的图像处理达到双眼视差模块计算的双眼图像视差，再将处理后的图像发送给3D显示设备；
4）3D显示模块接收双眼图像处理模块发送的处理好的3D图像，以3D方式显示并将图像虚拟投影在用户臂长范围；
5）手势识别模块根据深度探测器和摄像头识别到用户手势及手指移动轨迹，并将接收的信息发送给虚拟触摸控制器，虚拟触摸控制器根据用户手势及移动轨迹做出相应的反应。
4.根据权利要求3所述的3D虚拟投影及虚拟触摸的用户交互界面的实现方法，其特征在于：所述步骤5中，当用户做出手势动作时，深度探测器探测用户手指到3D显示设备的距离，并将获取的距离信息发送给手势识别模块；摄像头摄取用户手势动作的图像，也将获取的信息发送给手势识别模块，手势识别模块接收两者的信息后，与3D虚拟显示的用户交互界面的位置做比对，判断用户是否触摸到3D虚拟显示的用户交互界面，并将判断结果发送给虚拟触摸控制器，若有触摸到，则虚拟触摸控制器做出反应，在用户手指触摸到的3D虚拟显示的用户交互界面上产生水波纹或高亮变化；若没触摸到，虚拟触摸控制器则不反应；
当用户手指在3D虚拟显示的用户交互界面上移动时，摄像头摄取手指移动轨迹，并将获取的信息发送给手势识别模块，手势识别模块判别用户的手势，并将判断结果发送给虚拟触摸控制器，虚拟触摸控制器收到信息后，做出相应反应。
CN201110336545.6A 2011-10-31 2011-10-31 一种3d虚拟投影及虚拟触摸的用户交互界面及实现方法 Active CN102508546B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201110336545.6A CN102508546B (zh) 2011-10-31 2011-10-31 一种3d虚拟投影及虚拟触摸的用户交互界面及实现方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201110336545.6A CN102508546B (zh) 2011-10-31 2011-10-31 一种3d虚拟投影及虚拟触摸的用户交互界面及实现方法

Publications (2)

Publication Number Publication Date
CN102508546A true CN102508546A (zh) 2012-06-20
CN102508546B CN102508546B (zh) 2014-04-09

Family

ID=46220646

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110336545.6A Active CN102508546B (zh) 2011-10-31 2011-10-31 一种3d虚拟投影及虚拟触摸的用户交互界面及实现方法

Country Status (1)

Country Link
CN (1) CN102508546B (zh)

Cited By (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102880288A (zh) * 2012-08-20 2013-01-16 深圳市维尚视界立体显示技术有限公司 一种3d显示的人机交互的方法、装置以及设备
CN103176667A (zh) * 2013-02-27 2013-06-26 广东工业大学 基于Android系统的投影屏幕触摸终端设备
CN103176605A (zh) * 2013-03-27 2013-06-26 刘仁俊 一种手势识别控制装置及控制方法
CN103412681A (zh) * 2013-04-22 2013-11-27 深圳市富兴科技有限公司 一种智能化3d投影虚拟触控显示技术
CN103412680A (zh) * 2013-04-22 2013-11-27 深圳市富兴科技有限公司 一种智能3d投影虚拟触控显示技术
CN103474007A (zh) * 2013-08-27 2013-12-25 湖南华凯创意展览服务有限公司 一种互动式显示方法及系统
CN103529947A (zh) * 2013-10-31 2014-01-22 京东方科技集团股份有限公司 显示装置及其控制方法、手势识别方法
CN103530060A (zh) * 2013-10-31 2014-01-22 京东方科技集团股份有限公司 显示装置及其控制方法、手势识别方法
CN103559809A (zh) * 2013-11-06 2014-02-05 常州文武信息科技有限公司 基于计算机的现场交互演示系统
CN103593585A (zh) * 2013-12-02 2014-02-19 深圳中兴网信科技有限公司 远程诊断系统
CN103744608A (zh) * 2014-01-20 2014-04-23 联想(北京)有限公司 一种信息处理方法及电子设备
CN103777750A (zh) * 2012-10-23 2014-05-07 三星电子株式会社 包括图像传感器的移动系统和图像传感器的操作方法
CN103995620A (zh) * 2013-12-02 2014-08-20 深圳市云立方信息科技有限公司 一种空中触控系统
CN104049719A (zh) * 2013-03-11 2014-09-17 联想(北京)有限公司 一种信息处理方法及电子设备
CN104115192A (zh) * 2012-06-25 2014-10-22 索夫特克尼特科软件公司 三维近距离交互的改进或与其有关的改进
CN104238665A (zh) * 2013-06-24 2014-12-24 佳能株式会社 图像处理装置及图像处理方法
WO2014205639A1 (en) * 2013-06-25 2014-12-31 Thomson Licensing Method and device for character input
CN104603720A (zh) * 2012-09-12 2015-05-06 大陆汽车有限责任公司 用于借助手势操作机动车组件的方法和装置
CN104641318A (zh) * 2012-09-14 2015-05-20 Lg电子株式会社 在头戴式显示器上提供用户界面的装置和方法及其头戴式显示器
CN104714646A (zh) * 2015-03-25 2015-06-17 中山大学 一种基于立体视觉的3d虚拟触控人机交互方法
CN104759095A (zh) * 2015-04-24 2015-07-08 吴展雄 一种虚拟现实头戴显示系统
CN104951059A (zh) * 2014-03-31 2015-09-30 联想(北京)有限公司 一种数据处理方法、装置及一种电子设备
CN105204627A (zh) * 2015-09-01 2015-12-30 济南大学 一种基于手势的数字输入方法
CN105334951A (zh) * 2014-06-27 2016-02-17 联想(北京)有限公司 一种三维图像控制方法、装置及电子设备
CN105530365A (zh) * 2014-12-26 2016-04-27 比亚迪股份有限公司 一种车载电话系统及包含该系统的车辆
CN105824408A (zh) * 2016-02-15 2016-08-03 乐视致新电子科技（天津）有限公司 虚拟现实头盔瞳距调节同步装置及方法
CN106648063A (zh) * 2016-10-19 2017-05-10 北京小米移动软件有限公司 手势识别方法及装置
CN106919294A (zh) * 2017-03-10 2017-07-04 京东方科技集团股份有限公司 一种3d触控交互装置、其触控交互方法及显示装置
CN107300975A (zh) * 2017-07-13 2017-10-27 联想(北京)有限公司 一种信息处理方法及电子设备
CN107515714A (zh) * 2017-07-27 2017-12-26 歌尔股份有限公司 一种手指触控识别方法、装置和触控投影设备
CN103995586B (zh) * 2014-05-12 2018-04-06 上海大学 基于虚拟触摸屏的非穿戴指势人机交互方法
CN108113638A (zh) * 2018-02-05 2018-06-05 中国人民解放军空军航空医学研究所 一种动态视力检测方法
CN108139338A (zh) * 2015-07-28 2018-06-08 通用电气公司 对非破坏性测试装置的控制
CN105334951B (zh) * 2014-06-27 2018-08-31 联想(北京)有限公司 一种三维图像控制方法、装置及电子设备
CN108920088A (zh) * 2018-07-18 2018-11-30 成都信息工程大学 一种基于隔空触摸操作的桌面投影交互方法及系统
CN108989661A (zh) * 2018-06-19 2018-12-11 北京淳中科技股份有限公司 一种摄像设备控制方法、装置和系统
CN105488802B (zh) * 2015-12-07 2018-12-28 清华大学 一种指尖深度检测方法及系统
CN109375834A (zh) * 2018-09-27 2019-02-22 东莞华贝电子科技有限公司 投影键盘的反馈方法及投影键盘
CN109683765A (zh) * 2018-12-27 2019-04-26 张家港康得新光电材料有限公司 一种资源分配方法、装置以及3d显示终端
US10496353B2 (en) 2016-09-29 2019-12-03 Jiang Chang Three-dimensional image formation and color correction system and method
CN111028494A (zh) * 2019-11-04 2020-04-17 珠海格力电器股份有限公司 一种电器设备的虚拟遥控方法、计算机可读存储介质及智能家电
WO2024026638A1 (en) * 2022-08-01 2024-02-08 Huawei Technologies Co., Ltd. Haptic interaction with 3d object on naked eye 3d display

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101393497A (zh) * 2008-10-30 2009-03-25 上海交通大学 基于双目立体视觉的多点触摸方法
CN101566875A (zh) * 2008-04-24 2009-10-28 索尼株式会社 图像处理装置、图像处理方法、程序和记录介质
CN101587386A (zh) * 2008-05-21 2009-11-25 深圳华为通信技术有限公司 光标处理方法、装置及系统
US20110205243A1 (en) * 2010-02-24 2011-08-25 Kouichi Matsuda Image processing apparatus, image processing method, program, and image processing system

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101566875A (zh) * 2008-04-24 2009-10-28 索尼株式会社 图像处理装置、图像处理方法、程序和记录介质
CN101587386A (zh) * 2008-05-21 2009-11-25 深圳华为通信技术有限公司 光标处理方法、装置及系统
CN101393497A (zh) * 2008-10-30 2009-03-25 上海交通大学 基于双目立体视觉的多点触摸方法
US20110205243A1 (en) * 2010-02-24 2011-08-25 Kouichi Matsuda Image processing apparatus, image processing method, program, and image processing system

Cited By (67)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104115192B (zh) * 2012-06-25 2017-06-30 索夫特克尼特科软件公司 三维近距离交互的改进或与其有关的改进
CN104115192A (zh) * 2012-06-25 2014-10-22 索夫特克尼特科软件公司 三维近距离交互的改进或与其有关的改进
CN102880288B (zh) * 2012-08-20 2016-04-27 深圳市维尚境界显示技术有限公司 一种3d显示的人机交互的方法、装置以及设备
CN102880288A (zh) * 2012-08-20 2013-01-16 深圳市维尚视界立体显示技术有限公司 一种3d显示的人机交互的方法、装置以及设备
CN104603720A (zh) * 2012-09-12 2015-05-06 大陆汽车有限责任公司 用于借助手势操作机动车组件的方法和装置
CN104641318A (zh) * 2012-09-14 2015-05-20 Lg电子株式会社 在头戴式显示器上提供用户界面的装置和方法及其头戴式显示器
KR20150054825A (ko) * 2012-09-14 2015-05-20 엘지전자 주식회사 헤드 마운트 디스플레이를 위한 사용자 인터페이스 제공 장치 및 방법
KR102138533B1 (ko) * 2012-09-14 2020-08-11 엘지전자 주식회사 헤드 마운트 디스플레이를 위한 사용자 인터페이스 제공 장치 및 방법
CN104641318B (zh) * 2012-09-14 2018-02-02 Lg 电子株式会社 在头戴式显示器上提供用户界面的装置和方法及其头戴式显示器
CN103777750B (zh) * 2012-10-23 2019-02-05 三星电子株式会社 包括图像传感器的移动系统和图像传感器的操作方法
CN103777750A (zh) * 2012-10-23 2014-05-07 三星电子株式会社 包括图像传感器的移动系统和图像传感器的操作方法
CN103176667A (zh) * 2013-02-27 2013-06-26 广东工业大学 基于Android系统的投影屏幕触摸终端设备
CN104049719A (zh) * 2013-03-11 2014-09-17 联想(北京)有限公司 一种信息处理方法及电子设备
CN104049719B (zh) * 2013-03-11 2017-12-01 联想(北京)有限公司 一种信息处理方法及电子设备
CN103176605A (zh) * 2013-03-27 2013-06-26 刘仁俊 一种手势识别控制装置及控制方法
CN103412680A (zh) * 2013-04-22 2013-11-27 深圳市富兴科技有限公司 一种智能3d投影虚拟触控显示技术
CN103412681A (zh) * 2013-04-22 2013-11-27 深圳市富兴科技有限公司 一种智能化3d投影虚拟触控显示技术
CN104238665A (zh) * 2013-06-24 2014-12-24 佳能株式会社 图像处理装置及图像处理方法
US9684169B2 (en) 2013-06-24 2017-06-20 Canon Kabushiki Kaisha Image processing apparatus and image processing method for viewpoint determination
CN104238665B (zh) * 2013-06-24 2017-12-22 佳能株式会社 图像处理装置及图像处理方法
WO2014205639A1 (en) * 2013-06-25 2014-12-31 Thomson Licensing Method and device for character input
CN103474007A (zh) * 2013-08-27 2013-12-25 湖南华凯创意展览服务有限公司 一种互动式显示方法及系统
CN103529947A (zh) * 2013-10-31 2014-01-22 京东方科技集团股份有限公司 显示装置及其控制方法、手势识别方法
WO2015062248A1 (zh) * 2013-10-31 2015-05-07 京东方科技集团股份有限公司 显示装置及其控制方法、和手势识别方法
WO2015062251A1 (zh) * 2013-10-31 2015-05-07 京东方科技集团股份有限公司 显示装置及其控制方法、和手势识别方法
CN103530060A (zh) * 2013-10-31 2014-01-22 京东方科技集团股份有限公司 显示装置及其控制方法、手势识别方法
CN103559809B (zh) * 2013-11-06 2017-02-08 常州文武信息科技有限公司 基于计算机的现场交互演示系统
CN103559809A (zh) * 2013-11-06 2014-02-05 常州文武信息科技有限公司 基于计算机的现场交互演示系统
CN103995620A (zh) * 2013-12-02 2014-08-20 深圳市云立方信息科技有限公司 一种空中触控系统
CN103593585A (zh) * 2013-12-02 2014-02-19 深圳中兴网信科技有限公司 远程诊断系统
CN103744608B (zh) * 2014-01-20 2018-02-27 联想(北京)有限公司 一种信息处理方法及电子设备
CN103744608A (zh) * 2014-01-20 2014-04-23 联想(北京)有限公司 一种信息处理方法及电子设备
CN104951059B (zh) * 2014-03-31 2018-08-10 联想(北京)有限公司 一种数据处理方法、装置及一种电子设备
CN104951059A (zh) * 2014-03-31 2015-09-30 联想(北京)有限公司 一种数据处理方法、装置及一种电子设备
CN103995586B (zh) * 2014-05-12 2018-04-06 上海大学 基于虚拟触摸屏的非穿戴指势人机交互方法
CN105334951B (zh) * 2014-06-27 2018-08-31 联想(北京)有限公司 一种三维图像控制方法、装置及电子设备
CN105334951A (zh) * 2014-06-27 2016-02-17 联想(北京)有限公司 一种三维图像控制方法、装置及电子设备
CN105530365A (zh) * 2014-12-26 2016-04-27 比亚迪股份有限公司 一种车载电话系统及包含该系统的车辆
CN104714646A (zh) * 2015-03-25 2015-06-17 中山大学 一种基于立体视觉的3d虚拟触控人机交互方法
CN104759095A (zh) * 2015-04-24 2015-07-08 吴展雄 一种虚拟现实头戴显示系统
CN108139338A (zh) * 2015-07-28 2018-06-08 通用电气公司 对非破坏性测试装置的控制
CN105204627B (zh) * 2015-09-01 2016-07-13 济南大学 一种基于手势的数字输入方法
CN105204627A (zh) * 2015-09-01 2015-12-30 济南大学 一种基于手势的数字输入方法
CN105488802B (zh) * 2015-12-07 2018-12-28 清华大学 一种指尖深度检测方法及系统
CN105824408A (zh) * 2016-02-15 2016-08-03 乐视致新电子科技（天津）有限公司 虚拟现实头盔瞳距调节同步装置及方法
US10990342B2 (en) 2016-09-29 2021-04-27 Jiang Chang Multi-viewpoint switched shooting system and method
US10976980B2 (en) 2016-09-29 2021-04-13 Jiang Chang, Xingchen Liu and Dahooo USA Method of maintaining accuracy in a 3D image formation system
US11301199B2 (en) 2016-09-29 2022-04-12 Jiang Chang Multi-viewpoint switched shooting system and method
US10496353B2 (en) 2016-09-29 2019-12-03 Jiang Chang Three-dimensional image formation and color correction system and method
US11379173B2 (en) 2016-09-29 2022-07-05 Jiang Chang, Xingchen Liu, Dahooo USA Method of maintaining accuracy in a 3D image formation system
CN106648063B (zh) * 2016-10-19 2020-11-06 北京小米移动软件有限公司 手势识别方法及装置
CN106648063A (zh) * 2016-10-19 2017-05-10 北京小米移动软件有限公司 手势识别方法及装置
CN106919294B (zh) * 2017-03-10 2020-07-21 京东方科技集团股份有限公司 一种3d触控交互装置、其触控交互方法及显示装置
WO2018161542A1 (zh) * 2017-03-10 2018-09-13 京东方科技集团股份有限公司 一种3d触控交互装置、其触控交互方法及显示装置
CN106919294A (zh) * 2017-03-10 2017-07-04 京东方科技集团股份有限公司 一种3d触控交互装置、其触控交互方法及显示装置
CN107300975A (zh) * 2017-07-13 2017-10-27 联想(北京)有限公司 一种信息处理方法及电子设备
CN107515714A (zh) * 2017-07-27 2017-12-26 歌尔股份有限公司 一种手指触控识别方法、装置和触控投影设备
CN107515714B (zh) * 2017-07-27 2020-08-28 歌尔股份有限公司 一种手指触控识别方法、装置和触控投影设备
CN108113638A (zh) * 2018-02-05 2018-06-05 中国人民解放军空军航空医学研究所 一种动态视力检测方法
CN108989661B (zh) * 2018-06-19 2021-06-29 北京淳中科技股份有限公司 一种摄像设备控制方法、装置和系统
CN108989661A (zh) * 2018-06-19 2018-12-11 北京淳中科技股份有限公司 一种摄像设备控制方法、装置和系统
CN108920088A (zh) * 2018-07-18 2018-11-30 成都信息工程大学 一种基于隔空触摸操作的桌面投影交互方法及系统
CN109375834A (zh) * 2018-09-27 2019-02-22 东莞华贝电子科技有限公司 投影键盘的反馈方法及投影键盘
CN109683765A (zh) * 2018-12-27 2019-04-26 张家港康得新光电材料有限公司 一种资源分配方法、装置以及3d显示终端
CN111028494B (zh) * 2019-11-04 2021-01-29 珠海格力电器股份有限公司 一种电器设备的虚拟遥控方法、计算机可读存储介质及智能家电
CN111028494A (zh) * 2019-11-04 2020-04-17 珠海格力电器股份有限公司 一种电器设备的虚拟遥控方法、计算机可读存储介质及智能家电
WO2024026638A1 (en) * 2022-08-01 2024-02-08 Huawei Technologies Co., Ltd. Haptic interaction with 3d object on naked eye 3d display

Also Published As

Publication number Publication date
CN102508546B (zh) 2014-04-09

Similar Documents

Publication Publication Date Title
CN102508546B (zh) 一种3d虚拟投影及虚拟触摸的用户交互界面及实现方法
US9962839B2 (en) Robot apparatus, method for controlling the same, and computer program
TWI540461B (zh) 手勢輸入的方法及系統
WO2017118075A1 (zh) 人机交互系统、方法及装置
US20110118877A1 (en) Robot system and method and computer-readable medium controlling the same
EP2790089A1 (en) Portable device and method for providing non-contact interface
JP6165485B2 (ja) 携帯端末向けａｒジェスチャユーザインタフェースシステム
US10234955B2 (en) Input recognition apparatus, input recognition method using maker location, and non-transitory computer-readable storage program
KR101890459B1 (ko) 3차원으로 디스플레이된 오브젝트의 사용자 선택 제스쳐에 응답하기 위한 방법 및 시스템
KR20120068253A (ko) 사용자 인터페이스의 반응 제공 방법 및 장치
KR102147430B1 (ko) 가상 공간 멀티 터치 인터랙션 장치 및 방법
CN107741782B (zh) 一种设备虚拟漫游方法和装置
JP2015118442A (ja) 情報処理装置、情報処理方法およびプログラム
TWI486815B (zh) 顯示設備及其控制系統和方法
US10437415B2 (en) System, method, and device for controlling a display
US20150058811A1 (en) Control system for display screen, input apparatus and control method
KR20160055407A (ko) 홀로그래피 터치 방법 및 프로젝터 터치 방법
CN104834410A (zh) 输入装置以及输入方法
CN105302310B (zh) 一种手势识别装置、系统及方法
WO2018076609A1 (zh) 一种操作终端的方法和终端
CN104102332B (zh) 显示设备及其控制系统和方法
CN114327047B (zh) 设备控制方法、设备控制装置及存储介质
CN105787971A (zh) 一种信息处理方法和电子设备
KR101591038B1 (ko) 홀로그래피 터치 방법 및 프로젝터 터치 방법
KR20150137908A (ko) 홀로그래피 터치 방법 및 프로젝터 터치 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant