CN105320262A - 操作虚拟世界里的电脑和手机的方法、装置以及使用其的眼镜 - Google Patents

Abstract

本发明公开一种操作虚拟世界里的电脑和手机的方法，包括：通过眼镜上的两个激光和两个摄像头获取人体影像信息，来控制眼镜上的两个投影仪投影到眼睛上的虚拟世界的身体操作虚拟世界里的电脑和手机，以及更好的体验体感游戏和虚拟现实；本发明还公开了一种操作虚拟世界里的电脑和手机的装置，所述装置包括：眼镜，主体(手机系统、CPU、GPU、ROM、RAM、硬盘、外部存储器、蓝牙、无线连接、陀螺仪、传感器、电池)、麦克、扬声器、激光、摄像头、投影仪。眼镜上的两个投影仪连接主体，将虚拟世界投影到眼睛上；激光和摄像头获取人体影像信息，传送给主体进行处理，来控制虚拟世界里的身体，实现现实世界的身体控制投影仪投影的虚拟世界里的身体；通过现实世界的身体控制虚拟世界的身体来操作虚拟世界的电脑和手机，从而取代电脑和手机完成其所有功能。

Description

操作虚拟世界里的电脑和手机的方法、装置以及使用其的眼镜

技术领域

本发明涉及移动设备技术、电子信息技术和计算机技术领域，尤其涉及一种操作虚拟世界里的电脑和手机的方法、装置以及使用其的眼镜。

技术背景

随着移动技术的发展，以前只用来佩戴的眼镜，现在功能越来越多，如通过智能手机或家庭网络与互联网相连，可实现搜索、短信、拍照、摄像、社交分享等功能。

目前智能眼镜在操作方便性、快捷性上存在很多问题，而且还要和智能手机或电脑连接才能输入字符及其他相关操作，无法独立取代手机和电脑的所有功能，比如利用智能眼镜进行办公等，也无法身入其境的看图、视频、看电视电影、异地商务谈判、异地参观旅游、模拟体验各种生活及训练、虚拟现实、体感游戏等。

发明内容

有鉴于此，本发明提出一种操作虚拟世界里的电脑和手机的方法、装置以及使用其的眼镜，以解决上述问题。

为达到上述目的，本发明的实施例的技术方案是这样实现的：

一种操作虚拟世界里的电脑和手机的方法，其特征在于，利用激光3和摄像头4来获取人体图像信息，将此人体图像信息传输给主机1，通过虚拟现实软件和体感游戏软件进行处理，与投影仪5投影的内容互动，包括：

a1、主机1启动相应软件，并生成虚拟世界，传递给投影仪5，投影仪5投影覆盖人体眼睛的所有视角。

a2、在投影仪5投影的虚拟世界里有一个和现实世界中视角角度相同的人物立体图像，作为本人在虚拟世界的身体，投影仪5投影的画面为第一人称视角，虚拟世界的身体可以人为设置体型相貌，或者根据现实中的身体利用三维扫描技术生成的立体人物图像；在同一虚拟空间可以同时出现多人进行互动交流，如同3D网络游戏；通过聊天软件和对方或者多人一起进入同一虚拟世界，而虚拟世界的身体都是根据现实世界的身体通过三维扫描技术生成的立体图像，由主机1中的体感游戏、虚拟现实软件处理，信号传递给投影仪5投影到眼睛上，就能实现和现实世界一模一样的面对面聊天功能，彼此都可以看到彼此的动作和肢体语言。

a3、按投影仪5投影到人体眼睛里所看到的虚拟世界身体四肢的角度，将现实世界人体的肢体和投影仪5投影的虚拟世界人体肢体重合，做出和虚拟世界身体如十指展开的手势，通过此手势或语音给主机下达开启体感游戏软件的指令，由激光3和摄像头4获取现实世界身体图像信息，传输给主机1，由体感游戏软件进行处理，实现和投影仪5投影的虚拟世界内容互动，那么现实世界的身体就可以开始控制虚拟世界的身体，包括手指在内；为了增加控制虚拟世界身体手指的精确度，可以在体感游戏软件中增加每根手指的骨架。

a4、通过现实世界里的身体控制投影仪5投影的虚拟世界里的身体，点击投影仪5投影的虚拟世界里屏幕上的快捷键，信息传输给主机1，通过电脑或手机的操作软件处理，开启相应的软件；当虚拟世界身体的手指触碰到虚拟世界里的屏幕会有如波纹闪动或按键铃声等提示。

a5、通过现实世界里的身体控制投影仪5投影的虚拟世界里的身体，点击投影仪5投影的虚拟世界屏幕里生成键盘的快捷键，由主机1进行处理，启动虚拟键盘软件，在投影仪5投影的虚拟世界里的屏幕下方生成可移动可大小的虚拟键盘，通过现实世界里的身体控制投影仪5投影的虚拟世界里的身体敲击虚拟世界里的虚拟键盘，由主机1中虚拟键盘软件处理，进行字符输入；点击保存文件，主机1收到指令进行处理，把数据保存在主机1的硬盘中或者云端；当手指触碰到虚拟世界里的键盘会有如波纹闪动或按键铃声等提示。

a6、通过现实世界里的身体控制投影仪5投影的虚拟世界里的身体，用手指在虚拟世界的屏幕上完成一切触摸屏的功能，如翻页、手写等，由主机1中操作软件进行处理，完成相应动作；点击生成手机屏幕键，指令传递给主机1，由主机1中操作软件处理，在投影仪5投影的虚拟世界里生成可移动和可大小的手机屏幕，通过现实世界里的身体控制投影仪5投影的虚拟世界里的身体，操作虚拟世界的手机，如在虚拟世界里的手机屏幕里输入手机号码或从联系人里调出号码，再按拨出键，主机1收到指令，传递给主机1中手机系统，播出此号码，实现电话功能；当手指触碰到虚拟世界里的屏幕会有如波纹闪动或按键铃声等提示。

a7、通过现实世界里的身体控制投影仪5投影的虚拟世界里的身体，用手指在虚拟世界的屏幕上完成鼠标的功能，如右手食指点击屏幕代表点击鼠标左键，中指点击屏幕代表点击鼠标右键，由主机1中操作软件进行处理，完成相应动作；当手指触碰到虚拟世界里的屏幕会有如波纹闪动或按键铃声等提示。

a8、通过现实世界里的身体控制投影仪5投影的虚拟世界里的身体，由主机1操作软件处理，可以将虚拟世界的屏幕任意放大缩小，移动位置和角度，如果虚拟世界屏幕显示的是3D画面，由主机1中的虚拟现实软件处理，可以选择无限放大进入里面的世界，变成新的虚拟世界，也可以通过动作或者手势指令退出新的虚拟世界回到原来的虚拟世界，并可以同时操作虚拟世界几台电脑和手机。

a9、通过陀螺仪和传感器获取信息，传递给主机，由虚拟现实软件处理，实现现实世界摄像头4视角变化控制投影仪5投影的虚拟世界画面的视角的变化，如现实世界人抬头看天，陀螺仪和传感器把信息传递给主机1，由主机中虚拟现实软件处理，虚拟世界里的身体就会做出抬头看天的动作，并将画面传输给投影仪5投影，就会看到虚拟世界的天，在视觉上犹如身临其境一般。

a10、将摄像头4拍到的图像直接投影到眼睛上，把现实世界当成虚拟世界，在投影的画面中生成电脑屏幕，进行上述操作，在视觉上就会像在现实世界的空中悬浮了一台可以操作的电脑或手机，并可以随意摆放、放大和缩小或者隐藏；也可以在投影仪5投影的现实世界画面的窗口中显示其他可操作和可移动的物体。

在主机1中预存一些动作和手势指令，可以在特定的情况下，通过激光和摄像头获取动作和手势图像信息，并选择运行相应的指令。

本发明实施例还公开了一种操作虚拟世界里的电脑和手机的装置，其特征在于，所述装置不需要连接电脑和手机，运用所述装置就能完成电脑和手机的所有功能，并实现虚拟现实，体感互动的体验。

所述装置具有电话、搜索、短信、拍照、摄像、社交分享、虚拟现实、体感游戏等手机和电脑的功能。

附图说明

下面结合附图对本发明做进一步详细的说明。

图1为本发明的结构示意图。

图中：1为主机(手机系统、CPU、GPU、ROM、RAM、硬盘、外部存储器、蓝牙、无线连接、陀螺仪、传感器、电池等)，2为扬声器，3为激光，4为摄像头，5为投影仪，6为麦克。

具体实施方案

如图1所示，所述装置包括：眼镜，主机1(手机系统、CPU、GPU、ROM、RAM、硬盘、外部存储器、蓝牙、无线连接、陀螺仪、传感器、电池等)、扬声器2、激光3、摄像头4、投影仪5、麦克6。

在主机1里预存动作和手势指令，在特定情况下可根据激光和摄像头获取图像信息，进行识别选择相应的动作和手势指令进行操作。

a1、所述装置待机状态，激光3、摄像头4、投影仪5等处于关闭状态，待机状态开启哪些功能可以设置；所述装置在待机状态，如有来电，通过语音或者触摸、按键功能，收到：接听指令，接通电话；收到：挂断指令，挂断电话；收到：开机指令，开启激光3、摄像头4、投影仪5等处于关闭状态的设备，虚拟世界屏幕会显示手机来电信息，通过现实世界里的身体控制虚拟世界里的身体进行操作。

a2、眼镜上的两个投影仪5、扬声器2连接主机1，作为输出模块，其中眼镜上的两个投影仪5将图像投影到眼睛上，为显示模块；主机1包括：手机系统、CPU、GPU、ROM、RAM、硬盘、外部存储器、蓝牙、无线连接、陀螺仪、传感器、电池等；主机1启动相应程序并对激光3和摄像头4输入的信息进行处理、将视频信号传输给投影仪5，作为计算模块。

a3、连接主机1的激光3、摄像头4、麦克风6作为输入模块，其中激光3和摄像头4获取人体影像信息，传送给主机进行处理，来控制虚拟世界的人体，实现现实世界的身体控制投影仪5投影的虚拟世界中的身体进行输入。

操作虚拟世界里的电脑和手机的方法：其特征在于，其特征在于，利用激光3和摄像头4来获取人体图像信息，将此人体图像信息传输给主机1，通过虚拟现实软件和体感游戏软件进行处理，与投影仪5投影的内容互动，包括：

a1、主机1启动相应软件，并生成虚拟世界，传递给投影仪5，投影仪5投影覆盖人体眼睛的所有视角。

a2、在投影仪5投影的虚拟世界里有一个和现实世界中视角角度相同的人物立体图像，作为本人在虚拟世界的身体，投影仪5投影的画面为第一人称视角，虚拟世界的身体可以人为设置体型相貌，或者根据现实中的身体利用三维扫描技术生成的立体人物图像；在同一虚拟空间可以同时出现多人进行互动交流，如同3D网络游戏；通过聊天软件和对方或者多人一起进入同一虚拟世界，而虚拟世界的身体都是根据现实世界的身体通过三维扫描技术生成的立体图像，由主机1中的体感游戏、虚拟现实软件处理，信号传递给投影仪5投影到眼睛上，就能实现和现实世界一模一样的面对面聊天功能，彼此都可以看到彼此的动作和肢体语言。

a3、按投影仪5投影到人体眼睛里所看到的虚拟世界身体四肢的角度，将现实世界人体的肢体和投影仪5投影的虚拟世界人体肢体重合，做出和虚拟世界身体如十指展开的手势，通过此手势或语音给主机下达开启体感游戏软件的指令，由激光3和摄像头4获取现实世界身体图像信息，传输给主机1，由体感游戏软件进行处理，实现和投影仪5投影的虚拟世界内容互动，那么现实世界的身体就可以开始控制虚拟世界的身体，包括手指在内；为了增加控制虚拟世界身体手指的精确度，可以在体感游戏软件中增加每根手指的骨架。

a4、通过现实世界里的身体控制投影仪5投影的虚拟世界里的身体，点击投影仪5投影的虚拟世界里屏幕上的快捷键，信息传输给主机1，通过电脑或手机的操作软件处理，开启相应的软件；当虚拟世界身体的手指触碰到虚拟世界里的屏幕会有如波纹闪动或按键铃声等提示。

a5、通过现实世界里的身体控制投影仪5投影的虚拟世界里的身体，点击投影仪5投影的虚拟世界屏幕里生成键盘的快捷键，由主机1进行处理，启动虚拟键盘软件，在投影仪5投影的虚拟世界里的屏幕下方生成可移动可大小的虚拟键盘，通过现实世界里的身体控制投影仪5投影的虚拟世界里的身体敲击虚拟世界里的虚拟键盘，由主机1中虚拟键盘软件处理，进行字符输入；点击保存文件，主机1收到指令进行处理，把数据保存在主机1的硬盘中或者云端；当手指触碰到虚拟世界里的键盘会有如波纹闪动或按键铃声等提示，

a6、通过现实世界里的身体控制投影仪5投影的虚拟世界里的身体，用手指在虚拟世界的屏幕上完成一切触摸屏的功能，如翻页、手写等，由主机1中操作软件进行处理，完成相应动作；点击生成手机屏幕键，指令传递给主机1，由主机1中操作软件处理，在投影仪5投影的虚拟世界里生成可移动和可大小的手机屏幕，通过现实世界里的身体控制投影仪5投影的虚拟世界里的身体，操作虚拟世界的手机，如在虚拟世界里的手机屏幕里输入手机号码或从联系人里调出号码，再按拨出键，主机1收到指令，传递给主机1中手机系统，播出此号码，实现电话功能；当手指触碰到虚拟世界里的屏幕会有如波纹闪动或按键铃声等提示。

a7、通过现实世界里的身体控制投影仪5投影的虚拟世界里的身体，用手指在虚拟世界的屏幕上完成鼠标的功能，如右手食指点击屏幕代表点击鼠标左键，中指点击屏幕代表点击鼠标右键，由主机1中操作软件进行处理，完成相应动作；当手指触碰到虚拟世界里的屏幕会有如波纹闪动或按键铃声等提示。

a8、通过现实世界里的身体控制投影仪5投影的虚拟世界里的身体，由主机1操作软件处理，可以将虚拟世界的屏幕任意放大缩小，移动位置和角度，如果虚拟世界屏幕显示的是3D画面，由主机1中的虚拟现实软件处理，可以选择无限放大进入里面的世界，变成新的虚拟世界，也可以通过动作或者手势指令退出新的虚拟世界回到原来的虚拟世界，并可以同时操作虚拟世界几台电脑和手机。

a9、通过陀螺仪和传感器获取信息，传递给主机，由虚拟现实软件处理，实现现实世界摄像头4视角变化控制投影仪5投影的虚拟世界画面的视角的变化，如现实世界人抬头看天，陀螺仪和传感器把信息传递给主机1，由主机中虚拟现实软件处理，虚拟世界里的身体就会做出抬头看天的动作，并将画面传输给投影仪5投影，就会看到虚拟世界的天，在视觉上犹如身临其境一般。

a10、将摄像头4拍到的图像直接投影到眼睛上，把现实世界当成虚拟世界，在投影的画面中生成电脑屏幕，进行上述操作，在视觉上就会像在现实世界的空中悬浮了一台可以操作的电脑或手机，并可以随意摆放、放大和缩小或者隐藏；也可以在投影仪5投影的现实世界画面的窗口中显示其他可操作和可移动的物体。

也可以增加接收眼镜之外的激光和摄像头获取的人体影像信息，由主机1中体感游戏、虚拟现实软件处理，将此人体图像的肢体动作和手势与智能眼镜投影里的内容互动。

Claims (5)

1.一种操作虚拟世界里的电脑和手机的方法，其特征在于，通过获取现实世界的人体图像信息，由主机1中体感游戏、虚拟现实软件处理，实现现实世界身体控制虚拟世界的身体操作电脑和手机，电脑、手机的字符输入是通过获取现实世界的人体手指的图像信息，由主机1中体感游戏、虚拟现实软件处理，来控制虚拟世界身体的手指敲击虚拟世界里的键盘，由主机1中虚拟键盘软件处理，来实现字符输入；或者通过获取现实世界的人体手指的图像信息，由主机1中体感游戏、虚拟现实软件处理，来控制虚拟世界的人体的手指在虚拟世界的屏幕上进行手写输入，由主机1中操作软件处理，完成手写输入。

2.根据权利要求1所述的操作虚拟世界里的电脑和手机的方法，其特征在于，利用激光3和摄像头4来获取人体图像信息，将此人体图像信息传输给主机1，通过虚拟现实软件和体感游戏软件进行处理，与投影仪5投影的内容互动，包括：

a1、主机1启动相应软件，并生成虚拟世界，传递给投影仪5，投影仪5投影覆盖人体眼睛的所有视角；

a2、在投影仪5投影的虚拟世界里有一个和现实世界中视角角度相同的人物立体图像，作为本人在虚拟世界的身体，投影仪5投影的画面为第一人称视角，虚拟世界的身体可以人为设置体型相貌，或者根据现实中的身体利用三维扫描技术生成的立体人物图像；在同一虚拟空间可以同时出现多人进行互动交流，如同3D网络游戏；通过聊天软件和对方或者多人一起进入同一虚拟世界，而虚拟世界的身体都是根据现实世界的身体通过三维扫描技术生成的立体图像，由主机1中的体感游戏、虚拟现实软件处理，信号传递给投影仪5投影到眼睛上，就能实现和现实世界一模一样的面对面聊天功能，彼此都可以看到彼此的动作和肢体语言；

a3、按投影仪5投影到人体眼睛里所看到的虚拟世界身体四肢的角度，将现实世界人体的肢体和投影仪5投影的虚拟世界人体肢体重合，做出和虚拟世界身体如十指展开的手势，通过此手势或语音给主机下达开启体感游戏软件的指令，由激光3和摄像头4获取现实世界身体图像信息，传输给主机1，由体感游戏软件进行处理，实现和投影仪5投影的虚拟世界内容互动，那么现实世界的身体就可以开始控制虚拟世界的身体，包括手指在内；为了增加控制虚拟世界身体手指的精确度，可以在体感游戏软件中增加每根手指的骨架；

a4、通过现实世界里的身体控制投影仪5投影的虚拟世界里的身体，点击投影仪5投影的虚拟世界里屏幕上的快捷键，信息传输给主机1，通过电脑或手机的操作软件处理，开启相应的软件；当虚拟世界身体的手指触碰到虚拟世界里的屏幕会有如波纹闪动或按键铃声等提示；

a5、通过现实世界里的身体控制投影仪5投影的虚拟世界里的身体，点击投影仪5投影的虚拟世界屏幕里生成键盘的快捷键，由主机1进行处理，启动虚拟键盘软件，在投影仪5投影的虚拟世界里的屏幕下方生成可移动可大小的虚拟键盘，通过现实世界里的身体控制投影仪5投影的虚拟世界里的身体敲击虚拟世界里的虚拟键盘，由主机1中虚拟键盘软件处理，进行字符输入；点击保存文件，主机1收到指令进行处理，把数据保存在主机1的硬盘中或者云端；当手指触碰到虚拟世界里的键盘会有如波纹闪动或按键铃声等提示；

a6、通过现实世界里的身体控制投影仪5投影的虚拟世界里的身体，用手指在虚拟世界的屏幕上完成一切触摸屏的功能，如翻页、手写等，由主机1中操作软件进行处理，完成相应动作；点击生成手机屏幕键，指令传递给主机1，由主机1中操作软件处理，在投影仪5投影的虚拟世界里生成可移动和可大小的手机屏幕，通过现实世界里的身体控制投影仪5投影的虚拟世界里的身体，操作虚拟世界的手机，如在虚拟世界里的手机屏幕里输入手机号码或从联系人里调出号码，再按拨出键，主机1收到指令，传递给主机1中手机系统，播出此号码，实现电话功能；当手指触碰到虚拟世界里的屏幕会有如波纹闪动或按键铃声等提示；

a7、通过现实世界里的身体控制投影仪5投影的虚拟世界里的身体，用手指在虚拟世界的屏幕上完成鼠标的功能，如右手食指点击屏幕代表点击鼠标左键，中指点击屏幕代表点击鼠标右键，由主机1中操作软件进行处理，完成相应动作；当手指触碰到虚拟世界里的屏幕会有如波纹闪动或按键铃声等提示；

a8、通过现实世界里的身体控制投影仪5投影的虚拟世界里的身体，由主机1操作软件处理，可以将虚拟世界的屏幕任意放大缩小，移动位置和角度，如果虚拟世界屏幕显示的是3D画面，由主机1中的虚拟现实软件处理，可以选择无限放大进入里面的世界，变成新的虚拟世界，也可以通过动作或者手势指令退出新的虚拟世界回到原来的虚拟世界，并可以同时操作虚拟世界几台电脑和手机；

a9、通过陀螺仪和传感器获取信息，传递给主机，由虚拟现实软件处理，实现现实世界摄像头4视角变化控制投影仪5投影的虚拟世界画面的视角的变化，如现实世界人抬头看天，陀螺仪和传感器把信息传递给主机1，由主机中虚拟现实软件处理，虚拟世界里的身体就会做出抬头看天的动作，并将画面传输给投影仪5投影，就会看到虚拟世界的天，在视觉上犹如身临其境一般；

a10、将摄像头4拍到的图像自接投影到眼睛上，把现实世界当成虚拟世界，在投影的画面中生成电脑屏幕，进行上述操作，在视觉上就会像在现实世界的空中悬浮了一台可以操作的电脑或手机，并可以随意摆放、放大和缩小或者隐藏；也可以在投影仪5投影的现实世界画面的窗口中显示其他可操作和可移动的物体；

在主机1中预存一些动作和手势指令，可以在特定的情况下，通过激光和摄像头获取动作和手势图像信息，并选择运行相应的指令。

3.根据权利要求1所述的操作虚拟世界里的电脑和手机的方法，其特征在于，通过现实世界里的身体控制虚拟世界里的身体，操作虚拟世界的电脑和手机，通过聊天软件和对方或者多人一起进入同一虚拟世界，而虚拟世界的身体都是根据现实世界的身体通过三维扫描技术生成的立体图像，由主机1中的体感游戏、虚拟现实软件处理，将信号进行显示，在视觉和听觉上就能实现和现实世界一模一样的面对面聊天功能，彼此都可以看到彼此的动作和肢体语言。

4.一种操作虚拟世界里的电脑和手机的装置，其特征在于，所述装置不需要连接电脑和手机，运用所述装置通过输入模块中激光3、摄像头4获取现实世界身体的图像信息，由主机1中体感游戏、虚拟现实、虚拟键盘、操作系统软件处理，实现现实世界的身体控制虚拟世界的身体操作虚拟世界里的电脑和手机，完成电脑和手机的所有功能；所述装置包括：眼镜，主机1、扬声器2、激光3、摄像头4、投影仪或显示屏5、麦克6；主机1包括：手机系统、CPU、GPU、ROM、RAM、硬盘、外部存储器、蓝牙、无线连接、陀螺仪、传感器、电池。

5.根据权利要求4所述的操作虚拟世界里的电脑和手机的装置，其特征在于：眼镜上的两个投影仪5连接主机1，将虚拟世界投影到眼睛上；激光3和摄像头4获取人体影像信息，由主机1中体感游戏、虚拟现实软件处理，与投影仪5投影到人体眼睛里的内容进行互动，可以实现虚拟现实中的体感游戏。