CN103083901A - 全息投影体感互动系统和方法 - Google Patents

全息投影体感互动系统和方法 Download PDF

Info

Publication number
CN103083901A
CN103083901A CN2011103371584A CN201110337158A CN103083901A CN 103083901 A CN103083901 A CN 103083901A CN 2011103371584 A CN2011103371584 A CN 2011103371584A CN 201110337158 A CN201110337158 A CN 201110337158A CN 103083901 A CN103083901 A CN 103083901A
Authority
CN
China
Prior art keywords
game
image
game control
line holographic
holographic projections
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2011103371584A
Other languages
English (en)
Inventor
董德福
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BEIJING DEXIN INTERACTIVE NETWORK TECHNOLOGY CO LTD
Original Assignee
BEIJING DEXIN INTERACTIVE NETWORK TECHNOLOGY CO LTD
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BEIJING DEXIN INTERACTIVE NETWORK TECHNOLOGY CO LTD filed Critical BEIJING DEXIN INTERACTIVE NETWORK TECHNOLOGY CO LTD
Priority to CN2011103371584A priority Critical patent/CN103083901A/zh
Publication of CN103083901A publication Critical patent/CN103083901A/zh
Pending legal-status Critical Current

Links

Images

Abstract

本发明是有关于一种全息投影体感互动系统和方法。其中的全息投影体感互动系统包括:摄像装置,用于实时摄取图像,并输出;游戏运行装置,用于运行基于3D建模的游戏,接收摄像装置输出的图像,从各图像中识别控制者的动作,并将动作转换为正在运行的游戏可识别的游戏控制命令,将该游戏控制命令提供给所述正在运行的游戏,对游戏在运行过程中产生的游戏画面信息进行全息投影显示方式处理,并输出处理后的游戏画面信息;全息投影显示装置,用于以全息投影方式显示游戏运行装置输出的游戏画面信息对应的游戏画面。本发明提供的技术方案充分利用了3D建模的游戏所具有的3D特点,并带给控制者实际的视觉立体感,提高人们的游戏体验,非常适于实用。

Description

全息投影体感互动系统和方法
技术领域
本发明涉及一种游戏控制技术,特别是涉及一种全息投影体感互动系统和方法。 
背景技术
3D游戏是使用空间立体计算技术实现操作的游戏。从编程实现的角度来说,游戏基础模型(如游戏的人物、场景、以及基础地形等)是使用三维立体模型实现的。3D游戏中的人物角色控制是使用空间立体编程算法实现的。 
相对于传统的2D游戏而言的,3D游戏因其采用了立体空间的概念,所以更显真实,而且,3D游戏对空间操作的随意性也较强,也更容易吸引人。 
发明人在实现本发明过程中发现:现有的3D游戏虽然是基于3D建模而实现的,但是,现有的3D游戏也仅限于控制者可以从多个视觉角度来感受游戏,并不能够带给控制者实际的视觉立体感。 
有鉴于上述现有的3D游戏存在的缺陷,本发明人基于从事此类产品设计制造多年丰富的实务经验及专业知识,并配合学理的运用,积极加以研究创新,以期创设一种新型结构的全息投影体感互动系统和新的全息投影体感互动方法,能够克服现有的3D游戏实现存在的问题,使其更具有实用性。经过不断的研究、设计,并经过反复试作样品及改进后,终于创设出确具实用价值的本发明。 
发明内容
本发明的目的在于,克服现有的3D游戏存在的缺陷,而提供一种新型结构的全息投影体感互动系统和全息投影体感互动方法,所要解决的技术问题是,使基于3D建模的游戏带给控制者实际的视觉立体感,提高人们的游戏体验,非常适于实用。 
本发明的目的以及解决其技术问题可以采用以下的技术方案来实现。 
依据本发明提出的一种全息投影体感互动系统,包括:摄像装置,用于实时摄取图像并输出;游戏运行装置,用于运行基于3D建模的游戏,接收所述摄像装置输出的图像,从所述图像中识别控制者的动作,并将所述动作转换为正在运行的游戏可识别的游戏控制命令,将该游戏控制命令提供给所述正在运行的游戏,对所述游戏在运行过程中产生的游戏画面信息 进行全息投影显示方式处理,并输出所述处理后的游戏画面信息;全息投影显示装置,用于以全息投影方式显示所述游戏运行装置输出的游戏画面信息对应的游戏画面。 
本发明的目的以及解决其技术问题还可以采用以下的技术措施来进一步实现。 
较佳的,前述的全息投影体感互动系统,其中所述系统还包括:游戏手柄。 
较佳的,前述的全息投影体感互动系统,其中所述游戏手柄包括:重力加速度传感器;游戏控制键;收发模块,用于将所述重力加速度传感器和游戏控制键产生的游戏控制信息向所述游戏运行装置发送。 
较佳的,前述的全息投影体感互动系统,其中游戏手柄还包括:声音撷取模块,用于拾取声音,并产生所述声音的音频信号,所述收发模块将所述声音的音频信号作为游戏控制信息向游戏运行装置发送;和/或,声音播放模块,用于播放所述收发模块接收到的所述游戏运行装置发送来的音频播放信号;和/或,陀螺仪,用于产生采集数据,所述收发模块将所述采集数据作为游戏控制信息向所述游戏运行装置发送;和/或,地磁传感器,用于产生方向参数,所述收发模块将所述方向参数作为游戏控制信息向所述游戏运行装置发送;所述游戏运行装置将所述游戏控制信息转换为游戏控制命令,并提供给所述正在运行的游戏。 
较佳的,前述的全息投影体感互动系统,其中所述摄像装置包括:2D摄像装置或者3D摄像装置。 
较佳的,前述的全息投影体感互动系统,其中3D摄像装置包括:红外光源或者LED光源或者激光光源;CMOS影像传感器,输出红外光编码影像或者LED光编码影像或者激光编码影像;场景深度处理模块,与所述CMOS影像传感器连接,接收所述CMOS影像传感器输出的红外光编码影像或者LED光编码影像或者激光编码影像,并向控制装置输出场景深度影像。 
本发明的目的以及解决其技术问题可以采用以下的技术方案来实现。 
依据本发明提出的一种全息投影体感互动方法,包括:运行基于3D建模的游戏;接收实时摄取的图像;从各所述图像中识别控制者的动作,并将所述动作转换为正在运行的游戏可识别的游戏控制命令;将该游戏控制命令提供给所述正在运行的游戏,对所述游戏在运行过程中产生的游戏画面信息进行全息投影显示方式处理,并以全息投影方式显示所述处理后的游戏画面信息对应的游戏画面。 
较佳的,前述的全息投影体感互动方法,其中所述实时摄取的图像包括:2D摄像装置或者3D摄像装置摄取的图像。 
较佳的,前述的全息投影体感互动方法,其中所述方法还包括:接收 重力加速度传感器、游戏控制键、声音撷取模块和/或陀螺仪产生的游戏控制信息,并将该游戏控制信息转换为游戏控制命令提供给所述正在运行的游戏。 
借由上述技术方案,本发明的全息投影体感互动系统和方法至少具有下列优点及有益效果:本发明通过将基于3D建模的游戏运行产生的游戏画面信息进行全息投影显示方式处理,并以全息投影的形式显示处理后的游戏画面信息对应的游戏画面,从而充分利用了3D建模的游戏所具有的3D特点,并带给控制者实际的视觉立体感,提高人们的游戏体验。 
综上所述,本发明在实现技术上有显著的进步,并具有明显的积极效果,诚为一新颖、进步、实用的新设计。 
上述说明仅是本发明技术方案的概述,为了能够更清楚了解本发明的技术手段,而可依照说明书的内容予以实施,并且为了让本发明的上述和其他目的、特征和优点能够更明显易懂,以下特举较佳实施例,并配合附图,详细说明如下。 
附图说明
图1为本发明的全息投影体感互动系统示意图; 
图2为本发明的全息投影体感互动方法示意图。 
具体实施方式
为更进一步阐述本发明为达成预定发明目的所采取的技术手段及功效,以下结合附图及较佳实施例,对依据本发明提出的全息投影体感互动系统和方法其具体实施方式、结构、特征、步骤及功效,详细说明如后。 
图1示出了本发明具体实施例的全息投影体感互动系统,包括:摄像装置1、游戏运行装置2(如计算机、游戏机、机顶盒或者智能电视机等)以及全息投影显示装置3。另外,该系统还可以包括:游戏手柄4。 
摄像装置1主要用于根据预定采样频率实时摄取图像,并向游戏运行装置2输出其摄取的图像信息。该摄像装置1可以为2D摄像装置,也可以为3D摄像装置。 
2D摄像装置即目前普通的摄像头(如RGB彩色摄像头),该摄像头价格低廉。2D摄像装置可以包括:一个或者两个普通的2D摄像头。 
3D摄像装置如现有的3D摄像头等。一个具体的例子,3D摄像装置实时摄取场景深度影像,并将摄取获得的场景深度影像传输至游戏运行装置2。这里的实时摄取如按照预定采样频率进行图像采样。 
3D摄像装置可以包括:红外光源、CMOS影像传感器以及场景深度处理模块。上述红外光源也可以为LED光源或者激光光源。 
红外光源应符合IEC 60825-1标准中的一级安全要求。LED光源或者激光光源也应符合相应标准中的安全要求。 
CMOS影像传感器主要用于接收红外光源放出的红外光(或者LED光源发出的LED光或者激光光源发出的激光),并基于接收到的红外光(或者LED光或者激光)产生红外光编码影像(或者LED光编码影像或者激光编码影像),之后,将其产生的红外光编码影像(或者LED光编码影像或者激光编码影像)传输给场景深度处理模块。 
场景深度处理模块与CMOS影像传感器连接。场景深度处理模块可以为PS1080芯片,当然,也可以为与PS1080芯片功能作用相类似的其它型号的芯片。场景深度处理模块主要用于对红外影像(或者LED光编码影像或者激光编码影像)进行处理,逐帧生成场景深度影像,并将其生成的场景深度影像传输给游戏运行装置2。 
2D摄像装置以及3D摄像装置可以包括无线接口模块以及有线接口模块中的至少一个,即2D摄像装置以及3D摄像装置可以通过有线连接方式或者无线连接方式与游戏运行装置2连接。一个具体的例子:2D摄像装置以及3D摄像装置可以包含有:蓝牙、2.4GHz模块、WIFI模块、红外模块或者USB接口等,以实现图像信息的传输。 
游戏运行装置2主要用于运行基于3D建模的游戏,游戏运行装置2可以基于其有线或者无线接口(例如游戏运行装置2中设置的蓝牙、2.4GHz模块、WIFI模块、红外模块或者USB接口等)接收到摄像装置1输出的图像,游戏运行装置2从接收到的图像序列中识别出控制者的动作,从而游戏运行装置2可以将其识别出的动作转换为正在运行的基于3D建模的游戏(如体感游戏)可以有效识别的游戏控制命令,并将该转换后的游戏控制命令提供给正在运行的基于3D建模的游戏。另外,游戏运行装置2还可以将游戏手柄4传输来的游戏控制信息转换为正在运行的基于3D建模的游戏(如体感游戏)可以有效识别的游戏控制命令,并将该转换后的游戏控制命令提供给正在运行的基于3D建模的游戏。 
上述基于3D建模的游戏可以是体感游戏,也可以是非体感游戏,且该基于3D建模的游戏可以是采用现有的3D建模技术而设计的游戏。本发明不限制基于3D建模的游戏所表现出来的具体游戏名称、以及如何采用现有的3D建模技术来构建游戏的具体实现过程等。 
游戏运行装置2将其接收到的图像序列中的控制者的动作转换为正在运行的游戏能够有效识别的游戏控制命令的一个具体的例子为:在正在运行的基于3D建模的游戏不是体感游戏且控制者希望实现体感游戏的情况下,游戏运行装置2接收到的外部输入的图像所表示出的控制者的动作其实是体感游戏控制信息,游戏运行装置2应先识别出图像所表示出的控制 者的动作,再识别出该动作所需要表达的体感游戏控制命令,之后,游戏运行装置2再将体感游戏控制命令转换为键盘或者鼠标所对应的游戏控制命令,该转换后的游戏控制命令才可以提供给正在运行的基于3D建模的游戏。另一个具体的例子为:在正在运行的基于3D建模的游戏即为体感游戏的情况下,游戏运行装置2接收到的外部输入的图像所表示出的控制者的动作其实是体感游戏控制信息,游戏运行装置2应先识别出该动作所需要表达的体感游戏控制命令,该识别出的体感游戏控制命令可以直接提供给正在运行的基于3D建模的游戏。 
游戏运行装置2可以采用多种方法基于图像确定出控制者的动作,进而确定出游戏控制命令,例如,游戏运行装置2可以基于Kinet技术根据其接收到的图像序列来确定出控制者的动作,此时游戏运行装置2可以包括现有的动作识别芯片,如美国Canesta公司生产的芯片等;再如,游戏运行装置2可以基于Wii技术根据其接收到的包含有光源的图像确定出控制者的动作。本发明不限制游戏运行装置2根据其接收到的图像确定出正在运行的游戏可以识别出的游戏控制命令的具体实现过程。 
正在运行的游戏在运行过程中会产生一系列的游戏画面信息,游戏运行装置2需要对该游戏画面信息进行全息投影显示方式处理,并将处理后的游戏画面信息向全息投影显示装置3发送,以使全息投影显示装置3显示的画面可以产生全息投影形式的立体视觉效果。 
全息投影显示装置3主要用于在接收到游戏运行装置2输出的游戏画面信息后,以全息投影的形式显示该游戏画面信息对应的游戏画面。本发明中的全息投影显示装置3可以为现有的全息投影显示器。 
本发明的系统可以利用现有的多种全息投影技术来实现视觉的立体效果,例如空气投影和交互技术、用激光束来投射实体的3D影像技术、或者360度全息显示屏技术等。 
由于本发明的全息投影体感互动系统可以采用现有的全息投影技术来产生视觉立体效果,因此,游戏运行装置2所执行的游戏画面信息的转换操作、以及全息投影显示装置3如何以全息投影的方式来显示其接收到的游戏画面信息等内容,应根据其采用的全息投影技术的原理来实现,本发明不限制上述游戏画面的全息投影显示方式处理操作以及以全息投影形式显示游戏画面的具体实现过程。 
本发明的游戏手柄4可以为传统的游戏手柄,也可以为Wii游戏手柄等。该游戏手柄4可以包括:重力加速度传感器、游戏控制键以及收发模块。另外,该游戏手柄4还可以包括:声音撷取模块、声音播放模块、陀螺仪以及地磁传感器中的至少一个。上述例举并没有详尽列出游戏手柄4所包含的所有元件,例如,游戏手柄4还可以包含有电源模块以及控制模 块等。 
重力加速度传感器与收发模块连接(如间接连接),该重力加速度传感器主要用于产生重力加速度传感信号。该重力加速度传感信号通过游戏手柄4中的收发模块向游戏运行装置2发送。例如,该加速度传感信号可以先由游戏手柄4中的控制模块获取,并由控制模块将该信号通过收发模块向游戏运行装置2发送。游戏运行装置2在接收到游戏手柄4传输来的重力加速度传感信号后,可以直接将该重力加速度传感信号转换为游戏控制命令,并提供给正在运行的游戏。 
游戏控制键主要用于根据控制者的按压等操作产生游戏控制信息,该游戏控制信息通过游戏手柄4中的收发模块向游戏运行装置2发送。游戏运行装置2在接收到游戏手柄4传输来的游戏控制信息后,可以直接将该游戏控制信息转换为游戏控制命令,并提供给正在运行的游戏。 
收发模块主要用于执行游戏手柄4与游戏运行装置2之间的信息交互操作,例如,收发模块将游戏手柄4(例如,其中的重力加速度传感器、游戏控制键、声音撷取模块、或者陀螺仪)产生的信息向游戏运行装置2发送,再例如,收发模块接收游戏运行装置2发送来的播放音频信息等。 
收发模块可以包括无线接口模块以及有线接口模块中的至少一个,即游戏手柄4可以通过有线连接方式或者无线连接方式与游戏运行装置2连接。一个具体的例子:该收发模块可以包括蓝牙模块、2.4GHz模块、WIFI模块、红外模块或者USB接口等等。本 发明不限制收发模块的具体实现方式。 
声音撷取模块与收发模块连接(如间接连接)。该声音撷取模块主要用于拾取声音,其拾取的声音的音频信号可以作为游戏控制信息通过收发模块向游戏运行装置2发送。该声音撷取模块可以包括麦克风等元件。本发明不限制声音撷取模块的具体表现形式。游戏运行装置2可以对其接收到的音频信号进行关键词提取操作,之后,确定其提取的关键词对应的游戏控制命令,并将该游戏控制命令提供给正在运行的游戏。 
声音播放模块与收发模块连接(如间接连接)。该声音播放模块主要用于在接收模块接收到游戏运行装置2发送的音频播放信号后,播放该音频播放信号,以发出声音。该声音播放模块可以包括扬声器。另外,该声音播放模块还可以包括耳机,即声音播放模块可以通过外放的方式向控制者播出声音,也可以通过耳机向控制者播出声音。 
陀螺仪与收发模块连接(如间接连接)。陀螺仪即角运动检测装置。陀螺仪主要用于产生采集数据。陀螺仪可以将其感知到的角速度的变化转换为电信号,从而产生采集数据。陀螺仪产生的采集数据可以作为游戏控制信息通过接口模块向游戏运行装置2发送。游戏运行装置2在接收到游戏 手柄4传输来的陀螺仪的采集数据后,可以直接将该采集数据转换为游戏控制命令,并提供给正在运行的游戏。 
地磁传感器与收发模块连接(如间接连接)。地磁传感器主要用于采集磁场矢量信息。地磁传感器采集的磁场矢量信息主要用于对重力加速度传感器和陀螺仪采集的数据进行位置校正。一个具体的例子,游戏运行装置2接收地磁传感器通过收发模块传输来的磁场矢量信息,游戏运行装置2利用该磁场矢量信息对重力加速度传感器和陀螺仪传输来的采集数据进行位置校正处理,之后,游戏运行装置2将处理后的位置数据转换为游戏控制命令,并提供给正在运行的游戏。另外,游戏运行装置2也可以直接将地磁传感器采集到的磁场矢量信息转换为游戏控制命令,并提供给正在运行的游戏。 
图2示出了本发明具体实施例的一种全息投影体感互动方法。 
图2中,S200、运行基于3D建模的游戏。 
上述基于3D建模的游戏可以是体感游戏,也可以是非体感游戏,且该基于3D建模的游戏可以是采用现有的3D建模技术而设计的游戏。本发明不限制基于3D建模的游戏所表现出来的具体游戏名称、以及如何采用现有的3D建模技术来构建游戏的具体实现过程等。 
S210、接收实时摄取的图像。 
具体的,这里的接收可以为基于有线连接方式的接收,也可以为基于无线连接方式的接收,且接收到的图像可以为基于RGB彩色摄像头摄取的图像,也可以为3D深度感应器摄取的图像。上述的3D深度感应器可以包括:红外线发射器和红外线CMOS摄像机,也可以包括:激光发射器和激光摄像机,还可以包括:LED发光设备和针对LED光进行捕捉的光学摄像机。 
另外,本发明还可以接收到游戏控制信息,该游戏控制信息可以由游戏手柄中的重力加速度传感器、陀螺仪以及声音撷取模块等产生。上述游戏控制信息可以为按键对应的游戏控制信息,如游戏手柄4的按键、计算机键盘、计算机鼠标、或者游戏机按键等的按键对应的游戏控制信息;该游戏控制信息也可以为拾取的声音信息、摄取的图像信息、获得的光源位置信息、重力加速度传感器以及陀螺仪产生的采集数据等,具体如上述系统实施例中的描述,在此不再详细说明。本发明不限制游戏控制信息的具体表现形式。 
需要说明的是,上述S200和S210并没有执行顺序的必然要求,如上述两个步骤也可以同时执行。 
S220、从各所述图像中识别控制者的动作,并将所述动作转换为正在运行的游戏可识别的游戏控制命令。 
一个具体的例子为:在正在运行的基于3D建模的游戏不是体感游戏且控制者希望实现体感游戏的情况下,接收到的外部输入的图像所表示出的 控制者的动作其实是体感游戏控制信息,应先识别出图像所表示出的控制者的动作,再识别出该动作所需要表达的体感游戏控制命令,之后,再将体感游戏控制命令转换为键盘或者鼠标所对应的游戏控制命令,该转换后的游戏控制命令才可以提供给正在运行的基于3D建模的游戏。 
另一个具体的例子为:在正在运行的基于3D建模的游戏即为体感游戏的情况下,游戏运行装置2接收到的外部输入的图像所表示出的控制者的动作其实是体感游戏控制信息,游戏运行装置2应先识别出该动作所需要表达的体感游戏控制命令,该识别出的体感游戏控制命令可以直接提供给正在运行的基于3D建模的游戏。 
本发明可以采用多种方法基于图像确定出控制者的动作,进而确定出游戏控制命令,例如,本发明可以基于Kinet技术根据其接收到的图像序列来确定出控制者的动作;再如,本发明可以基于Wii技术根据其接收到的包含有光源的图像确定出控制者的动作。本发明不限制根据图像确定出正在运行的游戏可以识别出的游戏控制命令的具体实现过程。 
另外,本发明还可以将游戏手柄传输来的游戏控制信息转换为正在运行的基于3D建模的游戏(如体感游戏)可以有效识别的游戏控制命令,并将该转换后的游戏控制命令提供给正在运行的基于3D建模的游戏。该游戏手柄可以为传统的游戏手柄,也可以为Wii游戏手柄等。该游戏手柄输出的游戏控制信息可以是重力加速度传感器采集到的信息、游戏控制键被触发产生的信息、声音撷取模块采集到的信息、陀螺仪采集到的信息、以及地磁传感器采集到的磁场矢量信息等。本发明可以将重力加速度传感器或者陀螺仪或者地磁传感器采集到的信息直接转换为游戏控制命令,也可以利用地磁传感器采集到的信息对重力加速度传感器和陀螺仪采集到的信息进行位置校正,并将校正后的信息转换为游戏控制命令。本发明可以对声音撷取模块采集到的信息进行关键词提取等处理,以确定关键词对应的游戏控制命令。 
S230、将游戏控制命令提供给正在运行的游戏。 
S240、对游戏在运行过程中产生的游戏画面信息进行全息投影显示方式处理操作,并以全息投影的形式显示处理后的游戏画面信息对应的游戏画面。 
具体的,正在运行的游戏(体感游戏或者非体感游戏)在运行过程中会产生一系列的游戏画面信息,本发明需要对该游戏画面信息进行全息投影显示方式处理,并以全息投影形式显示处理后的游戏画面信息对应的游戏画面,以产生全息投影形式的立体视觉效果。 
本发明可以根据其采用的全息投影技术的原理来实现上述对游戏画面信息的全息投影显示方式处理操作,本发明不限制上述游戏画面的全息投 影显示方式处理操作以及以全息投影形式显示游戏画面的具体实现过程。 
本发明可以通过现有的全息投影显示器来显示该具有全息投影视觉效果的游戏画面。需要说明的是,S240与S210、S220、以及S230之间并没有明确的先后执行顺序,例如,在刚运行游戏时,虽然并没有产生游戏控制信息,但是,本发明同样可以对运行的游戏产生的游戏画面信息进行全息投影显示方式处理操作并以全息投影形式显示游戏画面。 
以上所述仅是本发明的较佳实施例而已,并非对本发明作任何形式上的限制,虽然本发明已以较佳实施例揭露如上,然而并非用以限定本发明,任何熟悉本专业的技术人员在不脱离本发明技术方案范围内,当可利用上述揭示的技术内容作出些许更动或修饰为等同变化的等效实施例,但凡是未脱离本发明技术方案的内容,依据本发明的技术实质对以上实施例所作的任何简单修改、等同变化与修饰,均仍属于本发明技术方案的范围内。 

Claims (9)

1.一种全息投影体感互动系统,其特征在于,该系统包括:
摄像装置,用于实时摄取图像,并输出;
游戏运行装置,用于运行基于3D建模的游戏,接收所述摄像装置输出的图像,从所述图像中识别控制者的动作,并将所述动作转换为正在运行的游戏可识别的游戏控制命令,将该游戏控制命令提供给所述正在运行的游戏,对所述游戏在运行过程中产生的游戏画面信息进行全息投影显示方式处理,并输出所述处理后的游戏画面信息;
全息投影显示装置,用于以全息投影方式显示所述游戏运行装置输出的游戏画面信息对应的游戏画面。
2.如权利要求1所述的全息投影体感互动系统,其特征在于,所述系统还包括:
游戏手柄。
3.如权利要求2所述的全息投影体感互动系统,其特征在于,所述游戏手柄包括:
重力加速度传感器;
游戏控制键;
收发模块,用于将所述重力加速度传感器和游戏控制键产生的游戏控制信息向所述游戏运行装置发送。
4.如权利要求3所述的全息投影体感互动系统,其特征在于,所述游戏手柄还包括:
声音撷取模块,用于拾取声音,并产生所述声音的音频信号,所述收发模块将所述声音的音频信号作为游戏控制信息向所述游戏运行装置发送;和/或
声音播放模块,用于播放所述收发模块接收到的所述游戏运行装置发送来的音频播放信号;和/或
陀螺仪,用于产生采集数据,所述收发模块将所述采集数据作为游戏控制信息向所述游戏运行装置发送;和/或
地磁传感器,用于产生方向参数,所述收发模块将所述方向参数作为游戏控制信息向所述游戏运行装置发送;
所述游戏运行装置将所述游戏控制信息转换为游戏控制命令,并提供给所述正在运行的游戏。
5.如权利要求1至4任一权利要求所述的全息投影体感互动系统,其特征在于,所述摄像装置包括:
2D摄像装置或者3D摄像装置。
6.如权利要求5所述的全息投影体感互动系统,其特征在于,所述3D摄像装置包括:
红外光源或者LED光源或者激光光源;
CMOS影像传感器,输出红外光编码影像或者LED光编码影像或者激光编码影像;
场景深度处理模块,与所述CMOS影像传感器连接,接收所述CMOS影像传感器输出的红外光编码影像或者LED光编码影像或者激光编码影像,并向控制装置输出场景深度影像。
7.一种全息投影体感互动方法,其特征在于,包括:
运行基于3D建模的游戏;
接收实时摄取的图像;
从各所述图像中识别控制者的动作,并将所述动作转换为正在运行的游戏可识别的游戏控制命令;
将该游戏控制命令提供给所述正在运行的游戏,对所述游戏在运行过程中产生的游戏画面信息进行全息投影显示方式处理,并以全息投影方式显示所述处理后的游戏画面信息对应的游戏画面。
8.如权利要求7所述的全息投影体感互动方法,其特征在于,所述实时摄取的图像包括:
2D摄像装置或者3D摄像装置摄取的图像。
9.如权利要求7所述的全息投影体感互动方法,其特征在于,所述方法还包括:
接收重力加速度传感器、游戏控制键、声音撷取模块和/或陀螺仪产生的游戏控制信息,并将该游戏控制信息转换为游戏控制命令提供给所述正在运行的游戏。
CN2011103371584A 2011-10-31 2011-10-31 全息投影体感互动系统和方法 Pending CN103083901A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2011103371584A CN103083901A (zh) 2011-10-31 2011-10-31 全息投影体感互动系统和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2011103371584A CN103083901A (zh) 2011-10-31 2011-10-31 全息投影体感互动系统和方法

Publications (1)

Publication Number Publication Date
CN103083901A true CN103083901A (zh) 2013-05-08

Family

ID=48197345

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011103371584A Pending CN103083901A (zh) 2011-10-31 2011-10-31 全息投影体感互动系统和方法

Country Status (1)

Country Link
CN (1) CN103083901A (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104683720A (zh) * 2013-11-28 2015-06-03 联想(北京)有限公司 一种电子设备及控制方法
CN104883557A (zh) * 2015-05-27 2015-09-02 世优(北京)科技有限公司 实时全息投影方法、装置及系统
CN105739106A (zh) * 2015-06-12 2016-07-06 南京航空航天大学 一种体感多视点大尺寸光场真三维显示装置及方法
CN105812773A (zh) * 2016-03-31 2016-07-27 芜湖应天光电科技有限责任公司 一种三维成像通信设备
CN105824421A (zh) * 2016-03-21 2016-08-03 北京上古视觉科技有限公司 基于全息投影交互方式的多模态生物识别系统及方法
CN105938541A (zh) * 2015-03-02 2016-09-14 卡雷风险投资有限责任公司 利用数字内容增强现场表演的系统和方法
CN108348810A (zh) * 2015-09-29 2018-07-31 索尼互动娱乐股份有限公司 用于由计算机模拟生成的图像、视频和/或全息图的投影的方法和设备
CN109120990A (zh) * 2018-08-06 2019-01-01 百度在线网络技术(北京)有限公司 直播方法、装置和存储介质
CN109453517A (zh) * 2018-10-16 2019-03-12 Oppo广东移动通信有限公司 虚拟角色控制方法和装置、存储介质、移动终端

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040046736A1 (en) * 1997-08-22 2004-03-11 Pryor Timothy R. Novel man machine interfaces and applications
US20060264258A1 (en) * 2002-07-27 2006-11-23 Zalewski Gary M Multi-input game control mixer
US20080102950A1 (en) * 2006-09-21 2008-05-01 Kabushiki Kaisha Square Enix (Square Enix Co., Ltd.) Video game processing apparatus, a method and a computer program product for processing a video game
CN101369181A (zh) * 2007-08-17 2009-02-18 财团法人工业技术研究院 惯性感测输入控制装置与接收装置及其互动系统
US20090167550A1 (en) * 2007-12-27 2009-07-02 Fu-Chiang Chou Data result determination methods and systems

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040046736A1 (en) * 1997-08-22 2004-03-11 Pryor Timothy R. Novel man machine interfaces and applications
US20060264258A1 (en) * 2002-07-27 2006-11-23 Zalewski Gary M Multi-input game control mixer
US20080102950A1 (en) * 2006-09-21 2008-05-01 Kabushiki Kaisha Square Enix (Square Enix Co., Ltd.) Video game processing apparatus, a method and a computer program product for processing a video game
CN101369181A (zh) * 2007-08-17 2009-02-18 财团法人工业技术研究院 惯性感测输入控制装置与接收装置及其互动系统
US20090167550A1 (en) * 2007-12-27 2009-07-02 Fu-Chiang Chou Data result determination methods and systems

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104683720A (zh) * 2013-11-28 2015-06-03 联想(北京)有限公司 一种电子设备及控制方法
CN105938541A (zh) * 2015-03-02 2016-09-14 卡雷风险投资有限责任公司 利用数字内容增强现场表演的系统和方法
CN104883557A (zh) * 2015-05-27 2015-09-02 世优(北京)科技有限公司 实时全息投影方法、装置及系统
CN105739106A (zh) * 2015-06-12 2016-07-06 南京航空航天大学 一种体感多视点大尺寸光场真三维显示装置及方法
CN105739106B (zh) * 2015-06-12 2019-07-09 南京航空航天大学 一种体感多视点大尺寸光场真三维显示装置及方法
US10384122B2 (en) 2015-09-29 2019-08-20 Sony Interactive Entertainment Inc. Method and apparatus for the projection of images, video, and/or holograms generated by a computer simulation
JP7079229B2 (ja) 2015-09-29 2022-06-01 株式会社ソニー・インタラクティブエンタテインメント コンピュータシミュレーションによって生成された画像、ビデオ、及び/または、ホログラムを投影するための方法及び装置
CN108348810A (zh) * 2015-09-29 2018-07-31 索尼互动娱乐股份有限公司 用于由计算机模拟生成的图像、视频和/或全息图的投影的方法和设备
JP2018534004A (ja) * 2015-09-29 2018-11-22 株式会社ソニー・インタラクティブエンタテインメント コンピュータシミュレーションによって生成された画像、ビデオ、及び/または、ホログラムを投影するための方法及び装置
US10799791B2 (en) 2015-09-29 2020-10-13 Sony Interactive Entertainment Inc. Method and apparatus for the projection of images, video, and/or holograms generated by a computer simulation
JP2020072785A (ja) * 2015-09-29 2020-05-14 株式会社ソニー・インタラクティブエンタテインメント コンピュータシミュレーションによって生成された画像、ビデオ、及び/または、ホログラムを投影するための方法及び装置
CN105824421A (zh) * 2016-03-21 2016-08-03 北京上古视觉科技有限公司 基于全息投影交互方式的多模态生物识别系统及方法
CN105812773A (zh) * 2016-03-31 2016-07-27 芜湖应天光电科技有限责任公司 一种三维成像通信设备
CN109120990A (zh) * 2018-08-06 2019-01-01 百度在线网络技术(北京)有限公司 直播方法、装置和存储介质
CN109453517A (zh) * 2018-10-16 2019-03-12 Oppo广东移动通信有限公司 虚拟角色控制方法和装置、存储介质、移动终端
CN109453517B (zh) * 2018-10-16 2022-06-10 Oppo广东移动通信有限公司 虚拟角色控制方法和装置、存储介质、移动终端

Similar Documents

Publication Publication Date Title
CN103083901A (zh) 全息投影体感互动系统和方法
CN102784479A (zh) 全息投影体感互动系统和方法
JP6982466B2 (ja) より少ないホップにより拡張仮想現実シーンをヘッドマウントシステム内に生成するためのシステム及び方法
US20180200628A1 (en) Storage medium storing information processing program, information processing device, information processing system, and information processing method
US9236032B2 (en) Apparatus and method for providing content experience service
CN101484933B (zh) 基于一个或多个视觉的、听觉的、惯性的和混合的数据来应用传动效应到输入的方法和设备
CN105264401B (zh) 用于tof系统的干扰减小
CN102576257B (zh) 基站移动检测和补偿
CN102441276A (zh) 使用便携式游戏装置来记录或修改在主游戏系统上实时运行的游戏或应用
CN103390287A (zh) 用于增强现实的装置和方法
US20120050494A1 (en) Method and system for creating a view-angle dependent 2d and/or 3d image/video utilizing a monoscopic video camera array
CN106502424A (zh) 基于语音手势及肢体动作互动的增强现实系统
CN106582005A (zh) 一种虚拟游戏中数据同步交互方法及装置
US8724849B2 (en) Information processing device, information processing method, program, and information storage medium
US20170294051A1 (en) System and method for automated visual content creation
CN109997364A (zh) 提供全向图像的映射的指示的方法、设备和流
US10437055B2 (en) Master device, slave device, and control method therefor
CN109257589A (zh) 远程三维扫描全息动画特效生成立显系统及其方法
CN107948702B (zh) 应用程序状态的同步方法、装置、终端和存储介质
WO2023071603A1 (zh) 视频融合方法、装置、电子设备及存储介质
CN106357966A (zh) 全景图像拍摄装置及全景图像获取方法
CN112270754A (zh) 局部网格地图构建方法及装置、可读介质和电子设备
US10192360B2 (en) Information processing apparatus and information processing method
CN113382275B (zh) 直播数据的生成方法、装置、存储介质及电子设备
EP2557482A2 (en) Input device, system and method

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20130508