发明内容
本申请实施方式主要解决的技术问题是提供一种全新的虚拟现实体验方法和系统,用以根据用户的意愿调整渲染的程度。该方法和系统实现了在虚拟现实系统的虚拟内容上可调节虚拟程度地叠加融合了用户周围环境的现实元素,带给用户全新的VR体验。
为解决上述技术问题,本申请实施方式采用的一个技术方案是:提
供一种虚拟与现实融合方法,包括:
获取用户周围现实环境的现实三维全景图像;
根据用户选择的渲染虚拟程度,对该现实三维全景图像进行渲染;
将渲染得到的结果输出到虚拟现实显示模组中。
为解决上述技术问题,本申请实施方式采用的另一个技术方案是:提供一种虚拟与现实融合系统,包括虚拟现实系统,用于为用户展现虚拟三维场景,还包括现实融合模组,其中,该现实融合模组用于获取用户周围现实环境的现实三维全景图像;该虚拟现实系统用于根据用户选择的渲染虚拟程度,对该现实三维全景图像进行渲染;该虚拟现实系统还用于将渲染得到的结果输出到虚拟现实显示模组中。
为解决上述技术问题,本申请实施例采用的再一个技术方案是:提供一种电子设备,包括:处理器模组,处理器模组连接的交互模块和虚拟现实显示模组;
处理器模组用于根据用户周围环境的图像获取现实三维全景图像,并根据用户在交互模块选择的渲染虚拟程度,对所述现实三维全景图像进行渲染;
其中,所述处理器模组还用于将渲染得到的结果输出到虚拟现实显示模组中。
优选的,电子设备为虚拟现实头戴设备,还包括头盔和现实捕获模组,
所述现实捕获模组用于从多个角度捕获用户周围环境的图像。这样当用户带上该虚拟现实头戴设备后,能够很好的沉浸到所营造的虚拟显示环境中,提高用户体现。
优选的,该交互模块包括数量调节交互装置,其中,该处理器模组还用于识别和提取该现实三维全景图像中的现实元素;并从数量调节交互装置获取用户选择的第一渲染虚拟程度,该第一渲染虚拟程度用于指示用户希望保留的现实元素的比例;以及用于根据获取到的第一渲染虚拟程度对该现实三维全景图像中的现实元素进行处理。
为了保证用户使用安全,该现实元素包括安全性现实元素,其中,该处理器模组还用于在该第一渲染虚拟程度指示用户希望保留的现实元素的比例为非0时,保留该现实三维全景图像中的至少一部分安全性现实元素。
优选的,该交互模块还包括渲染虚拟度交互装置数量调节交互装置,其中,该处理器模组还用于识别和提取该现实三维全景图像中的现实元素;从渲染虚拟度交互装置获取用户选择的第二渲染虚拟程度,该第二渲染虚拟程度用于指示对各个现实元素的渲染程度,并根据获取到的第二渲染虚拟程度对该现实三维全景图像中的各个现实元素进行渲染。
为了提供沉浸式VR体验,该处理器模组用于根据该安全性现实元素和该其它现实元素,确定虚拟三维场景对应的声音渲染。
该现实捕获模组包括多个摄像头,该多个摄像头设置在该头盔的不同方位上。
作为一种实施方式,该交互模块包括旋钮和模数转换装置;该模数转换装置与该旋钮和该处理器模组连接,用于根据旋钮的旋转角度生成对应的数字信号并输出到处理器模组。
本申请实施方式的有益效果是:能够根据用户选择的渲染虚拟程度对周围现实环境中的图像进行渲染。使得用户能够对渲染虚拟程度进行选择,有助于提升用户体验。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚明白,下面结合附图对本申请实施例做进一步详细说明。在此,本申请的示意性实施例及其说明用于解释本申请,但并不作为对本申请的限定。
图1为所应用的一种实施环境的示意图,可以应用于包含了处理器模组100、虚拟现实显示模组200、能够采集周围现实环境的现实捕获模组以及能够实现与用户交互从而确定用户选择的虚拟程度的交互模块300的电子设备中,电子设备所包含的各个组件之间可以通过通信接口(比I/O接口相连)。
该现实捕获模组可以是一个面向正方向或多个面向不同方向的可进行实时建模的三维图像识别传感器(市面上已经有类似的设备)。如只采用一个面向正方向的三维图像识别传感器,则对实时性要求极高,头部转动时需要基本无延时的建模和渲染,且对视角的要求极大;而如果是多个三维图像识别传感器拼接现实三维全景图像,则相当于构建了一个空间模型,头部转动时也只是显示空间中的另一部分而已。
请一并参考图5,本实施例中的处理器模组可以包括中央处理器模块(包括中央处理器CPU520以及与中央处理器相连的存储介质530),也可以还包括图像处理模组(图像处理模组可以包括图形处理器GPU510以及与GPU510相连的存储介质530)。图1中示出的是后一种情况。本实施例的虚拟和现实融合系统可以为存储于上述的处理器模组的存储介质中的软件系统。参见图,该系统可以包括现实融合模组和虚拟现实系统。
其中,该现实融合模组获取用户周围现实环境的现实三维全景图像。比如在一些实施例中,现实融合模组可以预先的获取由多个摄像机拍摄的用户周围现实环境的图像。
该多个摄像头之间基于同一立体坐标系拍摄以拼接出三维全景图像。
该现实融合模组获取用户周围现实环境的现实三维全景图像;
该虚拟现实系统根据用户选择的渲染虚拟程度,对该现实三维全景图像进行渲染;该虚拟现实系统将渲染得到的结果输出到虚拟现实显示模组中。
该虚拟现实系统识别和提取该现实三维全景图像中的现实元素。
本申请实施例提供的虚拟现实系统可以应用于头盔等装置中,当用于头盔之类的装置中时,用户可以戴着头盔行走,虚拟现实系统实时的根据用户所佩戴的头盔对用户前方的图像进行渲染。对于这种情况,为了保证用户的安全,在具体实施时:可以按照如下方式进行实施:
该虚拟现实系统在该第一渲染虚拟程度指示用户希望保留的现实元素的比例为非0时,保留该现实三维全景图像中的至少一部分安全性现实元素。为了对渲染对象做选择数量,该第一渲染虚拟程度用于指示用户希望保留的现实元素的比例。
根据获取到的第一渲染虚拟程度对该现实三维全景图像中的现实元素进行处理。
除了根据第一渲染虚拟程度进行渲染之外,还可以根据第二虚拟渲染程度(该第二渲染虚拟程度用于指示对各个现实元素的渲染程度)对(所保留的)各个现实元素的渲染程度的进行渲染。此时:相应的渲染过程可以包括:
识别和提取该现实三维全景图像中的现实元素;
获取用户选择的第二渲染虚拟程度;该第二渲染虚拟程度用于指示对各个现实元素的渲染程度;
根据获取到的第二渲染虚拟程度对该现实三维全景图像中的各个现实元素进行渲染。
这样能够使得用户能够自主的选择各个现实元素的虚化程度。不难理解的是,在具体实施时,也可以仅按照第二虚拟渲染程度对各个现实元素进行渲染。
具体实施时,处理器模组获取用户选择的第二渲染虚拟程度,该第二渲染虚拟程度用于指示对各个现实元素的渲染程度。图像处理模组根据获取到的第二渲染虚拟程度对该现实三维全景图像中的各个现实元素进行渲染。
对本技术领域的一般技术人员来说,对现实元素的提取和渲染可以由中央处理模块单独完成,或者由图像处理模组单独完成,或者由中央处理模块和图像处理模块以分布式处理完成。
传统的虚拟现实系统包括中央处理模块、渲染模块、传感器、交互模块以及虚拟现实显示模组。该虚拟现实显示模组的实施例之一为VR成像眼镜。其中,交互模块汇集了所有传感器的数据,用户的行为和交互指令通过传感器发送至交互模块和中央处理模块。该中央处理模块根据用户在交互模块的指示,通过渲染模块将虚拟内容渲染后三维显示在VR成像眼镜上。
VR成像眼镜:两个分立的显示装置,与传统VR成像眼镜相同。
传感器:除传统的动作传感器外,也可包含其他各种类型的传感器,取决于内容的需要。
本申请实施例中的虚拟现实系统进一步设置获取用户周围环境的现实三维全景图像的现实捕获模组、实现与用户交互的交互模块以及独特的图像处理模组。
该现实融合模组包括获取用户周围现实环境的现实三维全景图像的若干现实捕获模组、实现虚拟数量和虚拟度调节的交互模块以及独特的图像处理模组。
该若干现实捕获模组由视角彼此覆盖的若干三维立体建模模块同时拍摄图像并拼接形成现实三维全景图像,本实施例中,该现实捕获模组为三维图像识别传感器540。为了实现现实元素的融合,该图像处理模组包括现实元素提取模块、融合匹配模块、融合图像的图像处理模组以及融合声音的声音处理模组。
该交互模块供用户在虚拟现实头戴设备上选择对现实三维全景图像或者现实元素的渲染虚拟程度。
请一并参考图2和图3,所示虚拟现实头戴设备包括头盔1、中央处理模块2、耳机座3、数据线4、电源口5、以及5个现实捕获模组6-10、麦克风20、渲染虚拟度交互装置30以及现实元素数量交互装置40。
中央处理模块:接收所有现实捕获模组6-10、传感器540、外围器件、渲染虚拟度交互装置30和现实元素数量交互装置40以及内容源的信号,并将处理完成的信号传送给VR成像眼镜550,耳机等输出设备。如各个现实捕获模组的图像拼接处理,头部转动后显示图像的变化等。
现实捕获模组6-10获取用户周围现实环境的现实三维全景图像;图像处理模组根据用户选择的渲染虚拟程度,对该现实三维全景图像进行渲染;其中,该中央处理模块将渲染得到的结果输出到虚拟现实显示模组中。
该现实捕获模组6-10识别和提取该现实三维全景图像中的现实元素,也可以由中央处理模块完成现实元素的识别和提取。
本申请实施例中,为了实现渲染对象的数量选择,该交互模块包括数量调节交互装置,用户通过该数量调节交互装置实现对第一渲染虚拟程度的设置。该图像处理模组在该第一渲染虚拟程度指示用户希望保留的现实元素的比例为非0时,保留该现实三维全景图像中的至少一部分安全性现实元素。
该交互模块还包括渲染虚拟度交互装置,用户通过该渲染虚拟度交互装置完成对第二渲染虚拟程度的设置。其中,该中央处理模块从数量调节交互装置获取用户选择的第二渲染虚拟程度,该第二渲染虚拟程度用于指示对各个现实元素的渲染程度。
从沉浸式体验考虑,该声音处理模组还用于根据该安全性现实元素和该其它现实元素,确定虚拟三维场景对应的声音渲染。
优选的,该第一渲染虚拟程度或者该第二渲染虚拟程度由用户在交互界面上选择的比例确定。
本实施例的现实捕获模组6-10可测景深并实时构建三维立体模型,实际应用数量取决于单个现实捕获模组的视角和处理能力。该现实捕获模组的实施例以多个实时建模三维图像识别传感器为例,根据视角的覆盖要求,分布设置头盔1的顶部和前后左右五个方位上。
请一并参考图1,作为本申请的一种具体实施方式,现实捕获模组与图像识别模块连接。该图像识别模块识别拼接的现实三维全景图的所有现实元素。该等现实元素的立体坐标与其在三维全景图中的坐标保持一致。
该虚拟现实系统可为用户展现虚拟三维场景,该现实融合模组的若干若干现实捕获模组获取用户周围现实环境的现实三维全景图像,图像识别模块识别该现实三维全景图像中所有的现实元素。
现实元素提取模块从所有现实元素中提取出安全性现实元素。
该现实元素包括安全性现实元素和用户选择的其它现实元素。该现实融合模组的图像处理模组根据该安全性现实元素以及用户选择的其它现实元素,在该虚拟现实系统的虚拟三维场景中融合和图像渲染对应的安全性现实元素以及选取的其它现实元素。该现实融合模组还包括声音处理模组。该声音处理模组用于根据安全性现实元素和其它现实元素,确定虚拟三维场景对应的声音渲染,实现融合声音。
以下介绍第二渲染虚拟程度的设置。对安全性现实元素以及选取的其它现实元素的虚拟渲染是可以由用户通过交互模块设置。该交互模块包括渲染虚拟度交互装置30,该现实融合模组还用于根据用户在渲染虚拟度交互装置30选择的现实元素渲染虚拟程度,在虚拟现实系统的虚拟三维场景中对所有选取的现实元素进行对应所选虚拟程度的图像渲染。
该渲染虚拟度交互装置30用于用户自行调整融合的现实元素的渲染虚拟度/真实度。可以是硬件旋钮也可以是软件旋钮,在软件旋钮实施例中,用户通过交互模块实现选择。以下以硬件旋钮例进行说明。
该渲染虚拟度交互装置30设置若干现实元素数量档位供用户选取,其中,在调整到最虚拟状态时,融合的现实元素的显示和内容完全虚拟的形式来渲染,如一栋高楼渲染成一座城堡,天空渲染成宇宙等等,根据当前虚拟现实的内容源进行融合;在调整到最真实状态时,直接在虚拟现实系统的虚拟三维场景中叠加该现实三维全景图像或者则融合的现实元素的显示完全真实。在该种情况下,会出现和虚拟内容无法融合现象,但用户可以知道自己周围的环境状态,这种设置用户实际使用的情况很少。中间档位则调节现实元素显示的真实度/虚拟度,如一辆行驶的普通轿车,在最虚拟情况下被渲染成一个奔跑的怪兽,而随着往现实那一侧旋转,可能逐渐变成能融入虚拟内容风格的火车头、坦克、装甲车等。如一条河流,在最虚拟情况下河岸被渲染成悬崖,而随着往现实那一侧旋转,可能逐渐变成能融入虚拟内容风格的瀑布、大海、湖泊等,注意,在现实元素渲染中应充分考虑到安全因素。
以下介绍第一渲染虚拟程度的设置。该现实元素数量交互装置40用于用户自行调整融合的其它现实元素的数量。本实施方式中,安全性现实元素是必须融合显示在虚拟三维场景中的,从而保证用户活动的安全性,防止碰撞和摔倒。该现实元素数量交互装置40可以是硬件旋钮也可以是软件旋钮,在软件旋钮实施例中,用户通过交互模块实现选择。以下以硬件旋钮例进行说明。
设置的0档位表示不显示和渲染现实元素,不会看到任何周围现实环境存在的物体,在调整到0档位时,则和现在的VR设备相同,不会看到任何周围现实存在的物体;设置的100档位表示在虚拟三维场景叠加显示用户周围现实环境提取的所有现实元素;0-100的中间档位则根据档位所占比例调节现实元素在虚拟三维场景的叠加显示数量,中间档位则调节现实元素在虚拟三维场景显示中的多少,如可能把用户周围的椅子和沙发显示出来,但却不显示电视,空调等设备。旋钮只控制多少,具体显示不显示哪个现实元素则由中央处理模块根据现实元素和虚拟三维内容的匹配融合度决定。
为了实现虚拟内容与现实元素叠加内容的融合,该现实融合模组的匹配融合模块对除安全性现实元素以外的其它现实元素的匹配融合度进行排序,并根据现实元素在虚拟三维场景的匹配融合度来决定对应现实元素是否被叠加显示在虚拟三维场景中。
设备工作流程如下:
中央处理模块读取要播放的虚拟内容或游戏,形成内容的三维立体模型和表面渲染信息。如果该现实元素数量交互装置40为0或者渲染真实程度旋钮为完全真实,则内容直接播放或运行虚拟内容即可,不需要进行任何处理;
若干立体建模模块6-10同时工作,此时该现实元素数量交互装置40的设置不为0,得到用户周围各个方向上真实的三维全景图像。中央处理模块对多个立体建模模块的各方向上的三维立体数据进行拼接,得到用户周围真实环境的现实三维全景图像和模型。该图像识别模块根据现实三维全景图像和模型提取所有现实元素。
该现实元素提取模块提取安全性现实元素,确定用户选择的其它现实元素。
图像处理模组确定前述安全性现实元素以及用户选择的其它现实元素的融合渲染信息。
图像处理模组根据该现实元素数量交互装置40的位置和当前虚拟内容的三维立体模型,依据该匹配融合模块对所有现实元素的匹配融合度排序,判定和选取用户选择的其它现实元素中哪些现实元素从形状结构模型上更能够融入当前虚拟内容,比如,VR虚拟世界中可对现实元素的三维立体模型进行调整,如将一个大楼的模型修改为一个城堡,但尽量保证城堡的外围尺寸和大楼基本相符。该匹配融合模块具体可对各现实元素的三维模型进行可融入度排序,并根据该现实元素数量交互装置40的位置选取前若干适合的现实元素的三维模型进行渲染。选取时需充分考虑用户的安全性问题,如台阶、墙壁、河流等等所有可能对人身安全构成威胁的元素必须显示。
根据该渲染虚拟度交互装置30的位置以及当前虚拟内容的三维立体模型和渲染数据,将选定的各个现实元素进行能够融入VR虚拟三维场景的表面渲染。如将一座大楼的现实元素的三维模型修改为底部外径相同的城堡三维模型,此步骤中则将城堡三维模型进行融入虚拟内容的表面渲染,如风格,颜色,表面材质,新旧程度,太阳反光等等,同样的,应充分考虑用户安全性问题,如台阶,墙壁,河流等等可能对人身安全构成威胁的元素必须真实渲染,且必须比较真实的渲染。如下楼的台阶,可能根据虚拟中的场景渲染成布满苔藓的台阶,但不可渲染成下坡或者平路。
该融合声音的声音处理模组由中央处理模块控制,配合不同的三维虚拟场景作不同的声音渲染。比如用户打开一扇门,VR虚拟三维世界中用户正处于监狱场景,打开的门被渲染成铁栅栏门,同时用户在打开门的时候,声音应该也对应渲染成打开铁栅栏门的声音。
在用户运动中或头部转动中,根据传感器540的数据,中央处理模块实时处理同步虚拟内容以及周围现实中的现实元素的显示与渲染。
本申请的技术方案基于现有VR设备,提供完全不同的使用体验。使得用户戴上完全遮挡视线的VR头盔任然可以行走和活动,可以说体验是胜于VR虚拟体验的,是虚拟与现实的融合。用户在看到虚拟世界的同时,又能够自主调节周围现实环境在虚拟三维世界中显示的现实元素多少和虚拟度,从视觉到听觉,纯虚拟体验中增加了被虚拟化的现实,比如可以坐在由真实高台阶渲染出的长条凳上,虚拟与现实难辨,很容易让用户沉浸在这种全新的虚拟与现实融合的世界。另外,本实施例也打破了传统VR仅运用在纯虚拟环境的界限,同时在技术上也能够保证用户的安全使用户可以四处走动,甚至可以走到大街上,可以随时都佩戴,本实施例提供的虚拟和现实混合的世界,不再局限于纯虚拟环境,是对VR设备应用的飞越。
本实施例还提供一种虚拟与现实融合方法,可以通过以上的电子设备的处理器模组执行,该方法可以包括,
获取用户周围现实环境的现实三维全景图像,识别和提取该现实三维全景图像中的现实元素;
在虚拟现实系统的虚拟三维场景中融合该现实三维全景图像或该现实元素;
根据用户选择的现实三维全景图像或者现实元素渲染虚拟程度,在该虚拟现实系统的虚拟三维场景中图像渲染该现实三维全景图像或者图像渲染选取的现实元素。
其中,该现实元素包括安全性现实元素;根据该安全性现实元素以及用户选择的其它现实元素,在虚拟现实系统的虚拟三维场景中融合和图像渲染对应的安全性现实元素以及选取的其它现实元素;根据该安全性现实元素和该其它现实元素,确定虚拟三维场景对应的声音渲染。
请参考图4,所示为本实施方式虚拟与现实融合方法其中一个实施例的流程。其中,用户启动虚拟现实系统时,并不一定会同步启动三维建模模块6-10和融合渲染。当用户选择确定了现实元素融合数量和渲染虚拟度后,该现实融合模组开始工作。
步骤401:中央处理模块通过VR成像眼镜550为用户呈现虚拟三维场景。
步骤402:判断用户是否启动现实融合模组,没有启动则继续在虚拟现实系统工作模式下为用户呈现虚拟三维内容和场景;如果启动则现实捕获模组和融合渲染开始工作。
步骤403:若干现实捕获模组6-10同时拍摄立体图像并拼接形成现实三维全景图像或模型。
步骤404:图像识别模块根据该现实三维全景图像识别出所有的现实元素。
步骤406:现实元素提取模块提取出具有融合优先级的安全性现实元素。
步骤407:判断用户是否选定现实元素融合数量,如果没有选定则在虚拟现实系统工作模式下等待用户选定;其中,用户在选择现实元素数量时从若干现实元素数量档位选取,其中,设置的0档位表示不显示和渲染现实元素,不会看到任何周围现实环境存在的物体;设置的100档位表示在虚拟三维场景叠加显示用户周围现实环境提取的所有现实元素;0-100的中间档位则根据档位所占比例调节现实元素在虚拟三维场景的叠加显示数量。
步骤408:融合匹配模块在虚拟三维场景中融合该安全性现实元素以及选取的其它现实元素。
步骤409:判断用户是否选定渲染虚拟程度,如果没有选定则在虚拟现实系统工作模式下等待用户选定;如果选定了,则根据用户选择的现实元素渲染虚拟程度,在虚拟现实系统的虚拟三维场景中对所有选取的现实元素进行对应所选虚拟程度的图像渲染。
步骤410:图像和声音处理模组根据渲染虚拟程度渲染该融合在虚拟三维场景中的安全性现实元素和其它现实元素。
本实施例的虚拟与现实融合方法和系统通过设置实时三维建模模块和融合图像处理模组,实现了VR虚拟三维世界中融入用户周围的现实元素或者基于该等现实元素作影像渲染,为用户提供虚幻又超出现实的独特体验,并且现实元素是真实存在的,呈现在虚拟三维世界使得用户戴着头盔也可以感知身边的现实世界。用户通过自行设置虚拟三维世界中融入现实元素的比例、真实程度、渲染场景,使得用户通过VR成像眼镜550看到的融合视像可以和实际相同也可以不同。虽然AR也是虚拟和现实的混合,但主要场景还是真实的,虚拟部分只是其中的少量附加信息。而本实施例的技术方案,将虚拟与现实完美的融合在了一起,用户可以设置虚拟与现实的比例,并通过VR成像眼镜550可实实在在感受到现实元素的存在,从而为用户提供一种全新的虚拟与现实体验。
综上所述,本申请提供了一种将虚拟和现实完美融合的方法和系统,让用户完全沉浸在虚拟与现实之间。并且,该方法和系统能够在虚拟现实系统的虚拟内容上可调节虚拟程度地叠加融合用户周围环境的现实元素,使得用户在戴上虚拟现实头盔的同时也能行走活动和完成一定的动作,带给用户全新的VR体验。用户在看到虚拟世界的同时,又能够从视觉到听觉自主调节周围现实世界在虚拟世界中显示的元素多少和虚拟度,纯虚拟体验中增加了被虚拟化的现实,让用户沉浸于这种全新的虚拟和现实融合的世界。本申请实施例的方法和系统打破了传统VR与现实隔离的界限,视像融合中优先融合安全现实元素,能够充分保证用户使用头盔走动和动作的安全性。
本技术方案中:1、本申请通过优先在虚拟三维场景中融合安全性现实元素,使得用户戴着VR头盔也可以感知外部真实世界,实现安全的行走和活动;2、本申请设置现实元素渲染设置的交互装置,由用户选择现实元素渲染虚拟/真实程度,实现按用户意愿渲染,提供最佳体验;3、本申请通过若干现实捕获模组实现现实三维全景图像的捕获和建模,由视角彼此覆盖的若干现实捕获模组同时拍摄现实三维图像并拼接形成现实三维全景图像;4、本申请还设置现实元素融合设置的交互装置,通过设置若干现实元素数量档位供用户选取,实现按用户意愿融合,提供最佳体验;5、本申请除了优先提取安全性现实元素,还对其它现实元素的匹配融合度进行排序,解决现实元素与虚拟三维场景的融合匹配问题。
图6是本申请实施例提供的虚拟与现实融合方法的电子设备600的硬件结构示意图,如图6所示,该电子设备600包括:
一个或多个处理器610以及存储器620,图6中以一个处理器610为例。
处理器610和存储器620可以通过总线或者其他方式连接,图6中以通过总线连接为例。
存储器620作为一种非易失性计算机可读存储介质,可用于存储非易失性软件程序、非易失性计算机可执行程序以及模块,如本申请实施例中的虚拟与现实融合方法对应的程序指令/模块(例如,附图1所示的融合匹配模块、现实元素提取模块和图像识别模块)。处理器610通过运行存储在存储器620中的非易失性软件程序、指令以及模块,从而执行终端或者服务器的各种功能应用以及数据处理,即实现上述方法实施例中的虚拟与现实融合方法。
存储器620可以包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需要的应用程序;存储数据区可存储根据虚拟与现实融合系统的使用所创建的数据等。此外,存储器620可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实施例中,存储器620可选包括相对于处理器610远程设置的存储器,这些远程存储器可以通过网络连接至虚拟与现实融合系统。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
所述一个或者多个模块存储在所述存储器620中,当被所述一个或者多个处理器610执行时,执行上述任意方法实施例中的虚拟与现实融合方法,例如,执行以上描述的图4中的方法步骤403至步骤410,实现图1中的融合匹配模块、现实元素提取模块和图像识别模块的功能。
上述产品可执行本申请实施例所提供的方法,具备执行方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节,可参见本申请实施例所提供的方法。
本申请实施例的电子设备以多种形式存在,比如以其他具有数据交互功能的电子装置。
本申请实施例提供了一种非易失性计算机可读存储介质,所述计算机可读存储介质存储有计算机可执行指令,该计算机可执行指令被一个或多个处理器执行,例如图6中的一个处理器610,可使得上述一个或多个处理器可执行上述任意方法实施例中的虚拟与现实融合方法,例如,执行以上描述的图4中的方法步骤403至步骤410,实现图1中的融合匹配模块、现实元素提取模块和图像识别模块的功能。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
通过以上的实施方式的描述,本领域普通技术人员可以清楚地了解到各实施方式可借助软件加通用硬件平台的方式来实现,当然也可以通过硬件。本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random Access Memory,RAM)等。
最后应说明的是:以上实施例仅用以说明本申请的技术方案,而非对其限制;在本申请的思路下,以上实施例或者不同实施例中的技术特征之间也可以进行组合,步骤可以以任意顺序实现,并存在如上所述的本申请的不同方面的许多其它变化,为了简明,它们没有在细节中提供;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。