CN107894842A - 增强现实场景复原方法、终端及计算机可读存储介质 - Google Patents

增强现实场景复原方法、终端及计算机可读存储介质 Download PDF

Info

Publication number
CN107894842A
CN107894842A CN201711382245.5A CN201711382245A CN107894842A CN 107894842 A CN107894842 A CN 107894842A CN 201711382245 A CN201711382245 A CN 201711382245A CN 107894842 A CN107894842 A CN 107894842A
Authority
CN
China
Prior art keywords
history
terminal
information
augmented reality
reality scene
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711382245.5A
Other languages
English (en)
Inventor
杨君毅
王利坤
王昕�
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Ying Tuo Cultural Media Co Ltd
Original Assignee
Beijing Ying Tuo Cultural Media Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Ying Tuo Cultural Media Co Ltd filed Critical Beijing Ying Tuo Cultural Media Co Ltd
Priority to CN201711382245.5A priority Critical patent/CN107894842A/zh
Publication of CN107894842A publication Critical patent/CN107894842A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/012Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00Indexing scheme for image generation or computer graphics
    • G06T2210/61Scene description

Abstract

本发明公开了一种增强现实场景复原方法、终端及计算机可读存储介质,所述增强现实场景复原方法包括:获取终端历史机位信息,根据所述终端历史机位信息对所述终端进行调整,以供用户透过调整后的终端的镜片观察到历史真实场景图像;获取所述终端历史机位信息对应的虚拟物体历史显示信息;根据所述虚拟物体历史显示信息,对所述虚拟物体历史显示信息对应的虚拟对象进行还原,以供用户观察到历史增强现实场景。通过本发明,可实现精准、快速地对历史增强现实场景进行复原,使得用户可再次体验曾经体验过的增强现实场景。

Description

增强现实场景复原方法、终端及计算机可读存储介质
技术领域
本发明涉及增强现实技术领域,尤其涉及增强现实场景复原方法、终端及计算机可读存储介质。
背景技术
增强现实技术,它是一种将真实世界信息和虚拟世界信息“无缝”集成的新技术,是把原本在现实世界的一定时间空间范围内很难体验到的实体信息,通过电脑等科学技术,模拟仿真后再叠加,将虚拟的信息应用到真实世界,被人类感官所感知,从而达到超越现实的感官体验。真实的环境和虚拟的物体实时地叠加到了同一个画面或空间同时存在。
现有的增强现实技术应用中,与现实空间结合的虚拟空间及放置的虚拟物体,只能在布置、放置后一次性的观察、互动体验,无法进行存储用于再次体验,关闭设备或退出应用后,此次与现实空间相结合的虚拟空间的布置、虚拟物体的放置就会失效,或虚拟空间和虚拟物体在现实空间中的位置发生偏移。例如,在一次通过增强现实技术得到增强现实场景A后,若增强现实设备关闭或增强现实应用退出,后续无法精准地对增强现实场景A进行复原。
发明内容
本发明的主要目的在于提供一种增强现实场景复原方法、终端及计算机可读存储介质,旨在解决现有技术中无法对曾经的增强现实场景进行精准复原的技术问题。
为实现上述目的,本发明提供一种增强现实场景复原方法,所述增强现实场景复原方法包括:
获取终端历史机位信息,根据所述终端历史机位信息对所述终端进行调整,以供用户透过调整后的终端的镜片观察到历史真实场景图像;
获取所述终端历史机位信息对应的虚拟物体历史显示信息;
根据所述虚拟物体历史显示信息,对所述虚拟物体历史显示信息对应的虚拟对象进行还原,以供用户观察到历史增强现实场景。
可选的,所述获取终端历史机位信息,根据所述终端历史机位信息对所述终端进行调整,以供用户透过调整后的终端的镜片观察到历史真实场景图像之前包括:
当历史增强现实场景显示时,获取终端历史机位信息,获取虚拟物体历史显示信息;
生成所述历史增强现实场景的唯一标识;
将所述唯一标识、终端历史机位信息以及虚拟物体历史显示信息关联保存至存储器中。
可选的,所述获取终端历史机位信息包括:
确定当前待复原的历史增强现实场景,获取所述历史增强现实场景的唯一标识;
获取所述唯一标识对应的终端历史机位信息。
可选的,所述将所述唯一标识、终端历史机位信息以及虚拟物体历史显示信息关联保存至存储器中之后包括:
接收分享指令,将所述存储器中的数据分享至所述分享指令对应的终端。
可选的,所述根据所述终端历史机位信息对所述终端进行调整包括:
根据所述终端历史机位信息中包含的历史位置信息对终端的位置进行调整;
根据所述终端历史机位信息中包含的历史角度信息对终端的角度进行调整。
可选的,所述根据所述终端历史机位信息中包含的历史位置信息对终端的位置进行调整包括:
根据定位技术,将所述终端历史机位信息中包含的历史位置信息对应的位置标记为目标位置;
将所述终端导航至所述目标位置。
可选的,所述根据所述终端历史机位信息中包含的历史角度信息对终端的角度进行调整包括:
将所述终端历史机位信息中包含的历史角度信息对应的角度标记为目标角度;
实时检测终端当前角度,当检测到当前角度与所述目标角度一致时,输出提示。
可选的,所述根据所述虚拟物体历史显示信息,对所述虚拟物体历史显示信息对应的虚拟对象进行还原包括:
获取所述虚拟物体历史显示信息中包含的虚拟对象、历史显示位置信息、历史缩放倍数信息及历史旋转信息;
根据所述历史缩放倍数信息及历史旋转信息对所述虚拟对象进行调整,将调整后的虚拟对象置于所述历史显示位置信息对应的位置。
此外,为实现上述目的,本发明还提供一种增强现实场景复原终端,所述增强现实场景复原装置包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的增强现实场景复原程序,所述增强现实场景复原程序被所述处理器执行时实现如上所述的增强现实场景复原方法的步骤。
此外,为实现上述目的,本发明还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有增强现实场景复原程序,所述增强现实场景复原程序被处理器执行时实现如上所述的增强现实场景复原方法的步骤。
本发明中,获取终端历史机位信息,根据终端历史机位信息对终端进行调整,使得用户可透过调整后的终端的镜片观察到历史真实场景图像,进一步获取终端历史机位信息对应的虚拟物体历史显示信息,根据虚拟物体历史显示信息,对对应的虚拟对象进行还原,以供用户观察到历史增强现实场景。通过本发明,可实现精准、快速地对历史增强现实场景进行复原,使得用户可再次体验曾经体验过的增强现实场景。
附图说明
图1为本发明实施例方案涉及的硬件运行环境的增强现实场景复原终端结构示意图;
图2为本发明增强现实场景复原方法第一实施例的流程示意图;
图3为本发明增强现实场景复原方法一实施例中历史增强现实场景的示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
如图1所示,图1是本发明实施例方案涉及的硬件运行环境的增强现实场景复原终端结构示意图。
本发明实施例增强现实场景复原终端可以是AR眼镜。
如图1所示,该终端可以包括:处理器1001,例如CPU,网络接口1004,用户接口1003,存储器1005,通信总线1002。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器,也可以是稳定的存储器(non-volatile memory),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
可选地,增强现实场景复原终端还可以包括摄像头、RF(Radio Frequency,射频)电路,传感器、音频电路、WiFi模块等等。其中,传感器比如光传感器、运动传感器以及其他传感器。作为运动传感器的一种,重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别移动终端姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;当然,终端还可配置陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
本领域技术人员可以理解,图1中示出的增强现实场景复原终端结构并不构成对增强现实场景复原终端的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图1所示,作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及增强现实场景复原程序。
在图1所示的增强现实场景复原终端中,网络接口1004主要用于连接后台服务器,与后台服务器进行数据通信;用户接口1003主要用于连接客户端(用户端),与客户端进行数据通信;而处理器1001可以用于调用存储器1005中存储的增强现实场景复原程序,并执行以下操作:
获取终端历史机位信息,根据所述终端历史机位信息对所述终端进行调整,以供用户透过调整后的终端的镜片观察到历史真实场景图像;
获取所述终端历史机位信息对应的虚拟物体历史显示信息;
根据所述虚拟物体历史显示信息,对所述虚拟物体历史显示信息对应的虚拟对象进行还原,以供用户观察到历史增强现实场景。
进一步地,所述获取终端历史机位信息,根据所述终端历史机位信息对所述终端进行调整,以供用户透过调整后的终端的镜片观察到历史真实场景图像之前包括:
当历史增强现实场景显示时,获取终端历史机位信息,获取虚拟物体历史显示信息;
生成所述历史增强现实场景的唯一标识;
将所述唯一标识、终端历史机位信息以及虚拟物体历史显示信息关联保存至存储器中。
进一步地,所述获取终端历史机位信息包括:
确定当前待复原的历史增强现实场景,获取所述历史增强现实场景的唯一标识;
获取所述唯一标识对应的终端历史机位信息。
进一步地,所述将所述唯一标识、终端历史机位信息以及虚拟物体历史显示信息关联保存至存储器中之后包括:
接收分享指令,将所述存储器中的数据分享至所述分享指令对应的终端。
进一步地,所述根据所述终端历史机位信息对所述终端进行调整包括:
根据所述终端历史机位信息中包含的历史位置信息对终端的位置进行调整;
根据所述终端历史机位信息中包含的历史角度信息对终端的角度进行调整。
进一步地,所述根据所述终端历史机位信息中包含的历史位置信息对终端的位置进行调整包括:
根据定位技术,将所述终端历史机位信息中包含的历史位置信息对应的位置标记为目标位置;
将所述终端导航至所述目标位置。
进一步地,所述根据所述终端历史机位信息中包含的历史角度信息对终端的角度进行调整包括:
将所述终端历史机位信息中包含的历史角度信息对应的角度标记为目标角度;
实时检测终端当前角度,当检测到当前角度与所述目标角度一致时,输出提示。
进一步地,所述根据所述虚拟物体历史显示信息,对所述虚拟物体历史显示信息对应的虚拟对象进行还原包括:
获取所述虚拟物体历史显示信息中包含的虚拟对象、历史显示位置信息、历史缩放倍数信息及历史旋转信息;
根据所述历史缩放倍数信息及历史旋转信息对所述虚拟对象进行调整,将调整后的虚拟对象置于所述历史显示位置信息对应的位置。
参照图2,图2为本发明增强现实场景复原方法第一实施例的流程示意图。
在一实施例中,增强现实场景复原方法包括:
步骤S10,获取终端历史机位信息,根据所述终端历史机位信息对所述终端进行调整,以供用户透过调整后的终端的镜片观察到历史真实场景图像;
本实施例中,增强现实技术,它是一种将真实世界信息和虚拟世界信息“无缝”集成的新技术,是把原本在现实世界的一定时间空间范围内很难体验到的实体信息,通过电脑等科学技术,模拟仿真后再叠加,将虚拟的信息应用到真实世界,被人类感官所感知,从而达到超越现实的感官体验。真实的环境和虚拟的物体实时地叠加到了同一个画面或空间同时存在。
本发明一实施例中,以AR眼镜为例,用户可通过开启AR眼镜,实现增强现实技术。例如,在一真实场景S中,原本是不存在物体A的,用户若想要观察物体A放置在真实场景S中的视图,便可通过增强现实技术实现。参照图3,图3为本发明增强现实场景复原方法一实施例中历史增强现实场景的示意图。如图3所示,可以想象,真实场景S是无限大的,在该真实场景S中,存在一天花板B,用户想要观看将一吊灯安装在天花板上的效果图,此时,用户佩戴并开启AR眼镜,透过AR眼镜的镜片对天花板进行观察,人眼可观察到历史真实场景图像。然后对该历史真实场景图像进行增强现实处理,例如,将吊灯的3D模型A放置至天花板的某处(该位置可由用户定义),通过光线投射系统,模拟出该吊灯的3D模型A放置至天花板的某处时的光线,并将该光线直接投射到用户视网膜,如此,用户便可观测到将一吊灯安装在天花板上的效果,即观察到历史增强现实场景D。本实施例中,光线投射系统涉及光场显示技术,光场显示是模拟四维光场的显示技术,真实再现所有方向的光线信息。自由空间中的每条光线包含两个维度的位置信息(x、y)和二维方向信息(θ,φ),传统的平面显示(LCD、LED、OLED)相当于四维光线在平面上每个点的积分,只保留了射线穿过屏幕的交点的几何信息和颜色信息,也即(x、y)两个维度,但失去了光线的方向信息,而光场显示可以保留最真实的光线信息(例如不同的光强和颜色),通过模拟整个光场,让人眼得到真实的视觉感受。
本实施例中,用户在观察到历史增强现实场景D时,AR眼镜处于真实场景S中的某个位置,为了准确定位用户在观察到历史增强现实场景D时AR眼镜在真实场景S中的位置,可通过常见的室内无线定位技术例如:Wi-Fi、蓝牙、红外线、超宽带、RFID、ZigBee和超声波等对AR眼镜当前的位置进行准确定位,并记录定位结果,便可得到历史位置信息。进一步通过AR眼镜中内置的传感器(例如三轴陀螺仪),测出AR眼镜此时的角度并记录,即得到历史角度信息。根据历史位置信息和历史角度信息,得到终端历史机位信息(包括历史位置信息和历史角度信息)。用户在观察到历史增强现实场景D时,以AR眼镜在真实场景S中所在的位置为原点O,建立三维坐标系,并记录此时构建的吊灯的3D模型A在该坐标系中的坐标,通过该坐标即可计算出吊灯的3D模型A与AR眼镜的相对位置关系,即得到历史显示位置信息,同时记录此时吊灯的3D模型A(即虚拟物体的虚拟对象)的缩放倍数信息、旋转信息(指相对于原点O的旋转角度),即得到历史缩放倍数信息、历史旋转信息。根据虚拟对象、历史显示位置信息、历史缩放倍数信息、历史旋转信息,得到虚拟物体历史显示信息(包括虚拟对象、历史显示位置信息、历史缩放倍数信息及历史旋转信息)。将当前的历史增强现实场景D的标识信息(不同的历史增强现实场景对应不同的标识信息)、终端历史机位信息以及虚拟物体历史显示信息管理保存至预置存储器中。本实施例中,存储器可以是AR眼镜中内置的存储器,也可以是外部的存储器,例如云端存储器。
本实施例中,当用户通过AR眼镜观察到历史增强场景D后,若关闭了AR眼镜,后续用户想要再次观测该历史增强现实场景D的显示效果,首先需要再次将AR眼镜置于相同的位置,并以相同角度进行观看,才能观看到与该历史增强现实场景D中一样的历史真实场景图像。本实施例中,首先,确定需要复原的增强现实场景是历史增强现实场景D,根据历史增强现实场景D的唯一标识信息从存储器中(存储器置于AR眼睛内置存储器中或云端存储器中)获取终端历史机位信息(包括历史位置信息及历史角度信息),通过室内无线定位技术将历史位置信息对应的位置作为目标位置,引导用户将AR眼镜置于该目标位置。当AR眼镜位于目标位置时,调整当前的观看角度(通过用户的摆头动作即可调整),以供调整后的观看角度与历史观看角度信息一致(即当前三轴陀螺仪检测到的数据与历史角度信息记录的一致时,发出提示,以供用户保持此时视角,即保持AR眼镜的当前角度与历史角度信息的记录一致)。当AR眼镜的位置及角度调整完毕后,用户透过AR眼镜的镜片,观察到此时的真实场景图像,由于此时AR眼镜的位置及角度与终端历史机位信息是一致的,故此时看到的真实场景图像与历史增强现实场景D中的真实场景图像是一致的。
步骤S20,获取所述终端历史机位信息对应的虚拟物体历史显示信息;
本实施例中,历史增强现实场景的唯一标识信息、终端历史机位信息以及虚拟物体历史显示信息管理保存至预置存储器中,因此,可通过查表的方式获取终端历史机位信息对应的虚拟物体历史显示信息。参照表1,表1为本发明一实施例中存储器存储数据的示意表。
表1
唯一标识信息1 终端历史机位信息1 虚拟物体历史显示信息1
唯一标识信息2 终端历史机位信息2 虚拟物体历史显示信息2
唯一标识信息3 终端历史机位信息3 虚拟物体历史显示信息3
…… …… ……
若待复原的增强现实场景为历史增强现实场景D,历史增强现实场景D的唯一标识信息为唯一标识信息1,则获取的终端历史机位信息为终端历史机位信息1,从而获取的虚拟物体历史显示信息为虚拟物体历史显示信息1。
步骤S30,根据所述虚拟物体历史显示信息,对所述虚拟物体历史显示信息对应的虚拟对象进行还原,以供用户观察到历史增强现实场景。
本实施例中,虚拟物体历史显示信息包括虚拟对象、历史显示位置信息、历史缩放倍数信息及历史旋转信息,根据历史缩放倍数信息及历史旋转信息对虚拟对象进行调整,然后将调整后的虚拟对象放置于历史显示位置信息在真实场景中对应的位置,通过光线投射系统,模拟出该调整后的虚拟对象的光线,并将光线直接投射到用户视网膜,如此,即实现了将虚拟对象还原到真实场景图像中,为用户再现了历史增强现实场景。
本实施例中,获取终端历史机位信息,根据终端历史机位信息对终端进行调整,使得用户可透过调整后的终端的镜片观察到历史真实场景图像,进一步获取终端历史机位信息对应的虚拟物体历史显示信息,根据虚拟物体历史显示信息,对对应的虚拟对象进行还原,以供用户观察到历史增强现实场景。通过本实施例,可实现精准、快速地对历史增强现实场景进行复原,使得用户可再次体验曾经体验过的增强现实场景。
进一步的,本发明增强现实场景复原方法一实施例中,步骤S10之前包括:
当历史增强现实场景显示时,获取终端历史机位信息,获取虚拟物体历史显示信息;
生成所述历史增强现实场景的唯一标识;
将所述唯一标识、终端历史机位信息以及虚拟物体历史显示信息关联保存至存储器中。
本发明一实施例中,以AR眼镜为例,用户可通过开启AR眼镜,实现增强现实技术。例如,在一真实场景S中,原本是不存在物体A的,用户若想要观察物体A放置在真实场景S中的视图,便可通过增强现实技术实现。参照图3,图3为本发明增强现实场景复原方法一实施例中历史增强现实场景的示意图。如图3所示,可以想象,真实场景S是无限大的,在该真实场景S中,存在一天花板B,用户想要观看将一吊灯安装在天花板上的效果图,此时,用户佩戴并开启AR眼镜,透过AR眼镜的镜片对天花板进行观察,人眼可观察到历史真实场景图像。然后对该历史真实场景图像进行增强现实处理,例如,将吊灯的3D模型A放置至天花板的某处(该位置可由用户定义),通过光线投射系统,将该3D模型A的光线直接投射到用户视网膜,如此,用户便可观测到将一吊灯安装在天花板上的效果,即观察到历史增强现实场景D。本实施例中,光线投射系统涉及光场显示技术,光场显示是模拟四维光场的显示技术,真实再现所有方向的光线信息。自由空间中的每条光线包含两个维度的位置信息(x、y)和二维方向信息(θ,φ),传统的平面显示(LCD、LED、OLED)相当于四维光线在平面上每个点的积分,只保留了射线穿过屏幕的交点的几何信息和颜色信息,也即(x、y)两个维度,但失去了光线的方向信息,而光场显示可以保留最真实的光线信息(例如不同的光强和颜色),通过模拟整个光场,让人眼得到真实的视觉感受。本实施例中,用户在观察到历史增强现实场景D时,AR眼镜处于真实场景S中的某个位置,为了准确定位用户在观察到历史增强现实场景D时AR眼镜在真实场景S中的位置,可通过常见的室内无线定位技术例如:Wi-Fi、蓝牙、红外线、超宽带、RFID、ZigBee和超声波等对AR眼镜当前的位置进行准确定位,并记录定位结果,便可得到历史位置信息。进一步通过AR眼镜中内置的传感器(例如三轴陀螺仪),测出AR眼镜此时的角度并记录,即得到历史角度信息。根据历史位置信息和历史角度信息,得到终端历史机位信息(包括历史位置信息和历史角度信息)。用户在观察到历史增强现实场景D时,以AR眼镜在真实场景S中所在的位置为原点O,建立三维坐标系,并记录此时构建的吊灯的3D模型A在该坐标系中的坐标,通过该坐标即可计算出吊灯的3D模型A与AR眼镜的相对位置关系,即得到历史显示位置信息,同时记录此时吊灯的3D模型A(即虚拟物体的虚拟对象)的缩放倍数信息、旋转信息(指相对于原点O的旋转角度),即得到历史缩放倍数信息、历史旋转信息。根据虚拟对象、历史显示位置信息、历史缩放倍数信息、历史旋转信息,得到虚拟物体历史显示信息(包括虚拟对象、历史显示位置信息、历史缩放倍数信息及历史旋转信息)。生成当前的历史增强现实场景D的唯一标识信息,将当前的历史增强现实场景D的唯一标识信息、终端历史机位信息以及虚拟物体历史显示信息管理保存至预置存储器中。本实施例中,存储器可以是AR眼镜中内置的存储器,也可以是外部的存储器,例如云端存储器。
本实施例中,将当前的历史增强现实场景的唯一标识信息、终端历史机位信息以及虚拟物体历史显示信息管理保存至预置存储器中,后续,可基于用户选择的需要复原的历史增强显示场景,获取待复原的历史增强现实场景的唯一标识信息,获取终端历史机位信息以及虚拟物体历史显示信息,根据终端历史机位信息对终端进行调整,以供用户透过终端的镜片观察到历史真实场景图像,根据虚拟物体历史显示信息对对应的虚拟对象进行还原,使得用户看到的虚拟对象在真实场景图像中的位置、大小、旋转角度与虚拟对象与历史观察到的虚拟对象在真实场景图像中的位置、大小、旋转角度一致,即可精准、快速地对历史增强现实场景进行复原,使得用户可再次体验曾经体验过的增强现实场景。
进一步的,本发明增强现实场景复原方法一实施例中,所述获取终端历史机位信息包括:
确定当前待复原的历史增强现实场景,获取所述历史增强现实场景的唯一标识;
获取所述唯一标识对应的终端历史机位信息。
本实施例中,历史增强现实场景的唯一标识信息、终端历史机位信息以及虚拟物体历史显示信息管理保存在预置存储器中。当用户需要对某个历史增强现实场景进行复原时,可基于用户选择的需要复原的历史增强显示场景,获取待复原的历史增强现实场景的唯一标识信息,获取终端历史机位信息以及虚拟物体历史显示信息,根据终端历史机位信息对终端进行调整,以供用户透过终端的镜片观察到历史真实场景图像,根据虚拟物体历史显示信息对对应的虚拟对象进行还原,使得用户看到的虚拟对象在真实场景图像中的位置、大小、旋转角度与虚拟对象与历史观察到的虚拟对象在真实场景图像中的位置、大小、旋转角度一致,即可精准、快速地对历史增强现实场景进行复原,使得用户可再次体验曾经体验过的某个特定的增强现实场景。
进一步的,本发明增强现实场景复原方法一实施例中,所述将所述唯一标识、终端历史机位信息以及虚拟物体历史显示信息关联保存至存储器中之后包括:
接收分享指令,将所述存储器中的数据分享至所述分享指令对应的终端。
本发明一实施例中,用户a通过终端A实现了增强现实技术,例如,观测沙发(3D模型)在房间1里的摆放效果,即用户a观察到增强现实场景1。
记录此时终端的机位信息以及沙发(即虚拟物体)的虚拟物体显示信息和增强现实场景1的唯一标识信息。将唯一标识信息、机位信息以及虚拟物体显示信息关联保存至存储器中。若后续,用户b想要体验用户a曾经体验过的观测效果,即用户b想要体验增强现实场景1,则可将该存储器中的数据分享到用户b的终端,例如终端B,终端B即可通过上述步骤S10至S30,体验用户a曾经体验过的增强现实场景1。
本实施例中,将存储器中的数据分享给不同的终端,使得不同的用户可通过各自的终端观测到相同的增强现实场景,提升用户体验增强现实技术的趣味。
进一步的,本发明增强现实场景复原方法一实施例中,所述根据所述终端历史机位信息对所述终端进行调整包括:
根据所述终端历史机位信息中包含的历史位置信息对终端的位置进行调整;
根据所述终端历史机位信息中包含的历史角度信息对终端的角度进行调整。
本实施例中,确定需要复原的增强现实场景是历史增强现实场景D,根据历史增强现实场景D的唯一标识信息从存储器中(存储器置于AR眼睛内置存储器中或云端存储器中)获取终端历史机位信息(包括历史位置信息及历史角度信息),通过室内无线定位技术将历史位置信息对应的位置作为目标位置,引导用户将AR眼镜置于该目标位置。当AR眼镜位于目标位置时,调整当前的观看角度(通过用户的摆头动作即可调整),以供调整后的观看角度与历史观看角度信息一致(即当前三轴陀螺仪检测到的数据与历史角度信息记录的一致时,发出提示,例如发出“滴滴”声,以供提醒用户保持此时视角,即保持AR眼镜的当前角度与历史角度信息的记录一致)。当AR眼镜的位置及角度调整完毕后,用户透过AR眼镜的镜片,观察到此时的真实场景图像,由于此时AR眼镜的位置及角度与终端历史机位信息是一致的,故此时看到的真实场景图像与历史增强现实场景D中的真实场景图像是一致的。
进一步的,本发明增强现实场景复原方法一实施例中,所述根据所述终端历史机位信息中包含的历史位置信息对终端的位置进行调整包括:
根据定位技术,将所述终端历史机位信息中包含的历史位置信息对应的位置标记为目标位置;
将所述终端导航至所述目标位置。
本实施例中,通过室内无线定位技术将历史位置信息对应的位置作为目标位置,引导用户将AR眼镜置于该目标位置。定位技术可采用常见的室内无线定位技术例如:Wi-Fi、蓝牙、红外线、超宽带、RFID、ZigBee和超声波等。
本发明另一可选实施例中,还可通过图像识别的方式进行定位。本实施例中,若通过图像识别的方式进行定位,则在历史体验增强现实场景时,还需要拍摄并存储历史真实场景图像,即在一次历史增强现实场景体验时,将真实场景图像与历史增强现实场景的唯一标识信息关联保存至存储器中。例如,用户在2017.12.11体验增强现实场景A,其包括的真实场景图像为a。退出这次增强现实场景后,若用户(或其他用户)后续想要再次体验增强现实场景A,则开启终端摄像头,获取摄像头实时拍摄的图像,并实时的将摄像头拍摄的图像与真实场景图像a进行相似性比对,并计算相似值,当终端处于位置x,拍摄角度为α时,此时拍摄的图像与真实场景图像a的相似值大于或等于预设阈值(例如设置为90%,根据实际需要进行设置,不宜过低,过低将导致后续的还原效果不理想,也不宜过高,过高将导致以图像识别进行定位的方式成功率不高),则当前位置及当前拍摄角度,即为历史体验增强现实场景时,终端所处的历史拍摄位置及历史拍摄角度,保持终端处于当前位置及角度,用户透过终端看到的真实场景图像,与在体验增强现实场景A时看到的历史真实场景图像一致。
本实施例中,通过定位技术可精确的将终端置于历史位置信息对应的位置,使得后续得到的增强现实场景的复原度更高。
进一步的,本发明增强现实场景复原方法一实施例中,所述根据所述终端历史机位信息中包含的历史角度信息对终端的角度进行调整包括:
将所述终端历史机位信息中包含的历史角度信息对应的角度标记为目标角度;
实时检测终端当前角度,当检测到当前角度与所述目标角度一致时,输出提示。
本实施例中,历史角度信息即用户在体验历史增强场景时,终端内置三轴传感器检测到的参数,当AR眼镜位于目标位置时,调整当前的观看角度(通过用户的摆头动作即可调整),当三轴陀螺仪检测到的数据与历史角度信息记录的一致时,发出提示,例如发出“滴滴”声,以供提醒用户保持此时视角,即保持AR眼镜的当前角度与历史角度信息的记录一致以供用户通过调整后的AR眼镜的镜片观看到真实场景视图与历史体验增强现实场景时观察到的真实场景视图一致,使得后续得到的增强现实场景的复原度更高。
进一步的,本发明增强现实场景复原方法一实施例中,所述根据所述虚拟物体历史显示信息,对所述虚拟物体历史显示信息对应的虚拟对象进行还原包括:
获取所述虚拟物体历史显示信息中包含的虚拟对象、历史显示位置信息、历史缩放倍数信息及历史旋转信息;
根据所述历史缩放倍数信息及历史旋转信息对所述虚拟对象进行调整,将调整后的虚拟对象置于所述历史显示位置信息对应的位置。
本实施例中,虚拟物体历史显示信息包括虚拟对象、历史显示位置信息、历史缩放倍数信息及历史旋转信息,根据历史缩放倍数信息及历史旋转信息对虚拟对象进行调整,然后将调整后的虚拟对象放置于历史显示位置信息在真实场景中对应的位置,通过光线投射系统,模拟出该调整后的虚拟对象的光线,并将光线直接投射到用户视网膜,如此,即实现了将虚拟对象还原到真实场景图像中,为用户再现了历史增强现实场景。
本实施例中,此次用户透过AR眼镜的镜片看到的真实场景图像与曾经体验增强现实场景时看到的真实场景图像是一致的,同时根据虚拟物体历史显示信息对对应的虚拟物体进行还原,即相当于根据虚拟物体历史显示信息将虚拟对象放置于此时的真实场景图像中,使得此时虚拟对象在真实场景图像中的位置、大小、旋转角度与虚拟对象在历史的真实场景图像中的位置、大小、旋转角度一致(从用户视觉感受来说),即可精准、快速地对历史增强现实场景进行复原,使得用户可再次体验曾经体验过的增强现实场景
此外,本发明实施例还提出一种计算机可读存储介质,所述计算机可读存储介质上存储有增强现实场景复原程序,所述增强现实场景复原程序被处理器执行时实现如上所述的增强现实场景复原方法的步骤。
本发明计算机可读存储介质的具体实施例与上述增强现实场景复原方法各个实施例基本相同,在此不做赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种增强现实场景复原方法,其特征在于,所述增强现实场景复原方法包括:
获取终端历史机位信息,根据所述终端历史机位信息对所述终端进行调整,以供用户透过调整后的终端的镜片观察到历史真实场景图像;
获取所述终端历史机位信息对应的虚拟物体历史显示信息;
根据所述虚拟物体历史显示信息,对所述虚拟物体历史显示信息对应的虚拟对象进行还原,以供用户观察到历史增强现实场景。
2.如权利要求1所述的增强现实场景复原方法,其特征在于,所述获取终端历史机位信息,根据所述终端历史机位信息对所述终端进行调整,以供用户透过调整后的终端的镜片观察到历史真实场景图像之前包括:
当历史增强现实场景显示时,获取终端历史机位信息,获取虚拟物体历史显示信息;
生成所述历史增强现实场景的唯一标识;
将所述唯一标识、终端历史机位信息以及虚拟物体历史显示信息关联保存至存储器中。
3.如权利要求2所述的增强现实场景复原方法,其特征在于,所述获取终端历史机位信息包括:
确定当前待复原的历史增强现实场景,获取所述历史增强现实场景的唯一标识;
获取所述唯一标识对应的终端历史机位信息。
4.如权利要求2所述的增强现实场景复原方法,其特征在于,所述将所述唯一标识、终端历史机位信息以及虚拟物体历史显示信息关联保存至存储器中之后包括:
接收分享指令,将所述存储器中的数据分享至所述分享指令对应的终端。
5.如权利要求1所述的增强现实场景复原方法,其特征在于,所述根据所述终端历史机位信息对所述终端进行调整包括:
根据所述终端历史机位信息中包含的历史位置信息对终端的位置进行调整;
根据所述终端历史机位信息中包含的历史角度信息对终端的角度进行调整。
6.如权利要求5所述的增强现实场景复原方法,其特征在于,所述根据所述终端历史机位信息中包含的历史位置信息对终端的位置进行调整包括:
根据定位技术,将所述终端历史机位信息中包含的历史位置信息对应的位置标记为目标位置;
将所述终端导航至所述目标位置。
7.如权利要求5所述的增强现实场景复原方法,其特征在于,所述根据所述终端历史机位信息中包含的历史角度信息对终端的角度进行调整包括:
将所述终端历史机位信息中包含的历史角度信息对应的角度标记为目标角度;
实时检测终端当前角度,当检测到当前角度与所述目标角度一致时,输出提示。
8.如权利要求1所述的增强现实场景复原方法,其特征在于,所述根据所述虚拟物体历史显示信息,对所述虚拟物体历史显示信息对应的虚拟对象进行还原包括:
获取所述虚拟物体历史显示信息中包含的虚拟对象、历史显示位置信息、历史缩放倍数信息及历史旋转信息;
根据所述历史缩放倍数信息及历史旋转信息对所述虚拟对象进行调整,将调整后的虚拟对象置于所述历史显示位置信息对应的位置。
9.一种增强现实场景复原终端,其特征在于,所述增强现实场景复原终端包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的增强现实场景复原程序,所述增强现实场景复原程序被所述处理器执行时实现如权利要求1至8中任一项所述的增强现实场景复原方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有增强现实场景复原程序,所述增强现实场景复原程序被处理器执行时实现如权利要求1至8中任一项所述的增强现实场景复原方法的步骤。
CN201711382245.5A 2017-12-19 2017-12-19 增强现实场景复原方法、终端及计算机可读存储介质 Pending CN107894842A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711382245.5A CN107894842A (zh) 2017-12-19 2017-12-19 增强现实场景复原方法、终端及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711382245.5A CN107894842A (zh) 2017-12-19 2017-12-19 增强现实场景复原方法、终端及计算机可读存储介质

Publications (1)

Publication Number Publication Date
CN107894842A true CN107894842A (zh) 2018-04-10

Family

ID=61808187

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711382245.5A Pending CN107894842A (zh) 2017-12-19 2017-12-19 增强现实场景复原方法、终端及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN107894842A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108829250A (zh) * 2018-06-04 2018-11-16 苏州市职业大学 一种基于增强现实ar的对象互动展示方法
CN109003317A (zh) * 2018-07-04 2018-12-14 百度在线网络技术(北京)有限公司 虚拟信息处理方法、装置、设备及存储介质
CN110517580A (zh) * 2019-07-26 2019-11-29 北京林业大学 一种针对后工业资源景观重构的复写式互动景观系统
CN110569006A (zh) * 2018-06-05 2019-12-13 广东虚拟现实科技有限公司 显示方法、装置、终端设备及存储介质
CN111581547A (zh) * 2020-06-04 2020-08-25 浙江商汤科技开发有限公司 一种游览信息推送方法、装置、电子设备及存储介质
CN111599292A (zh) * 2020-06-08 2020-08-28 浙江商汤科技开发有限公司 一种历史场景的呈现方法、装置、电子设备及存储介质
CN114091691A (zh) * 2020-07-31 2022-02-25 南京南瑞继保工程技术有限公司 一种基于增强现实技术的智能变电站运检系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103679204A (zh) * 2013-12-23 2014-03-26 上海安琪艾可网络科技有限公司 基于智能移动设备平台的图像识别与创作应用系统及方法
CN103905809A (zh) * 2012-12-27 2014-07-02 索尼公司 信息处理设备和记录介质
CN105551087A (zh) * 2016-02-14 2016-05-04 潘志君 基于云的景区实时全息虚拟现实系统及其捕捉系统和方法
CN106231205A (zh) * 2016-08-10 2016-12-14 苏州黑盒子智能科技有限公司 增强现实移动终端
CN107239725A (zh) * 2016-03-29 2017-10-10 阿里巴巴集团控股有限公司 一种信息展示方法、装置及系统
CN107993292A (zh) * 2017-12-19 2018-05-04 北京疯狂互动网络科技有限公司 增强现实场景复原方法、装置及计算机可读存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103905809A (zh) * 2012-12-27 2014-07-02 索尼公司 信息处理设备和记录介质
CN103679204A (zh) * 2013-12-23 2014-03-26 上海安琪艾可网络科技有限公司 基于智能移动设备平台的图像识别与创作应用系统及方法
CN105551087A (zh) * 2016-02-14 2016-05-04 潘志君 基于云的景区实时全息虚拟现实系统及其捕捉系统和方法
CN107239725A (zh) * 2016-03-29 2017-10-10 阿里巴巴集团控股有限公司 一种信息展示方法、装置及系统
CN106231205A (zh) * 2016-08-10 2016-12-14 苏州黑盒子智能科技有限公司 增强现实移动终端
CN107993292A (zh) * 2017-12-19 2018-05-04 北京疯狂互动网络科技有限公司 增强现实场景复原方法、装置及计算机可读存储介质

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108829250A (zh) * 2018-06-04 2018-11-16 苏州市职业大学 一种基于增强现实ar的对象互动展示方法
CN110569006A (zh) * 2018-06-05 2019-12-13 广东虚拟现实科技有限公司 显示方法、装置、终端设备及存储介质
CN110569006B (zh) * 2018-06-05 2023-12-19 广东虚拟现实科技有限公司 显示方法、装置、终端设备及存储介质
CN109003317A (zh) * 2018-07-04 2018-12-14 百度在线网络技术(北京)有限公司 虚拟信息处理方法、装置、设备及存储介质
CN110517580A (zh) * 2019-07-26 2019-11-29 北京林业大学 一种针对后工业资源景观重构的复写式互动景观系统
CN111581547A (zh) * 2020-06-04 2020-08-25 浙江商汤科技开发有限公司 一种游览信息推送方法、装置、电子设备及存储介质
CN111581547B (zh) * 2020-06-04 2023-12-15 浙江商汤科技开发有限公司 一种游览信息推送方法、装置、电子设备及存储介质
CN111599292A (zh) * 2020-06-08 2020-08-28 浙江商汤科技开发有限公司 一种历史场景的呈现方法、装置、电子设备及存储介质
CN114091691A (zh) * 2020-07-31 2022-02-25 南京南瑞继保工程技术有限公司 一种基于增强现实技术的智能变电站运检系统

Similar Documents

Publication Publication Date Title
CN107894842A (zh) 增强现实场景复原方法、终端及计算机可读存储介质
US11055913B2 (en) Directional instructions in an hybrid reality system
CN105807931B (zh) 一种虚拟现实的实现方法
US20190122440A1 (en) Content display property management
CN104781849B (zh) 单眼视觉同时定位与建图(slam)的快速初始化
CN102274633B (zh) 图像显示系统、装置以及方法
CN107622524A (zh) 用于移动终端的显示方法和显示装置
CN105608746B (zh) 一种将现实进行虚拟实现的方法
CN107993292A (zh) 增强现实场景复原方法、装置及计算机可读存储介质
US20170309077A1 (en) System and Method for Implementing Augmented Reality via Three-Dimensional Painting
US10504295B2 (en) Systems and methods for using sensing of real object position, trajectory, or attitude to enable user interaction with a virtual object
CN108135469A (zh) 使用眼睛姿态测量的眼睑形状估计
JP2015502584A (ja) 可搬装置、仮想現実システムおよび方法
CN112198959A (zh) 虚拟现实交互方法、装置及系统
CN109685909A (zh) 图像的显示方法、装置、存储介质和电子装置
CN109598796A (zh) 将真实场景与虚拟物体进行3d融合显示的方法和装置
CN109640070A (zh) 一种立体显示方法、装置、设备及存储介质
CN108876878B (zh) 头像生成方法及装置
CN108830944B (zh) 光学透视式三维近眼显示系统及显示方法
CN107708819A (zh) 用于虚拟现实的回应式动画
CN109859100A (zh) 虚拟背景的显示方法、电子设备和计算机可读存储介质
CN107077318A (zh) 一种声音处理方法、装置、电子设备及计算机程序产品
CN111383313B (zh) 一种虚拟模型渲染方法、装置、设备及可读存储介质
CN108615261A (zh) 增强现实中图像的处理方法、处理装置及存储介质
CN105893452B (zh) 一种呈现多媒体信息的方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180410

RJ01 Rejection of invention patent application after publication