CN115115812A - 虚拟场景的显示方法、装置及存储介质 - Google Patents
虚拟场景的显示方法、装置及存储介质 Download PDFInfo
- Publication number
- CN115115812A CN115115812A CN202210883054.1A CN202210883054A CN115115812A CN 115115812 A CN115115812 A CN 115115812A CN 202210883054 A CN202210883054 A CN 202210883054A CN 115115812 A CN115115812 A CN 115115812A
- Authority
- CN
- China
- Prior art keywords
- display
- virtual scene
- augmented reality
- preset
- area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了一种虚拟场景的显示方法、装置及存储介质,其中,所述方法包括:获取所述增强现实设备的当前位置信息;根据所述当前位置信息确定所述增强现实设备在所述当前位置信息对应的至少一个虚拟场景,其中,所述虚拟场景与对应的真实场景的位置信息相关联;在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识。本发明所提供的技术方案能够解决现有技术中增强现实设备显示多个虚拟场景时显示效果单一的技术问题,本发明提供了多种显示效果和人机互动模式,可以应用于多种增强现实场景。
Description
技术领域
本发明涉及虚拟现实技术领域,尤其涉及一种虚拟场景的显示方法、装置及存储介质。
背景技术
增强现实(Augmented Reality,AR)技术是一种将虚拟信息与真实世界巧妙融合的新技术,广泛运用了多媒体、三维建模、实时跟踪及注册、智能交互、传感等多种技术手段,将计算机生成的文字、图像、三维模型、音乐、视频等虚拟信息进行模拟仿真后,应用到真实世界中,两种信息互为补充,从而实现对真实世界的“增强”。增强现实技术不仅展现了真实世界的信息,还可以将虚拟的信息同时显示出来,两种信息相互补充、叠加。通过将虚拟信息内容叠加在真实世界中加以有效应用,并且在这一过程中能够被人类感官所感知,从而实现超越现实的感官体验。
在增强现实技术中,可以根据现实中的真实场景对应设置多种虚拟场景,例如,在设有多间厂房的工厂中,不同的厂房对应不同的虚拟场景。或者有多个展厅的博物馆中或者图书馆中,不同的展厅、不同的区域甚至不同的展品可对应不同的虚拟场景。当使用增强现实设备展示不同的虚拟场景时,为了使用户能根据需求选择出目标虚拟场景,需要在显示界面上显示不同虚拟场景对应的多个选项标识。
在现有技术中,显示不同虚拟场景对应的多个选项标识时,显示方式较为单一,相对应地,在单一的显示模式下,人机互动模式受其局限,使用户难以快速确定目标虚拟场景。因此,现有技术中,当用户使用增强现实设备时,存在显示效果单一的技术问题,用户难以高效、直观、快速地确定目标虚拟场景。
发明内容
本发明提供了一种虚拟场景的显示方法、装置及存储介质,旨在有效解决现有技术中增强现实设备显示多个虚拟场景时显示效果单一的技术问题,本发明提供了多种显示效果和人机互动模式,可以应用于多种增强现实场景。
根据本发明的一方面,本发明提供一种虚拟场景的显示方法,用于增强现实设备,所述方法包括:
获取所述增强现实设备的当前位置信息;
根据所述当前位置信息确定所述增强现实设备在所述当前位置信息对应的至少一个虚拟场景,其中,所述虚拟场景与对应的真实场景的位置信息相关联;
在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识。
进一步地,所述获取所述增强现实设备的当前位置信息包括:
获取所述增强现实设备的经纬度信息,并根据所述经纬度信息确定所述增强现实设备的所述当前位置信息。
进一步地,所述获取所述增强现实设备的当前位置信息还包括:
获取所述增强现实设备的摄像头采集的所述真实场景的实时图像,根据计算机视觉算法确定所述摄像头的实时位姿信息,将所述实时位姿信息确定为所述增强现实设备的所述当前位置信息。
进一步地,所述方法还包括:
在所述获取所述增强现实设备的当前位置信息之前,通过虚拟场景设置装置的摄像设备获取所述真实场景对应的图像信息,基于所述图像信息构建所述虚拟场景,生成表征所述虚拟场景的所述标识;
其中,所述基于所述图像信息构建所述虚拟场景包括:
获取用户针对所述图像信息中目标区域所设置的标记,以及获取所述目标区域对应的标记位置信息,将所述标记和所述标记位置信息相关联。
进一步地,所述在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识包括:
在所述显示区域的预设子区域内以队列的方式显示所述标识。
进一步地,所述在所述显示区域的预设子区域内以队列的方式显示所述标识包括:
确定每个预设子区域的形状,以及在每个所述预设子区域内按照队列顺序显示对应的标识并使所显示的标识的形状与其对应的预设子区域的形状保持一致,其中,中间位置的预设子区域的形状为矩形,两侧的预设子区域的形状为符合视觉透视关系的梯形。
进一步地,所述方法还包括:
在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识之后,实时确认用户针对所述预设子区域所做的动作;
在确认所述动作为沿着目标方向进行划动时,在所述目标方向上滚动所述队列,以依序显示所述标识;
在确认所述动作为用户选择所述标识中的一个的动作时,进入该标识对应的虚拟场景的内容展示空间,并显示所述虚拟场景对应的所述标记。
进一步地,所述方法还包括:
在所述显示区域内显示换页按钮;
在确认用户点击所述换页按钮时,获取所述至少一个虚拟场景对应的标识中在当前显示区域未显示的预设数量个标识,将所述未显示的预设数量个标识依序替换当前显示区域所显示的标识。
进一步地,在所述显示区域的预设子区域内以队列的方式显示所述标识包括:
在所述预设子区域之外的区域以第一预设显示方式显示位于预设位置的预设子区域内的目标标识,其中,所述第一预设显示方式为放大显示、缩小显示、震动显示或显示标识相关信息的至少一种;
在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识之后,所述方法还包括:
实时确认用户针对所述预设子区域以及所述目标标识所做的动作;
在确认所述动作为手指沿着目标方向进行划动时,在所述目标方向上滚动所述队列,以依序显示所述标识并在所述预设子区域之外的所述区域以所述第一预设显示方式显示当前位于所述预设位置的预设子区域内的目标标识;
在确认所述动作为用户选择所述目标标识的动作时,进入所述目标标识对应的虚拟场景的内容展示空间,并显示所述虚拟场景对应的所述标记。
进一步地,所述方法还包括:
在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识之后,实时确认用户针对所述预设子区域所做的动作;
在确认所述动作为触碰所述预设子区域时,以第二预设显示方式显示所述预设子区域内的所述标识,其中,所述第二预设显示方式为放大显示、缩小显示、震动显示或显示标识相关信息的至少一种;
在确认所述动作为用户选择所述标识中的一个的动作时,进入该标识对应的虚拟场景的内容展示空间,并显示所述虚拟场景对应的所述标记。
进一步地,所述方法还包括:
在以第二预设显示方式显示所述预设子区域内的所述标识之后,当确认所述动作为用户手指离开所述预设子区域并在预设时间段内保持离开状态时,恢复所述预设子区域内显示的所述标识的显示方式。
进一步地,所述方法还包括:
在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识之后,实时确认用户针对所述增强现实设备所做的动作;
在确认所述动作为沿着目标方向移动所述增强现实设备的视角时,在所述目标方向上按照队列顺序滚动所述标识,以依序在所述预设子区域内显示所述标识;
在确认所述动作为用户选择所述标识中的一个的动作时,进入该标识对应的虚拟场景的内容展示空间,并显示所述虚拟场景对应的所述标记。
进一步地,所述方法还包括:
以第三预设显示方式显示位于目标预设子区域的一个标识,其中,所述第三预设显示方式为放大显示、缩小显示、震动显示或显示标识相关信息的至少一种;
在确认所述动作为沿着目标方向移动所述增强现实设备的视角时,在所述目标方向上按照队列顺序滚动所述标识,以依序在所述预设子区域内显示所述标识并以第三预设显示方式显示当前位于所述目标预设子区域的一个标识;
在确认所述动作为用户选择所述目标预设子区域对应的标识的动作时,进入该标识对应的虚拟标签的内容展示空间,并显示所述虚拟场景对应的所述标记。
进一步地,所述在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识包括:
根据所述增强现实设备的所述当前位置信息和所述虚拟场景对应的真实场景的位置信息确定所述标识在所述显示区域中的叠加显示位置,并在所述叠加显示位置显示所述标识。
进一步地,所述方法还包括:
在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识之后,实时确认用户针对所述增强现实设备以及所述标识所做的动作;
在确认所述动作为移动所述增强现实设备的视角时,以第三预设显示方式显示当前视角对应的目标显示区域所对应的所述标识,其中,所述第三预设显示方式为放大显示、缩小显示、震动显示或显示标识相关信息的至少一种;
在确认所述动作为用户选择所述标识的动作时,进入所述目标显示区域上的所述标识对应的虚拟标签的内容展示空间,并显示所述虚拟场景对应的所述标记。
进一步地,所述在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识包括:
在所述显示区域的预设位置处显示多个标识分类选项,并实时确认用户针对所述标识分类选项所做的动作;
在确认所述动作为选择所述多个标识分类选项中的一个选项的动作时,仅显示与所选择的标识分类选项相关联的标识。
进一步地,所述标识包括三维模型、图像、视频、文字、表单中的至少一种。
进一步地,所述标记包括多媒体文件信息、表单信息、应用调用信息、嵌套通信、实时传感信息的至少一种,其中,所述多媒体文件信息包括图片、视频、3D模型、PDF文件、office文档的至少一种。
根据本发明的另一方面,本发明还提供了一种虚拟场景的显示装置,用于增强现实设备,所述装置包括:
位置信息获取单元,用于获取所述增强现实设备的当前位置信息;
虚拟场景确定单元,用于根据所述当前位置信息确定所述增强现实设备在当前位置对应的至少一个虚拟场景,其中,所述虚拟场景与对应的真实场景的位置信息相关联;
标识显示单元,在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识。
根据本发明的另一方面,本发明还提供了一种存储介质,所述存储介质中存储有多条指令,所述指令适于由处理器加载以执行如上所述的任一虚拟场景的显示方法。
通过本发明中的上述实施例中的一个实施例或多个实施例,至少可以实现如下技术效果:
在本发明所公开的技术方案中,用户使用增强现实设备时,首先根据位置信息确定虚拟场景,然后在显示区域上显示不同虚拟场景对应的不同标识。用户选择标识并进入虚拟场景后,在显示区域上显示真实场景对应的多个标记。本发明提供了多种标识显示方式,以及人机互动模式,用户可根据使用习惯选择显示方式和操作模式,以实现高效、直观、快速地确定目标虚拟场景,提高了用户体验。
附图说明
下面结合附图,通过对本发明的具体实施方式详细描述,将使本发明的技术方案及其它有益效果显而易见。
图1为本发明实施例提供的一种虚拟场景的显示方法的步骤流程图;
图2为本发明实施例提供的一种显示效果示意图;
图3为本发明实施例提供的第一种标识显示方式的示意图;
图4为本发明实施例提供的第二种标识显示方式的示意图;
图5为本发明实施例提供的第三种标识显示方式的示意图;
图6为本发明实施例提供的第四种标识显示方式的示意图;
图7为本发明实施例提供的第五种标识显示方式的示意图;
图8为本发明实施例提供的第六种标识显示方式的示意图;
图9为本发明实施例提供的第七种标识显示方式的示意图;
图10为本发明实施例提供的第八种标识显示方式的示意图;
图11为本发明实施例提供的第九种标识显示方式的示意图;
图12为本发明实施例提供的第十种标识显示方式的示意图;
图13为本发明实施例提供的一种虚拟场景的显示装置的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述。显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
在本发明的描述中,需要说明的是,除非另有明确的规定和限定,本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,在不做特别说明的情况下,一般表示前后关联对象是一种“或”的关系。
图1所示为本发明实施例所提供的虚拟场景的显示方法的步骤流程图,根据本发明的一方面,本发明提供一种虚拟场景的显示方法,用于增强现实设备,所述虚拟场景的显示方法包括:
步骤101:获取所述增强现实设备的当前位置信息;
步骤102:根据所述当前位置信息确定所述增强现实设备在所述当前位置信息对应的至少一个虚拟场景,其中,所述虚拟场景与对应的真实场景的位置信息相关联;
步骤103:在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识。
示例性地,增强现实设备为配置有显示装置和摄像装置的人机交互设备,如增强现实眼镜、增强现实头盔、计算机、智能手机、平板、投影仪等。其中,增强现实设备设置有显示装置,显示装置可以为显示屏,例如智能手机、平板;显示装置也可以为投影仪,例如教学所用的增强现实设备;显示装置还可以是显示光学器件,显示光学器件包括但不限于用于将对应图像反射至眼睛的显示装置,如棱镜、曲面反射镜、Birdbath、光波导、LBS等,对应的增强现实设备为增强现实眼镜或者增强现实头盔等。另外,增强现实设备的摄像装置或显示装置可以是自身集成的,也可以是通过有线或无线通信技术所连接的外接摄像装置或显示装置,其中,外接摄像头能够自由移动,适用于人不方便达到的应用场地。
以下对上述步骤101-103进行具体描述。
在上述步骤101中,获取所述增强现实设备的当前位置信息。
示例性地,增强现实设备的当前位置信息主要包括两种位置信息,一种是增强现实设备的地理位置信息,如经纬度信息,又如,在经纬度的基础上还包括高度信息等;另外一种是增强现实设备在当前的物理空间内的相对位置信息。在增强现实系统中,后台存储有每个虚拟场景对应的真实场景的位置信息,因此,需要获取增强现实设备的当前位置信息,才能将真实场景和对应的虚拟场景关联起来。
进一步地,在上述步骤101中,所述获取所述增强现实设备的当前位置信息包括:获取所述增强现实设备的经纬度信息,并根据所述经纬度信息确定所述增强现实设备的所述当前位置信息。示例性地,获取增强现实设备的经纬度信息,可以根据北斗卫星导航系统或全球定位系统(Global Positioning System,GPS)等经纬度定位工具来对位置进行具体定位,以获得增强现实设备的经纬度信息。其中,可以将经纬度信息直接确定为增强现实设备的所述当前位置信息,当然也可以通过其它方式进行定位。举例来说,若增强现实设备中安装了SIM(Subscriber Identity Module)卡,可以通过SIM卡来定位,SIM卡是GSM通信系统的移动用户所持有的IC卡,在有信号的情况下,能够通过无线基站实现位置定位。另外,当监控设备连接了WIFI热点时,还可以通过WIFI来进行定位。其中,在确定了增强现实设备的经纬度信息后,可以直接将经纬度信息确定为增强现实设备的当前位置信息,也可以结合其它定位方式获取的信息,来获得更为精准的当前位置信息。
进一步地,在上述步骤101中,所述获取所述增强现实设备的当前位置信息还包括:获取所述增强现实设备的摄像头采集的所述真实场景的实时图像,根据计算机视觉算法确定所述摄像头的实时位姿信息,将所述实时位姿信息确定为所述增强现实设备的所述当前位置信息。示例性地,为了将虚拟场景与真实场景进行精确关联,获取增强现实设备在当前物理空间内的位姿信息,即增强现实设备的摄像头的位置和姿态信息等。具体来说,例如,首先,增强现实设备的摄像头采集当前真实场景的至少一个实时图片,或者摄像头扫描当前真实场景,获取当前场景图片,然后对获得的实时图像进行三维跟踪,获取所述摄像头的实时位姿信息。例如通过SLAM(simultaneous localization and mapping,同步定位与建图)算法进行点云初始化,将当前世界坐标系与真实场景中的3D点云信息的世界坐标系对齐,从而实现虚拟场景中标记的空间位置与当前场景的对齐,实时计算出摄像头在空间中相对于世界坐标系的坐标位置以及摄像头的姿态等,并将确定出的实时位姿信息确定为增强现实设备的当前位置信息。又如,通过大场景定位技术,提前构建当前真实场景的高精度3D地图,基于增强现实设备拍摄的场景图像与3D地图的配准进行定位,确定增强现实设备的实时位姿信息,并将确定出的实时位姿信息确定为增强现实设备的当前位置信息。
在本发明中,既可以单独使用经纬度相关的位置信息确定虚拟场景,也可以单独根据增强现实设备的实时位姿信息来确定出虚拟场景,又可以将两者进行结合来确定虚拟场景,在接下来的实施例中会分别介绍。在本发明中,通过不同的当前位置信息确定虚拟场景,可以使增强现实设备适用于不同的场所,由此可以有效地扩展增强现实技术的应用领域。
相对应地,为了使用户在使用增强现实设备时,显示界面能够展示当前位置信息对应的至少一个虚拟场景对应的标识,需要提前建立虚拟场景。
进一步地,所述方法还包括:在所述获取所述增强现实设备的当前位置信息之前,通过虚拟场景设置装置的摄像设备获取所述真实场景对应的图像信息,基于所述图像信息构建所述虚拟场景,生成表征所述虚拟场景的所述标识。具体来说,通过虚拟场景设置装置来设置虚拟场景,其中,虚拟场景设置装置包括但不限于带有摄像装置的人机交互设备,具体如个人电脑、智能手机、平板电脑、投影仪、智能眼镜或者智能头盔等,其中,虚拟场景设置装置可以本身含有摄像装置,也可以外接摄像装置。在一些情形下,虚拟场景设置装置还包括显示装置(如显示屏、投影仪等),用于在呈现的实时场景图像中叠加显示对应标记信息等。举例来说,通过智能手机的摄像设备采集图像,获取真实场景对应的一个或多个图像信息,并在智能手机的显示屏中显示智能手机采集的图像,进而基于图像信息构建对应的虚拟场景,并生成表征虚拟场景的标识,其中,可以用三维模型、图像、视频、文字、表单等任意一种内容作为标识。
其中,所述基于所述图像信息构建所述虚拟场景包括:获取用户针对所述图像信息中目标区域所设置的标记,以及获取所述目标区域对应的标记位置信息,将所述标记和所述标记位置信息相关联。具体而言,通过摄像装置拍摄关于当前真实场景的实时场景图像,通过三维跟踪获取摄像头的实时位姿信息及当前真实场景对应的3D点云信息,获取用户在当前真实场景的实时场景图像中目标区域输入的标记及标记对应的目标区域的图像位置信息。根据实时位姿信息及目标区域对应的图像位置信息确定目标区域的标记位置信息,其中,目标区域对应的标记位置信息用于表征该标记对应的目标区域在三维空间中的位置信息,如空间三维坐标等,目标区域对应的标记位置信息与标记相关联。
在基于真实场景的图像信息构建虚拟场景时,用户可以根据需求进行构建,例如,在图像信息中选定目标区域,在目标区域处添加标记,又如,直接在图像中添加标记,图像中被添加标记的区域为目标区域,其中,目标区域可以是一个目标点,也可以是多个点组成的目标区域,本发明对此不进行限定。标记的类型可以有多种,用户可自由选择设置,在添加标记时,虚拟场景设置装置可以根据计算机视觉算法等技术来确定标记对应的标记位置信息,然后将标记和标记位置信息相关联。具体地,例如,虚拟场景设置装置通过摄像装置扫描当前真实场景得到对应的实时场景图像,利用三维跟踪算法确定摄像装置的实时位姿信息及当前真实场景对应的3D点云信息,其中,该3D点云信息可以根据后续的实时场景图像信息进行更新。其中,实时位姿信息包括摄像装置在空间中的实时位置和姿态,通过实时位姿信息可以进行图像位置与空间位置的转换等,如,位姿信息包括该摄像装置相对于当前真实场景的世界坐标系的外参,又如,位姿信息包括该摄像装置相对于当前场景的世界坐标系的外参以及摄像装置的相机坐标系与图像/像素坐标系的内参,在此不做限定。虚拟场景设置装置可以获取用户在实时场景图像中的相关操作,如触摸、点击、语音、手势或者头部动作等来确定目标区域的选中操作。虚拟场景设置装置基于用户在实时场景图像中的选中操作可以确定目标区域的图像位置,该图像位置用于表征目标区域在实时场景图像对应的像素/图像坐标系中的二维坐标信息等。虚拟场景设置装置还可以获取用户输入的标记,该标记包括用户输入的人机交互内容,用于叠加至图像位置在当前场景对应的空间位置等。例如,用户在虚拟场景设置装置上选择一标记信息,如3D箭头,然后点击显示屏幕中显示的实时场景图像中的某一位置,该点击位置为图像位置,然后该3D箭头叠加显示在实时场景中。然后,根据摄像装置获取的实时位姿信息,可以估计出摄像装置拍摄的实时场景图像上的二维坐标对应的空间三维坐标,从而基于目标区域的图像位置确定目标区域对应的标记位置信息等。例如,虚拟场景设置装置根据实时场景图像实时计算环境中的3D点云和摄像装置位姿,用户通过点击实时场景图像添加标记信息时,使用当前场景中的3D点云拟合出一个世界坐标系下的平面,以得到平面表达式。同时通过摄像装置光心和用户点击点在像平面的坐标构建基于通过相机坐标系的射线,然后将此射线转换到世界坐标系下,在世界坐标系下由射线表达式和平面表达式计算得到射线与平面的交点,此交点即为摄像装置拍摄的场景图像中2D点击点所对应的3D空间点,将该3D空间点对应的坐标位置确定为标记信息对应的目标区域的标记位置信息,该标记位置信息用于在空间中放置对应标记,使得该标记叠加显示在摄像装置拍摄的实时场景图像中的对应位置处,在实时场景图像上渲染该标记信息。当然,本领域技术人员应能理解上述根据实时位姿信息及图像位置确定对应的标记位置信息的方法仅为举例,其它现有的或今后可能出现的确定方法如可适用于本申请,也应包含在本申请保护范围以内,并在此以引用方式包含于此。
在一些情形下,在构建虚拟场景时,将虚拟场景设置装置在对应的真实场景中所处的地理位置信息作为该真实场景的位置信息。例如,将虚拟场景设置装置在对应的真实场景中所处的经纬度作为该真实场景的位置信息,如将虚拟场景设置装置开启、关闭摄像装置、或添加标记时的经纬度作为该真实场景的位置信息等;在另一些情形下,将虚拟场景设置装置在对应的真实场景中所处的相对位置信息作为该真实场景的位置信息,例如,将虚拟场景设置装置在对应的真实场景中所处的位姿信息作为该真实场景的位置信息,如将虚拟场景设置装置开启、关闭摄像装置或添加标记时的位姿信息作为该真实场景的位置信息等。然后将虚拟场景与真实场景的位置信息相关联,便于后续基于增强现实设备的当前为位置信息确定该当前位置信息对应的至少一个虚拟场景。
当虚拟场景构建完成后,可以设置该虚拟场景对应的标识信息,如将摄像装置拍摄的该虚拟场景对应的真实场景的图像信息作为标识信息,又如用户手动输入文字、选择3D模型、图像和/或视频等作为该虚拟场景对应的标识信息,其中标识信息与虚拟场景相关联。优选地,标识信息用于表征一个虚拟场景,若虚拟场景较多时,也可以用一个标识表征某一类虚拟场景,或者某一区域的多个虚拟场景等。基于设置之后的标识信息,用户可以根据标识快速选择相应的虚拟场景,并显示该虚拟场景对应的真实场景中所添加的虚拟标记。当启用增强现实设备后,首先根据增强现实设备的位置信息确定至少一个虚拟场景,然后在显示区域上显示该至少一个虚拟场景对应的标识信息,标识本身类似虚拟场景的封面、标签或索引。在选择具体的标识信息以后,进入当前选择的标识信息对应的虚拟场景中,进而显示该虚拟场景中的多个标记,其中,标记与真实场景相关联。示例性地,在本发明中,标识用于表征虚拟场景,当根据选择的标识进入该标识对应的虚拟场景后,进一步展示该虚拟场景对应的真实场景中已添加的标记,因此标识和标记各起到不同的作用。
在一些实施方式中,所述标记包括但不限于:多媒体文件信息、表单信息、应用调用信息、嵌套通信、实时传感信息的至少一种,其中,所述多媒体文件信息包括图片、视频、3D模型、PDF文件、office文档的至少一种。例如,标记可以包括箭头、画笔在屏幕上随意涂鸦、圆圈、几何形状等标识信息。又如,标记还可以包括表单信息,例如在对应目标图像位置生成表单,供用户查看或输入内容等。还如,标记还可以包括应用调用信息,用于执行应用的相关指令等,如打开应用、调用应用具体的功能,如拨打电话、打开链接等。还如,标记还可以包括实时传感信息,用于连接传感装置(如传感器等)并获取目标对象的传感数据。当然,本领域技术人员应能理解上述标记仅为举例,其它现有的或今后可能出现的标记如可适用于本申请,也应包含在本申请保护范围以内,并在此以引用方式包含于此。
在上述步骤102中,根据所述当前位置信息确定所述增强现实设备在所述当前位置信息对应的至少一个虚拟场景,其中,所述虚拟场景与对应的真实场景的位置信息相关联。
示例性地,在构建虚拟场景时,存储该虚拟场景对应的真实场景的位置信息,比如:可以只是将虚拟场景设置装置在对应的真实场景中所处的地理位置信息作为该真实场景的位置信息,也可以只是将虚拟场景设置装置在对应的真实场景中所处的相对位置信息作为该真实场景的位置信息,或者是两者结合后的位置信息。相对应地,获取增强现实设备的当前位置信息,根据当前位置信息确定增强现实设备在当前位置信息对应的至少一个虚拟场景。例如,若虚拟场景对应真实场景的位置信息为地理位置信息,则获取增强现实设备的地理位置信息作为增强现实设备的当前位置信息,又如,若虚拟场景对应真实场景的位置信息为相对位置信息,则获取增强现实设备的相对位置信息(如摄像装置的位姿信息等)作为增强现实设备的当前位置信息,再如,若虚拟场景对应真实场景的位置信息为地理位置信息和相对位置信息相结合的位置信息,则获取增强现实设备的地理位置信息和相对位置信息作为增强现实设备的当前位置信息。进一步地,当增强现实设备的当前位置信息与某一虚拟场景对应的真实场景的位置信息的差值满足预设阈值,如地理位置信息的距离差值小于预设距离差值阈值,又如,相对位置信息(如摄像装置的位姿信息等)的差值小于预设差值阈值等,则将该虚拟场景确定为增强现实设备的当前位置信息对应的虚拟场景,由此可以确定增强现实设备的当前位置信息对应的至少一个虚拟场景,从而确定该虚拟场景对应的标识。
在上述步骤103中,在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识。
示例性地,每个虚拟场景对应有至少一种类型的展示内容(如标记),特别是存在多个虚拟场景时,在显示区域内,无法同时将多个虚拟场景的具体内容直接展示出来,而是用标识来表征不同的虚拟场景。其中,标识的作用类似菜单、选项、导航、封面或索引,用户可以根据标识快速选择出对应的虚拟场景。因此,为了使用户便于选择虚拟场景,在显示界面内,先显示增强现实设备的当前位置信息对应的至少一个虚拟场景对应的标识。其中,优选地,可以用一个标识对应一个虚拟场景,若虚拟场景较多,也可以用一个标识表征某一类虚拟场景,或者某一区域的多个虚拟场景。在此,标识在显示区域中的显示位置、形状和大小不进行限定。
举例来说,图2为本发明实施例提供的一种显示效果示意图,由图2可知,显示标识和显示标记是两层嵌套的关系。举例来说,在图2-a中,根据增强现实设备在真实场景的当前位置信息确定至少一个虚拟场景对应的标识信息,图2-a中对应一个博物馆中的一个真实场景,该场景内在不同的区域可能有多个展区,比如瓷器展区、字画展区、书法展区、丝绸展区。图2-a的真实场景中有两个展区,已建立两个虚拟场景,分别对应有两个标识显示在显示界面上,标识可以为用于展示瓷器、字画相关的图片、文字、视频等。图2-b为增强现实设备的显示界面的内容,当用户点击进入瓷器标识对应的瓷器虚拟场景后,进入瓷器展区对应的虚拟场景。在图2-c的显示界面中,显示该虚拟场景对应的多个标记,在该瓷器虚拟场景中,每个瓷器对应至少一个标记,有的标记用于介绍当前的瓷器,有的标记用于播放视频,有的标记用于展示瓷器的细节等等,当然也可以将所有的信息集中在一个标记上。此外,整个瓷器展区作为当前真实场景,也可以对应至少一个标识,例如,瓷器展区的入口处可以设置多个标识,或用于介绍瓷器展区背景知识的视频,或用于展示瓷器布局地图等。
本发明的技术方案使增强现实技术不仅用于文化展示场景,还可用于生产场景、教学场景、传统娱乐项目等不同领域,使增强现实技术在更多领域内充分发挥其技术的优越性。
进一步地,在上述步骤103中,所述在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识包括:在所述显示区域的预设子区域内以队列的方式显示所述标识。其中,预设子区域在显示区域中的显示位置是预先设定的,预设子区域的大小、形状、数量和位置不进行限定。示例性地,显示区域为显示装置上可以显示内容的区域,在显示区域内设置一个或多个预设子区域,用于显示虚拟场景对应的标识。预设子区域可以为各种形状。假设预设子区域的形状为矩形,可选地,在显示区域内一直显示矩形框,当出现标识时,将标识显示在对应的矩形框内。可选地,在显示区域内不显示矩形框,但是预先在显示区域内确定矩形框的位置以及和操作手势对应的移动方向和状态变化等,当出现标识时,将标识显示在对应的矩形框中。可选地,当标识的显示位置和现实中物体的方位相关联时,显示区域中预设子区域的位置并不固定,具体可对应显示在扫描识别出的物体附近。其中,设置预设子区域的面积时,可以将其面积大于标识面积,在显示标识时,标识能根据自身的形状和面积灵活显示在预设子区域内。综上,对于预设子区域的设置方式和标识的显示方式,以及两者之间的关联方式,可以在实际应用中根据具体情况进行确定,本发明对此不做限制。
图3为本发明实施例提供的第一种标识显示方式的示意图,其中,显示区域可以为个人计算机、智能手机、平板电脑的显示界面,也可以是具有增强显示功能的头戴或者眼镜的显示界面。如图3所示,在显示区域内有多个预设子区域,每个预设子区域显示一个标识,即每个预设子区域代表单个标识的显示区域。在当前场景中,以队列的方式显示预设数量的标识。举例来说,图3-a中标识以横向队列显示,图3-b中标识以纵向队列显示,且图3-a和图3-b以队列的方式显示标识的预设数量是四个。图3-c中标识可以显示出立体感,产生由近及远的效果。用户也可以根据自己的喜好选择显示模式,也可以自由随意设置显示模式,本发明对此不做限定。其中,标识的显示顺序可以根据算法推荐(例如:选择热度从高到低)排序,或者根据预设的顺序排列,或者根据当前位置信息优先显示距离最近的虚拟场景对应的标识,或者随机显示等。另外,用户也可以收藏标识,显示界面优先显示收藏的标识。
进一步地,在上述步骤103中,所述在所述显示区域的预设子区域内以队列的方式显示所述标识包括:确定每个预设子区域的形状,以及在每个所述预设子区域内按照队列顺序显示对应的标识并使所显示的标识的形状与其对应的预设子区域的形状保持一致,其中,中间位置的预设子区域的形状为矩形,两侧的预设子区域的形状为符合视觉透视关系的梯形。示例性地,图4为本发明实施例提供的第二种标识显示方式的示意图,该显示方式有立体感,符合对称美学。为了使标识与预设子区域相契合,首先确定每个预设子区域的形状,获取形状相关数据,将标识的图像调整为预设子区域的形状,然后在每个预设子区域内按照队列顺序显示对应的标识。在该显示方式中,中间位置的预设子区域的形状设置为矩形,两侧的预设子区域的形状为符合视觉透视关系的梯形。如图4所示,为了体现出立体的显示效果,中间用长方形或者正方形显示标识,在两侧分别将多个预设子区域按照一定角度倾斜,由此来体现出由近及远的立体效果。例如:侧边为了呈现出成一定程度倾斜状,可以用多个梯形显示标识。其中,每个梯形以水平轴线对称,多个梯形的上底和下底之间相互平行,多个梯形同一侧的腰相互平行或者在同一条直线上,由此来体现出由近及远的立体效果。除了图4所示的横向展示,在有些场景中还可以纵向显示,在一些情形下,预设子区域在显示区域的中间位置排列显示,在另一些实施例中,预设子区域在显示区域的上侧、下侧、左侧或右侧排列显示,在此不进行限定。在该显示方式中,虽然同样是以队列的方式显示标识,但是该显示方式能够呈现出立体的效果,使人更有身临其境之感,增强现实的感受更加明显。
进一步地,所述方法还包括:在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识之后,实时确认用户针对所述预设子区域所做的动作;在确认所述动作为沿着目标方向进行划动时,在所述目标方向上滚动所述队列,以依序显示所述标识;在确认所述动作为用户选择所述标识中的一个的动作时,进入该标识对应的虚拟场景的内容展示空间,并显示所述虚拟场景对应的所述标记。示例性地,在本发明中,除了有多种显示方式,相对应地,人机互动的操作方式也有多种。用户可以直接进行触摸、点击等操作来对标识进行交互操作,也可以通过预设手势、语音输入、头部动作、眼睛凝视点等方式间接进行交互操作。另外,对于便于直接移动和转动摄像头的智能手机、平板,可以通过调整移动设备的摄像头来进行交互操作,同理,也可以通过肢体运动(如偏转头部、行走等)来调整增强现实头盔和增强现实眼镜的当前位置来进行交互操作。
具体来说,对于图3和图4中的多种显示方式所显示的标识,在显示区域内显示了多个标识之后,需要实时确认用户针对预设子区域所做的动作。在增强现实系统中,可以提前预设不同的动作对应的操作指令,例如,手势为划动时,则表示沿着目标方向以队列的形式滚动显示多个标识。当队列方式为图3-b时,目标方向则对应为向上或向下,当队列方式为图4时,目标方向则对应为向左或向右。在确认用户的动作为沿着目标方向进行划动时,对应地在目标方向上滚动队列,以依序显示所述标识。
除了滚动显示不同的标识,还需要实时检测用户是否选定其中的某个标识。选定的动作可以为单击、双击、长按或其它交互方式,在确认用户的动作为选择所述中的一个标识的动作时,则进入该标识对应的虚拟场景的内容展示空间,并显示虚拟场景对应的多个标记。例如,当用户单击某标识,进入该标识对应的虚拟场景中,用户不但可以看见该虚拟场景对应的真实场景,还可以看见显示区域中叠加的与真实场景相对应的标记。
进一步地,所述方法还包括:在所述显示区域内显示换页按钮;在确认用户点击所述换页按钮时,获取所述至少一个虚拟场景对应的标识中在当前显示区域未显示的预设数量个标识,将所述未显示的预设数量个标识依序替换当前显示区域所显示的标识。示例性地,图5为本发明实施例提供的第三种标识显示方式的示意图,如图5所示,为了能快速切换标识,在显示区域内还设置了换页按钮。用户通过单击、双击、长按或其它交互方式来选择换页按钮。其中,换页按钮的数量为一个或多个,举例来说,如图5-a所示,假设显示界面的面积较大,为了便于用户使用左右手随意换页,可以在显示区域的两侧各设置一个换页按钮。当确认用户选择了换页按钮时,更新当前显示区域内显示的标识,将当前显示区域未显示出来的预设数量个标识替换当前状态下正在显示的多个标识进行显示。其中预设数量可以与当前显示区域中显示的标识数量相同,也可以不同。若所有的标识都显示完毕,可呈现提示信息,表示无法换页,也可以再次显示已经显示过的标识,还可以将至少一个虚拟场景对应的所有的标识全部缩小后显示在整显示界面上,以供用户选择。由于换页按钮的功能是使用户能快速浏览多个标识,当标识的总数量较少时,可以将所有的标识一次性显示在显示界面上,具体来说将之前的少量的面积较大的预设子区域临时转换为多个面积较小的预设子区域,并将所有的标识全部缩小后显示在多个面积较小的预设子区域内,以方便用户快速做出选择。若用户在所有的标识中选择了其中一个目标标识,则将预设子区域恢复为之前的少量面积较大的预设子区域,为了突出被选中的目标标识,将被选中的目标标识显示在中间的预设子区域上。当然,也可以直接进入用户选择的标识的虚拟场景中,对应显示该虚拟场景对应的真实场景中的多个标记。
进一步地,在上述步骤103中,在所述显示区域的预设子区域内以队列的方式显示所述标识包括:在所述预设子区域之外的区域以第一预设显示方式显示位于预设位置的预设子区域内的目标标识,其中,所述第一预设显示方式为放大显示、缩小显示、震动显示或显示标识相关信息的至少一种;在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识之后,所述方法还包括:实时确认用户针对所述预设子区域以及所述目标标识所做的动作;在确认所述动作为手指沿着目标方向进行划动时,在所述目标方向上滚动所述队列,以依序显示所述标识并在所述预设子区域之外的所述区域以所述第一预设显示方式显示当前位于所述预设位置的预设子区域内的目标标识;在确认所述动作为用户选择所述目标标识的动作时,进入所述目标标识对应的虚拟场景的内容展示空间,并显示所述虚拟场景对应的所述标记。其中,预设位置可以是指显示区域中一个或多个预设子区域对应的位置,通过用户的划动动作,可以将非预设位置的预设子区域的标识移动至该预设位置对应的预设子区域,当标识移动至该预设位置对应的预设子区域时,该标识为目标标识,在该预设位置对应的预设子区域之外的区域以第一预设显示方式显示目标标识,例如,在该预设位置对应的预设子区域的正上方、正下方、左上方、右上方、左下方、右下方或显示区域中除预设位置对应的预设子区域之外的区域等显示目标标识,在此不进行限定,而该预设位置对应的预设子区域可以显示该目标标识,也可以不显示该目标标识。
图6为本发明实施例提供的第四种标识显示方式的示意图,第一预设显示方式有多种,为放大显示、缩小显示、震动显示或显示标识相关信息的至少一种。图6-a中,预设位置为最右侧的预设子区域,目标标识被缩小显示在最右侧预设子区域的左上方,同时可以增加震动效果,便于吸引用户的注意力;图6-b中,目标标识显示在被拉伸的区域中,同时增加了虚拟场景对应的图片信息;图6-c中,预设位置为中间的预设子区域,目标标识被放大显示在中间的预设子区域的正上方,同时显示了虚拟场景的文字信息,便于用户了解虚拟场景相关的信息。
在显示虚拟场景对应的标识之后,实时确认用户的动作。其中,任意一个移动到目标位置的预设子区域内的目标标识,可对应改变显示效果,如此,用户则可以重点浏览每个出现在预设位置处的标识的具体内容。在用户选择了目标标识时,则进入虚拟场景的内容展示空间,并显示标记。其中,由于目标标识已经被特别指定,除了直接选择目标标识外,如直接点击、双击、触摸目标标识等,还可以通过指定的交互动作来选择目标标识,例如,在显示区域的任意位置处进行双击,则代表选择目标标识。
在另一些实施例中,在所述显示区域的预设子区域内以队列的方式显示所述标识包括:在所述预设子区域以第一预设显示方式显示位于预设位置的预设子区域内的目标标识,其中,所述第一预设显示方式为放大显示、缩小显示、震动显示或显示标识相关信息的至少一种。例如,预设位置可以是指显示区域中一个或多个预设子区域对应的位置,通过用户的划动动作,可以将非预设位置的预设子区域的标识移动至预设位置对应的预设子区域,当标识移动至该预设位置对应的预设子区域时,该标识为目标标识,在该预设位置对应的预设子区域以第一预设显示方式显示目标标识。图7为本发明实施例提供的第五种标识显示方式的示意图,在图7中,直接改变原来的预设位置对应的预设子区域的目标标识的显示方式,即直接在原来显示方式基础上,改变预设子区域的显示方式,进而同步调整目标标识的显示方式。该实施例是上一实施例第四种标识显示方式的优化。该显示方式除了可以改变显示效果,增加显示内容,还节省了显示空间。
进一步地,所述方法还包括:在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识之后,实时确认用户针对所述预设子区域所做的动作;在确认所述动作为触碰所述预设子区域时,以第二预设显示方式显示所述预设子区域内的所述标识,其中,所述第二预设显示方式为放大显示、缩小显示、震动显示或显示标识相关信息的至少一种;在确认所述动作为用户选择所述标识中的一个的动作时,进入该标识对应的虚拟场景的内容展示空间,并显示所述虚拟场景对应的所述标记。示例性地,为了改变标识的显示效果,在该显示方式中,将显示区域中预设子区域内的标识以第二预设显示方式进行显示。举例来说,图8为本发明实施例提供的第六种标识显示方式的示意图,在图8-a的显示方式中,预设子区域的原始位置为显示区域的最下方的八个位置,分别显示对应的标识,当用户对其中某个标识进行特定操作后(例如,单击、双击、长按或其它交互方式等),用图8-b的显示方式显示标识,将该标识和两侧的预设数量的标识放大显示,或者,将整个预设子区域的标识放大显示。其中,放大显示的标识和原始显示的标识可以同时存在,也可以将原始显示的标识隐藏起来,只显示放大状态的标识,放大显示的位置可以覆盖原始显示的位置,也可以不同于原始显示的位置。其中,显示方式具有多样性,为放大显示、缩小显示、震动显示或显示标识相关信息的至少一种。显示区域和操作指令也根据应用需求来确定,本发明不做限制。
进一步地,所述方法还包括:在以第二预设显示方式显示所述预设子区域内的所述标识之后,当确认所述动作为用户手指离开所述预设子区域并在预设时间段内保持离开状态时,恢复所述预设子区域内显示的所述标识的显示方式。示例性地,为了节省显示区域的空间,在以不同的显示方式显示了预设子区域内的标识之后,若用户没有进行划动或者选择标识,并在预设时间内,没有对预设子区域内的标识进行任何操作时,将显示方式恢复为改变显示状态之前方式,举例来说,如图8所示的标识显示方式,将由图8-b的显示方式恢复到原来图8-a的显示方式。通过显示方式的灵活变化,能够实现显示效果多样化,用户能够同时浏览多个标识的不同显示效果。
进一步地,所述方法还包括:在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识之后,实时确认用户针对所述增强现实设备所做的动作;在确认所述动作为沿着目标方向移动所述增强现实设备的视角时,在所述目标方向上按照队列顺序滚动所述标识,以依序在所述预设子区域内显示所述标识;在确认所述动作为用户选择所述标识中的一个的动作时,进入该标识对应的虚拟场景的内容展示空间,并显示所述虚拟场景对应的所述标记。
示例性地,除了用户直接对显示区域内的显示对象(如翻页按钮、预设子区域等)进行操作之外,还可以通过调整增强现实设备来调整标识的显示。举例来说,当用户平移、旋转、上下移动增强现实设备的视角时,可以通过对应的传感器(如惯性测量单元、IMU、6DOF等)获取增强现实设备的移动数据。对应地,标识的显示变化效果类似于手指划动预设子区域的效果,可以按照队列顺序滚动标识。该显示方式可单手操作,具有操作简单、效果灵敏等优点。
进一步地,所述方法还包括:以第三预设显示方式显示位于目标预设子区域的一个标识,其中,所述第三预设显示方式为放大显示、缩小显示、震动显示或显示标识相关信息的至少一种;在确认所述动作为沿着目标方向移动所述增强现实设备的视角时,在所述目标方向上按照队列顺序滚动所述标识,以依序在所述预设子区域内显示所述标识并以第三预设显示方式显示当前位于所述目标预设子区域的一个标识;在确认所述动作为用户选择所述目标预设子区域对应的标识的动作时,进入该标识对应的虚拟标签的内容展示空间,并显示所述虚拟场景对应的所述标记。
示例性地,图9为本发明实施例提供的第七种标识显示方式的示意图,在该显示方式中,中间有目标预设子区域,当标识移动到该区域时,以第三预设显示方式显示。如图9-a所示,用户在真实场景中,手持增强现实设备,屏幕对着展厅,在当前状态下,增强现实设备的显示内容如图9-b所示,在显示区域内,设置有目标预设子区域,在该区域内,目标标识的显示方式和其它标识不同,重点显示了更多细节以用于展示当前重点区域。用户手持平板向右移动,则标识也对应着展示右边真实场景所对应的虚拟场景。如图9-c所示,随着增强现实设备向右移动,瓷器展区逐渐离开显示区域,而字画展区成为重点,相应地,随着标识按照队列顺序滚动,“瓷器标识”逐渐移到展示区域的左侧,“字画标识”滚动到目标预设子区域内,此时,“字画标识”改变显示方式,以第三预设显示方式显示。右侧又出现了服饰展区,相应地,屏幕上出现“服饰标识”。该展示方式便于操作,不依赖手指操作,只需移动设备即可,方便用户的使用。
进一步地,在上述步骤103中,所述在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识包括:根据所述增强现实设备的所述当前位置信息和所述虚拟场景对应的真实场景的位置信息确定所述标识在所述显示区域中的叠加显示位置,并在所述叠加显示位置显示所述标识。其中,标识在显示区域的叠加位置信息不是预先设定的,不同于预设子区域,而是根据标识对应的虚拟场景关联的真实场景的位置信息与增强现实设备的当前位置信息实时确定,例如,首先,增强现实设备采集当前真实场景的场景图像,然后对获得的实时图像进行三维跟踪,获取增强现实设备的实时位姿信息作为增强现实设备的当前位置信息,如通过SLAM算法进行点云初始化,将当前世界坐标系与真实场景中的3D点云信息的世界坐标系对齐,从而实现虚拟场景关联的真实场景的位置信息与当前场景对齐,根据虚拟场景关联的真实场景的位置信息、通过三维跟踪获得的摄像装置的当前位置信息等实时计算该虚拟场景的标识信息在当前摄像装置拍摄的场景图像中对应的叠加位置信息,该标识信息叠加显示在增强现实设备显示屏幕中的对应位置处。又如,通过大场景定位技术,提前构建当前真实场景的高精度3D地图,基于增强现实设备拍摄的场景图像与3D地图的配准进行定位,确定增强现实设备的实时位姿信息作为增强现实设备的当前位置信息,然后根据增强现实设备的当前位置信息和虚拟场景关联的真实场景的位置信息等实时计算该虚拟场景的标识信息在当前摄像装置拍摄的场景图像中对应的叠加位置信息,该标识信息叠加显示在增强现实设备显示屏幕中的对应位置处。
示例性地,图10为本发明实施例提供的第八种标识显示方式的示意图,在该显示方式中,将标识显示在对应的真实场景的叠加显示位置上。如图10所示,真实场景对应有三个虚拟场景,由近及远对应于虚拟场景对应的真实场景的空间位置关系,分别是瓷器虚拟场景、字画虚拟场景和书法虚拟场景。类似标记的显示方式,三个标识分别叠加显示在增强现实设备显示屏幕中的对应位置处。该标识显示方式将标识与真实场景直接关联,显示效果更加立体直观,便于用户选择。
进一步地,所述方法还包括:在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识之后,实时确认用户针对所述增强现实设备以及所述标识所做的动作;在确认所述动作为移动所述增强现实设备的视角时,以第四预设显示方式显示当前视角对应的目标显示区域所对应的所述标识,其中,所述第四预设显示方式为放大显示、缩小显示、震动显示或显示标识相关信息的至少一种;在确认所述动作为用户选择所述标识的动作时,进入所述目标显示区域上的所述标识对应的虚拟标签的内容展示空间,并显示所述虚拟场景对应的所述标记。
示例性地,图11为本发明实施例提供的第九种标识显示方式的示意图,在该显示方式中,将显示区域中的特定位置预设为目标显示区域,图11所示的目标显示区域为屏幕下方的中间区域。用户能够通过平移、旋转、上下移动增强现实设备的视角,改变虚拟场景标识在显示区域中的位置,从而可以将想要重点浏览的标识移动到目标显示区域上。图11-a中,“书法标识”在屏幕的上方,没有落到目标显示区域上,当用户想重点浏览“书法标识”的信息时,可以手持增强现实设备,对其进行翻转,使屏幕的上方更靠近身体,使屏幕的下方,由此,将更远处的真实场景由屏幕的上方往下移。当“书法标识”移动到目标显示区域时,如图11-b所示,第四预设显示方式显示“书法标识”。其中,可以在另外的区域放大显示“书法标识”,也可以直接在原来的位置直接将“书法标识”以第四预设显示方式显示。其中,位于目标显示区域内的标识的数量不做限定,可以是一个或多个。通过该显示方式,即便是视觉较远位置的场景对应的标识,也可以快速获取其较为详细的信息。
进一步地,在上述步骤103中,所述在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识包括:在所述显示区域的预设位置处显示多个标识分类选项,并实时确认用户针对所述标识分类选项所做的动作;在确认所述动作为选择所述多个标识分类选项中的一个选项的动作时,仅显示与所选择的标识分类选项相关联的标识。
示例性地,将标识进行分类,显示标识的上一级的类别,根据用户在标识分类选项中确定的类型显示标签。图12为本发明实施例提供的第十种标识显示方式的示意图,图中的标识分为两类,“所有内容”包括所有的标识,“我创建的”,是用户根据个人需求设定的标识,用户可以先选择标识分类选项,再进一步选择标识。在实际应用中,可以对标识进行不同的分类,本发明对标识分类选项不做限制。
进一步地,所述标识包括三维模型、图像、视频、文字、表单中的至少一种。
示例性地,标识的作用是引导客户快速确定目标虚拟场景,所有标识中会充分利用各类形式展示不同内容,尤其是文字和图像,已达到直观、简洁、概括性强、关联性强的效果,能够使用户在最短时间内获取最多的信息。三维模型、视频可以给显示界面的交互增加趣味性。
进一步地,所述标记包括多媒体文件信息、表单信息、应用调用信息、嵌套通信、实时传感信息的至少一种,其中,所述多媒体文件信息包括图片、视频、3D模型、PDF文件、office文档的至少一种。
示例性地,标记具有多种功能,除了最常见的展示信息,还包括即时通讯、调取信息等功能。其中,表单信息能够在对应目标图像位置上生成表单,供用户查看或输入内容等;应用调用信息,可用于执行应用的相关指令等,如打开应用、调用应用具体的功能-如拨打电话、打开链接等;实时传感信息可用于连接传感装置并获取目标对象的传感数据。当然,本领域技术人员应能理解上述标记仅为举例,其它现有的或今后可能出现的标记如可适用于本申请,也应包含在本申请保护范围以内,并在此以引用方式包含于此。
通过本发明中的上述实施例中的一个实施例或多个实施例,至少可以实现如下技术效果:
在本发明所公开的技术方案中,用户使用增强现实设备时,首先根据位置信息确定虚拟场景,然后在显示区域上显示不同虚拟场景对应的不同标识。用户选择标识并进入虚拟场景后,在显示区域上显示用于展示真实场景的多个标记。本发明提供了多种标识显示方式,以及人机互动模式,用户可根据使用习惯选择显示方式和操作模式,已实现高效、直观、快速地确定目标虚拟场景,提高了用户体验。
基于与本发明实施例的一种虚拟场景的显示方法同样的发明构思,本发明实施例提供了一种虚拟场景的显示装置,用于增强现实设备,请参考图13,所述装置包括:
位置信息获取单元201,用于获取所述增强现实设备的当前位置信息;
虚拟场景确定单元202,用于根据所述当前位置信息确定所述增强现实设备在当前位置对应的至少一个虚拟场景,其中,所述虚拟场景与对应的真实场景的位置信息相关联;
标识显示单元203,在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识。
进一步地,所述位置信息获取单元201还用于:
获取所述增强现实设备的经纬度信息,并根据所述经纬度信息确定所述增强现实设备的所述当前位置信息。
进一步地,所述位置信息获取单元201还用于:
获取所述增强现实设备的摄像头采集的所述真实场景的实时图像,根据计算机视觉算法确定所述摄像头的实时位姿信息,将所述实时位姿信息确定为所述增强现实设备的所述当前位置信息。
进一步地,所述装置用于:
在所述获取所述增强现实设备的当前位置信息之前,通过虚拟场景设置装置的摄像设备获取所述真实场景对应的图像信息,基于所述图像信息构建所述虚拟场景,生成表征所述虚拟场景的所述标识;
其中,所述基于所述图像信息构建所述虚拟场景包括:
获取用户针对所述图像信息中目标区域所设置的标记,以及获取所述目标区域对应的标记位置信息,将所述标记和所述标记位置信息相关联。
进一步地,所述标识显示单元203还用于:
在所述显示区域的预设子区域内以队列的方式显示所述标识。
进一步地,所述标识显示单元203还用于:
确定每个预设子区域的形状,以及在每个所述预设子区域内按照队列顺序显示对应的标识并使所显示的标识的形状与其对应的预设子区域的形状保持一致,其中,中间位置的预设子区域的形状为矩形,两侧的预设子区域的形状为符合视觉透视关系的梯形。
进一步地,所述装置用于:
在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识之后,实时确认用户针对所述预设子区域所做的动作;
在确认所述动作为沿着目标方向进行划动时,在所述目标方向上滚动所述队列,以依序显示所述标识;
在确认所述动作为用户选择所述标识中的一个的动作时,进入该标识对应的虚拟场景的内容展示空间,并显示所述虚拟场景对应的所述标记。
进一步地,所述装置用于:
在所述显示区域内显示换页按钮;
在确认用户点击所述换页按钮时,获取所述至少一个虚拟场景对应的标识中在当前显示区域未显示的预设数量个标识,将所述未显示的预设数量个标识依序替换当前显示区域所显示的标识。
进一步地,所述标识显示单元203还用于:
在所述预设子区域之外的区域以第一预设显示方式显示位于预设位置的预设子区域内的目标标识,其中,所述第一预设显示方式为放大显示、缩小显示、震动显示或显示标识相关信息的至少一种;
在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识之后,所述方法还包括:
实时确认用户针对所述预设子区域以及所述目标标识所做的动作;
在确认所述动作为手指沿着目标方向进行划动时,在所述目标方向上滚动所述队列,以依序显示所述标识并在所述预设子区域之外的所述区域以所述第一预设显示方式显示当前位于所述预设位置的预设子区域内的目标标识;
在确认所述动作为用户选择所述目标标识的动作时,进入所述目标标识对应的虚拟场景的内容展示空间,并显示所述虚拟场景对应的所述标记。
进一步地,所述装置用于:
在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识之后,实时确认用户针对所述预设子区域所做的动作;
在确认所述动作为触碰所述预设子区域时,以第二预设显示方式显示所述预设子区域内的所述标识,其中,所述第二预设显示方式为放大显示、缩小显示、震动显示或显示标识相关信息的至少一种;
在确认所述动作为用户选择所述标识中的一个的动作时,进入该标识对应的虚拟场景的内容展示空间,并显示所述虚拟场景对应的所述标记。
进一步地,所述装置用于:
在以第二预设显示方式显示所述预设子区域内的所述标识之后,当确认所述动作为用户手指离开所述预设子区域并在预设时间段内保持离开状态时,恢复所述预设子区域内显示的所述标识的显示方式。
进一步地,所述装置用于:
在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识之后,实时确认用户针对所述增强现实设备所做的动作;
在确认所述动作为沿着目标方向移动所述增强现实设备的视角时,在所述目标方向上按照队列顺序滚动所述标识,以依序在所述预设子区域内显示所述标识;
在确认所述动作为用户选择所述标识中的一个的动作时,进入该标识对应的虚拟场景的内容展示空间,并显示所述虚拟场景对应的所述标记。
进一步地,所述标识显示单元203还用于:
根据所述增强现实设备的所述当前位置信息和所述虚拟场景对应的真实场景的位置信息确定所述标识在所述显示区域中的叠加显示位置,并在所述叠加显示位置显示所述标识。
进一步地,所述装置用于:
以第三预设显示方式显示位于目标预设子区域的一个标识,其中,所述第三预设显示方式为放大显示、缩小显示、震动显示或显示标识相关信息的至少一种;
在确认所述动作为沿着目标方向移动所述增强现实设备的视角时,在所述目标方向上按照队列顺序滚动所述标识,以依序在所述预设子区域内显示所述标识并以第三预设显示方式显示当前位于所述目标预设子区域的一个标识;
在确认所述动作为用户选择所述目标预设子区域对应的标识的动作时,进入该标识对应的虚拟标签的内容展示空间,并显示所述虚拟场景对应的所述标记。
进一步地,所述装置用于:
在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识之后,实时确认用户针对所述增强现实设备以及所述标识所做的动作;
在确认所述动作为移动所述增强现实设备的视角时,以第四预设显示方式显示当前视角对应的目标显示区域所对应的所述标识,其中,所述第四预设显示方式为放大显示、缩小显示、震动显示或显示标识相关信息的至少一种;
在确认所述动作为用户选择所述标识的动作时,进入所述目标显示区域上的所述标识对应的虚拟标签的内容展示空间,并显示所述虚拟场景对应的所述标记。
进一步地,所述标识显示单元203还用于:
在所述显示区域的预设位置处显示多个标识分类选项,并实时确认用户针对所述标识分类选项所做的动作;
在确认所述动作为选择所述多个标识分类选项中的一个选项的动作时,仅显示与所选择的标识分类选项相关联的标识。
进一步地,所述标识包括三维模型、图像、视频、文字、表单中的至少一种。
进一步地,所述标记包括多媒体文件信息、表单信息、应用调用信息、嵌套通信、实时传感信息的至少一种,其中,所述多媒体文件信息包括图片、视频、3D模型、PDF文件、office文档的至少一种。
其中,所述的虚拟场景的显示装置其它方面以及实现细节与前面所描述的虚拟场景的显示方法相同或相似,在此不再赘述。
根据本发明的另一方面,本发明还提供一种存储介质,所述存储介质中存储有多条指令,所述指令适于由处理器加载以执行如上所述的任一虚拟场景的显示方法。
综上所述,虽然本发明已以优选实施例揭露如上,但上述优选实施例并非用以限制本发明,本领域的普通技术人员,在不脱离本发明的精神和范围内,均可作各种更动与润饰,因此本发明的保护范围以权利要求界定的范围为准。
Claims (20)
1.一种虚拟场景的显示方法,用于增强现实设备,其特征在于,所述方法包括:
获取所述增强现实设备的当前位置信息;
根据所述当前位置信息确定所述增强现实设备在所述当前位置信息对应的至少一个虚拟场景,其中,所述虚拟场景与对应的真实场景的位置信息相关联;
在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识。
2.如权利要求1所述的方法,其特征在于,所述获取所述增强现实设备的当前位置信息包括:
获取所述增强现实设备的经纬度信息,并根据所述经纬度信息确定所述增强现实设备的所述当前位置信息。
3.如权利要求1所述的方法,其特征在于,所述获取所述增强现实设备的当前位置信息还包括:
获取所述增强现实设备的摄像头采集的所述真实场景的实时图像,根据计算机视觉算法确定所述摄像头的实时位姿信息,将所述实时位姿信息确定为所述增强现实设备的所述当前位置信息。
4.如权利要求2或3所述的方法,其特征在于,所述方法还包括:
在所述获取所述增强现实设备的当前位置信息之前,通过虚拟场景设置装置的摄像设备获取所述真实场景对应的图像信息,基于所述图像信息构建所述虚拟场景,生成表征所述虚拟场景的所述标识;
其中,所述基于所述图像信息构建所述虚拟场景包括:
获取用户针对所述图像信息中目标区域所设置的标记,以及获取所述目标区域对应的标记位置信息,将所述标记和所述标记位置信息相关联。
5.如权利要求4所述的方法,其特征在于,所述在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识包括:
在所述显示区域的预设子区域内以队列的方式显示所述标识。
6.如权利要求5所述的方法,其特征在于,所述在所述显示区域的预设子区域内以队列的方式显示所述标识包括:
确定每个预设子区域的形状,以及在每个所述预设子区域内按照队列顺序显示对应的标识并使所显示的标识的形状与其对应的预设子区域的形状保持一致,其中,中间位置的预设子区域的形状为矩形,两侧的预设子区域的形状为符合视觉透视关系的梯形。
7.如权利要求5或6所述的方法,其特征在于,所述方法还包括:
在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识之后,实时确认用户针对所述预设子区域所做的动作;
在确认所述动作为沿着目标方向进行划动时,在所述目标方向上滚动所述队列,以依序显示所述标识;
在确认所述动作为用户选择所述标识中的一个的动作时,进入该标识对应的虚拟场景的内容展示空间,并显示所述虚拟场景对应的所述标记。
8.如权利要求5或6所述的方法,其特征在于,所述方法还包括:
在所述显示区域内显示换页按钮;
在确认用户点击所述换页按钮时,获取所述至少一个虚拟场景对应的标识中在当前显示区域未显示的预设数量个标识,将所述未显示的预设数量个标识依序替换当前显示区域所显示的标识。
9.如权利要求5或6所述的方法,其特征在于,在所述显示区域的预设子区域内以队列的方式显示所述标识包括:
在所述预设子区域之外的区域以第一预设显示方式显示位于预设位置的预设子区域内的目标标识,其中,所述第一预设显示方式为放大显示、缩小显示、震动显示或显示标识相关信息的至少一种;
在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识之后,所述方法还包括:
实时确认用户针对所述预设子区域以及所述目标标识所做的动作;
在确认所述动作为手指沿着目标方向进行划动时,在所述目标方向上滚动所述队列,以依序显示所述标识并在所述预设子区域之外的所述区域以所述第一预设显示方式显示当前位于所述预设位置的预设子区域内的目标标识;
在确认所述动作为用户选择所述目标标识的动作时,进入所述目标标识对应的虚拟场景的内容展示空间,并显示所述虚拟场景对应的所述标记。
10.如权利要求5或6所述的方法,其特征在于,所述方法还包括:
在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识之后,实时确认用户针对所述预设子区域所做的动作;
在确认所述动作为触碰所述预设子区域时,以第二预设显示方式显示所述预设子区域内的所述标识,其中,所述第二预设显示方式为放大显示、缩小显示、震动显示或显示标识相关信息的至少一种;
在确认所述动作为用户选择所述标识中的一个的动作时,进入该标识对应的虚拟场景的内容展示空间,并显示所述虚拟场景对应的所述标记。
11.如权利要求10所述的方法,其特征在于,所述方法还包括:
在以第二预设显示方式显示所述预设子区域内的所述标识之后,当确认所述动作为用户手指离开所述预设子区域并在预设时间段内保持离开状态时,恢复所述预设子区域内显示的所述标识的显示方式。
12.如权利要求5或6所述的方法,其特征在于,所述方法还包括:
在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识之后,实时确认用户针对所述增强现实设备所做的动作;
在确认所述动作为沿着目标方向移动所述增强现实设备的视角时,在所述目标方向上按照队列顺序滚动所述标识,以依序在所述预设子区域内显示所述标识;
在确认所述动作为用户选择所述标识中的一个的动作时,进入该标识对应的虚拟场景的内容展示空间,并显示所述虚拟场景对应的所述标记。
13.如权利要求12所述的方法,其特征在于,所述方法还包括:
以第三预设显示方式显示位于目标预设子区域的一个标识,其中,所述第三预设显示方式为放大显示、缩小显示、震动显示或显示标识相关信息的至少一种;
在确认所述动作为沿着目标方向移动所述增强现实设备的视角时,在所述目标方向上按照队列顺序滚动所述标识,以依序在所述预设子区域内显示所述标识并以第三预设显示方式显示当前位于所述目标预设子区域的一个标识;
在确认所述动作为用户选择所述目标预设子区域对应的标识的动作时,进入该标识对应的虚拟标签的内容展示空间,并显示所述虚拟场景对应的所述标记。
14.如权利要求4所述的方法,其特征在于,所述在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识包括:
根据所述增强现实设备的所述当前位置信息和所述虚拟场景对应的真实场景的位置信息确定所述标识在所述显示区域中的叠加显示位置,并在所述叠加显示位置显示所述标识。
15.如权利要求14所述的方法,其特征在于,所述方法还包括:
在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识之后,实时确认用户针对所述增强现实设备以及所述标识所做的动作;
在确认所述动作为移动所述增强现实设备的视角时,以第四预设显示方式显示当前视角对应的目标显示区域所对应的所述标识,其中,所述第四预设显示方式为放大显示、缩小显示、震动显示或显示标识相关信息的至少一种;
在确认所述动作为用户选择所述标识的动作时,进入所述目标显示区域上的所述标识对应的虚拟标签的内容展示空间,并显示所述虚拟场景对应的所述标记。
16.如权利要求1所述的方法,其特征在于,所述在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识包括:
在所述显示区域的预设位置处显示多个标识分类选项,并实时确认用户针对所述标识分类选项所做的动作;
在确认所述动作为选择所述多个标识分类选项中的一个选项的动作时,仅显示与所选择的标识分类选项相关联的标识。
17.如权利要求1所述的方法,其特征在于,所述标识包括三维模型、图像、视频、文字、表单中的至少一种。
18.如权利要求4所述的方法,其特征在于,所述标记包括多媒体文件信息、表单信息、应用调用信息、嵌套通信、实时传感信息的至少一种,其中,所述多媒体文件信息包括图片、视频、3D模型、PDF文件、office文档的至少一种。
19.一种虚拟场景的显示装置,用于增强现实设备,其特征在于,所述装置包括:
位置信息获取单元,用于获取所述增强现实设备的当前位置信息;
虚拟场景确定单元,用于根据所述当前位置信息确定所述增强现实设备在当前位置对应的至少一个虚拟场景,其中,所述虚拟场景与对应的真实场景的位置信息相关联;
标识显示单元,在所述增强现实设备对应的显示区域内显示所述至少一个虚拟场景对应的标识。
20.一种存储介质,其特征在于,所述存储介质中存储有多条指令,所述指令适于由处理器加载以执行如权利要求1至18中任一项所述的虚拟场景的显示方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210883054.1A CN115115812A (zh) | 2022-07-26 | 2022-07-26 | 虚拟场景的显示方法、装置及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210883054.1A CN115115812A (zh) | 2022-07-26 | 2022-07-26 | 虚拟场景的显示方法、装置及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115115812A true CN115115812A (zh) | 2022-09-27 |
Family
ID=83333700
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210883054.1A Pending CN115115812A (zh) | 2022-07-26 | 2022-07-26 | 虚拟场景的显示方法、装置及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115115812A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116863087A (zh) * | 2023-06-01 | 2023-10-10 | 中国航空油料集团有限公司 | 基于数字孪生的航油信息显示方法、装置和可读存储介质 |
-
2022
- 2022-07-26 CN CN202210883054.1A patent/CN115115812A/zh active Pending
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116863087A (zh) * | 2023-06-01 | 2023-10-10 | 中国航空油料集团有限公司 | 基于数字孪生的航油信息显示方法、装置和可读存储介质 |
CN116863087B (zh) * | 2023-06-01 | 2024-02-02 | 中国航空油料集团有限公司 | 基于数字孪生的航油信息显示方法、装置和可读存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
AU2020202551B2 (en) | Method for representing points of interest in a view of a real environment on a mobile device and mobile device therefor | |
KR102417645B1 (ko) | Ar 장면 이미지 처리 방법, 장치, 전자 기기 및 저장 매체 | |
WO2021073268A1 (zh) | 一种增强现实数据呈现方法、装置、电子设备及存储介质 | |
Arth et al. | The history of mobile augmented reality | |
US9651782B2 (en) | Wearable tracking device | |
CN104731337B (zh) | 用于在真实环境中表示虚拟信息的方法 | |
JP5724543B2 (ja) | 端末装置、オブジェクト制御方法及びプログラム | |
Li et al. | Cognitive issues in mobile augmented reality: an embodied perspective | |
EP2814000A1 (en) | Image processing apparatus, image processing method, and program | |
WO2005069170A1 (ja) | 画像ファイル一覧表示装置 | |
CN103793060A (zh) | 一种用户交互系统和方法 | |
CN104160369A (zh) | 用于使用可移动引导标记来提供交互导航辅助的方法、装置和计算机可读存储介质 | |
Tatzgern et al. | Exploring real world points of interest: Design and evaluation of object-centric exploration techniques for augmented reality | |
EP3172721B1 (en) | Method and system for augmenting television watching experience | |
US9672588B1 (en) | Approaches for customizing map views | |
CN115115812A (zh) | 虚拟场景的显示方法、装置及存储介质 | |
Schmalstieg et al. | Augmented reality as a medium for cartography | |
JP2011060254A (ja) | 拡張現実システム、拡張現実装置および仮想オブジェクト表示方法 | |
Abbas et al. | Augmented reality-based real-time accurate artifact management system for museums | |
CN112947756A (zh) | 内容导览方法、装置、系统、计算机设备及存储介质 | |
KR101983233B1 (ko) | 깊이맵을 활용한 증강현실 영상표시 시스템 및 그 방법 | |
Chu et al. | Mobile navigation services with augmented reality | |
KR20170022860A (ko) | 실제 사물의 사용성을 증강하는 가상 콘텐츠 제공 장치 및 방법 | |
Asiminidis | Augmented and Virtual Reality: Extensive Review | |
Mang | Towards improving instruction presentation for indoor navigation |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information |
Address after: 201210 7th Floor, No. 1, Lane 5005, Shenjiang Road, China (Shanghai) Pilot Free Trade Zone, Pudong New Area, Shanghai Applicant after: HISCENE INFORMATION TECHNOLOGY Co.,Ltd. Address before: Room 501 / 503-505, 570 shengxia Road, China (Shanghai) pilot Free Trade Zone, Pudong New Area, Shanghai, 201203 Applicant before: HISCENE INFORMATION TECHNOLOGY Co.,Ltd. |
|
CB02 | Change of applicant information |