CN117008713A - 一种增强现实显示方法、装置及计算机可读存储介质 - Google Patents
一种增强现实显示方法、装置及计算机可读存储介质 Download PDFInfo
- Publication number
- CN117008713A CN117008713A CN202211200826.3A CN202211200826A CN117008713A CN 117008713 A CN117008713 A CN 117008713A CN 202211200826 A CN202211200826 A CN 202211200826A CN 117008713 A CN117008713 A CN 117008713A
- Authority
- CN
- China
- Prior art keywords
- augmented reality
- virtual object
- reality display
- virtual
- range
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000003190 augmentative effect Effects 0.000 title claims abstract description 324
- 238000000034 method Methods 0.000 title claims abstract description 66
- 230000002452 interceptive effect Effects 0.000 claims abstract description 59
- 230000000007 visual effect Effects 0.000 claims abstract description 54
- 230000033001 locomotion Effects 0.000 claims abstract description 38
- 230000003993 interaction Effects 0.000 claims abstract description 29
- 238000006073 displacement reaction Methods 0.000 claims description 31
- 230000004044 response Effects 0.000 claims description 15
- 238000004590 computer program Methods 0.000 claims description 10
- 230000006870 function Effects 0.000 description 12
- 238000005516 engineering process Methods 0.000 description 10
- 238000004891 communication Methods 0.000 description 9
- 230000008569 process Effects 0.000 description 6
- 238000001514 detection method Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 238000012545 processing Methods 0.000 description 5
- 239000000725 suspension Substances 0.000 description 4
- 241001465754 Metazoa Species 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000005484 gravity Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 210000000697 sensory organ Anatomy 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请实施例公开了一种增强现实显示方法、装置及计算机可读存储介质。本申请实施例通过显示提示界面,并在提示界面上显示虚拟对象、虚拟对象的虚拟视角和增强现实范围;在所述提示界面上显示交互提示信息;响应于采集的传感器信息,对提示界面中的虚拟对象的移动和虚拟视角的朝向进行交互控制;当检测到虚拟对象的交互状态匹配增强现实范围时,开启增强现实显示。以此,以可视化形式在提示界面中显示虚拟对象、虚拟视角和增强现实范围,使得用户基于提示界面进行移动和转向,并同步交互控制虚拟对象的移动和朝向,实现可视化引导,在虚拟对象的交互状态匹配增强现实范围时,快速开启增强现实显示,极大的提升了增强现实显示的效率。
Description
技术领域
本申请涉及人机交互领域,具体涉及一种增强现实显示方法、装置及计算机可读存储介质。
背景技术
增强现实(Augmented Reality,AR)技术是一种将虚拟信息与真实世界巧妙融合的技术,广泛运用了多媒体、三维建模、实时跟踪及注册、智能交互、传感等多种技术手段,将计算机生成的文字、图像、三维模型、音乐、视频等虚拟信息模拟仿真后,应用到真实世界中,两种信息互为补充,从而实现对真实世界的“增强”。
在相关技术中,用户可以在AR应用中构建的AR范围内进行AR体验,具有较好的趣味性和真实性,但是,在对相关技术的研究和实践过程中,本申请的发明人发现,相关技术中,当用户离开AR范围时,会导致无法进行AR体验,只有简单的文字提示让用户回到AR范围,信息提示的效率非常低,用户体验非常差。
发明内容
本申请实施例提供一种增强现实显示方法、装置及计算机可读存储介质,可以基于可视化的提示方式,提升增强现实显示的效率,提升用户体验。
为解决上述技术问题,本申请实施例提供以下技术方案:
一种增强现实显示方法,包括:
显示提示界面,并在所述提示界面上显示虚拟对象、所述虚拟对象的虚拟视角和增强现实范围;
在所述提示界面上显示交互提示信息;
响应于采集的传感器信息,对所述提示界面中的所述虚拟对象的移动和所述虚拟视角的朝向进行交互控制;
当检测到所述虚拟对象的交互状态匹配所述增强现实范围时,开启增强现实显示。
一种增强现实显示装置,包括:
第一显示单元,用于显示提示界面,并在所述提示界面上显示虚拟对象、所述虚拟对象的虚拟视角和增强现实范围;
第二显示单元,用于在所述提示界面上显示交互提示信息;
控制单元,用于响应于采集的传感器信息,对所述提示界面中的所述虚拟对象的移动和所述虚拟视角的朝向进行交互控制;
开启单元,用于当检测到所述虚拟对象的交互状态匹配所述增强现实范围时,开启增强现实显示。
在一些实施例中,所述传感器信息至少包括位移数据和转向数据,所述控制单元,用于:
响应于所述传感器信息中的位移数据,对所述虚拟对象的移动进行交互控制;
响应于所述传感器信息中的转向数据,对所述虚拟视角的朝向进行交互控制。
在一些实施例中,所述装置,还包括标识显示单元,用于:
在所述提示界面上显示第一标识;
其中,所述第一标识用于提示所述虚拟对象在远离所述增强现实范围。
在一些实施例中,所述装置,还包括确定单元,用于:
通过陀螺仪采集位移数据;
获取摄像头的第一朝向信息,根据所述第一朝向信息生成转向数据,所述第一朝向信息用于表示终端的朝向;
根据所述位移数据和转向数据确定传感器信息。
在一些实施例中,所述显示单元,还用于:
获取第一定位信息、第二朝向信息和增强现实显示的位置范围;、其中,所述第一定位信息用于表示终端的位置,所述第二朝向信息用于表示终端的朝向;
根据所述位置范围在所述提示界面上生成对应的增强现实范围;
基于所述第一定位信息确定虚拟对象在所述提示界面上的虚拟位置;
在所述虚拟位置上显示所述虚拟对象,并基于所述第二朝向信息生成所述虚拟对象的虚拟视角。
在一些实施例中,所述装置,还包括反馈提示单元,用于:
生成震动指令,并基于所述震动指令生成震动反馈;
第二显示单元,用于以下至少一种步骤:
在所述提示界面上显示文本框,并在所述文本框中显示交互提示信息;
通过语音播放交互提示信息,并在所述提示界面上显示交互提示信息相应的图像。
在一些实施例中,所述装置,还包括,第一暂停单元,用于:
获取当前的第二定位信息和增强现实显示的位置范围,所述第二定位信息用于表示终端的位置;
当检测到所述第二定位信息指示的定位不在所述位置范围时,暂停增强现实显示,并执行显示提示界面;
所述开启单元,用于;
当检测到所述虚拟对象的虚拟位置位移至所述增强现实范围内时,启动增强现实显示。
在一些实施例中,所述装置,还包括第一提示单元,用于:
根据所述虚拟对象的虚拟位置、虚拟视角的朝向以及所述增强现实范围的关系,生成相应的导航轨迹和导航提示;
在所述虚拟对象上显示所述导航轨迹,并通过语音播报所述导航提示。
在一些实施例中,所述装置,还包括震动生成单元,用于:
生成震动数据,并通过所述震动数据生成对应强度的震动反馈;
其中,所述震动数据的大小与所述第二定位信息指示的定位和所述位置范围之间的距离的大小成正比。
在一些实施例中,所述装置,还包括,第二暂停单元,用于:
获取当前的第三朝向信息和增强现实显示的位置范围,所述第三朝向信息用于表示终端的朝向;
当检测到所述第三朝向信息指示的朝向不指向所述位置范围时,暂停增强现实显示,并执行显示提示界面;
所述开启单元,还用于;
当检测到所述虚拟对象的虚拟视角朝向所述增强现实范围时,启动增强现实显示。
在一些实施例中,所述装置,还包括第二提示单元,用于:
根据虚拟视角的朝向和所述增强现实范围的关系,生成相应的转向箭头和转向提示;
在所述虚拟对象上显示所述转向箭头,并通过语音播报所述转向提示。
一种计算机可读存储介质,所述计算机可读存储介质存储有多条指令,所述指令适于处理器进行加载,以执行上述增强现实显示方法中的步骤。
一种计算机设备,包括存储器、处理器以及存储在所述存储器中并可以在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述提供的增强现实显示方法中的步骤。
一种计算机程序产品或计算机程序,所述计算机程序产品或计算机程序包括计算机指令,所述计算机指令存储在存储介质中,计算机设备的处理器从存储介质读取所述计算机指令,处理器执行所述计算机指令,使得所述计算机设备执行上述提供的增强现实显示方法中的步骤。
本申请实施例通过显示提示界面,并在提示界面上显示虚拟对象、虚拟对象的虚拟视角和增强现实范围;在所述提示界面上显示交互提示信息;响应于采集的传感器信息,对提示界面中的虚拟对象的移动和虚拟视角的朝向进行交互控制;当检测到虚拟对象的交互状态匹配增强现实范围时,开启增强现实显示。以此,以可视化形式在提示界面中显示虚拟对象、虚拟视角和增强现实范围,使得用户基于提示界面进行移动和转向,并同步交互控制虚拟对象的移动和朝向,实现可视化引导,在虚拟对象的交互状态匹配增强现实范围时,快速开启增强现实显示,相对于只有简单的文字提示让用户回到AR范围的方案而言,用户可以直观知道如何开启增强现实显示,并基于可视化引导高效进行操作,极大的提升了增强现实显示的效率。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的增强现实显示系统的场景示意图;
图2是本申请实施例提供的增强现实显示方法的流程示意图;
图3a是本申请实施例提供的增强现实显示方法的场景示意图;
图3b是本申请实施例提供的增强现实显示方法的另一场景示意图;
图4是本申请实施例提供的增强现实显示方法的另一流程示意图;
图5a是本申请实施例提供的增强现实显示方法的另一场景示意图;
图5b是本申请实施例提供的增强现实显示方法的另一场景示意图;
图5c是本申请实施例提供的增强现实显示方法的另一场景示意图;
图5d是本申请实施例提供的增强现实显示方法的另一场景示意图;
图5e是本申请实施例提供的增强现实显示方法的另一场景示意图;
图5f是本申请实施例提供的增强现实显示系统的时序图;
图6是本申请实施例提供的增强现实显示装置的结构示意图;
图7是本申请实施例提供的终端的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请实施例提供一种增强现实显示方法、装置及计算机可读存储介质。
请参阅图1,图1为本申请实施例所提供的增强现实显示系统的场景示意图,包括:终端11、AR设备12和服务器,终端11和服务器20之间以及AR设备12和服务器之间可以通过通信网络连接,该通信网络,包括无线网络以及有线网络,其中无线网络包括无线广域网、无线局域网、无线城域网、以及无线个人网中的一种或多种的组合。网络中包括路由器、网关等等网络实体,图中并未示意出。终端11可以通过通信网络与服务器进行信息交互,例如,服务器将增强现实数据分发到终端11以及AR设备12上,实现终端11以及AR设备12根据该增强现实数据实现增强现实显示。
该增强现实显示系统可以包括增强现实显示装置,该增强现实显示装置具体可以集成在平板电脑、手机、笔记本电脑、台式电脑等具备储存单元并安装有微处理器而具有运算能力的终端中,或者可以集成在AR眼镜、AR头戴设备等具备储存单元并安装有微处理器而具有运算能力的AR设备中,在图1中,该终端即为图1中的终端11,该AR设备即为图1中的AR设备12,该终端11和AR设备12 中可以安装有各种用户所需的客户端,比如具有增强现实功能的客户端等。该终端11和AR设备12可以用于显示提示界面,并在该提示界面上显示虚拟对象、该虚拟对象的虚拟视角和增强现实范围;在该提示界面上显示交互提示信息;响应于采集的传感器信息,对该提示界面中的该虚拟对象的移动和该虚拟视角的朝向进行交互控制;当检测到该虚拟对象的交互状态匹配该增强现实范围时,开启增强现实显示。
该服务器可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN、以及大数据和人工智能平台等基础云计算服务的云服务器,用于存储和更新增强现实数据。
需要说明的是,图1所示的增强现实显示系统的场景示意图仅仅是一个示例,本申请实施例描述的增强现实显示系统以及场景是为了更加清楚的说明本申请实施例的技术方案,并不构成对于本申请实施例提供的技术方案的限定,本领域普通技术人员可知,随着增强现实显示系统的演变和新业务场景的出现,本申请实施例提供的技术方案对于类似的技术问题,同样适用。
以下分别进行详细说明。
本申请实施例提供了一种增强现实显示方法,该方法可以由终端上的客户端执行。
需要说明的是,在说明书、权利要求书和附图所描述的一些流程中,包含了按照特定顺序出现的多个步骤,但应该清楚了解,这些步骤可以不按照其在本文中出现的顺序来执行或并行执行,步骤序号仅仅是用于区分开各个不同的步骤,序号本身不代表任何的执行顺序。此外,本文中的“第一”和“第二”等描述,是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。
请参阅图2,图2是本申请实施例提供的增强现实显示方法的流程示意图。该增强现实显示方法包括:
在步骤101中,显示提示界面,并在提示界面上显示虚拟对象、虚拟对象的虚拟视角和增强现实范围。
其中,本申请实施例应用于增强现实技术,该增强现实技术也被称为扩增现实,增强现实技术是促使真实世界信息和虚拟世界信息内容之间综合在一起的较新的技术内容。其将原本在现实世界的空间范围中比较难以进行体验的实体信息在电脑等科学技术的基础上,实施模拟仿真处理,叠加将虚拟信息内容在真实世界中加以有效应用,并且在这一过程中能够被人类感官所感知,从而实现超越现实的感官体验。真实环境和虚拟物体之间重叠之后,能够在同一个画面以及空间中同时存在。增强现实显示的场景一般分为对象场景和范围场景。以对象场景为例,对于儿童动物识别教学,可以将虚拟的动物层叠显示在真实环境中,实现增强现实体现,使得儿童能够更直观的识别出相应的动物和动物的特点,相对于传统的学习方法,可以极大的提升学习的效率。以范围场景为例,对于游戏场景,可以将游戏道具以及虚拟非玩家角色(non-player character, NPC)叠在在真实环境中,使得玩家可享受增强现实的沉浸式体验,相对于传统的游戏方法,可以极大的提升游戏的乐趣。
即也可以理解为将虚拟信息放在现实中展现,并让人和虚拟信息进行互动,因此,该虚拟信息显示的范围(即增强现实显示的位置范围)是规定且有限的,在相关技术中,如果当用户的观看视角的朝向不指向该位置范围或者用户的定位不在该位置范围内时,会暂停增强现实显示,仅通过一句简单的文字提示,例如“当前已离开游戏范围,请回到游戏内继续游戏”,即仅告知用户当前离开AR的位置范围,然后没有任何引导来指引玩家怎么回到位置范围继续进行增强现实显示。
本申请实施例为了解决上述问题,当检测到增强现实显示暂停时,或者用户刚开始启动增强现实显示,用户的观看视角的朝向不指向该位置范围或者用户的定位不在该位置范围内时,会对应的显示可视化的提示界面,并在该提示界面上显示增强现实显示的位置范围在该提示界面上对应的增强现实范围,需要说明的是,该提示界面的空间可以与现实世界的空间以一定比例转换,例如1 比10的比例(提示空间为1,现实空间为10),以此,可以根据用户当前的定位和位置范围之间的关系,在该提示界面的相应位置显示用户对应的虚拟对象,该虚拟对象可以为虚拟人物,即代表用户在该提示界面中的虚拟形象。
进一步的,还可以获取用户当前观看的朝向信息,该朝向信息至少包括观看角度,进而基于该朝向信息生成该虚拟对象的虚拟视角,该虚拟视角代表在该提示界面中,虚拟对象可以看到的视角范围,可以为三角形表示。
为了更好的说明本申请实施例,请一并参阅图3a、图3b进行参考。
如图3a所示,终端可以显示提示界面20,在该提示界面20上显示增强现实范围21,虚拟对象22以及虚拟对象的虚拟视角23。
在一些实施方式中,在在该提示界面上显示虚拟对象、该虚拟对象的虚拟视角和增强现实范围,包括:
(1)获取第一定位信息、第二朝向信息和增强现实显示的位置范围;
(2)根据该位置范围在该提示界面上生成对应的增强现实范围;
(3)基于该第一定位信息确定虚拟对象在该提示界面上的虚拟位置;
(4)在该虚拟位置上显示该虚拟对象,并基于该第二朝向信息生成该虚拟对象的虚拟视角。
其中,可以通过终端上的陀螺仪获取当前的第一定位信息,该定位信息可以为全球定位系统(Global Positioning System,GPS)信息,通过摄像头的朝向或者陀螺仪的朝向来确定出第二朝向信息,即该第一定位信息用于表示终端当前的位置,该第二朝向信息用于表示终端当前的朝向,最后,根据后台指示的增强现实显示的定位集合,来确定增强现实显示的位置范围。
进一步的,可以按照提示界面和真实环境之间面积的预设比例,例如1比10 的比例,将该位置范围在该提示界面上生成对应的增强现实范围,并根据第一定位信息按照预设比例,找到虚拟对象在提示界面上的虚拟位置。
在提示界面的虚拟位置上显示该虚拟对象,并且根据第二朝向信息的朝向还原该虚拟对象在提示界面上的虚拟视角,以此,按照预设比例,将用户、用户的视角和增强现实的位置范围,还原在该提示界面上形成对应的虚拟对象、虚拟对象的虚拟视角和增强现实范围,以可视化的形式提示用户。
在步骤102中,在提示界面上显示交互提示信息。
其中,可以在该提示界面上显示交互提示信息,该交互提示信息用于提示用户的位置或者视角不在增强现实显示的位置范围,指示用户可以重新移动或者转向至该增强现实显示的位置范围中,例如,该交互提示信息可以为“请将视角移动回游戏区域以开始游戏”或者“请移动回游戏区域以开始游戏”,此处举例不作为具体限定。
在一些实施方式中,该显示提示界面之后,还包括:
(1.1)生成震动指令,并基于该震动指令生成震动反馈。
其中,由于增强现实显示暂停,为了提醒用户当前为暂停状态,还可以通过生成震动指令,并执行该震动指令生成震动反馈来提示用户,即通过终端进行震动行为来提示用户当前增强现实显示已经暂停,该震动反馈的时间可以为预设时间,该预设时间可以为5秒,只有当震动反馈的时间达到5秒或者重新开启增强现实显示之后,该震动反馈才会终止。
在一些实施方式中,该在该提示界面上显示交互提示信息,包括以下至少一种步骤:
(2.1)在该提示界面上显示文本框,并在该文本框中显示交互提示信息。
(2.2)通过语音播放交互提示信息,并在该提示界面上显示交互提示信息相应的图像。
其中,可以在该提示界面上显示文本框,并在该文本框中显示交互提示信息来提示用户如何重新开启增强现实显示。对于不同的增强现实显示场景,对应的交互提示信息不同,请继续参阅图3a,对于对象场景,增强现实显示条件为用户视角在增强现实显示的位置范围,因此交互提示信息可以为“请将视角移动回游戏区域以开始游戏”,而对于范围场景,增强现实显示条件可以为用户定位在增强现实显示的位置范围内,因此,交互提示信息可以为“请移动回游戏区域以开始游戏”。
还可以通过语音播放交互提示信息,例如以通过系统预置语音播报交互提示信息“请将视角移动回游戏区域以开始游戏”,用户听到语音播报后,能直观的清楚如何重新开启AR。为了达到更好的提示效果,还可以同步在提示界面上显示交互提示信息对应生成的图像,该图像即为图片,可以为图片控件,点击该图片控件可以快速重复语音播报一次交互提示信息,该点击可以为单击、双击、或者长按操作。
在步骤103中,响应于采集的传感器信息,对提示界面中的虚拟对象的移动和虚拟视角的朝向进行交互控制。
本申请实施例中陈述的响应于,用于表示所执行的操作所依赖的条件或者状态,当满足所依赖的条件或状态时,所执行的一个或多个操作可以是实时的,也可以具有设定的延迟;在没有特别说明的情况下,所执行的多个操作不存在执行先后顺序的限制。
其中,对应于不同的增强现实显示场景,对应的增强现实显示条件不同,对于对象场景,增强现实显示条件可以为用户视角在增强现实显示的位置范围,即可以实现AR对象的观测,而对于范围场景,增强现实显示条件可以为用户定位在增强现实显示的位置范围内。
以此,可以打通现实用户和提示界面中虚拟对象的之间的交互关系,即可以通过现实中采集到传感器信息,来对提示界面中的虚拟对象的移动和虚拟视角的朝向进行交互控制,即现实中用户可以通过移动改变陀螺仪的定位和终端转向改变朝向信息,控制提示界面中的虚拟对象按照对应的预设比例进行相应移动控制和虚拟视角的转动控制。
可以理解的是,在本申请的具体实施方式中,涉及到用户信息和传感器信息等相关的数据,当本申请以上实施例运用到具体产品或技术中时,需要获得用户许可或者同意,且相关数据的收集、使用和处理需要遵守相关国家和地区的相关法律法规和标准。
在一些实施方式中,该传感器信息至少包括位移数据和转向数据,该响应于采集的传感器信息,对该提示界面中的该虚拟对象的移动和该虚拟视角的朝向进行交互控制,包括:
(1)响应于该传感器信息中的位移数据,对该虚拟对象的移动进行交互控制;
(2)响应于该传感器信息中的转向数据,对该虚拟视角的朝向进行交互控制。
其中,该传感器信息至少可以包括位移数据和转向数据,该位移数据指示用户相对于上一定位点移动的方向和距离,该转向数据指示用户的朝向相对于上一朝向转动的角度。
基于此,响应于该传感器信息中的位移数据,按照预设比例控制提示界面中的虚拟对象进行移动,响应于该传感器信息中的转向数据,对该虚拟对象的虚拟视角的朝向进行转动,以此,实现互通,用户可以通过提示界面的参考精准的进行真实世界的位置和转向的调整。
在一些实施方式中,对该虚拟对象的移动进行交互控制之后,还包括:
(1.1)在该提示界面上显示第一标识。
其中,为了保证后续增强现实显示的效果,该虚拟对象的虚拟位置需要与增强现实范围之间的距离越小越好(即用户和增强现实显示的位置范围越近越好),该计算距离的方式可以为计算增强现实范围的边缘与虚拟对象的位置之间的距离,该边缘可以指与虚拟对象之间形成直线距离最小的边缘点。
在另一种实施方式中,计算虚拟对象的虚拟位置与增强现实范围之间的距离,可以为计算虚拟对象的虚拟位置与增强现实范围的几何中心点的距离,假设该增强现实范围为圆形,该几何中心点即为圆心。
以此,通过位移数据对虚拟对象的移动进行交互控制之后,需要检测该虚拟对象的虚拟位置与增强现实范围的边缘之间的距离是否增加。
进一步的,当检测到该虚拟对象的虚拟位置和增强现实范围的边缘之间的距离增加时,说明该虚拟对象的虚拟位置距离增强现实范围越来越远,为了提醒用户,可以在该提示界面面上显示“!”号的第一标识,并可以显示相应文字,例如“注意与增强现实范围越来越远,请及时调整”,即该第一标识用于提示该虚拟对象在远离该增强现实范围。
而当检测到虚拟对象的虚拟位置和增强现实范围的边缘之间的距离未增加时,说明该虚拟对象的虚拟位置与增强现实范围并未远离,可以不显示该第一标识。
在一些实施方式中,还包括:
(2.1)通过陀螺仪采集位移数据;
(2.2)获取摄像头的第一朝向信息,根据该第一朝向信息生成转向数据;
(2.3)根据该位移数据和转向数据确定传感器信息。
其中,可以通过终端上的陀螺仪采集位移数据,该位移数据用户相对于上一定位点移动的方向和距离,可以为上一定位点与当前定位点之间的距离差计算得到。
进一步的,该第一朝向信息即代表用户当前观测的方向对应的朝向,即第一朝向信息用于表示终端当前的朝向,单位可以以角度计算,在一些实施方式中,该第一朝向信息也可以通过陀螺仪采集,由于本申请实施例应用于增强现实场景,而增强现实场景为通过终端的摄像头拍摄的真实环境的图像叠加虚拟信息实现,即摄像头的朝向才是实现增强现实显示的关键,因此,可以获取摄像头的第一朝向信息作为用户当前的朝向信息,并且根据该第一朝向信息生成转向数据,该转向数据指示用户的朝向相对于上一朝向转动的角度,可以为上一朝向与当前的朝向之间的角度差计算得到。最后,将该位移数据和转向数据作为传感器信息,以实现通过传感器信息控制虚拟对象的移动和转向。
在步骤104中,当检测到虚拟对象的交互状态匹配增强现实范围时,开启增强现实显示。
其中,该虚拟对象的交互状态可以包括虚拟位置状态和虚拟视角朝向状态,不同的增强现实显示场景,对应的增强现实显示条件不同,对于对象场景,增强现实显示条件可以为用户视角的朝向在增强现实显示的位置范围,对应转换在提示界面中,即为虚拟对象的虚拟视角朝向增强现实范围,可实现对象的观测。而对于范围场景,增强现实显示条件可以为用户定位在增强现实显示的位置范围内,对应转换在提示界面中,即为虚拟对象的虚拟位置在增强现实范围内。
以此,可以根据不同的增强现实显示场景,检测虚拟对象的交互状态是否匹配增强现实范围,对于对象场景,当检测到该虚拟对象的虚拟视角朝向该增强现实范围时,即为虚拟对象的交互状态匹配增强现实范围,可以开启增强现实显示。而对于范围场景,当检测到该虚拟对象的虚拟位置位移至该增强现实范围内时,即为虚拟对象的交互状态匹配增强现实范围,可以开启增强现实显示,实现用户可以通过提示界面对现实开启增强现实显示进行可视化指导,相对于简单的文字提示而言,本申请实施例可以高效的开启增强现实显示,引导用户流畅的重新进入增强现实显示。
在一些实施方式中,该方法,还包括:
(1)获取当前的第三朝向信息和增强现实显示的位置范围;
(2)当检测到该第三朝向信息指示的朝向不指向该位置范围时,暂停增强现实显示,并执行显示提示界面。
其中,以对象场景为例,请一并参阅图3a所示,可以获取终端的摄像头当前的第三朝向信息和增强显示显示的位置范围,该第三朝向信息可以代表用户当前视角的朝向,即该第三朝向信息用于表示终端的朝向。
对于对象场景,增强现实显示条件为用户视角的朝向在增强现实显示的位置范围,因此,在进行增强现实显示的过程中,需要实时检测该第三朝向信息指示的朝向是否指向该位置范围,当检测到该第三朝向信息指示的朝向指向该位置范围时,增强现实显示可以继续使用。而当检测到该第三朝向信息指示的朝向不指向该位置范围时,需要暂停增强现显示,并执行显示提示界面20的步骤,在该提示界面20中,虚拟对象22的虚拟视角23未朝向增强现实范围21。
在一些实施方式中,当检测到虚拟对象的交互状态匹配增强现实范围时,开启增强现实显示,包括:
(1.1)当检测到该虚拟对象的虚拟视角朝向该增强现实范围时,启动增强现实显示。
其中,当检测到该虚拟对象的虚拟视角朝向增强现实范围,即代表在真实环境中,该用户当前视角的朝向位置范围,因此,满足增强现实显示的条件,继续开启增强现实显示。
在一实施方式中,为了避免反复切换增强现实显示,可以在检测到虚拟对象的虚拟视角朝向该增强显示范围的时间持续达到预设时间,例如3秒时,确定用户当前视角稳定在该朝向位置范围,在此状态下,开启增强现实显示。
在一些实施方式中,显示提示界面之后,还包括:
(2.1)根据虚拟视角的朝向和该增强现实范围的关系,生成相应的转向箭头和转向提示;
(2.2)在该虚拟对象上显示该转向箭头,并通过语音播报该转向提示。
其中,请一并参阅图3b所示,为了更好的提示用户如何开启增强现实显示,可以根据虚拟视角的朝向和增强现实范围的关系,计算出对应的转向箭头和转向提示,如图3b所示,虚拟对象22的虚拟视角23的朝向到增强现实范围还需要逆时针转动180度,因此,可以生成逆时针180度的转向箭头和转向提示“逆时针 180度”,并在该虚拟对象上显示逆时针180度的转向箭头和通过语音播报该转向提示,以此,用户可以快速知道视角逆时针转180度,实现开启增强现实显示。
由上述可知,本申请实施例显示提示界面,并在提示界面上显示虚拟对象、虚拟对象的虚拟视角和增强现实范围;在该提示界面上显示交互提示信息;响应于采集的传感器信息,对提示界面中的虚拟对象的移动和虚拟视角的朝向进行交互控制;当检测到虚拟对象的交互状态匹配增强现实范围时,开启增强现实显示。以此,以可视化形式在提示界面中显示虚拟对象、虚拟视角和增强现实范围,使得用户基于提示界面进行移动和转向,并同步交互控制虚拟对象的移动和朝向,实现可视化引导,在虚拟对象的交互状态匹配增强现实范围时,快速开启增强现实显示,相对于只有简单的文字提示让用户回到AR范围的方案而言,用户可以直观知道如何开启增强现实显示,并基于可视化引导高效进行操作,极大的提升了增强现实显示的效率。
在本实施例中,将以该增强现实显示装置具体集成在终端中为例进行说明,具体参照以下说明。
请参阅图3,图3为本申请实施例提供的增强现实显示方法的另一流程示意图。该方法流程可以包括:
在步骤201中,终端获取当前的第二定位信息和增强现实显示的位置范围。
其中,本申请实施例针对范围场景的增强现实显示进行举例说明,可以获取终端的陀螺仪当前的第二定位信息和增强显示显示的位置范围,该第二定位信息代表当前用户的定位点(即也可以理解为终端的位置),该增强现实显示的位置范围为增强现实显示的定位点的集合。
为了更好的说明本申请实施例,请一并参阅图5a、图5b、图5c和图5d进行参考。
如图5a所示,该矩形区域即为增强显示显示的位置范围,当检测到当前的第二定位信息指示的定位点在该增强现实显示的位置范围内时,该增强现实显示处于正常状态,即在用户的终端上呈现AR环境,并且在该位置范围内,用户均可以进行AR体验。
在步骤202中,当终端检测到第二定位信息指示的定位不在位置范围时,暂停增强现实显示。
其中,对于范围场景,增强现实显示条件可以为用户定位在增强现实显示的位置范围内,而如图5b所示,当终端检测到该第二定位信息指示的定位不在该位置范围内时,即代表用户走到该位置范围外,不符合增强现实显示条件,可以暂停增强现实显示。
在步骤203中,终端显示提示界面,获取第一定位信息、第二朝向信息和增强现实显示的位置范围,根据位置范围在提示界面上生成对应的增强现实范围。
其中,如图5c所示,终端可以显示提示界面30,通过终端上的陀螺仪获取当前的第一定位信息(即终端当前的位置信息),该定位信息可以GPS信息,通过摄像头的朝向来确定出第二朝向信息(即终端当前的朝向),最后,根据后台指示的增强现实显示的GPS定位集合,来确定增强现实显示的位置范围。
进一步的,可以按照提示界面和真实环境之间面积的预设比例,例如1比8 的比例,将该位置范围在该提示界面上生成对应的增强现实范围31。
在步骤204中,终端基于第一定位信息确定虚拟对象在提示界面上的虚拟位置,在虚拟位置上显示虚拟对象,并基于第二朝向信息生成虚拟对象的虚拟视角。
其中,根据第一定位信息和预设比例,找到虚拟对象在提示界面上的虚拟位置,在提示界面的虚拟位置上显示该虚拟对象32,并且基于第二朝向信息的朝向还原该虚拟对象32在提示界面上的虚拟视角33,该虚拟视角33的朝向为基于第二朝向信息确定,以此,按照预设比例,将用户、用户的视角和增强现实的位置范围,还原在该提示界面上形成对应的虚拟对象32、虚拟对象的虚拟视角33和增强现实范围31,以可视化的形式展示给用户。
在步骤205中,终端生成震动数据,并通过震动数据生成对应强度的震动反馈,在提示界面上显示文本框,并在文本框中显示交互提示信息。
其中,由于增强现实显示暂停,为了提醒用户当前为暂停状态,还可以生成震动数据,该震动数据越大,终端的马达对应的震动幅度越大,该震动数据越小,终端的马达对应的震动幅度越小。
由于本申请实施例的增强现实显示的条件为该用户的定位信息重新回到位置范围内,所以可以设定该震动数据的大小与该第二定位信息指示的定位和该位置范围的边缘之间的距离的大小成正比,即该第二定位信息指示的定位和该位置范围的边缘之间的距离越大,该震动数据越大,该第二定位信息指示的定位和该位置范围的边缘之间的距离越小,该震动数据越小,该位置范围的边缘可以位置范围的边缘上与第二定位信息的直线距离最短的边缘点。
以此,根据相应的震动数据生成对应强度的震动反馈,可以更好的提醒用户当前与位置范围之间的关系,实现灵活提示。
进一步的,还可以在该提示界面上显示文本框,并在该文本框中显示交互提示信息来提示用户如何重新开启增强现实显示。请参阅图5c,交互提示信息可以为“请移动回游戏区域以开始游戏”。
在步骤206中,终端根据虚拟对象的虚拟位置、虚拟视角的朝向以及增强现实范围的关系,生成相应的导航轨迹和导航提示,在虚拟对象上显示该导航轨迹,并通过语音播报该导航提示。
其中,为了更好的提示用户如何开启增强现实显示,终端可以根据虚拟对象的虚拟位置、虚拟视角的朝向以及增强现实范围之间的关系,计算出对应的导航轨迹和导航提示,请一并参阅图5d所示,虚拟对象的虚拟视角23朝右上方,而该虚拟对象到增强现实范围的边缘的直线距离为2米,因此,可以以虚拟对象作为起点,增强现实范围的边缘上与该虚拟对象的直线距离最近的边缘点作为终点,生成导航轨迹,该导航轨迹上可以现实距离可以朝向轨迹,还可以生成导航提示“向右下方移动2米”,以此,可以在该虚拟对象上显示该导航轨迹,并通过语音播报该转向提示,以此,用户可以快速知道向右下方移动2米,实现开启增强现实显示。
在步骤207中,终端通过陀螺仪采集位移数据,获取摄像头的第一朝向信息,根据第一朝向信息生成转向数据,根据位移数据和转向数据确定传感器信息。
其中,可以打通现实用户和提示界面中虚拟对象的之间的交互关系,即可以通过现实中采集到传感器信息,来对提示界面中的虚拟对象的移动和虚拟视角的朝向进行交互控制,具体为通过终端上的陀螺仪采集位移数据,该位移数据为用户相对于上一定位点移动的方向和距离,可以为上一定位点与当前定位点之间的距离差计算得到。
进一步的,该第一朝向信息即代表用户当前观测的方向对应的朝向,单位可以以角度计算,本申请实施例获取摄像头的第一朝向信息作为用户当前的第一朝向信息,并且根据该第一朝向信息生成转向数据,该转向数据指示用户的朝向相对于上一朝向转动的角度,可以为上一朝向与当前的朝向之间的角度差计算得到。最后,将该位移数据和转向数据作为传感器信息,以实现通过传感器信息控制虚拟对象的移动和转向。
在步骤208中,终端响应于传感器信息中的位移数据,对虚拟对象的移动进行交互控制,当检测到虚拟对象的虚拟位置与增强现实范围的边缘之间的距离增加时,在提示界面上显示第一标识,响应于传感器信息中的转向数据,对虚拟视角的朝向进行交互控制。
其中,响应于该传感器信息中的位移数据,按照预设比例控制提示界面中的虚拟对象进行移动,响应于该传感器信息中的转向数据,对该虚拟对象的虚拟视角的朝向进行转动,以此,实现互通,用户可以通过提示界面的参考精准的进行真实世界的位置和转向的调整,直至移动至增强现实范围中。
进一步的,为了避免虚拟对象的虚拟位置与增强现实范围之间的距离增加导致增强现实显示的难度加大,以此,通过位移数据对虚拟对象的移动进行交互控制之后,需要检测该虚拟对象的虚拟位置与增强现实范围的边缘之间的距离是否增加。
该虚拟位置和增强现实范围的边缘之间的距离计算方式可以为虚拟位置与增强现实范围的边缘之间的最小距离,当检测到该虚拟对象的虚拟位置和增强现实范围的边缘之间的距离增加时,说明该虚拟对象的虚拟位置距离增强现实范围越来越远,为了提醒用户,可以在该提示界面面上显示“!”号的第一标识,并可以显示相应文字,例如“注意与增强现实范围越来越远,请及时调整”。
在步骤209中,当终端检测到虚拟对象的虚拟位置位移至增强现实范围内时,启动增强现实显示。
其中,当终端检测到虚拟对象的虚拟位置位移至增强现实范围内时,即代表在真实环境中,该用户当前的定位点在位置范围内,因此,满足增强现实显示的条件,继续开启增强现实显示。
在一实施方式中,为了避免反复切换增强现实显示,可以在终端检测到虚拟对象的虚拟位置位移至增强现实范围内的时间持续达到预设时间,例如2秒时,确定用户当前位置稳定在该位置范围,在此状态下,开启增强现实显示。
由上述可知,本申请实施例通过显示提示界面,并在提示界面上显示虚拟对象、虚拟对象的虚拟视角和增强现实范围;在该提示界面上显示交互提示信息;响应于采集的传感器信息,对提示界面中的虚拟对象的移动和虚拟视角的朝向进行交互控制;当检测到虚拟对象的交互状态匹配增强现实范围时,开启增强现实显示。以此,以可视化形式在提示界面中显示虚拟对象、虚拟视角和增强现实范围,使得用户基于提示界面进行移动和转向,并同步交互控制虚拟对象的移动和朝向,实现可视化引导,在虚拟对象的交互状态匹配增强现实范围时,快速开启增强现实显示,相对于只有简单的文字提示让用户回到AR范围的方案而言,用户可以直观知道如何开启增强现实显示,并基于可视化引导高效进行操作,极大的提升了增强现实显示的效率。
进一步的,还可以通过导航和语音播报的形式来提醒用户如何进行交互控制,开启增强现实显示,更好的提升了增强现实显示的效率。
为了更好的描述本申请实施例,请一并参阅图5e和图5f所示,图5e为本申请实施例提供的增强现实显示方法的另一场景示意图,图5f是本申请实施例提供的增强现实显示系统的时序图。
如图5e所示,用户在进行AR体验过程中,离开AR范围时,该AR游戏会进入暂停状态,设备(即终端)会进行震动反馈,并显示提示界面来显示玩家朝向与位置以及AR所构建的位置范围,玩家可以通过提示界面和引导,进行移动和朝向控制来回到位置范围内,恢复正常AR游戏。
如图5f所示,该AR后台即可以为终端的后台,该AR前端即为显示屏当前显示的前端内容,该用户操作即为玩家操作。
以此,1、AR后台可以构建AR游戏的范围与位置,2、该AR前端显示AR游戏模型与相关UI(用户界面,即增强现实界面),3、用户持设备,在范围内进行游玩,4、当用户不小心移动出了AR范围,5、AR后台检测状态,进入暂停页面。6、陀螺仪发出震动提示,AR前端实时显示用户的位置与AR的位置,引导玩家重新进入AR范围,7、用户移动至AR范围内。8、AR后台恢复正常状态,暂停取消。9、AR前端正常现实AR游戏。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见上文针对增强现实显示方法的详细描述,此处不再赘述。
为便于更好的实施本申请实施例提供的增强现实显示方法,本申请实施例还提供一种基于上述增强现实显示方法的装置。其中名词的含义与上述增强现实显示方法中相同,具体实现细节可以参考方法实施例中的说明。
请参阅图6,图6为本申请实施例提供的增强现实显示装置的结构示意图,其中该增强现实显示装置可以包括第一显示单元401、第二显示单元402、控制单元403以及开启单元404等。
第一显示单元401,用于显示提示界面,并在该提示界面上显示虚拟对象、该虚拟对象的虚拟视角和增强现实范围。
在一些实施例中,该第一显示单元401,还用于:
显示提示界面;
获取第一定位信息、第二朝向信息和增强现实显示的位置范围;、
其中,该第一定位信息用于表示终端的位置,该第二朝向信息用于表示终端的朝向;
根据该位置范围在该提示界面上生成对应的增强现实范围;
基于该第一定位信息确定虚拟对象在该提示界面上的虚拟位置;
在该虚拟位置上显示该虚拟对象,并基于该第二朝向信息生成该虚拟对象的虚拟视角。
在一些实施例中,该装置,还包括标识显示单元,用于:
在一些实施例中,该装置,还包括标识显示单元,用于:
在该提示界面上显示第一标识;
其中,该第一标识用于提示该虚拟对象在远离该增强现实范围。
在一些实施例中,该装置,还包括反馈提示单元,用于:
生成震动指令,并基于该震动指令生成震动反馈。
第二显示单元402,用于在该提示界面上显示交互提示信息。
第二显示单元402,用于以下至少一种步骤:
在该提示界面上显示文本框,并在该文本框中显示交互提示信息;
通过语音播放交互提示信息,并在该提示界面上显示交互提示信息相应的图像。
控制单元403,用于响应于采集的传感器信息,对该提示界面中的该虚拟对象的移动和该虚拟视角的朝向进行交互控制。
在一些实施例中,该传感器信息至少包括位移数据和转向数据,该控制单元403,用于:
响应于该传感器信息中的位移数据,对该虚拟对象的移动进行交互控制;
响应于该传感器信息中的转向数据,对该虚拟视角的朝向进行交互控制。
在一些实施例中,该装置,还包括确定单元,用于:
通过陀螺仪采集位移数据;
获取摄像头的第一朝向信息,根据该第一朝向信息生成转向数据,该第一朝向信息用于表示终端的朝向;
根据该位移数据和转向数据确定传感器信息。
开启单元404,用于当检测到该虚拟对象的交互状态匹配该增强现实范围时,开启增强现实显示。
在一些实施例中,该装置,还包括,第一暂停单元,用于:
获取当前的第二定位信息和增强现实显示的位置范围,该第二定位信息用于表示终端的位置;
当检测到该第二定位信息指示的定位不在该位置范围时,暂停增强现实显示,并执行显示提示界面;
该开启单元404,用于;
当检测到该虚拟对象的虚拟位置位移至该增强现实范围内时,启动增强现实显示。
在一些实施例中,该装置,还包括第一提示单元,用于:
根据该虚拟对象的虚拟位置、虚拟视角的朝向以及该增强现实范围的关系,生成相应的导航轨迹和导航提示;
在该虚拟对象上显示该导航轨迹,并通过语音播报该导航提示。
在一些实施例中,该装置,还包括震动生成单元,用于:
生成震动数据,并通过该震动数据生成对应强度的震动反馈;
其中,该震动数据的大小与该第二定位信息指示的定位和该位置范围之间的距离的大小成正比。
在一些实施例中,该装置,还包括,第二暂停单元,用于:
获取当前的第三朝向信息和增强现实显示的位置范围,该第三朝向信息用于表示终端的朝向;
当检测到该第三朝向信息指示的朝向不指向该位置范围时,暂停增强现实显示,并执行显示提示界面;
该开启单元404,还用于;
当检测到该虚拟对象的虚拟视角朝向该增强现实范围时,启动增强现实显示。
在一些实施例中,该装置,还包括第二提示单元,用于:
根据虚拟视角的朝向和该增强现实范围的关系,生成相应的转向箭头和转向提示;
在该虚拟对象上显示该转向箭头,并通过语音播报该转向提示。
以上各个单元的具体实施可参见前面的实施例,在此不再赘述。
本申请实施例还提供一种计算机设备,该计算机设备可以为终端,如图7所示,其示出了本申请实施例所涉及的终端的结构示意图,具体来讲:
该计算机设备可以包括射频(RF,Radio Frequency)电路501、包括有一个或一个以上计算机可读存储介质的存储器502、输入单元503、显示单元504、传感器505、音频电路506、无线保真(WiFi,Wireless Fidelity)模块507、包括有一个或者一个以上处理核心的处理器508、以及电源509等部件。本领域技术人员可以理解,图7中示出的终端结构并不构成对终端的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。其中:
RF电路501可用于收发信息或通话过程中,信号的接收和发送,特别地,将基站的下行信息接收后,交由一个或者一个以上处理器508处理;另外,将涉及上行的数据发送给基站。通常,RF电路501包括但不限于天线、至少一个放大器、调谐器、一个或多个振荡器、用户身份模块(SIM,SubscriberIdentity Module)卡、收发信机、耦合器、低噪声放大器(LNA,LowNoiseAmplifier)、双工器等。此外,RF电路501还可以通过无线通信与网络和其他设备通信。无线通信可以使用任一通信标准或协议,包括但不限于全球移动通讯系统(GSM,Global System ofMobile communication)、通用分组无线服务(GPRS,General PacketRadio Service)、码分多址(CDMA,Code Division Multiple Access)、宽带码分多址(WCDMA,Wideband Code DivisionMultipleAccess)、长期演进 (LTE,Long TermEvolution)、电子邮件、短消息服务(SMS,ShortMessaging Service)等。
存储器502可用于存储软件程序以及模块,处理器508通过运行存储在存储器502的软件程序以及模块,从而执行各种功能应用以及增强现实显示。存储器502可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等) 等;存储数据区可存储根据终端的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器502可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器502还可以包括存储器控制器,以提供处理器508和输入单元503对存储器502的访问。
输入单元503可用于接收输入的数字或字符信息,以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。具体地,在一个具体的实施例中,输入单元503可包括触敏表面以及其他输入设备。触敏表面,也称为触摸显示屏或者触控板,可收集用户在其上或附近的触摸操作 (比如用户使用手指、触笔等任何适合的物体或附件在触敏表面上或在触敏表面附近的操作),并根据预先设定的程式驱动相应的连接装置。可选的,触敏表面可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器508,并能接收处理器508发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触敏表面。除了触敏表面,输入单元503还可以包括其他输入设备。具体地,其他输入设备可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
显示单元504可用于显示由用户输入的信息或提供给用户的信息以及终端的各种图形用户接口,这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。显示单元504可包括显示面板,可选的,可以采用液晶显示器(LCD,Liquid Crystal Display)、有机发光二极管(OLED,Organic Light-Emitting Diode)等形式来配置显示面板。进一步的,触敏表面可覆盖显示面板,当触敏表面检测到在其上或附近的触摸操作后,传送给处理器508以确定触摸事件的类型,随后处理器508根据触摸事件的类型在显示面板提供相应的视觉输出。虽然在图7中,触敏表面与显示面板是作为两个独立的部件来实现输入和输入功能,但是在某些实施例中,可以将触敏表面与显示面板集成而实现输入和输出功能。
终端还可包括至少一种传感器505,比如光传感器、运动传感器以及其他传感器。具体地,光传感器可包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板的亮度,接近传感器可在终端移动到耳边时,关闭显示面板和/或背光。作为运动传感器的一种,重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;至于终端还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
音频电路506、扬声器,传声器可提供用户与终端之间的音频接口。音频电路506可将接收到的音频数据转换后的电信号,传输到扬声器,由扬声器转换为声音信号输出;另一方面,传声器将收集的声音信号转换为电信号,由音频电路506接收后转换为音频数据,再将音频数据输出处理器508处理后,经RF 电路501以发送给比如另一终端,或者将音频数据输出至存储器502以便进一步处理。音频电路506还可能包括耳塞插孔,以提供外设耳机与终端的通信。
WiFi属于短距离无线传输技术,终端通过WiFi模块507可以帮助用户收发电子邮件、浏览网页和访问流式媒体等,它为用户提供了无线的宽带互联网访问。虽然图7示出了WiFi模块507,但是可以理解的是,其并不属于终端的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。
处理器508是终端的控制中心,利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在存储器502内的软件程序和/或模块,以及调用存储在存储器502内的数据,执行终端的各种功能和处理数据,从而对手机进行整体监测。可选的,处理器508可包括一个或多个处理核心;优选的,处理器 508可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器508中。
终端还包括给各个部件供电的电源509(比如电池),优选的,电源可以通过电源管理系统与处理器508逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源509还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
尽管未示出,终端还可以包括摄像头、蓝牙模块等,在此不再赘述。具体在本实施例中,终端中的处理器508会按照如下的指令,将一个或一个以上的应用程序的进程对应的可执行文件加载到存储器502中,并由处理器508来运行存储在存储器502中的应用程序,从而实现各种功能:
显示提示界面,并在该提示界面上显示虚拟对象、该虚拟对象的虚拟视角和增强现实范围;
在该提示界面上显示交互提示信息;
响应于采集的传感器信息,对该提示界面中的该虚拟对象的移动和该虚拟视角的朝向进行交互控制;
当检测到该虚拟对象的交互状态匹配该增强现实范围时,开启增强现实显示。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见上文针对增强现实显示方法的详细描述,此处不再赘述。
本领域普通技术人员可以理解,上述实施例的各种方法中的全部或部分步骤可以通过指令来完成,或通过指令控制相关的硬件来完成,该指令可以存储于一计算机可读存储介质中,并由处理器进行加载和执行。
为此,本申请实施例提供一种计算机可读存储介质,其中存储有多条指令,该指令能够被处理器进行加载,以执行本申请实施例所提供的任一种增强现实显示方法中的步骤。例如,该指令可以执行如下步骤:
显示提示界面,并在该提示界面上显示虚拟对象、该虚拟对象的虚拟视角和增强现实范围;
在该提示界面上显示交互提示信息;
响应于采集的传感器信息,对该提示界面中的该虚拟对象的移动和该虚拟视角的朝向进行交互控制;
当检测到该虚拟对象的交互状态匹配该增强现实范围时,开启增强现实显示。
根据本申请的一个方面,提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行上述实施例提供的各种可选实现方式中提供的方法。
以上各个操作的具体实施可参见前面的实施例,在此不再赘述。
其中,该计算机可读存储介质可以包括:只读存储器(ROM,Read Only Memory)、随机存取记忆体(RAM,RandomAccess Memory)、磁盘或光盘等。
由于该计算机可读存储介质中所存储的指令,可以执行本申请实施例所提供的任一种增强现实显示方法中的步骤,因此,可以实现本申请实施例所提供的任一种增强现实显示方法所能实现的有益效果,详见前面的实施例,在此不再赘述。
以上对本申请实施例所提供的一种增强现实显示方法、装置及计算机可读存储介质进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。
Claims (15)
1.一种增强现实显示方法,其特征在于,所述方法包括:
显示提示界面,并在所述提示界面上显示虚拟对象、所述虚拟对象的虚拟视角和增强现实范围;
在所述提示界面上显示交互提示信息;
响应于采集的传感器信息,对所述提示界面中的所述虚拟对象的移动和所述虚拟视角的朝向进行交互控制;
当检测到所述虚拟对象的交互状态匹配所述增强现实范围时,开启增强现实显示。
2.根据权利要求1所述的增强现实显示方法,其特征在于,所述传感器信息至少包括位移数据和转向数据,所述响应于采集的传感器信息,对所述提示界面中的所述虚拟对象的移动和所述虚拟视角的朝向进行交互控制,包括:
响应于所述传感器信息中的位移数据,对所述虚拟对象的移动进行交互控制;
响应于所述传感器信息中的转向数据,对所述虚拟视角的朝向进行交互控制。
3.根据权利要求2所述的增强现实显示方法,其特征在于,所述对所述虚拟对象的移动进行交互控制之后,还包括:
在所述提示界面上显示第一标识;
其中,所述第一标识用于提示所述虚拟对象在远离所述增强现实范围。
4.根据权利要求2或3所述的增强现实显示方法,其特征在于,所述方法,还包括:
通过陀螺仪采集位移数据;
获取摄像头的第一朝向信息,根据所述第一朝向信息生成转向数据,所述第一朝向信息用于表示终端的朝向;
根据所述位移数据和转向数据确定传感器信息。
5.根据权利要求1所述的增强现实显示方法,其特征在于,所述在所述提示界面上显示虚拟对象、所述虚拟对象的虚拟视角和增强现实范围,包括:
获取第一定位信息、第二朝向信息和增强现实显示的位置范围;
其中,所述第一定位信息用于表示终端的位置,所述第二朝向信息用于表示终端的朝向;
根据所述位置范围在所述提示界面上生成对应的增强现实范围;
基于所述第一定位信息确定虚拟对象在所述提示界面上的虚拟位置;
在所述虚拟位置上显示所述虚拟对象,并基于所述第二朝向信息生成所述虚拟对象的虚拟视角。
6.根据权利要求1所述的增强现实显示方法,其特征在于,所述显示提示界面之后,还包括
生成震动指令,并基于所述震动指令生成震动反馈;
所述在所述提示界面上显示交互提示信息,包括以下至少一种步骤:
在所述提示界面上显示文本框,并在所述文本框中显示交互提示信息;
通过语音播放交互提示信息,并在所述提示界面上显示交互提示信息相应的图像。
7.根据权利要求1所述的增强现实显示方法,其特征在于,所述方法,还包括:
获取当前的第二定位信息和增强现实显示的位置范围,所述第二定位信息用于表示终端的位置;
当检测到所述第二定位信息指示的定位不在所述位置范围时,暂停增强现实显示,并执行显示提示界面;
所述当检测到所述虚拟对象的交互状态匹配所述增强现实范围时,开启增强现实显示,包括;
当检测到所述虚拟对象的虚拟位置位移至所述增强现实范围内时,启动增强现实显示。
8.根据权利要求7所述的增强现实显示方法,其特征在于,所述显示提示界面之后,还包括:
根据所述虚拟对象的虚拟位置、虚拟视角的朝向以及所述增强现实范围的关系,生成相应的导航轨迹和导航提示;
在所述虚拟对象上显示所述导航轨迹,并通过语音播报所述导航提示。
9.根据权利要求7所述的增强现实显示方法,其特征在于,所述显示提示界面之后,还包括:
生成震动数据,并通过所述震动数据生成对应强度的震动反馈;
其中,所述震动数据的大小与所述第二定位信息指示的定位和所述位置范围之间的距离的大小成正比。
10.根据权利要求1所述的增强现实显示方法,其特征在于,所述方法,还包括:
获取当前的第三朝向信息和增强现实显示的位置范围,所述第三朝向信息用于表示终端的朝向;
当检测到所述第三朝向信息指示的朝向不指向所述位置范围时,暂停增强现实显示,并执行显示提示界面;
所述当检测到所述虚拟对象的交互状态匹配所述增强现实范围时,开启增强现实显示,包括;
当检测到所述虚拟对象的虚拟视角朝向所述增强现实范围时,启动增强现实显示。
11.根据权利要求10所述的增强现实显示方法,其特征在于,所述显示提示界面之后,还包括:
根据虚拟视角的朝向和所述增强现实范围的关系,生成相应的转向箭头和转向提示;
在所述虚拟对象上显示所述转向箭头,并通过语音播报所述转向提示。
12.一种增强现实显示装置,其特征在于,包括:
第一显示单元,用于显示提示界面,并在所述提示界面上显示虚拟对象、所述虚拟对象的虚拟视角和增强现实范围;
第二显示单元,用于在所述提示界面上显示交互提示信息;
控制单元,用于响应于采集的传感器信息,对所述提示界面中的所述虚拟对象的移动和所述虚拟视角的朝向进行交互控制;
开启单元,用于当检测到所述虚拟对象的交互状态匹配所述增强现实范围时,开启增强现实显示。
13.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有多条指令,所述指令适于处理器进行加载,以执行权利要求1至11任一项所述的增强现实显示方法中的步骤。
14.一种计算机设备,其特征在于,包括存储器、处理器以及存储在所述存储器中并可以在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现1至11任一项所述的增强现实显示方法中的步骤。
15.一种计算机程序产品,包括计算机程序或指令,其特征在于,该计算机程序或指令被处理器执行时实现权利要求1至11任一项所述的增强现实显示方中的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211200826.3A CN117008713A (zh) | 2022-09-29 | 2022-09-29 | 一种增强现实显示方法、装置及计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211200826.3A CN117008713A (zh) | 2022-09-29 | 2022-09-29 | 一种增强现实显示方法、装置及计算机可读存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117008713A true CN117008713A (zh) | 2023-11-07 |
Family
ID=88574995
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211200826.3A Pending CN117008713A (zh) | 2022-09-29 | 2022-09-29 | 一种增强现实显示方法、装置及计算机可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117008713A (zh) |
-
2022
- 2022-09-29 CN CN202211200826.3A patent/CN117008713A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109905754B (zh) | 虚拟礼物收取方法、装置及存储设备 | |
CN112351302B (zh) | 基于云游戏的直播交互方法、装置及存储介质 | |
US9628744B2 (en) | Display apparatus and control method thereof | |
CN113965807B (zh) | 消息推送方法、装置、终端、服务器及存储介质 | |
WO2019114514A1 (zh) | 在直播间显示音高信息的方法及装置、存储介质 | |
CN107982918B (zh) | 游戏对局结果的展示方法、装置及终端 | |
CN110061900B (zh) | 消息显示方法、装置、终端及计算机可读存储介质 | |
CN112118477B (zh) | 虚拟礼物展示方法、装置、设备以及存储介质 | |
CN107908765B (zh) | 一种游戏资源处理方法、移动终端及服务器 | |
CN113398590B (zh) | 声音处理方法、装置、计算机设备及存储介质 | |
WO2019149028A1 (zh) | 应用程序的下载方法及终端 | |
US11270087B2 (en) | Object scanning method based on mobile terminal and mobile terminal | |
CN111491197A (zh) | 一种直播内容展示的方法、装置及存储介质 | |
CN114466209A (zh) | 直播互动方法、装置、电子设备、存储介质和程序产品 | |
CN112516589A (zh) | 直播中游戏商品互动方法、装置、计算机设备及存储介质 | |
CN112511850A (zh) | 连麦方法、直播显示方法、装置、设备及存储介质 | |
CN113485617A (zh) | 动画展示方法、装置、电子设备及存储介质 | |
CN113485626A (zh) | 一种智能显示设备、移动终端和显示控制方法 | |
CN112732250A (zh) | 界面处理方法、装置及存储介质 | |
CN114189731B (zh) | 赠送虚拟礼物后的反馈方法、装置、设备及存储介质 | |
CN115643445A (zh) | 交互处理方法、装置、电子设备及存储介质 | |
CN115193043A (zh) | 一种游戏信息发送方法、装置、计算机设备及存储介质 | |
CN112188268B (zh) | 虚拟场景展示方法、虚拟场景的介绍视频生成方法及装置 | |
CN112261482B (zh) | 互动视频的播放方法、装置、设备及可读存储介质 | |
CN117008713A (zh) | 一种增强现实显示方法、装置及计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |