CN114356087A - 一种基于增强现实的交互方法、装置、设备及存储介质 - Google Patents
一种基于增强现实的交互方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN114356087A CN114356087A CN202111658419.2A CN202111658419A CN114356087A CN 114356087 A CN114356087 A CN 114356087A CN 202111658419 A CN202111658419 A CN 202111658419A CN 114356087 A CN114356087 A CN 114356087A
- Authority
- CN
- China
- Prior art keywords
- state
- augmented reality
- rendering
- activity
- collection
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 230000003190 augmentative effect Effects 0.000 title claims abstract description 177
- 230000003993 interaction Effects 0.000 title claims abstract description 126
- 238000000034 method Methods 0.000 title claims abstract description 86
- 230000000694 effects Effects 0.000 claims abstract description 319
- 230000002452 interceptive effect Effects 0.000 claims abstract description 199
- 238000009877 rendering Methods 0.000 claims abstract description 153
- 239000003550 marker Substances 0.000 claims abstract description 14
- 230000009191 jumping Effects 0.000 claims description 20
- 230000015654 memory Effects 0.000 claims description 20
- 230000004044 response Effects 0.000 claims description 13
- 239000000463 material Substances 0.000 claims description 11
- 238000004590 computer program Methods 0.000 claims description 7
- 230000008569 process Effects 0.000 description 12
- 238000005516 engineering process Methods 0.000 description 8
- 238000010079 rubber tapping Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000001960 triggered effect Effects 0.000 description 3
- 238000013527 convolutional neural network Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 241001465754 Metazoa Species 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 239000004576 sand Substances 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
Images
Landscapes
- User Interface Of Digital Computer (AREA)
- Processing Or Creating Images (AREA)
Abstract
本公开实施例公开了一种基于增强现实的交互方法、装置、设备及存储介质,其中,该方法包括:响应于采集的真实场景图像中包括目标活动对应的标记物,获取所述目标活动对应的交互配置文件;基于所述交互配置文件在所述真实场景图像中渲染虚拟交互对象,得到增强现实图像并展示;所述虚拟交互对象的渲染状态由所述交互配置文件确定,所述渲染状态用于确定所述虚拟交互对象的特征展示程度;通过所述增强现实图像接收用户针对所述虚拟交互对象的交互操作,渲染所述交互操作对应的增强现实效果。
Description
技术领域
本公开实施例涉及增强现实领域,尤其涉及一种基于增强现实的交互方法、装置、设备及存储介质。
背景技术
增强现实(Augmented Reality,AR)技术是一种将虚拟信息与真实世界信息进行融合的技术,该技术通过在实时影像中渲染虚拟对象的方式实现将虚拟对象加载到真实世界中并进行互动,从而将真实的环境和虚拟对象实时地在同一个界面展示。相关技术的增强现实效果中能够支持的增强现实较为单一,无法很好地满足用户的体验需求。
发明内容
本公开实施例提供一种基于增强现实的交互方法、装置、设备及存储介质。
第一方面,提供一种基于增强现实的交互方法,包括:。
响应于采集的真实场景图像中包括目标活动对应的标记物,获取所述目标活动对应的交互配置文件;
基于所述交互配置文件在所述真实场景图像中渲染虚拟交互对象,得到增强现实图像并展示;所述虚拟交互对象的渲染状态由所述交互配置文件确定,所述渲染状态用于确定所述虚拟交互对象的特征展示程度;
通过所述增强现实图像接收用户针对所述虚拟交互对象的交互操作,渲染所述交互操作对应的增强现实效果。
在一些实施例中,所述基于所述交互配置文件在所述真实场景图像中渲染虚拟交互对象,得到增强现实图像,包括:
基于所述目标活动对应的交互配置文件,确定所述虚拟交互对象对应的渲染素材和所述目标活动的活动状态;基于所述活动状态,确定所述虚拟交互对象的渲染状态;
基于所述虚拟交互对象对应的渲染素材和渲染状态,在所述真实场景图像中渲染所述虚拟交互对象,得到增强现实图像。
在一些实施例中,所述基于所述活动状态,确定所述虚拟交互对象的渲染状态,包括:
在所述活动状态表征所述目标活动未确定活动时间或所述目标活动还未开始的情况下,确定所述渲染状态为第一渲染状态;所述第一渲染状态为展示所述虚拟交互对象的部分特征的状态;
在所述活动状态表征所述目标活动正在进行或所述目标活动已经结束的情况下,确定所述渲染状态为所述第二渲染状态;所述第二渲染状态为展示所述虚拟交互对象的全部特征的状态。
在一些实施例中,所述增强现实图像包括用于显示提示消息的文案区域;所述方法还包括:
获取所述活动状态对应的提示文案;所述提示文案用于提示所述目标活动的活动状态;
在所述增强现实区域中的文案区域中渲染所述提示文案。
在一些实施例中,所述提示文案还用于提示所述活动状态对应的预设交互操作,所述通过所述增强现实图像接收用户针对所述虚拟交互对象的交互操作,渲染所述交互操作对应的增强现实效果,包括:
通过所述增强现实图像接收用户针对所述虚拟交互对象的实时交互操作;
响应于所述实时交互操作与所述活动状态对应的预设交互操作相同,渲染所述预设交互操作对应的增强现实效果。
在一些实施例中,在所述目标活动的活动状态表征所述目标活动正在进行的情况下,所述方法还包括:
响应于渲染所述交互操作对应的增强现实效果,展示收藏提示控件;所述收藏提示控件用于展示所述目标活动对应的目标数字化物品的收藏状态;
接收用户针对所述收藏提示控件的触发操作,跳转至所述目标活动对应的收藏界面;所述收藏界面用于展示所述目标数字化物品及所述目标数字化物品的收藏状态。
在一些实施例中,所述展示所述收藏状态对应的收藏界面,包括:
在所述收藏状态为所述目标数字化物品未被收藏的第一收藏状态的情况下,展示所述第一收藏状态对应的物品领取界面;所述物品领取界面用于响应所述目标数字化物品的领取操作,将所述目标数字化物品添加至用户账户中;
在所述收藏状态为所述目标数字化物品已被收藏的第二收藏状态的情况下,展示所述第二收藏状态对应的物品查看界面;所述物品查看界面用于展示所述用户账户中存在的至少一个已收藏对象;所述至少一个已收藏对象至少包括所述目标数字化物品。
在一些实施例中,在所述目标活动的活动状态表征所述目标活动已经结束的情况下,所述方法还包括:
展示收藏跳转控件;所述收藏跳转控件用于展示所述目标活动对应的目标数字化物品的收藏状态,并提示所述目标数字化物品已经停止领取;
响应于所述收藏跳转控件的触发操作,跳转至所述目标活动对应的收藏界面;所述收藏界面用于展示所述目标数字化物品。
在一些实施例中,所述展示所述收藏状态对应的收藏界面,包括:
在所述收藏状态为所述目标数字化物品已被收藏的第二收藏状态的情况下,展示所述第二收藏状态对应的物品查看界面;所述物品查看界面用于展示所述用户账户中存在的至少一个已收藏对象;所述至少一个已收藏对象至少包括所述目标数字化物品;
在所述收藏状态为所述目标数字化物品未被收藏的第一收藏状态的情况下,展示所述第一收藏状态对应的公共收藏对象展示界面;所述公共收藏对象展示界面用于展示已发布的虚拟收藏对象。
在一些实施例中,所述收藏界面还包括物品信息展示控件和/或返回控件;所述方法还包括:
接收所述用户针对所述物品信息展示控件的触发操作,跳转至所述目标数字化物品对应的详情界面;和/或,
接收所述用户针对所述返回控件的触发操作,返回展示所述增强现实图像。
在一些实施例中,所述详情界面包括增强现实展示控件;所述方法还包括:
响应于所述增强现实展示控件的触发操作,在采集的实时场景图像中渲染所述目标数字化物品对应的虚拟交互对象,得到新的增强现实图像并展示。
第二方面,提供一种基于增强现实的交互装置,包括:
获取模块,用于响应于采集的真实场景图像中包括目标活动对应的标记物,获取所述目标活动对应的交互配置文件;
第一渲染模块,用于基于所述交互配置文件在所述真实场景图像中渲染虚拟交互对象,得到增强现实图像并展示;所述虚拟交互对象的渲染状态由所述交互配置文件确定,所述渲染状态用于确定所述虚拟交互对象的特征展示程度;
第二渲染模块,用于通过所述增强现实图像接收用户针对所述虚拟交互对象的交互操作,渲染所述交互操作对应的增强现实效果。
第三方面,提供一种基于增强现实的交互设备,包括:存储器和处理器,所述存储器存储有可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述方法中的步骤。
第四方面,提供一种计算机存储介质,所述计算机存储介质存储有一个或者多个程序,所述一个或者多个程序可被一个或者多个处理器执行,以实现上述方法中的步骤。
在本公开实施例中,由于响应于采集的真实场景图像中包括目标活动对应的标记物,获取所述目标活动对应的交互配置文件;基于所述交互配置文件在所述真实场景图像中渲染虚拟交互对象,得到增强现实图像并展示;通过所述增强现实图像接收用户针对所述虚拟交互对象的交互操作,渲染所述交互操作对应的增强现实效果,由此,可以通过增强现实技术实现用户参与该目标活动的效果,提升了用户对该目标活动的参与程度;同时,由于虚拟交互对象的渲染状态由所述交互配置文件确定,所述渲染状态用于确定所述虚拟交互对象的特征展示程度,可以通过不同渲染状态的虚拟对象,为用户提供丰富多样的增强现实效果。
附图说明
图1为本公开实施例提供的一种基于增强现实的交互方法的流程示意图;
图2为本公开实施例提供的一种基于增强现实的交互方法的流程示意图;
图3为本公开实施例提供的一种基于增强现实的交互方法的流程示意图;
图4为本公开实施例提供的一种基于增强现实的交互方法的流程示意图;
图5为本公开实施例提供的一种基于增强现实的交互方法的流程示意图;
图6为本公开实施例提供的一种基于增强现实的交互方法的流程示意图;
图7为本公开实施例提供的一种基于增强现实的交互装置的组成结构示意图;
图8为本公开实施例提供的一种基于增强现实的交互设备的硬件实体示意图。
具体实施方式
下面将通过实施例并结合附图具体地对本公开的技术方案进行详细说明。下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例中不再赘述。
需要说明的是:在本公开实例中,“第一”、“第二”等是用于区别类似的对象,而不必用于描述目标的顺序或先后次序。另外,本公开实施例所记载的技术方案之间,在不冲突的情况下,可以任意组合。
对本公开实施例进行进一步详细说明之前,对本公开实施例中涉及的名词和术语进行说明,本公开实施例中涉及的名词和术语适用于如下的解释。
1)小程序(Mini Program),也称为网络程序(Web Program),是一种基于面向前端的语言(例如JavaScript)开发的、在超文本标记语言(HTML,Hyper Text MarkupLanguage)页面中实现服务的程序,由客户端(例如浏览器或内嵌浏览器核心的任意客户端)经由网络(如互联网)下载、并在客户端的浏览器环境中解释和执行的软件,节省在客户端中安装的步骤。例如,在社交网络客户端中可以下载、运行用于实现唱歌服务的小程序。
2)用户端,可以是在手机、平板电脑等电子设备上运行的小程序客户端或者网页客户端。小程序客户端又称为小程序;网页客户端(Client)也称为网页用户端,是指与服务器相对应,为客户提供本地服务的程序。通常安装在普通的客户机上,需要与服务端互相配合运行,较常用的网页客户端包括了如万维网使用的网页浏览器,收寄电子邮件时的电子邮件客户端,以及即时通讯的客户端软件等。
3)网页(web),是一种基于超文本和HTTP的、全球性的、动态交互的、跨平台的分布式图形信息系统。是建立在Internet上的一种网络服务,为浏览者在Internet上查找和浏览信息提供了图形化的、易于访问的直观界面。
4)应用程序(Application,APP),指为完成某项或多项特定工作的计算机程序,可以和用户进行交互,具有可视的用户界面。
5)增强现实(Augmented Reality,AR),增强现实技术也被称为扩增现实,AR增强现实技术是促使真实世界信息和虚拟世界信息内容之间综合在一起的较新的技术内容,其将原本在现实世界的空间范围中比较难以进行体验的实体信息在电脑等科学技术的基础上,实施模拟仿真处理,叠加将虚拟信息内容在真实世界中加以有效应用,并且在这一过程中能够被人类感官所感知,从而实现超越现实的感官体验。真实环境和虚拟物体之间重叠之后,能够在同一个画面以及空间中同时存在。
本公开实施例提供一种基于增强现实的交互方法,能够通过增强现实技术实现用户参与该目标活动的效果,提升了用户对该目标活动的参与程度。本公开实施例提供的基于增强现实的交互方法应用于电子设备。
下面说明本公开实施例提供的电子设备的示例性应用,本公开实施例提供的电子设备可以实施为AR设备、笔记本电脑,平板电脑,台式计算机,机顶盒,移动设备(例如,移动电话,便携式音乐播放器,个人数字助理,专用消息设备,便携式游戏设备)等各种类型的用户终端(以下简称终端),也可以实施为服务器。其中,该AR设备为采集真实场景图像并将预设的虚拟对象渲染至该真实场景图像中,展示得到的增强现实图像的设备。示例性的,该AR设备可以为AR眼镜、安装AR客户端的终端等。
参见图1,图1是本公开实施例提供的基于增强现实的交互方法的一个可选的流程示意图,将结合图1示出的步骤进行说明。
S101、响应于采集的真实场景图像中包括目标活动对应的标记物,获取所述目标活动对应的交互配置文件。
其中,该标记物可以为真实场景中的明信片、名片、车票、动物、建筑、植物或日常用品等真实对象。在电子设备扫描真实场景得到真实场景图像的过程中,可以对采集的真实场景图像进行图像识别,提取该真实场景图像中存在的至少一个真实对象的对象特征,基于得到的至少一个对象特征和预设的标记物的对象特征进行比对,根据比对结果确定该真实场景中是否存在该标记物,进而确定是否获取所述目标活动对应的交互配置文件并渲染虚拟交互对象,以得到增强现实图像。
S102、基于所述交互配置文件在所述真实场景图像中渲染虚拟交互对象,得到增强现实图像并展示;所述虚拟交互对象的渲染状态由所述交互配置文件确定,所述渲染状态用于确定所述虚拟交互对象的特征展示程度。
在一些实施例中,电子设备在获取到该交互配置文件后,可以通过摄像头组件获取当前的真实场景图像,并基于该交互配置文件在该真实场景图像中渲染对应的虚拟交互对象,以得到结合虚拟交互对象和真实场景图像的增强现实图像。
其中,该交互配置文件可以包括用于渲染该虚拟交互对象的素材文件,在渲染该虚拟交互对象的过程中,通过调取该素材文件以完成该虚拟交互对象的渲染。
在一些实施例中,该交互配置文件还用于确定该虚拟交互对象的渲染状态,该渲染状态用于确定该虚拟交互对象的特征展示程度。其中,虚拟交互对象的特征展示程度至少可以包括部分特征展示的第一展示程度和全部特征展示的第二展示程度。该虚拟交互对象的特征可以包括至少一个维度的特征,该至少一个维度的特征可以包括形状特征、颜色特征、纹理特征。
其中,该至少一个维度的特征可以包括形状特征,在该虚拟交互对象对应的渲染状态确定所述虚拟交互对象为部分特征展示的第一展示程度的情况下,可以对所述虚拟交互对象的形状进行模糊处理后进行展示,相应地,得到的增强现实图像可以展示虚拟交互对象的大致形状,即展示了部分的形状特征;在该虚拟交互对象对应的渲染状态确定所述虚拟交互对象为部分特征展示的第二展示程度的情况下,直接渲染该虚拟交互对象的形状并展示,相应地,得到的增强现实图像可以展示虚拟交互对象的全部形状,即展示了全部的形状特征。
在本实施例中,该模糊处理可以包括基于滤镜的模糊处理,还可以是为该虚拟交互对象添加虚拟覆盖物的模糊处理。其中,该虚拟覆盖物用于附着在所述虚拟交互对象的表面,以遮盖所述虚拟交互对象的部分形状特征。示例性的,该虚拟覆盖物可以为红布,彩纱等。
其中,该至少一个维度的特征可以包括颜色特征,在该虚拟交互对象对应的渲染状态确定所述虚拟交互对象为部分特征展示的第一展示程度的情况下,可以对所述虚拟交互对象的颜色进行降低颜色饱和度处理后进行展示,相应地,得到的增强现实图像可以展示低颜色饱和度的虚拟交互对象,即展示了部分的颜色特征;在该虚拟交互对象对应的渲染状态确定所述虚拟交互对象为部分特征展示的第二展示程度的情况下,直接渲染该虚拟交互对象的形状并展示,相应地,得到的增强现实图像可以展示虚拟交互对象的全部颜色,即展示了全部的颜色特征。
其中,该至少一个维度的特征可以包括纹理特征,在该虚拟交互对象对应的渲染状态确定所述虚拟交互对象为部分特征展示的第一展示程度的情况下,可以对基于部分纹理特征渲染该虚拟交互对象并展示,相应地,得到的增强现实图像可以展示包括部分纹理特征的虚拟交互对象;在该虚拟交互对象对应的渲染状态确定所述虚拟交互对象为部分特征展示的第二展示程度的情况下,直接渲染该虚拟交互对象的纹理特征并展示,相应地,得到的增强现实图像可以展示虚拟交互对象的全部纹理特征。
在另一些实施例中,该虚拟交互对象的特征可以包括多个维度的特征,该多个维度的特征可以包括形状特征、颜色特征、纹理特征。该特征展示程度可以包括多个第三展示程度,每一第三展示程度用于展示至少一个维度的特征;所述多个第三展示程度中的任意两个第三展示程度存在至少一个维度上的不同。示例性的,可以存在包括仅包括一个维度的特征的第三展示程度,如仅显示形状特征/颜色特征/纹理特征,也可以包括部分维度的特征的第三展示程度,如包括形状特征和颜色特征的第三展示程度等;还可以存在包括所有维度的特征的第三展示程度。
S103、通过所述增强现实图像接收用户针对所述虚拟交互对象的交互操作,渲染所述交互操作对应的增强现实效果。
在一些实施例中,电子设备可以接收用户针对所述虚拟交互对象的交互操作。其中,该电子设备可以包括触摸显示屏组件,该触摸显示屏组件可以用于展示该增强现实图像,在该触摸显示屏组件展示该增强现实图像的过程中,可以通过该触摸显示屏组件接收用户针对该增强现实图像中的虚拟交互对象的交互操作;该电子设备还可以包括键盘、鼠标等输入组件,在展示该增强现实图像的过程中,可以通过该输入组件用于接收用户针对该增强现实图像中的虚拟交互对象的交互操作。
在一些实施例中,可以预设至少一个标准交互操作,每一标准交互操作对应至少一种增强现实效果,在获取到用户针对所述虚拟交互对象的交互操作的情况下,可以基于所述交互操作,在所述至少一个标准交互操作中匹配对应的目标交互操作,并获取该目标交互操作对应的增强现实效果,基于所述增强现实图像渲染该增强现实效果。
示例性的,在本公开实施例应用于上市庆祝活动的情况下,该虚拟交互对象可以为锣,上述至少一个标准交互操作可以包括移动操作和敲击操作;在接收用户针对该虚拟锣的移动操作之后,可以基于该移动操作更新所述增强现实图像中虚拟锣的放置位置;在接收到用户针对该虚拟锣的敲击操作之后,可以基于该敲击操作更新所述增强现实图像中虚拟锣的对象状态为震动状态,并播放对应的敲击音效。
在本公开实施例中,由于响应于采集的真实场景图像中包括目标活动对应的标记物,获取所述目标活动对应的交互配置文件;基于所述交互配置文件在所述真实场景图像中渲染虚拟交互对象,得到增强现实图像并展示;通过所述增强现实图像接收用户针对所述虚拟交互对象的交互操作,渲染所述交互操作对应的增强现实效果,由此,可以通过增强现实技术实现用户参与该目标活动的效果,提升了用户对该目标活动的参与程度;同时,由于虚拟交互对象的渲染状态由所述交互配置文件确定,所述渲染状态用于确定所述虚拟交互对象的特征展示程度,可以通过不同渲染状态的虚拟对象,为用户提供丰富多样的增强现实效果。
参见图2,图2是本公开实施例提供的基于增强现实的交互方法的一个可选的流程示意图,基于图1,图1中的S102可以更新为S201至S203,将结合图3示出的步骤进行说明。
S201、基于所述目标活动对应的交互配置文件,确定所述虚拟交互对象对应的渲染素材和所述目标活动的活动状态。
在一些实施例中,该目标活动的活动状态可以包括但不限于是第一活动状态、第二活动状态、第三活动状态和第四活动状态,其中,该第一活动状态表征所述目标活动未确定活动时间、该第二活动状态表征所述目标活动还未开始、所述第三活动状态表征所述目标活动正在进行、该第四活动状态表征所述目标活动已经结束。在另一些实施例中,该目标活动的活动状态还可以包括其他活动状态,如目标活动在进行期间中的活动子状态,如序幕状态、节目状态、致辞状态等。示例性的,在本公开实施例应用于婚礼活动场景的情况下,在该目标活动在进行期间中,可以包括迎亲状态、婚礼状态等。在另一些实施例中,该目标活动状态还可以是上述第一活动状态、第二活动状态、第三活动状态和第四活动状态中部分状态的组合。
在一些实施例中,该交互配置文件可以包括该目标活动的活动状态,在接收到该交互配置文件后,通过解析该交互配置文件可以直接获取该目标活动的活动状态。
在一些实施例中,该交互配置文件中可以包括该目标活动的活动时间,在接收到该交互配置文件之后,通过解析该交互配置文件可以获取该目标活动的活动时间,获取系统时间,基于该系统时间和所述活动时间,确定所述目标活动的活动状态。其中,在该交互配置文件仅包括系统时间的情况下,确定所述目标活动为第一活动状态;在该系统时间未到达所述活动时间的情况下,确定所述目标活动为第二活动状态;在该系统时间在所述活动时间中的情况下,确定所述目标活动为第三活动状态;在该系统时间超过所述活动时间的情况下,确定所述目标活动为第四活动状态。
S202、基于所述活动状态,确定所述虚拟交互对象的渲染状态。
在一些实施例中,可以通过S2021、S2022实现上述基于所述活动状态,确定所述虚拟交互对象的渲染状态。
S2021、在所述活动状态表征所述目标活动未确定活动时间或所述目标活动还未开始的情况下,确定所述渲染状态为第一渲染状态;所述第一渲染状态为展示所述虚拟交互对象的部分特征的状态。
其中,该第一渲染状态对应上述实施例中的部分特征展示的第一展示程度。
S2022、在所述活动状态表征所述目标活动正在进行或所述目标活动已经结束的情况下,确定所述渲染状态为所述第二渲染状态;所述第二渲染状态为展示所述虚拟交互对象的全部特征的状态。
其中,该第二渲染状态对应上述实施例中的全部特征展示的第二展示程度。
S203、基于所述虚拟交互对象对应的渲染素材和渲染状态,在所述真实场景图像中渲染所述虚拟交互对象,得到增强现实图像。
在本公开实施例中,基于所述目标活动对应的交互配置文件,确定所述虚拟交互对象对应的渲染素材和所述目标活动的活动状态,并基于所述活动状态,确定所述虚拟交互对象的渲染状态;可以通过展示不同渲染状态的虚拟交互对象,直观的体现该目标活动的活动状态,提升了增强现实图像中信息的传达效率。
参见图3,图3是本公开实施例提供的基于增强现实的交互方法的一个可选的流程示意图,基于上述任一实施例,以基于图1为例,图1中的S102可以更新为S301,所述方法还包括S302至S303,将结合图3示出的步骤进行说明。
S301、基于所述交互配置文件在所述真实场景图像中渲染虚拟交互对象,得到增强现实图像并展示;所述虚拟交互对象的渲染状态由所述交互配置文件确定,所述渲染状态用于确定所述虚拟交互对象的特征展示程度,所述增强现实图像包括用于显示提示消息的文案区域。
在一些实施例中,在基于交互配置文件渲染该增强现实图像的过程中,还可以在该增强现实图像中显示该文案区域,该文案区域用于显示提示消息。
S302、获取所述活动状态对应的提示文案;所述提示文案用于提示所述目标活动的活动状态。
在一些实施例中,在该目标活动的活动状态为第一活动状态的情况下,该提示文案可以表征该目标活动的活动时间还未确定,例如:“XX活动敬请期待”,XX活动为目标活动的活动标识;在该目标活动的活动状态为第二活动状态的情况下,该提示文案可以表征该目标活动还未开始,并显示倒计时信息,例如:“XX活动开始倒计时:1天”,该倒计时信息可以通过上述活动时间和系统时间确定;在该目标活动的活动状态为第三活动状态的情况下,该提示文案可以表征该目标活动正在进行,例如:“XX活动正在进行”,还可以显示该目标活动的剩余时间信息,剩余时间信息可以通过上述活动时间和系统时间确定;在该目标活动的活动状态为第四活动状态的情况下,该提示文案可以表征该目标活动的已经结束,例如:“XX活动已经结束”。
S303、在所述增强现实区域中的文案区域中渲染所述提示文案。
在一些实施例中,所述提示文案还用于提示所述活动状态对应的预设交互操作,可以通过S1031至S1032实现上述通过所述增强现实图像接收用户针对所述虚拟交互对象的交互操作,渲染所述交互操作对应的增强现实效果。
其中,该第一活动状态和第二活动状态对应第一预设交互操作集合,该第三活动状态和第四活动状态对应第二预设交互操作集合;所述第一预设交互操作集合为第二预设交互操作集合的真子集;即,所述第二预设交互操作集合包括至少一个特定交互操作。
示例性的,以本公开实施例应用于上市庆祝活动为例,在该目标活动的活动状态为第一活动状态或第二活动状态的情况下,即,在该目标活动的活动状态表征所述目标活动未确定活动时间或所述目标活动还未开始的情况下,该预设交互操作可以包括移动操作;在该目标活动的活动状态为第三活动状态或第四活动状态的情况下,即,在该目标活动的活动状态表征所述目标活动正在进行或所述目标活动已经结束的情况下,该预设交互操作可以包括移动操作和敲击操作。
相应地,在该预设交互操作包括移动操作的情况下,该提示文案可以为提示用户移动该虚拟交互对象的文案;在该预设交互操作包括敲击操作的情况下,该提示文案可以为提示用户敲击该虚拟交互对象的文案。
S1031、通过所述增强现实图像接收用户针对所述虚拟交互对象的实时交互操作。
S1032、响应于所述实时交互操作与所述活动状态对应的预设交互操作相同,渲染所述预设交互操作对应的增强现实效果。
基于上述举例,在该目标活动的活动状态为第一活动状态或第二活动状态的情况下,即使接收到用户针对该虚拟交互对象的敲击操作,由于该敲击操作不属于该第一活动状态或第二活动状态对应的预设交互操作,因此不渲染该敲击操作对应的增强现实效果。
在本公开实施例中,由于在所述增强现实区域中的文案区域中渲染所述提示文案,通过所述增强现实图像接收用户针对所述虚拟交互对象的实时交互操作;响应于所述实时交互操作与所述活动状态对应的预设交互操作相同,渲染所述预设交互操作对应的增强现实效果;可以便于用户快速掌握与该虚拟交互对象的交互方式,并且,仅渲染当前活动状态的预设交互操作对应的增强现实效果,可以进一步提升用户体验。
在一些实施例中,在所述目标活动的活动状态表征所述目标活动正在进行的情况下,本公开实施例还提供了获取该目标活动对应的目标数字化物品的方案,参见图4,图4是本公开实施例提供的基于增强现实的交互方法的一个可选的流程示意图,基于上述任一实施例,以基于图1为例,所述方法还包括S401至S402,将结合图4示出的步骤进行说明。
S401、响应于渲染所述交互操作对应的增强现实效果,展示收藏提示控件;所述收藏提示控件用于展示所述目标活动对应的目标数字化物品的收藏状态。
S402、接收用户针对所述收藏提示控件的触发操作,跳转至所述目标活动对应的收藏界面;所述收藏界面用于展示所述目标数字化物品及所述目标数字化物品的收藏状态。
在一些实施例中,可以通过S4021、S4022实现上述展示所述收藏状态对应的收藏界面。
S4021、在所述收藏状态为所述目标数字化物品未被收藏的第一收藏状态的情况下,展示所述第一收藏状态对应的物品领取界面;所述物品领取界面用于响应所述目标数字化物品的领取操作,将所述目标数字化物品添加至用户账户中。
S4022、在所述收藏状态为所述目标数字化物品已被收藏的第二收藏状态的情况下,展示所述第二收藏状态对应的物品查看界面;所述物品查看界面用于展示所述用户账户中存在的至少一个已收藏对象;所述至少一个已收藏对象至少包括所述目标数字化物品。
在一些实施例中,在所述目标活动的活动状态表征所述目标活动已经结束的情况下,本公开实施例还提供了展示数字化物品的方案,参见图5,图5是本公开实施例提供的基于增强现实的交互方法的一个可选的流程示意图,基于上述任一实施例,以基于图1为例,所述方法还包括S501至S502将结合图5示出的步骤进行说明。
S501、展示收藏跳转控件;所述收藏跳转控件用于展示所述目标活动对应的目标数字化物品的收藏状态,并提示所述目标数字化物品已经停止领取。
S502、响应于所述收藏跳转控件的触发操作,跳转至所述目标活动对应的收藏界面;所述收藏界面用于展示所述目标数字化物品。
在一些实施例中,可以通过S5021、S5022实现上述展示所述收藏状态对应的收藏界面。
S5021、在所述收藏状态为所述目标数字化物品已被收藏的第二收藏状态的情况下,展示所述第二收藏状态对应的物品查看界面;所述物品查看界面用于展示所述用户账户中存在的至少一个已收藏对象;所述至少一个已收藏对象至少包括所述目标数字化物品。
S5022、在所述收藏状态为所述目标数字化物品未被收藏的第一收藏状态的情况下,展示所述第一收藏状态对应的公共收藏对象展示界面;所述公共收藏对象展示界面用于展示已发布的虚拟收藏对象。
在本公开实施例中,通过收藏小程序/客户端为用户提供数字化物品的获取及展示界面,可以在为用户提供目标活动的增强现实效果的基础上,进一步提升用户对所述目标活动的参与程度。
在一些实施例中,图4、图5中的收藏界面还可以包括物品信息展示控件,相应的,所述方法还包括:接收所述用户针对所述物品信息展示控件的触发操作,跳转至所述目标数字化物品对应的详情界面。
其中,所述详情界面包括增强现实展示控件;所述方法还包括:响应于所述增强现实展示控件的触发操作,在采集的实时场景图像中渲染所述目标数字化物品对应的虚拟交互对象,得到新的增强现实图像并展示。
在本实施例中,该新的增强现实图像中不包含上述文案区域,以提升该虚拟交互对象的展示效果。
在一些实施例中,图4、图5中的收藏界面还可以包括返回控件,相应的,所述方法还包括:接收所述用户针对所述返回控件的触发操作,返回展示所述增强现实图像。
下面,将说明本申请实施例在一个实际的应用场景中的示例性应用。
请参见图6,图6是本公开实施例提供的基于增强现实的交互方法的一个可选的流程示意图。
S601、扫描目标活动对应的邀请函入口。
其中,该邀请函入口对应上述实施例中的标记物。
S602、获取所述目标活动的活动状态。
其中,该目标活动的活动状态包括以下至少之一:第一活动状态、第二活动状态、第三活动状态和第四活动状态。该第一活动状态表征所述目标活动的活动时间还未确定;该第二活动状态表征还未到达所述目标状态的活动时间;该第三活动状态表征所述目标活动正在进行;该第四活动状态表征所述目标活动已经结束。
在一些实施例中,在目标活动的活动状态为第一活动状态的情况下,执行S603;在目标活动的活动状态为第二活动状态的情况下,执行S604;在目标活动的活动状态为第三活动状态的情况下,执行S605;在目标活动的活动状态为第四活动状态的情况下,执行S606。
S603、展示第一增强现实图像;所述第一增强现实图像包括第一渲染状态的虚拟交互对象和第一提示消息;第一提示消息用于指示所述目标活动未确定活动时间;所述第一渲染状态为展示所述虚拟交互对象的部分特征的状态。
S604、展示第二增强现实图像;所述第二增强现实图像包括所述第一渲染状态的虚拟交互对象和第二提示消息;第二提示消息用于指示所述目标活动的活动时间。
S605、展示第三增强现实图像;所述第三增强现实图像包括第二渲染状态的虚拟交互对象和第三提示消息;所述第二渲染状态为展示所述虚拟交互对象的全部特征的状态;所述第三提示消息用于提示所述目标活动的活动内容。
其中,在展示该第三增强现实图像的同时,还会获取该第三增强现实图像展示给当前用户的历史次数,在首次展示的情况下,即用户首次扫描进入该第三增强现实图像的展示界面,执行S607;在非首次展示的情况下,执行S608。
S606、展示第四增强现实图像;所述第三增强现实图像包括所述第二渲染状态的虚拟交互对象和第四提示消息;所述第四提示消息用于提示所述目标活动已结束。
S607、展示交互提示消息,所述交互提示消息用于提示用户与所述虚拟交互对象的交互方式。
S609、接收用户针对所述虚拟交互对象的操作指令,渲染所述操作指令对应的增强现实效果。
S610、展示收藏提示控件;所述收藏提示控件用于提示用户可以获取所述目标活动对应的目标数字化物品。
S611、接收用户针对所述收藏提示控件的触发操作,跳转至所述目标活动对应的收藏小程序,并将所述目标活动对应的目标数字化物品添加至所述用户的账户中。
在一些实施例中,可以响应于接收用户针对所述虚拟交互对象的操作指令,S608、判断用户是否已经领取所述目标活动对应的目标数字化物品。
在用户已经领取所述目标活动对应的目标数字化物品的情况下,执行S612、展示收藏展示控件;所述收藏展示控件用于被触发时跳转至用户的虚拟收藏仓库界面,并展示用户拥有的目标数字化物品。
在用户未领取所述目标活动对应的目标数字化物品的情况下,执行S610、展示收藏提示控件;所述收藏提示控件用于提示用户可以获取所述目标活动对应的目标数字化物品。
S613、展示交互提示消息,所述交互提示消息用于提示用户与所述虚拟交互对象的交互方式。
S614、判断用户是否已经领取所述目标活动对应的目标数字化物品。
在用户已经领取所述目标活动对应的目标数字化物品的情况下,执行S612、展示收藏展示控件;所述收藏展示控件用于被触发时跳转至用户的虚拟收藏仓库界面,并展示用户拥有的目标数字化物品。
在用户未领取所述目标活动对应的目标数字化物品的情况下,执行S615、展示公共收藏控件;所述公共收藏控件用于被触发时跳转至公共收藏对象展示界面,并展示已发布的数字化物品。
S616、通过所述虚拟收藏仓库界面接收用户针对所述目标活动对应的目标数字化物品的触发操作,展示第五增强现实图像,所述第五增强现实图像包括第二渲染状态的虚拟交互对象。
在本实施例中,由于用户已经完成了针对该虚拟交互对象的交互操作,并领取了对应的目标数字化物品,因此,只需要渲染该虚拟交互对象即可,无需显示上述交互提示消息。
图7为本公开实施例提供的一种基于增强现实的交互装置的组成结构示意图,如图7所示,基于增强现实的交互装置700包括:
获取模块701,用于响应于采集的真实场景图像中包括目标活动对应的标记物,获取所述目标活动对应的交互配置文件;
第一渲染模块702,用于基于所述交互配置文件在所述真实场景图像中渲染虚拟交互对象,得到增强现实图像并展示;所述虚拟交互对象的渲染状态由所述交互配置文件确定,所述渲染状态用于确定所述虚拟交互对象的特征展示程度;
第二渲染模块703,用于通过所述增强现实图像接收用户针对所述虚拟交互对象的交互操作,渲染所述交互操作对应的增强现实效果。
在一些实施例中,所述第一渲染模块702,还用于:
基于所述目标活动对应的交互配置文件,确定所述虚拟交互对象对应的渲染素材和所述目标活动的活动状态;
基于所述活动状态,确定所述虚拟交互对象的渲染状态;
基于所述虚拟交互对象对应的渲染素材和渲染状态,在所述真实场景图像中渲染所述虚拟交互对象,得到增强现实图像。
在一些实施例中,所述第一渲染模块702,还用于:
在所述活动状态表征所述目标活动未确定活动时间或所述目标活动还未开始的情况下,确定所述渲染状态为第一渲染状态;所述第一渲染状态为展示所述虚拟交互对象的部分特征的状态;
在所述活动状态表征所述目标活动正在进行或所述目标活动已经结束的情况下,确定所述渲染状态为所述第二渲染状态;所述第二渲染状态为展示所述虚拟交互对象的全部特征的状态。
在一些实施例中,所述增强现实图像包括用于显示提示消息的文案区域;所述第一渲染模块702,还用于:
获取所述活动状态对应的提示文案;所述提示文案用于提示所述目标活动的活动状态;
在所述增强现实区域中的文案区域中渲染所述提示文案。
在一些实施例中,所述提示文案还用于提示所述活动状态对应的预设交互操作,所述第二渲染模块703,还用于:
通过所述增强现实图像接收用户针对所述虚拟交互对象的实时交互操作;
响应于所述实时交互操作与所述活动状态对应的预设交互操作相同,渲染所述预设交互操作对应的增强现实效果。
在一些实施例中,在所述目标活动的活动状态表征所述目标活动正在进行的情况下,所述第二渲染模块703,还用于:响应于渲染所述交互操作对应的增强现实效果,展示收藏提示控件;所述收藏提示控件用于展示所述目标活动对应的目标数字化物品的收藏状态;接收用户针对所述收藏提示控件的触发操作,跳转至所述目标活动对应的收藏界面;所述收藏界面用于展示所述目标数字化物品及所述目标数字化物品的收藏状态。
在一些实施例中,所述第二渲染模块703,还用于:
在所述收藏状态为所述目标数字化物品未被收藏的第一收藏状态的情况下,展示所述第一收藏状态对应的物品领取界面;所述物品领取界面用于响应所述目标数字化物品的领取操作,将所述目标数字化物品添加至用户账户中;
在所述收藏状态为所述目标数字化物品已被收藏的第二收藏状态的情况下,展示所述第二收藏状态对应的物品查看界面;所述物品查看界面用于展示所述用户账户中存在的至少一个已收藏对象;所述至少一个已收藏对象至少包括所述目标数字化物品。
在一些实施例中,在所述目标活动的活动状态表征所述目标活动已经结束的情况下,所述第二渲染模块703,还用于:展示收藏跳转控件;所述收藏跳转控件用于展示所述目标活动对应的目标数字化物品的收藏状态,并提示所述目标数字化物品已经停止领取;响应于所述收藏跳转控件的触发操作,跳转至所述目标活动对应的收藏界面;所述收藏界面用于展示所述目标数字化物品。
在一些实施例中,所述第二渲染模块703,还用于:
在所述收藏状态为所述目标数字化物品已被收藏的第二收藏状态的情况下,展示所述第二收藏状态对应的物品查看界面;所述物品查看界面用于展示所述用户账户中存在的至少一个已收藏对象;所述至少一个已收藏对象至少包括所述目标数字化物品;
在所述收藏状态为所述目标数字化物品未被收藏的第一收藏状态的情况下,展示所述第一收藏状态对应的公共收藏对象展示界面;所述公共收藏对象展示界面用于展示已发布的虚拟收藏对象。
在一些实施例中,所述收藏界面还包括物品信息展示控件和/或返回控件;所述第二渲染模块703,还用于:接收所述用户针对所述物品信息展示控件的触发操作,跳转至所述目标数字化物品对应的详情界面;和/或,接收所述用户针对所述返回控件的触发操作,返回展示所述增强现实图像。
在一些实施例中,所述详情界面包括增强现实展示控件;所述第二渲染模块703,还用于:响应于所述增强现实展示控件的触发操作,在采集的实时场景图像中渲染所述目标数字化物品对应的虚拟交互对象,得到新的增强现实图像并展示。
以上装置实施例的描述,与上述方法实施例的描述是类似的,具有同方法实施例相似的有益效果。对于本公开装置实施例中未披露的技术细节,请参照本公开方法实施例的描述而理解。
本公开涉及增强现实领域,通过获取现实环境中的目标对象的图像信息,进而借助各类视觉相关算法实现对目标对象的相关特征、状态及属性进行检测或识别处理,从而得到与具体应用匹配的虚拟与现实相结合的AR效果。示例性的,目标对象可涉及与人体相关的脸部、肢体、手势、动作等,或者与物体相关的标识物、标志物,或者与场馆或场所相关的沙盘、展示区域或展示物品等。视觉相关算法可涉及视觉定位、SLAM、三维重建、图像注册、背景分割、对象的关键点提取及跟踪、对象的位姿或深度检测等。具体应用不仅可以涉及跟真实场景或物品相关的导览、导航、讲解、重建、虚拟效果叠加展示等交互场景,还可以涉及与人相关的特效处理,比如妆容美化、肢体美化、特效展示、虚拟模型展示等交互场景。可通过卷积神经网络,实现对目标对象的相关特征、状态及属性进行检测或识别处理。上述卷积神经网络是基于深度学习框架进行模型训练而得到的网络模型。
需要说明的是,本公开实施例中,如果以软件功能模块的形式实现上述的基于增强现实的交互方法,并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本公开实施例的技术方案本质上或者说对相关技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台设备执行本公开各个实施例方法的全部或部分。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read Only Memory,ROM)、磁碟或者光盘等各种可以存储程序代码的介质。这样,本公开实施例不限制于任何目标的硬件和软件结合。
图8为本公开实施例提供的一种基于增强现实的交互设备的硬件实体示意图,如图8所示,该基于增强现实的交互设备800的硬件实体包括:处理器801和存储器802,其中,存储器802存储有可在处理器801上运行的计算机程序,处理器801执行程序时实现上述任一实施例的方法中的步骤。
存储器802存储有可在处理器上运行的计算机程序,存储器802配置为存储由处理器801可执行的指令和应用,还可以缓存待处理器801以及基于增强现实的交互设备800中各模块待处理或已经处理的数据(例如,图像数据、音频数据、语音通信数据和视频通信数据),可以通过闪存(FLASH)或随机访问存储器(Random Access Memory,RAM)实现。
处理器801执行程序时实现上述任一项的基于增强现实的交互方法的步骤。处理器801通常控制基于增强现实的交互设备800的总体操作。
本公开实施例提供一种计算机存储介质,计算机存储介质存储有一个或者多个程序,该一个或者多个程序可被一个或者多个处理器执行,以实现如上任一实施例的基于增强现实的交互方法的步骤。
这里需要指出的是:以上存储介质和设备实施例的描述,与上述方法实施例的描述是类似的,具有同方法实施例相似的有益效果。对于本公开存储介质和设备实施例中未披露的技术细节,请参照本公开方法实施例的描述而理解。
上述处理器可以为目标用途集成电路(Application Specific IntegratedCircuit,ASIC)、数字信号处理器(Digital Signal Processor,DSP)、数字信号处理装置(Digital Signal Processing Device,DSPD)、可编程逻辑装置(Programmable LogicDevice,PLD)、现场可编程门阵列(Field Programmable Gate Array,FPGA)、中央处理器(Central Processing Unit,CPU)、控制器、微控制器、微处理器中的至少一种。可以理解地,实现上述处理器功能的电子器件还可以为其它,本公开实施例不作具体限定。
上述计算机存储介质/存储器可以是只读存储器(Read Only Memory,ROM)、可编程只读存储器(Programmable Read-Only Memory,PROM)、可擦除可编程只读存储器(Erasable Programmable Read-Only Memory,EPROM)、电可擦除可编程只读存储器(Electrically Erasable Programmable Read-Only Memory,EEPROM)、磁性随机存取存储器(Ferromagnetic Random Access Memory,FRAM)、快闪存储器(Flash Memory)、磁表面存储器、光盘、或只读光盘(Compact Disc Read-Only Memory,CD-ROM)等存储器;也可以是包括上述存储器之一或任意组合的各种终端,如移动电话、计算机、平板设备、个人数字助理等。
应理解,说明书通篇中提到的“一个实施例”或“一实施例”或“本公开实施例”或“前述实施例”或“一些实施例”意味着与实施例有关的目标特征、结构或特性包括在本公开的至少一个实施例中。因此,在整个说明书各处出现的“在一个实施例中”或“在一实施例中”或“本公开实施例”或“前述实施例”或“一些实施例”未必一定指相同的实施例。此外,这些目标的特征、结构或特性可以任意适合的方式结合在一个或多个实施例中。应理解,在本公开的各种实施例中,上述各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本公开实施例的实施过程构成任何限定。上述本公开实施例序号仅仅为了描述,不代表实施例的优劣。
在未做特殊说明的情况下,基于增强现实的交互设备执行本公开实施例中的任一步骤,可以是基于增强现实的交互设备的处理器执行该步骤。除非特殊说明,本公开实施例并不限定基于增强现实的交互设备执行下述步骤的先后顺序。另外,不同实施例中对数据进行处理所采用的方式可以是相同的方法或不同的方法。还需说明的是,本公开实施例中的任一步骤是基于增强现实的交互设备可以独立执行的,即基于增强现实的交互设备执行上述实施例中的任一步骤时,可以不依赖于其它步骤的执行。
在本公开所提供的几个实施例中,应该理解到,所揭露的设备和方法,可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,如:多个单元或组件可以结合,或可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口,设备或单元的间接耦合或通信连接,可以是电性的、机械的或其它形式的。
上述作为分离部件说明的单元可以是、或也可以不是物理上分开的,作为单元显示的部件可以是、或也可以不是物理单元;既可以位于一个地方,也可以分布到多个网络单元上;可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外,在本公开各实施例中的各功能单元可以全部集成在一个处理单元中,也可以是各单元分别单独作为一个单元,也可以两个或两个以上单元集成在一个单元中;上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
本公开所提供的几个方法实施例中所揭露的方法,在不冲突的情况下可以任意组合,得到新的方法实施例。
本公开所提供的几个产品实施例中所揭露的特征,在不冲突的情况下可以任意组合,得到新的产品实施例。
本公开所提供的几个方法或设备实施例中所揭露的特征,在不冲突的情况下可以任意组合,得到新的方法实施例或设备实施例。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:移动存储设备、只读存储器(Read Only Memory,ROM)、磁碟或者光盘等各种可以存储程序代码的介质。
或者,本公开上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本公开实施例的技术方案本质上或者说对相关技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机、基于增强现实的交互设备、或者网络设备等)执行本公开各个实施例所述方法的全部或部分。而前述的存储介质包括:移动存储设备、ROM、磁碟或者光盘等各种可以存储程序代码的介质。
在本公开实施例中,不同实施例中相同步骤和相同内容的说明,可以互相参照。在本公开实施例中,术语“并”不对步骤的先后顺序造成影响。
以上所述,仅为本公开的实施方式,但本公开的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本公开揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本公开的保护范围之内。因此,本公开的保护范围应以所述权利要求的保护范围为准。
Claims (14)
1.一种基于增强现实的交互方法,其特征在于,所述方法包括:
响应于采集的真实场景图像中包括目标活动对应的标记物,获取所述目标活动对应的交互配置文件;
基于所述交互配置文件在所述真实场景图像中渲染虚拟交互对象,得到增强现实图像并展示;所述虚拟交互对象的渲染状态由所述交互配置文件确定,所述渲染状态用于确定所述虚拟交互对象的特征展示程度;
通过所述增强现实图像接收用户针对所述虚拟交互对象的交互操作,渲染所述交互操作对应的增强现实效果。
2.根据权利要求1所述的方法,其特征在于,所述基于所述交互配置文件在所述真实场景图像中渲染虚拟交互对象,得到增强现实图像,包括:
基于所述目标活动对应的交互配置文件,确定所述虚拟交互对象对应的渲染素材和所述目标活动的活动状态;
基于所述活动状态,确定所述虚拟交互对象的渲染状态;
基于所述虚拟交互对象对应的渲染素材和渲染状态,在所述真实场景图像中渲染所述虚拟交互对象,得到增强现实图像。
3.根据权利要求2所述的方法,其特征在于,所述基于所述活动状态,确定所述虚拟交互对象的渲染状态,包括:
在所述活动状态表征所述目标活动未确定活动时间或所述目标活动还未开始的情况下,确定所述渲染状态为第一渲染状态;所述第一渲染状态为展示所述虚拟交互对象的部分特征的状态;
在所述活动状态表征所述目标活动正在进行或所述目标活动已经结束的情况下,确定所述渲染状态为所述第二渲染状态;所述第二渲染状态为展示所述虚拟交互对象的全部特征的状态。
4.根据权利要求1至3任一项所述的方法,其特征在于,所述增强现实图像包括用于显示提示消息的文案区域;所述方法还包括:
获取所述活动状态对应的提示文案;所述提示文案用于提示所述目标活动的活动状态;
在所述增强现实区域中的文案区域中渲染所述提示文案。
5.根据权利要求2或3所述的方法,其特征在于,所述提示文案还用于提示所述活动状态对应的预设交互操作,所述通过所述增强现实图像接收用户针对所述虚拟交互对象的交互操作,渲染所述交互操作对应的增强现实效果,包括:
通过所述增强现实图像接收用户针对所述虚拟交互对象的实时交互操作;
响应于所述实时交互操作与所述活动状态对应的预设交互操作相同,渲染所述预设交互操作对应的增强现实效果。
6.根据权利要求1至4任一项所述的方法,其特征在于,在所述目标活动的活动状态表征所述目标活动正在进行的情况下,所述方法还包括:
响应于渲染所述交互操作对应的增强现实效果,展示收藏提示控件;所述收藏提示控件用于展示所述目标活动对应的目标数字化物品的收藏状态;
接收用户针对所述收藏提示控件的触发操作,跳转至所述目标活动对应的收藏界面;所述收藏界面用于展示所述目标数字化物品及所述目标数字化物品的收藏状态。
7.根据权利要求6所述的方法,其特征在于,所述展示所述收藏状态对应的收藏界面,包括:
在所述收藏状态为所述目标数字化物品未被收藏的第一收藏状态的情况下,展示所述第一收藏状态对应的物品领取界面;所述物品领取界面用于响应所述目标数字化物品的领取操作,将所述目标数字化物品添加至用户账户中;
在所述收藏状态为所述目标数字化物品已被收藏的第二收藏状态的情况下,展示所述第二收藏状态对应的物品查看界面;所述物品查看界面用于展示所述用户账户中存在的至少一个已收藏对象;所述至少一个已收藏对象至少包括所述目标数字化物品。
8.根据权利要求1至4任一项所述的方法,其特征在于,在所述目标活动的活动状态表征所述目标活动已经结束的情况下,所述方法还包括:
展示收藏跳转控件;所述收藏跳转控件用于展示所述目标活动对应的目标数字化物品的收藏状态,并提示所述目标数字化物品已经停止领取;
响应于所述收藏跳转控件的触发操作,跳转至所述目标活动对应的收藏界面;所述收藏界面用于展示所述目标数字化物品。
9.根据权利要求8所述的方法,其特征在于,所述展示所述收藏状态对应的收藏界面,包括:
在所述收藏状态为所述目标数字化物品已被收藏的第二收藏状态的情况下,展示所述第二收藏状态对应的物品查看界面;所述物品查看界面用于展示所述用户账户中存在的至少一个已收藏对象;所述至少一个已收藏对象至少包括所述目标数字化物品;
在所述收藏状态为所述目标数字化物品未被收藏的第一收藏状态的情况下,展示所述第一收藏状态对应的公共收藏对象展示界面;所述公共收藏对象展示界面用于展示已发布的虚拟收藏对象。
10.根据权利要求6至9任一项所述的方法,其特征在于,所述收藏界面还包括物品信息展示控件和/或返回控件;所述方法还包括:
接收所述用户针对所述物品信息展示控件的触发操作,跳转至所述目标数字化物品对应的详情界面;和/或,
接收所述用户针对所述返回控件的触发操作,返回展示所述增强现实图像。
11.根据权利要求10所述的方法,其特征在于,所述详情界面包括增强现实展示控件;所述方法还包括:响应于所述增强现实展示控件的触发操作,在采集的实时场景图像中渲染所述目标数字化物品对应的虚拟交互对象,得到新的增强现实图像并展示。
12.一种基于增强现实的交互装置,其特征在于,包括:
获取模块,用于响应于采集的真实场景图像中包括目标活动对应的标记物,获取所述目标活动对应的交互配置文件;
第一渲染模块,用于基于所述交互配置文件在所述真实场景图像中渲染虚拟交互对象,得到增强现实图像并展示;所述虚拟交互对象的渲染状态由所述交互配置文件确定,所述渲染状态用于确定所述虚拟交互对象的特征展示程度;
第二渲染模块,用于通过所述增强现实图像接收用户针对所述虚拟交互对象的交互操作,渲染所述交互操作对应的增强现实效果。
13.一种基于增强现实的交互设备,其特征在于,包括:存储器和处理器,
所述存储器存储有可在所述处理器上运行的计算机程序,
所述处理器执行所述计算机程序时实现权利要求1至11任一项所述方法中的步骤。
14.一种计算机存储介质,其特征在于,所述计算机存储介质存储有一个或者多个程序,所述一个或者多个程序可被一个或者多个处理器执行,以实现权利要求1至11任一项所述方法中的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111658419.2A CN114356087A (zh) | 2021-12-30 | 2021-12-30 | 一种基于增强现实的交互方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111658419.2A CN114356087A (zh) | 2021-12-30 | 2021-12-30 | 一种基于增强现实的交互方法、装置、设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114356087A true CN114356087A (zh) | 2022-04-15 |
Family
ID=81105259
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111658419.2A Withdrawn CN114356087A (zh) | 2021-12-30 | 2021-12-30 | 一种基于增强现实的交互方法、装置、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114356087A (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107077755A (zh) * | 2016-09-30 | 2017-08-18 | 深圳达闼科技控股有限公司 | 虚拟与现实融合方法、系统和虚拟现实设备 |
CN111459488A (zh) * | 2020-06-19 | 2020-07-28 | 嘉兴太美医疗科技有限公司 | 表单页面的渲染方法、装置、系统和可读介质 |
CN111553972A (zh) * | 2020-04-27 | 2020-08-18 | 北京百度网讯科技有限公司 | 用于渲染增强现实数据的方法、装置、设备及存储介质 |
CN111815781A (zh) * | 2020-06-30 | 2020-10-23 | 北京市商汤科技开发有限公司 | 增强现实数据呈现方法、装置、设备和计算机存储介质 |
CN112148197A (zh) * | 2020-09-23 | 2020-12-29 | 北京市商汤科技开发有限公司 | 增强现实ar交互方法、装置、电子设备及存储介质 |
-
2021
- 2021-12-30 CN CN202111658419.2A patent/CN114356087A/zh not_active Withdrawn
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107077755A (zh) * | 2016-09-30 | 2017-08-18 | 深圳达闼科技控股有限公司 | 虚拟与现实融合方法、系统和虚拟现实设备 |
CN111553972A (zh) * | 2020-04-27 | 2020-08-18 | 北京百度网讯科技有限公司 | 用于渲染增强现实数据的方法、装置、设备及存储介质 |
CN111459488A (zh) * | 2020-06-19 | 2020-07-28 | 嘉兴太美医疗科技有限公司 | 表单页面的渲染方法、装置、系统和可读介质 |
CN111815781A (zh) * | 2020-06-30 | 2020-10-23 | 北京市商汤科技开发有限公司 | 增强现实数据呈现方法、装置、设备和计算机存储介质 |
CN112148197A (zh) * | 2020-09-23 | 2020-12-29 | 北京市商汤科技开发有限公司 | 增强现实ar交互方法、装置、电子设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110850983B (zh) | 视频直播中的虚拟对象控制方法、装置和存储介质 | |
White et al. | Toward accessible 3D virtual environments for the blind and visually impaired | |
WO2023020622A1 (zh) | 一种显示方法、装置、电子设备、计算机可读存储介质、计算机程序及计算机程序产品 | |
US20170263035A1 (en) | Video-Associated Objects | |
CN114930399A (zh) | 使用基于表面的神经合成的图像生成 | |
WO2013120851A1 (en) | Method for sharing emotions through the creation of three-dimensional avatars and their interaction through a cloud-based platform | |
CN101437024A (zh) | 用于在虚拟共享空间中自动生成引用标记的方法和设备 | |
US20120259712A1 (en) | Advertising in a virtual environment | |
KR20180059117A (ko) | 영상 인식에 의한 해시태그 삽입방법 및 그 방법을 수행하는 소프트웨어가 저장된 소프트웨어 분배 서버 | |
CN105183477A (zh) | 应用程序虚拟道具信息获取系统及获取方法 | |
CN113867531A (zh) | 交互方法、装置、设备及计算机可读存储介质 | |
CN113485617B (zh) | 动画展示方法、装置、电子设备及存储介质 | |
CN112181573A (zh) | 媒体资源展示方法、装置、终端、服务器以及存储介质 | |
WO2023045964A1 (zh) | 显示方法、装置、设备、计算机可读存储介质、计算机程序产品及计算机程序 | |
CN114332374A (zh) | 一种虚拟显示方法、设备以及存储介质 | |
CN113760161A (zh) | 数据生成、图像处理方法、装置、设备及存储介质 | |
CN112330819A (zh) | 基于虚拟物品的交互方法、装置及存储介质 | |
CN112990043A (zh) | 一种服务交互方法、装置、电子设备及存储介质 | |
CN108924381A (zh) | 图像处理方法、图像处理装置及计算机可读介质 | |
CN113392690A (zh) | 视频语义标注方法、装置、设备及存储介质 | |
CN112073740A (zh) | 信息显示方法、装置、服务器及存储介质 | |
CN113326709B (zh) | 展示方法、装置、设备及计算机可读存储介质 | |
CN111741321A (zh) | 一种直播控制方法、装置、设备及计算机存储介质 | |
CN114116086A (zh) | 一种页面编辑方法、装置、设备及存储介质 | |
CN113722619A (zh) | 内容显示方法、装置、设备及计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WW01 | Invention patent application withdrawn after publication | ||
WW01 | Invention patent application withdrawn after publication |
Application publication date: 20220415 |