CN109345637B - 基于增强现实的互动方法及装置 - Google Patents

基于增强现实的互动方法及装置 Download PDF

Info

Publication number
CN109345637B
CN109345637B CN201810982275.8A CN201810982275A CN109345637B CN 109345637 B CN109345637 B CN 109345637B CN 201810982275 A CN201810982275 A CN 201810982275A CN 109345637 B CN109345637 B CN 109345637B
Authority
CN
China
Prior art keywords
capability
attribute
interactive
virtual
action
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810982275.8A
Other languages
English (en)
Other versions
CN109345637A (zh
Inventor
吴瑾
段青龙
季婧
吴承军
程佳慧
王亚迪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Advanced New Technologies Co Ltd
Advantageous New Technologies Co Ltd
Original Assignee
Advanced New Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Advanced New Technologies Co Ltd filed Critical Advanced New Technologies Co Ltd
Priority to CN201810982275.8A priority Critical patent/CN109345637B/zh
Priority to CN202110267750.5A priority patent/CN113112614B/zh
Publication of CN109345637A publication Critical patent/CN109345637A/zh
Priority to TW108122074A priority patent/TWI721466B/zh
Priority to PCT/CN2019/096094 priority patent/WO2020042786A1/zh
Application granted granted Critical
Publication of CN109345637B publication Critical patent/CN109345637B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/20Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Architecture (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本说明书提出了一种基于增强现实的互动方法,包括:在扫描到的实景画面中增强显示虚拟互动对象;响应于用户发起的与所述虚拟互动形象的互动操作,获取与所述虚拟互动对象的互动动作对应的动作图像序列;将获取到的动作图像序列与所述实景画面进行渲染融合,生成互动图像序列,并基于所述互动图像序列生成与所述虚拟互动形象的互动记录。

Description

基于增强现实的互动方法及装置
技术领域
本申请涉及增强现实领域,尤其涉及一种基于增强现实的互动方法及装置。
背景技术
AR(Augmented Reality,增强现实)技术,是一种通过实时扫描真实环境获取实景画面,并在实景画面上叠加相应的虚拟数据(比如图像、视频、3D模型等),进而对虚拟世界与现实世界进行融合的技术。由于在实景画面上叠加虚拟数据,可以对实景画面的展示效果进行增强,因此通过引入AR技术,能够面向用户提供一个全新的交互体验。
发明内容
本说明书提出一种基于增强现实的互动方法,所述方法包括:
在扫描到的实景画面中增强显示虚拟互动对象;
响应于用户发起的与所述虚拟互动形象的互动操作,获取与所述虚拟互动对象的互动动作对应的动作图像序列;
将获取到的动作图像序列与所述实景画面进行渲染融合,生成互动图像序列,并基于所述互动图像序列生成与所述虚拟互动形象的互动记录。
本说明书还提出一种基于增强现实的互动装置,所述装置包括:
显示模块,在扫描到的实景画面中增强显示虚拟互动对象;
获取模块,响应于用户发起的与所述虚拟互动形象的互动操作,获取与所述虚拟互动对象的互动动作对应的动作图像序列;
融合模块,将获取到的动作图像序列与所述实景画面进行渲染融合,生成互动图像序列;
生成模块,基于所述互动图像序列生成与所述虚拟互动形象的互动记录。
本说明书还提出一种电子设备,所述电子设备包括:
处理器;
用于存储机器可执行指令的存储器;
其中,通过读取并执行所述存储器存储的与基于增强现实的互动逻辑对应的机器可执行指令,所述处理器被促使:
在扫描到的实景画面中增强显示虚拟互动对象;
响应于用户发起的与所述虚拟互动形象的互动操作,获取与所述虚拟互动对象的互动动作对应的动作图像序列;
将获取到的动作图像序列与所述实景画面进行渲染融合,生成互动图像序列,并基于所述互动图像序列生成与所述虚拟互动形象的互动记录。
在以上技术方案中,一方面,由于在实景画面中增强显示虚拟互动对象,可以将虚拟互动形象融入到实景画面中与用户进行互动;因此,可以提升用户与虚拟互动对象进行互动的真实感;
另一方面,由于用户发起的与虚拟互动对象的互动操作,会触发将虚拟互动对象的互动动作对应的动作图像序列与实景画面进行渲染融合,并根据渲染融合结果来生成互动记录;因此,对于用户而言,发起的与虚拟互动对象的互动操作,最终会影响生成的互动记录所记录的内容,使得用户可以通过发起不同形式的互动操作,来触发将虚拟互动形象的多样化的互动动作与实景画面进行融合,来生成内容丰富的互动记录。
附图说明
图1是一示例性实施例提供的一种基于基于增强现实的互动方法的流程图。
图2是一示例性实施例提供的一种在实景画面中增强显示虚拟交互对象的示意图。
图3是一示例性实施例提供的一种与虚拟互动对象进行合影互动的示意图。
图4是一示例性实施例提供的一种与虚拟互动对象进行能力提升互动的示意图。
图5是一示例性实施例提供的一种装饰虚拟互动对象的示意图。
图6是一示例性实施例提供的一种查看虚拟互动对象的能力等级的示意图。
图7是一示例性实施例提供的一种查看与虚拟互动对象的交互记录的示意图。
图8是一示例性实施例提供的一种基于增强现实的交互装置的框图。
图9是一示例性实施例提供的一种电子设备的结构示意图。
具体实施方式
本说明书旨在提出了一种用户通过与在实景画面中增强显示的虚拟互动对象进行互动,来触发将虚拟互动对象的互动动作对应的动作图像序列与实景画面进行渲染融合后,生成互动记录的交互模式。
在实现时,用户可以通过AR客户端对所处的真实环境进行图像扫描;而AR客户端可以响应用户发起的在实景画面中显示虚拟互动对象的操作,在扫描到的实景画面中增强显示预设的虚拟互动对象;
例如,在实际应用中,上述虚拟互动对象具体可以是一个能够做出各种互动动作与用户进行互动的动态虚拟形象(比如,动态3D卡通形象);而在扫描到的实景画面中,可以提供一个与上述虚拟互动对象对应的“召唤”按钮,用户可以通过诸如点击等方式来操作该“召唤”按钮,触发AR客户端在实景画面中相对的位置上来增强显示上述虚拟互动对象。
当AR客户端在实景画面中增强显示了上述虚拟互动对象之后,用户可以通过发起相应的互动操作,与该虚拟互动对象进行互动;而AR客户端在检测到用户发起的互动操作后,可以响应用户发起的与上述虚拟互动对象的互动操作,获取与该虚拟互动对象的互动动作对应的动作图像序列(比如,动作动画),并将获取到的动作图像序列与上述实景画面进行渲染融合生成互动图像序列;然后,可以基于生成的互动图像序列,来进一步生成与上述虚拟互动形象的互动记录。
在以上技术方案中,使得用户通过与在实景画面中增强显示的虚拟互动对象进行互动,就可以触发将虚拟互动对象的互动动作对应的动作图像序列与实景画面进行渲染融合,并基于渲染融合生成的互动图像序列,来进一步生成互动记录;
一方面,由于在实景画面中增强显示虚拟互动对象,可以将虚拟互动形象融入到实景画面中与用户进行互动;因此,可以提升用户与虚拟互动对象进行互动的真实感;
另一方面,由于用户发起的与虚拟互动对象的互动操作,会触发将虚拟互动对象的互动动作对应的动作图像序列与实景画面进行渲染融合,并根据渲染融合结果来生成互动记录;因此,对于用户而言,发起的与虚拟互动对象的互动操作,最终会影响生成的互动记录所记录的内容,使得用户可以通过发起不同形式的互动操作,来触发将虚拟互动形象的多样化的互动动作与实景画面进行融合,来生成内容丰富的互动记录。
下面通过具体实施例并结合具体的应用场景对本申请进行描述。
请参考图1,图1是本申请一实施例提供的一种基于基于增强现实的互动方法,应用于AR客户端,所述方法执行以下步骤:
步骤102,在扫描到的实景画面中增强显示虚拟互动对象;
步骤104,响应于用户发起的与所述虚拟互动形象的互动操作,获取与所述虚拟互动对象的互动动作对应的动作图像序列;
步骤106,将获取到的动作图像序列与所述实景画面进行渲染融合,生成互动图像序列;
步骤108,基于所述互动图像序列生成与所述虚拟互动形象的互动记录。
上述AR客户端,包括基于AR技术开发的,或者集成了AR功能的客户端软件;例如,上述AR客户端,可以是集成了AR服务功能的APP应用;上述AR客户端可以通过搭载的图像扫描功能,对用户所处的真实环境进行图像扫描,来获取实景画面;以及,通过上述AR客户端搭载的AR引擎,对后台的AR服务端推送的虚拟数据(比如需要在实景画面中增强显示的图像序列)进行可视化渲染,将其与实景画面进行叠加融合,以完成上述虚拟数据在实景画面中的增强显示。
上述AR服务端,包括面向上述AR客户端提供服务的服务器、服务器集群或者基于服务器集群构建的分布式服务平台;例如,上述AR服务端,可以是面向集成了AR功能的APP提供对接服务的分布式平台;上述AR服务端可以对需要在AR客户端扫描到的实景画面中增强显示的虚拟数据进行内容管理,并向上述AR客户端推送需要在实景画面中增强显示的虚拟数据。
上述虚拟互动对象,包括能够做出多样化的互动动作与用户进行互动的,任意形态的动态虚拟形象;例如,能够做出各种互动动作的动态3D卡通形象。
需要说明的是,虚拟互动对象能够做出的互动动作,可以由AR客户端的运营方、或者向上述运营方提供服务的第三方ISV(Independent Software Vendors,独立软件开发商)基于实际的互动需求进行动作设计,并生成相应的动作图像序列(即与互动动作相关的动画文件)。
其中,对于生成的与虚拟互动对象的互动动作对应的动作图像序列,可以由AR服务端作为需要在实景画面中增强显示的虚拟数据进行统一维护和管理。
上述互动记录,具体用于记录用户与虚拟互动对象进行互动的互动结果;其中,上述互动记录的具体形式,在本说明书中不进行特别限定;
例如,在一种实现方式中,以上述虚拟交互对象为3D卡通形象为例,上述互动记录具体可以抽象成3D卡通形象的日记的形式,向用户进行呈现。
在本说明中,在AR客户端的用户界面中,可以提供一个AR扫描入口;用户可以通过触发该扫描入口,进入到AR扫描界面,发起对所处的真实环境进行图像扫描;
例如,在一种实现方式中,在AR客户端的用户主页中,可以提供一个“扫一扫”入口,用户通过触发该“扫一扫”入口可以进入到AR扫描界面,对所处真实环境进行图像扫描。
而AR客户端,可以在AR扫描界面中实时的输出扫描到的实景画面,并默认在输出的实景画面中增强显示一个用于触发在实景画面中增强显示虚拟互动对象的操作入口,使得用户可以通过该操作入口发起在AR扫描界面输出的实景画面中显示虚拟互动对象。
以上述虚拟交互对象为名为“星宝”的虚拟3D卡通形象为例进行说明。
请参见图2,图2为本说明书示出的一种在实景画面中增强显示虚拟交互对象的示意图。
如图2所示,上述操作入口,具体可以是一个与“星宝”对应的“召唤”按钮,用户可以通过诸如点击等方式来触发该“召唤”按钮,将“星宝”召唤至实景画面进行增强显示。
而AR客户端在检测到用户针对上述“召唤”按钮的触发操作后,可以从AR服务端获取与虚拟互动对象的互动动作相关的动作图像序列(比如动画文件),并将获取到的动作图像序列在实景画面中相对的位置进行增强显示。
例如,在一种实现方式中,对于在AR服务端维护管理的虚拟互动对象的若干种互动动作中,可以设置一种用于默认展示的互动动作;当AR服务端在检测到用户针对上述“召唤”按钮的触发操作后,可以从AR服务端获取与该默认展示的互动动作对应的动作图像序列,然后将获取到的动作图像序列,在实景画面中进行增强显示。
在本说明书中,当AR客户端在实景画面中增强显示了虚拟互动对象之后,用户可以通过在实景画面中发起特定的互动操作,来与虚拟互动对象进行互动。
在示出的一种实施方式中,用户可以通过直接与虚拟互动对象进行交互来完成互动;
例如,在实现时,用户可以通过触碰在实景画面中增强显示的虚拟互动对象,来触发虚拟互动对象做出不同的互动动作;在这种情况下,虚拟互动对象所能做出的互动动作,具体可以由用户针对虚拟互动对象的触碰操作,来随机触发。AR客户端在检测到用户针对该虚拟互动对象的触碰操作后,可以获取AR服务端随机分配的互动动作对应的动作图像序列,然后将获取到的动作图像序列在实景画面中进行增强显示。
在示出的另一种实施方式中,用户也可以通过AR客户端在实景画面中增强显示的若干互动入口,在特定的互动场景下与虚拟互动对象进行互动。
在这种情况下,AR客户端可以在实景画面中增强显示若干互动入口;其中,每一个互动入口,都可以分别对应一种由AR客户端的运营方定义的,用户与虚拟互动对象进行互动的互动场景;从而,用户可以通过触发这些互动入口,在实景画面中发起相应的互动操作,在不同的互动场景下与虚拟互动对象进行互动。
其中,需要说明的是,用户与虚拟互动对象之间的互动方式以及具体互动形式,在本说明书中均不进行特别限定,在实际应用中,可以由AR客户端的运营方基于实际的互动需求,来灵活定制多样化的互动场景。
以下结合具体的互动场景进行详细说明。
1)与“星宝”进行合影互动
在示出的一种互动场景下,用户可以发起“星宝”与实景画面进行合影互动,来触发AR客户端将“星宝”当前展示的互动动作对应的动作图像序列,与实景画面进行渲染融合后,生成合影互动的互动记录。
请参见图3,图3为本说明书示出的一种与虚拟互动对象进行合影互动的示意图。
如图3所示,AR客户端可以在实景画面中增强显示一个“合影互动”按钮;用户可以通过诸如点击等方式触发该“合影互动”按钮,在实景画面中发起与“星宝”进行合影的互动操作。
而AR客户端在检测到用户针对“合影互动”按钮的触发操作后,可以对用户发起的与“星宝”进行合影的互动操作进行响应,从AR服务端获取“星宝”当前展示的互动动作对应的动作图像序列。
进一步的,当AR客户端从AR服务端获取“星宝”当前展示的互动动作对应的动作图像序列之后,可以通过AR客户端搭载的AR引擎将获取到的动作图像序列,与实景画面进行渲染融合,生成互动图像序列;然后,可以基于生成的互动图像序列来进一步生成与“星宝”进行合影互动的互动记录。
例如,用户在旅行中,可以通过AR客户端扫描所处的真实环境,并在扫描到的实景画面中召唤“星宝”,然后通过在实景画面中发起与“星宝”进行合影互动,来触发AR客户端将“星宝”当前展示的互动动作对应的动画文件,与实景画面进行渲染融合,生成合影动画文件;然后,AR客户端可以基于该合影动画文件来生成“星宝”的“旅行日记”,作为用户与“星宝”之间的互动记录。
2)与“星宝”进行能力提升互动
在示出的另一种互动场景下,可以为“星宝”设置多个类别的能力属性;还可以为各个类别的能力属性划分出若干属性等级,并为“星宝”设置属性等级提升时会触发解锁新的互动动作的互动情景。
进一步的,还可以为“星宝”定义一种能够提升其能力属性的互动操作,用户可以通过在实景画面中发起该互动操作,来触发对应于“星宝”各个类别的能力属性的等级提升事件,为“星宝”解锁新的互动动作;
进而,AR客户端可以获取为“星宝”解锁新的互动动作,将该解锁的新的互动动作对应的动作图像序列,与实景画面进行渲染融合后,生成提升“星宝”的能力属性的互动记录。
也即,在这种互动场景下,“星宝”的能力属性的提升,会触发AR客户端生成记录“星宝”的能力属性的提升的互动记录;并且,“星宝”不同的能力属性的提升,触发AR客户端生成的互动记录中的内容,也会各不相同。
在示出的一种实施方式中,为“星宝”定义的能够提升其能力属性的互动操作,具体可以是针对实景画面中的目标物品进行图像识别的互动操作。也即,用户可以发起针对实景画面的目标物品进行图像识别的互动操作,来触发对应于“星宝”各个类别的能力属性的等级提升事件,为“星宝”解锁新的互动动作;
在这种互动情景下,星宝”的各个类别的能力属性,可以分别关联用于提升能力属性的物品集合。用户可以通过AR客户端扫描实景画面中与“星宝”的各个类别的能力属性关联的物品,帮助“星宝”探索真实世界,来触发对应于“星宝”各个类别的能力属性的等级提升事件。
以下以为“星宝”定义的能够提升其能力属性的互动操作,为针对实景画面中的目标物品进行图像识别的互动操作为例进行说明;
其中,需要强调的是,以为“星宝”定义的能够提升其能力属性的互动操作,为针对实景画面中的目标物品进行图像识别的互动操作为例进行说明,仅为示例性的;在实际应用中,AR客户端的运营方,也可以为虚拟互动对象定义其它形式的互动操作,来提升上述虚拟互动形象的能力属性,在本说明书中不再进行一一列举;
例如,在另一种情景下,为虚拟互动对象定义的能够提升其能力属性的互动操作,具体也可以是在新的LBS位置“召唤”虚拟互动形象的互动操作;而虚拟互动对象的各个类别的能力属性,可以分别关联用于提升能力属性的LBS位置集合。在这种互动情景下,用户可以通过AR客户端在一个新的LBS位置上召唤虚拟互动形象,来提升该虚拟互动对象对应的能力属性。
请参见图4,图4为本说明书示出的一种与虚拟互动对象进行能力提升互动的示意图。
如图4所示,AR客户端可以在实景画面中增强显示一个“探索世界”按钮。用户可以通过诸如点击等方式触发该“探索世界”按钮,发起对实景画面中的目标物品进行图像识别的互动操作,来帮助“星宝”探索真实世界,以提升“星宝”的能力属性。
AR客户端在检测到用户针对“探索世界”按钮的触发操作后,可以进入AR图像扫描界面,对用户发起的对实景画面中的目标物品进行图像识别的互动操作进行响应,对上述目标物品进行图像扫描,来采集上述目标物品的图像特征,并基于采集到的图像特征对上述目标物品进行图像识别;
其中,需要说明的是,以上描述的图像识别过程,可以在AR客户端上完成,也可以在AR服务端上完成;
例如,在一种情况下,AR客户端可以预先将AR服务端上存储的图像特征样本库同步到本地;其中,在该图像特征样本库中存储了大量预先定义的物品的图像特征样本。而AR客户端在采集到上述目标物品的图像特征后,可以将该图像特征上述图像特征样本库中的图像特征样本分别进行相似度匹配;当提取到的图像特征与上述图像特征库中存储的任一预先定义的物品的图像特征样本匹配时,此时可以确认从扫描的实景图像中成功识别到了该目标物品。在另一种情况下,AR客户端也可以将采集到上述目标物品的图像特征上传至AR服务端,由AR服务端基于以上示出的相同方式来完成图像识别,然后将图像识别结果返回给AR客户端。
当完成针对上述目标物品的图像识别后,AR客户端基于图像识别结果,来确认上述目标物品是否匹配与“星宝”的各个类别的能力属性关联的物品;
一方面,如果上述目标物品匹配与任一类别的能力属性关联的物品,此时AR客户端可以基于第一预设幅度提升该能力属性对应的属性值;
另一方面,如果上述目标物品匹配与各个类别的能力属性关联的物品均不匹配,此时可以基于第二预设幅度提升同时提升各个类别的能力属性对应的属性值;其中,上述第二预设幅度可以远小于上述第一预设幅度。
通过这种方式,可以在上述目标物品匹配与任一类别的能力属性关联的物品时,按照一个较大的幅度来提升该能力属性对应的属性值;以及,在上述目标物品与各个类别的能力属性关联的物品均不匹配时,按照一个较小的幅度同时提升各个类别得能力属性对应的属性值。
通过这种方式,可以保证无论上述目标物品是否匹配与各个类别的能力属性关联的物品,各个类别的能力属性对应的属性值均能够保持一定大小的提升,从而可以提升用户的互动体验。
当然,在实际应用中,如果上述目标物品匹配与各个类别的能力属性关联的物品均不匹配,此时也可以不对各个类别的能力属性对应的属性值进行任何形式的提升,在本说明书中不进行特别限定。
请参见图5,在示出的一种实施方式中,AR客户端还可以在实景画面中增强显示一个“装饰”按钮,用户可以通过诸如点击等方式触发该“装饰”按钮,发起对在实景画面中增强显示的“星宝”的虚拟形象进行装饰,为“星宝”自定义设置喜欢的虚拟形象。
而AR客户端在检测到用户针对“装饰”按钮的触发操作后,可以进入为“星宝”配置的装饰元素列表,此时用户可以在装饰元素列表中选择喜欢的装饰元素,对“星宝”进行装饰,来为“星宝”自定义设置喜欢的虚拟形象。
其中,上述装饰元素列表中呈现的装饰元素的种类以及具体的装饰元素,在本说明书不进行特别限定;
例如,图5中示出的装饰元素列表中,具体包括“头饰”、“颈饰”、“服饰”等种类的装饰元素。
请继续参见图5,在示出的一种实施方式中,上述装饰元素列表中提供的装饰元素中,可以包括少量的可供用户直接选择的装饰元素,还可以包括若干种上位解除锁定的装饰元素;
其中,对于每种尚未解除锁定的装饰元素,可以分别关联一种或者多种指定物品。
在这种情况下,当完成针对上述目标物品的图像识别后,AR客户端还可以基于图像识别结果,确定该目标物品是否为与尚未解除锁定的各种装饰元素关联的指定物品;如果上述目标物品为上述指定物品,AR客户端可以获取与该指定物品关联的装饰元素,将该装饰元素添加至与上述装饰元素列表,并将该装饰元素在上述装饰元素列表中进行解除锁定。
通过这种方式,使得用户在通过对实景画面中的目标物品进行图像识别,来提升“星宝”的能力属性时,还可以有一定概率获得用于对“星宝”进行装饰的装饰元素,从可以可以提升用户的互动体验。
在示出的一种实施方式中,AR客户端除了可以为“星宝”的各个类别的能力属性划分属性等级以外,还可以针对“星宝”的各个类别的能力属性对应的属性值进行加权计算,得到“星宝”的总能力值,并根据总能力值来计算出“星宝”的能力等级,然后将计算得到的“星宝”的总能力值,和计算出的“星宝”的能力等级,在实景画面中向用户进行输出;
请参见图6,在示出的一种实施方式中,AR客户端可以在实景画面中增强显示一个“能力等级”按钮,用户可以通过诸如点击等方式触发该“能力等级”按钮,来查看“星宝”各个类别的属性等级的属性值,以及AR客户端计算出的“星宝”的总能力值和基于总能力值计算出的“星宝”的能力等级。
而AR客户端在检测到用户针对“能力等级”按钮的触发操作后,可以进入“星宝”的能力属性界面,通过能力属性界面向用户展示“星宝”的各个类别的能力属性的属性值,以及AR客户端计算出的“星宝”的总能力值和基于总能力值计算出的“星宝”能力等级。
例如,图6中示出的为“星宝”设置的能力属性,包括“生活”、“运动”、“创造”、以及“社交”等能力属性;在上述能力属性界面中,将展示“生活”、“运动”、“创造”、以及“社交”等能力属性对应的属性值;其中,AR客户端可以为以上四种能力属性分别设置一个权重系数,并将以上四种能力属性对应的属性值分别乘以设置的权重系数之后,再进行求和运算,得到“星宝”的总能力值;然后,再基于计算出的“星宝”的总能力值,计算出“星宝”的能力等级,将计算出的“星宝”的总能力值和能力等级,在上述能力属性界面中进行展示。
其中,需要说明的是,在本说明书中,无论是为“星宝”的各个类别的能力属性划分等级,还是为“星宝”的总能力值划分等级,均可以通过为每一个等级设置相应的阈值来实现;
例如,请参见图6,可以对“星宝”的“生活”、“运动”、“创造”、以及“社交”等能力属性划分出若干属性等级,并为每一个属性等级设置一个阈值,如果某一能力属性的属性值达到了与某一个属性等级对应的阈值后,即可以认为该能力属性提升至了该属性等级;
相似的,对于“星宝”的总能力值而言,也可以划分出若干能力等级,并为每一个能力等级设置一个阈值,如果通过加权计算得到的总能力值达到某一个能力等级对应的阈值后,即可以认为“星宝”的总能力值提升至了该能力等级;比如,如图6所示,“星宝”当前的能力等级为level5,下一能力等级level6的阈值为800,也即当“星宝”当前的总能力值达到800时,“星宝”的能力等级将会提升至level6。
在本说明书中,用户通过AR客户端扫描实景画面中与“星宝”的各个类别的能力属性关联的物品,触发的对应于“星宝”各个类别的能力属性的等级提升事件,具体可以包括以下示出的几类事件:
第一,“星宝”的各个类别的能力属性的属性等级提升的事件;
第二,“星宝”的能力等级的提升的事件;
第三,“星宝”的各个类别的能力属性的属性等级,和“星宝”的能力等级同时提升的事件。
在示出的一种实施方式中,以上述等级提升事件,为“星宝”的各个类别的能力属性的属性等级提升的事件为例,如果AR客户端完成对用户扫描的目标物品的图像识别,并根据图像识别结果对“星宝”的某一个或者多个类别的能力属性的属性值进行提升后,可以进一步确定提升后的属性值是否触发了“星宝”的能力属性的属性等级的提升;
例如,如果某一个类别的能力属性的属性值提升后,AR客户端可以将提升后的属性值,与该能力属性的各个属性等级对应的阈值进行比较,来确定提升后的属性值是否触发了该能力属性的属性等级的提升;比如,如图6所示,假设“星宝”的“运动”能力属性提升后的属性值为648,“运动”能力属性下一个能力等级的阈值为800;那么AR客户端可以将该属性值648,与阈值800进行比较;此时提升后的属性值小于阈值,可以认为提升后的属性值并未触发“星宝”的“运动”能力属性的属性能力的提升。
如果提升后的属性值触发了“星宝”的能力属性的属性等级的提升,AR客户端可以进一步确定出“星宝”的各个类别的能力属性中,属性等级发生提升的目标能力属性;
一方面,如果各个类别的能力属性中,仅包括属性等级提升的唯一能力属性,也即提升后的属性值仅触发了“星宝”的多个类别的能力属性中的单个能力属性的属性等级的提升,则可以将能力等级提升的该能力属性确定为目标能力属性;
例如,请参见图6,假设AR客户端根据图像识别结果,确定用户扫描的目标物品匹配与“星宝”的“生活”能力属性关联的物品,此时可以基于第一预设幅度提升“星宝”的“生活”能力属性对应的属性值;在这种情况下,如果“星宝”的“生活”能力属性提升后的属性值,触发了“生活”能力属性的属性等级提升事件,则可以将“星宝”的“生活”能力属性确定为目标能力属性。
另一方面,如果各个类别的能力属性中,包括属性等级提升的多个类别的能力属性,也即提升后的属性值触发了“星宝”的多个能力属性的属性等级的提升,此时可以进一步比较属性等级提升的该多个能力属性的属性值,将该多个能力属性中属性值最高的能力属性确定为目标能力属性。
请参见图6,假设AR客户端根据图像识别结果,确定用户扫描的目标物品与“星宝”的各个类别的能力属性关联的物品均不匹配,可以基于第二预设幅度分别提升“星宝”的“生活”、“运动”、“创造”、以及“社交”等能力属性对应的属性值;
在这种情况下,如果“星宝”的“生活”、“运动”、“创造”、以及“社交”等能力属性提升后的属性值,分别触发了“生活”、“运动”、“创造”、以及“社交”等能力属性能的属性等级提升事件,则可以进一步比较“星宝”的“生活”、“运动”、“创造”、以及“社交”等能力属性的属性值,将属性值最高的“生活”能力属性,确定为目标能力属性。
进一步的,当AR客户端通过以上示出的方式,确定出属性等级发生提升的目标能力属性之后,可以从AR服务端获取该目标能力属性的属性等级提升时,解锁的最新的互动动作对应的动作图像序列,然后将获取到的动作图像序列,与实景画面进行渲染融合,生成互动图像序列,并基于生成的互动图像序列,来生成与“星宝”进行能力提升互动的互动记录。
例如,用户可以通过AR客户端扫描所处的真实环境,并在扫描到的实景画面中召唤“星宝”,然后通过发起针对实景画面中的与“星宝”的各个类别的能力属性关联的物品进行图像识别,来提升“星宝”的能力属性,解锁新的交互动作;如果“星宝”的能力属性的等级提升解锁了新的互动动作,AR客户端可以获取解锁的新的交互动作对应的动画文件,将该动画文件与实景画面进行渲染融合;然后,AR客户端可以基于渲染融合后生成的动画文件来生成“星宝”的“能力提升日记”,作为用户与“星宝”之间的互动记录。
其中,上述动作图像序列以及上述交互图像序列具体的文件格式,在本说明书中不进行特别限定;例如,在一种实施方式中,上述动作图像序列以及上述交互图像序列均可以为GIF格式的图片文件。
在示出的一种实施方式中,以上述等级提升事件,为“星宝”的总能力等级的提升事件为例,如果AR客户端完成对用户扫描的目标物品的图像识别,并根据图像识别结果对“星宝”的某一个或者多个类别的能力属性的属性值进行提升后,可以进一步确定提升后的属性值是否触发了“星宝”的能力等级的提升;
例如,当某一个或者多个类别的能力属性的属性值提升后,AR客户端可以对各个类别的能力属性的属性值,重新进行加权计算得到总能力值,并基于计算出的总能力值重新计算“星宝”的能力等级;然后,可以将重新计算出的“星宝”的能力等级,与“星宝”当前的能力等级进行比较,来确定“星宝”的能力等级是否提升。
如果提升后的属性值触发了“星宝”的能力等级的提升,AR客户端可以进一步确定出“星宝”的各个类别的能力属性中,当前的属性等级与“星宝”的能力等级相同的目标能力属性;
一方面,如果各个类别的能力属性中,仅包括当前的属性等级与“星宝”的能力等级相同的唯一能力属性,则可以将该能力属性确定为目标能力属性;
例如,请参见图6,假设“星宝”的能力等级,由level4提升到level5,此时AR客户端可以查找“星宝”的“生活”、“运动”、“创造”、以及“社交”等能力属性中是否也存在level5的能力属性;假设仅有“生活”能力属性为level5,其它能力属性均低于level5,则可以将“生活”能力属性确定为目标能力属性。
另一方面,如果各个类别的能力属性中,包括当前的属性等级与“星宝”的能力等级相同的多个能力属性,可以进一步比较属性该多个能力属性的属性值,将该多个能力属性中属性值最高的能力属性确定为目标能力属性。
例如,请参见图6,假设“星宝”的能力等级,由level4提升到level5,此时AR客户端可以查找“星宝”的“生活”、“运动”、“创造”、以及“社交”等能力属性中是否也存在level5的能力属性;假设“星宝”的“生活”、“运动”、“创造”、以及“社交”等能力属性均为level5,则可以将“生活”、“运动”、“创造”、以及“社交”等能力属性中,属性值取值最高的“生活”能力属性,确定为目标能力属性。
进一步的,当AR客户端通过以上示出的方式,确定出属性等级发生提升的目标能力属性之后,可以从AR服务端获取该目标能力属性的属性等级在提升至当前的属性等级时,解锁的互动动作对应的动作图像序列,然后将获取到的动作图像序列,与实景画面进行渲染融合,生成互动图像序列,并基于生成的互动图像序列,来生成与“星宝”进行能力提升互动的互动记录。
例如,AR客户端仍然可以基于渲染融合后生成的动画文件来生成“星宝”的“能力提升日记”,作为用户与“星宝”之间的互动记录。
在示出的一种实施方式中,以上述等级提升事件,“星宝”的各个类别的能力属性的属性等级,和“星宝”的能力等级同时提升的事件为例,如果AR客户端完成对用户扫描的目标物品的图像识别,并根据图像识别结果对“星宝”的某一个或者多个类别的能力属性的属性值进行提升后,可以进一步确定提升后的属性值是否同时触发了“星宝”的能力属性的属性等级的提升提升;以及,“星宝”的能力等级的提升;
如果提升后的属性值同时触发了“星宝”的能力属性的属性等级的提升提升;以及,“星宝”的能力等级的提升,AR客户端可以进一步确定出“星宝”的各个类别的能力属性中,当前的属性等级与“星宝”的能力等级相同的目标能力属性;
一方面,如果各个类别的能力属性中,仅包括当前的属性等级与“星宝”的能力等级相同的唯一能力属性,则可以将该能力属性确定为目标能力属性;
另一方面,如果各个类别的能力属性中,包括当前的属性等级与“星宝”的能力等级相同的多个能力属性,可以进一步比较属性该多个能力属性的属性值,将该多个能力属性中属性值最高的能力属性确定为目标能力属性。
进一步的,当AR客户端通过以上示出的方式,确定出属性等级发生提升的目标能力属性之后,仍然可以从AR服务端获取该目标能力属性的属性等级在提升至当前的属性等级时,解锁的互动动作对应的动作图像序列,然后将获取到的动作图像序列,与实景画面进行渲染融合,生成互动图像序列,并基于生成的互动图像序列,来生成与“星宝”进行能力提升互动的互动记录,具体过程不再赘述。
在以上实施例中,以与“星宝”进行合影互动,以及与“星宝”进行能力提升互动的互动场景为例进行了说明;需要强调的是,以以上两种场景为例进行说明仅为示例性的,在实际应用中,AR客户端的运营方也可以基于实际的互动需求,来灵活定制其它形式的互动场景,在本说明书中不再进行一一列举。
在本说明书中,无论是在哪中互动场景下,AR客户端从AR服务端获取到的动作图像序列,通常并不包含用户为“星宝”自定义设置的装饰元素;比如,获取到的动作图像序列可能仅仅是“星宝”在执行某一个互动动作时的骨骼动画;因此,如果AR客户端直接将获取到的动作图像序列与实景画面进行渲染融合,则最终得到的互动图像序列中会缺失用户为“星宝”自定义设置的装饰元素,导致用户为“星宝”定义的虚拟形象在融合结果中丢失。
基于此,在本说明书中,在将获取到的动作图像序列,与实景画面进行渲染融合时,可以先将用户为“星宝”自定义设置的装饰元素在获取到的该动作图像序列中预设的位置进行增强显示,生成相应的动态虚拟形象之后,再将生成的动态虚拟形象与实景画面进行渲染融合。
在示出的一种实施方式中,AR客户端在从AR服务端获取到动作图像序列之后,首先可以获取用户当前为“星宝”设置的装饰元素,并将用户设置的装饰元素在获取到的动作图像序列中预设的位置上进行增强显示,生成“星宝”对应于该动作图像序列的动态虚拟形象;
其中,装饰元素在动作图像序列中增强显示的具体位置,通常取决于装饰元素能够修改的部位,在本说明书中不进行特别限定;例如,对于“星宝”的头饰而言,可以在“星宝”的动作动画中头部位置进行增强显示。
当生成了对应于该动作图像序列的动态虚拟形象之后,AR客户端可以再将生成的动态虚拟形象,与实景画面进行渲染融合,生成“星宝”当前的动态虚拟形象对应的互动图像序列。
相应的,当用户通过在上述装饰元素列表中重新为“星宝”设置装饰元素,对“星宝”的虚拟形象进行更新,此时AR客户端可以获取用户为“星宝”更新的装饰元素,并按照相同的方式,将用户更新的装饰元素,在动作图像序列中预设的位置上进行增强显示,对“星宝”的动态虚拟形象进行同步更新。
进一步的,AR客户端可以将“星宝”更新后的动态虚拟形象,与实景画面重新进行渲染融合,生成“星宝”更新后的动态虚拟形象对应的互动图像序列,然后再基于“星宝”更新后的动态虚拟形象对应的互动图像序列,对已经生成的互动记录中原有的“星宝”更新前的动态虚拟形象对应的互动图像序列进行同步更新。
在示出的另一种实施方式中,AR客户端也可以预先对上述装饰元素集合中的装饰元素进行排列组合生成若干种装饰元素搭配;
也即,通过排列组合的方式,列举出基于现有的装饰元素,能够得出的对“星宝”的所有装饰方案。
当AR客户端从AR服务端获取到动作图像序列之后,可以将以上生成的每一种装饰元素搭配,分别在该动态图像序列中预设的位置上进行增强显示,生成“星宝”的对应于该动作图像序列的若干种动态虚拟形象;
进一步的,AR客户端可以将生成的“星宝”的每一种动态虚拟形象,分别与实景画面进行渲染融合,生成“星宝”对应于每一种动态虚拟形象的互动图像序列。
在这种情况下,AR客户端在基于生成的互动图像序列,为“星宝”生成互动记录时,可以从生成的“星宝”对应于每一种动态虚拟形象的互动图像序列中,挑选出与“星宝”当前的动态虚拟形象对应的互动图像序列,然后再根据挑选出的互动图像序列,来为“星宝”生成互动记录。
相应的,当用户通过在上述装饰元素列表中重新为“星宝”设置装饰元素,对“星宝”的虚拟形象进行更新,此时AR客户端可以获取用户为“星宝”更新的装饰元素,并按照相同的方式,将用户更新的装饰元素,在动作图像序列中预设的位置上进行增强显示,对“星宝”的动态虚拟形象进行同步更新。
进一步的,AR客户端还可以从生成的“星宝”对应于每一种动态虚拟形象的互动图像序列中,挑选出与“星宝”更新后的动态虚拟形象对应的互动图像序列,然后基于挑选出的互动图像序列,对已经生成的互动记录中的原有的更新前的动态虚拟形象对应的互动图像序列进行同步更新。
通过这种方式,由于AR客户端已经预先生成了“星宝”对应于每一种动态虚拟形象的互动图像序列,因此当用户对“星宝”的虚拟形象进行更新后,对于AR客户端而言,不再需要将更新后的动态虚拟形象与实景画面重新进行渲染融合,而是可以直接从已经生成的“星宝”对应于每一种动态虚拟形象的互动图像序列,挑选出与“星宝”更新的动态虚拟形象对应的互动图像序列,立即对已经生成的互动日志中原有的“星宝”更新前的动态虚拟形象对应的互动图像序列进行同步更新即可。
也即,当对“星宝”的虚拟形象进行发生改变后,生成的互动记录的内容也会实时的发生改变;对于用户来说,生成的互动记录在感知上是动态实时变化的,可以显著提升用户的互动体验。
在本说明书中,当AR客户端通过以上出的实施过程,生成与“星宝”进行能力提升互动的互动记录之后,还可以将生成的互动记录向用户进行展示;
在示出的一种实施方式中,AR客户端可以在实景画面中增强显示一个“查看”的按钮,用户可以通过诸如点击等方式触发该“查看”按钮,来查看AR客户端生成的互动记录。
AR客户端在检测到用户针对“查看”按钮的触发操作后,可以进入互动记录展示界面,并通过该互动记录展示界面,向用户输出展示已经生成的互动记录;
例如,请参见图7,以将AR客户端生成的互动记录,抽象成“星宝”的日记的形式为例,上述“查看”按钮,具体可以是一个“日记”按钮,用户可以通过操作该按钮,来触发AR客户端输出星宝日记查看界面,来查看由AR客户端生成的诸如“星宝”的“旅行日记”、“能力提升日记”等等。
通过以上各实施例的技术方案,一方面,由于在实景画面中增强显示虚拟互动对象,可以将虚拟互动形象融入到实景画面中与用户进行互动;因此,可以提升用户与虚拟互动对象进行互动的真实感;
另一方面,由于用户发起的与虚拟互动对象的互动操作,会触发将虚拟互动对象的互动动作对应的动作图像序列与实景画面进行渲染融合,并根据渲染融合结果来生成互动记录;因此,对于用户而言,发起的与虚拟互动对象的互动操作,最终会影响生成的互动记录所记录的内容,使得用户可以通过发起不同形式的互动操作,来触发将虚拟互动形象的多样化的互动动作与实景画面进行融合,来生成内容丰富的互动记录。
与上述方法实施例相对应,本申请还提供了装置的实施例。
请参见图8,本申请提出一种基于增强现实的互动装置80,应用于AR客户端;请参见图9,作为承载所述基于基于增强现实的互动装置80的客户端所涉及的硬件架构中,通常包括CPU、内存、非易失性存储器、网络接口以及内部总线等;以软件实现为例,所述基于增强现实的互动装置80通常可以理解为加载在内存中的计算机程序,通过CPU运行之后形成的软硬件相结合的逻辑装置,所述装置80包括:
显示模块801,在扫描到的实景画面中增强显示虚拟互动对象;
获取模块802,响应于用户发起的与所述虚拟互动形象的互动操作,获取与所述虚拟互动对象的互动动作对应的动作图像序列;
融合模块803,将获取到的动作图像序列与所述实景画面进行渲染融合,生成互动图像序列;
生成模块804,基于所述互动图像序列生成与所述虚拟互动形象的互动记录。
在本实施例中,所述获取模块802:
响应于用户发起的与所述虚拟互动形象的互动操作,获取所述虚拟互动对象当前展示的互动动作对应的动作图像序列。
在本实施例中,所述虚拟互动对象包括多个类别的能力属性;其中,各个类别的能力属性被划分了若干属性等级;属性等级提升时会触发解锁新的互动动作;
所述获取模块802:
响应于用户发起的与所述虚拟互动形象的互动操作,确定所述互动操作是否触发了对应于所述能力属性的等级提升事件;
如果所述互动操作触发了对应于所述能力属性的等级提升事件,获取与解锁的互动动作对应的动作图像序列。
在本实施例中,所述互动操作包括针对所述实景画面中的目标物品进行图像识别的操作;各个类别的能力属性分别关联了用于提升能力属性的物品;
所述装置80还包括:
识别模块805(图8中未示出),响应于用户发起的与所述虚拟互动形象的互动操作,针对所述实景画面中的目标物品进行图像识别;
提升模块806(图8中未示出),基于所述图像识别的结果确定所述目标物品是否匹配与所述虚拟互动对象的各个类别的能力属性关联的物品;如果所述目标物品匹配与任一类别的能力属性关联的物品,基于第一预设幅度提升该类别的能力属性对应的属性值。
在本实施例中,所述提升模块806进一步:
如果所述目标物品与各个类别的能力属性关联的物品均不匹配,基于第二预设幅度分别提升各个类别的能力属性对应的属性值;
其中,所述第二预设幅度低于所述第一预设幅度。
在本实施例中,所述装置80还包括:
装饰模块807(图8中未示出),基于所述图像识别的结果确定所述目标物品是否为指定物品;其中,所述指定物品关联了与所述虚拟互动对象相关的装饰元素;如果所述目标物品为所述指定物品,获取所述指定物品关联的装饰元素,并将该装饰元素添加至与所述虚拟互动对象相关的装饰元素列表,以由用户基于所述装饰元素列表中的装饰元素为所述虚拟互动对象设置装饰元素。
在本实施例中,所述装置80还包括:
计算模块808(图8中未示出),针对各个类别的能力属性对应的属性值进行加权计算,得到所述虚拟互动形象的能力值;基于所述能力值计算对应于所述虚拟互动形象的能力等级;
输出模块809(图8中未示出),将计算出的能力等级在所述实景画面中向用户输出。
在本实施例中,所述等级提升事件包括:
所述能力属性的属性等级的提升事件;和/或,所述能力等级的提升事件;
所述获取模块进一步:
确定提升后的属性值是否触发了所述能力属性的属性等级的提升;
和/或,确定提升后的属性值是否触发了所述能力等级的提升。
在本实施例中,所述获取模块802进一步:
确定各个类别的能力属性中,属性等级提升的目标能力属性;
如果各个类别的能力属性中,包括属性等级提升的唯一能力属性,将该能力属性确定为目标能力属性;
如果各个类别的能力属性中,包括属性等级提升的多个能力属性,将该多个能力属性中属性值最高的能力属性确定为所述目标能力属性;
获取所述目标能力属性的属性等级提升时解锁的互动动作对应的动作序列图像。
在本实施例中,所述获取模块802进一步:
确定各个类别的能力属性中,当前的属性等级与所述能力等级相同的目标能力属性;
如果各个类别的能力属性中,包括当前的属性等级与所述能力等级相同的唯一能力属性,将该能力属性确定为所述目标能力属性;
如果各个类别的能力属性中,包括当前的属性等级与所述能力等级相同的多个能力属性时,将所述多个能力属性中属性值最高的能力属性确定为所述目标能力属性;
获取所述目标能力属性在提升至当前的属性等级时解锁的互动动作对应的动作序列图像。
在本实施例中,所述融合模块803:
获取用户为所述虚拟互动对象设置的装饰元素;
将用户设置的装饰元素在所述动作图像序列中预设的位置上进行增强显示,以生成对应于所述虚拟互动对象的动态虚拟形象;
将所述动态虚拟形象与所述实景画面进行渲染融合,生成对应于所述动态虚拟形象的互动图像序列。
在本实施例中,所述融合模块803:
对预设的装饰元素集合中的装饰元素进行排列组合生成若干种装饰元素搭配;
将生成的所述若干种装饰元素搭配分别在所述动态图像序列中预设的位置上进行增强显示,以生成对应于所述虚拟互动对象的若干种虚拟形象;
将所述若干种虚拟形象分别与所述实景画面进行渲染融合,生成对应于所述若干种虚拟形象的互动图像序列。
在本实施例中,所述生成模块804:
从对应于所述若干种虚拟形象的互动图像序列中,获取与所述虚拟互动对象当前的虚拟形象对应的互动图像序列;
基于获取到的互动图像序列生成与所述虚拟互动形象的互动记录。
在本实施例中,所述获取模块802进一步:
获取用户为所述虚拟互动对象更新的装饰元素;
所述装置80还包括:
更新模块810(图8中未示出),将用户更新的装饰元素在所述动作图像序列中预设的位置上增强显示,以更新所述虚拟互动对象的虚拟形象;从对应于所述若干种虚拟形象的互动图像序列中,获取与所述更新后的虚拟形象对应的互动图像序列,并基于获取到的所述互动图像序列对所述互动记录中的互动图像序列进行同步更新。
上述装置中各个模块的功能和作用的实现过程具体详见上述方法中对应步骤的实现过程,在此不再赘述。
对于装置实施例而言,由于其基本对应于方法实施例,所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理模块,即可以位于一个地方,或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本说明书方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
上述实施例阐明的系统、装置、模块或模块,具体可以由计算机芯片或实体实现,或者由具有某种功能的产品来实现。一种典型的实现设备为计算机,计算机的具体形式可以是个人计算机、膝上型计算机、蜂窝电话、相机电话、智能电话、个人数字助理、媒体播放器、导航设备、电子邮件收发设备、游戏控制台、平板计算机、可穿戴设备或者这些设备中的任意几种设备的组合。
与上述方法实施例相对应,本说明书还提供了一种电子设备的实施例。该电子设备包括:处理器以及用于存储机器可执行指令的存储器;其中,处理器和存储器通常通过内部总线相互连接。在其他可能的实现方式中,所述设备还可能包括外部接口,以能够与其他设备或者部件进行通信。
在本实施例中,通过读取并执行所述存储器存储的与基于增强现实的互动控制逻辑对应的机器可执行指令,所述处理器被促使:
在扫描到的实景画面中增强显示虚拟互动对象;
响应于用户发起的与所述虚拟互动形象的互动操作,获取与所述虚拟互动对象的互动动作对应的动作图像序列;
将获取到的动作图像序列与所述实景画面进行渲染融合,生成互动图像序列,并基于所述互动图像序列生成与所述虚拟互动形象的互动记录。
在本实施例中,通过读取并执行所述存储器存储的与基于增强现实的互动控制逻辑对应的机器可执行指令,所述处理器被促使:
响应于用户发起的与所述虚拟互动形象的互动操作,获取所述虚拟互动对象当前展示的互动动作对应的动作图像序列。
在本实施例中,所述虚拟互动对象包括多个类别的能力属性;其中,各个类别的能力属性被划分了若干属性等级;属性等级提升时会触发解锁新的互动动作;
通过读取并执行所述存储器存储的与基于增强现实的互动控制逻辑对应的机器可执行指令,所述处理器被促使:
响应于用户发起的与所述虚拟互动形象的互动操作,确定所述互动操作是否触发了对应于所述能力属性的等级提升事件;
如果所述互动操作触发了对应于所述能力属性的等级提升事件,获取与解锁的互动动作对应的动作图像序列。
在本实施例中,所述互动操作包括针对所述实景画面中的目标物品进行图像识别的操作;各个类别的能力属性分别关联了用于提升能力属性的物品;
通过读取并执行所述存储器存储的与基于增强现实的互动控制逻辑对应的机器可执行指令,所述处理器被促使:
响应于用户发起的与所述虚拟互动形象的互动操作,针对所述实景画面中的目标物品进行图像识别;
基于所述图像识别的结果确定所述目标物品是否匹配与所述虚拟互动对象的各个类别的能力属性关联的物品;
如果所述目标物品匹配与任一类别的能力属性关联的物品,基于第一预设幅度提升该类别的能力属性对应的属性值。
在本实施例中,通过读取并执行所述存储器存储的与基于增强现实的互动控制逻辑对应的机器可执行指令,所述处理器被促使:
如果所述目标物品与各个类别的能力属性关联的物品均不匹配,基于第二预设幅度分别提升各个类别的能力属性对应的属性值;
其中,所述第二预设幅度低于所述第一预设幅度。
在本实施例中,通过读取并执行所述存储器存储的与基于增强现实的互动控制逻辑对应的机器可执行指令,所述处理器被促使:
基于所述图像识别的结果确定所述目标物品是否为指定物品;其中,所述指定物品关联了与所述虚拟互动对象相关的装饰元素;
如果所述目标物品为所述指定物品,获取所述指定物品关联的装饰元素,并将该装饰元素添加至与所述虚拟互动对象相关的装饰元素列表,以由用户基于所述装饰元素列表中的装饰元素为所述虚拟互动对象设置装饰元素。
在本实施例中,通过读取并执行所述存储器存储的与基于增强现实的互动控制逻辑对应的机器可执行指令,所述处理器被促使:
针对各个类别的能力属性对应的属性值进行加权计算,得到所述虚拟互动形象的能力值;
基于所述能力值计算对应于所述虚拟互动形象的能力等级;以及,
将计算出的能力等级在所述实景画面中向用户输出。
在本实施例中,所述等级提升事件包括:所述能力属性的属性等级的提升事件;和/或,所述能力等级的提升事件;
通过读取并执行所述存储器存储的与基于增强现实的互动控制逻辑对应的机器可执行指令,所述处理器被促使:
确定提升后的属性值是否触发了所述能力属性的属性等级的提升;
和/或,确定提升后的属性值是否触发了所述能力等级的提升。
在本实施例中,通过读取并执行所述存储器存储的与基于增强现实的互动控制逻辑对应的机器可执行指令,所述处理器被促使:
确定各个类别的能力属性中,属性等级提升的目标能力属性;
如果各个类别的能力属性中,包括属性等级提升的唯一能力属性,将该能力属性确定为目标能力属性;
如果各个类别的能力属性中,包括属性等级提升的多个能力属性,将该多个能力属性中属性值最高的能力属性确定为所述目标能力属性;
获取所述目标能力属性的属性等级提升时解锁的互动动作对应的动作序列图像。
在本实施例中,通过读取并执行所述存储器存储的与基于增强现实的互动控制逻辑对应的机器可执行指令,所述处理器被促使:
确定各个类别的能力属性中,当前的属性等级与所述能力等级相同的目标能力属性;
如果各个类别的能力属性中,包括当前的属性等级与所述能力等级相同的唯一能力属性,将该能力属性确定为所述目标能力属性;
如果各个类别的能力属性中,包括当前的属性等级与所述能力等级相同的多个能力属性时,将所述多个能力属性中属性值最高的能力属性确定为所述目标能力属性;
获取所述目标能力属性在提升至当前的属性等级时解锁的互动动作对应的动作序列图像。
在本实施例中,通过读取并执行所述存储器存储的与基于增强现实的互动控制逻辑对应的机器可执行指令,所述处理器被促使:
获取用户为所述虚拟互动对象设置的装饰元素;
将用户设置的装饰元素在所述动作图像序列中预设的位置上进行增强显示,以生成对应于所述虚拟互动对象的动态虚拟形象;
将所述动态虚拟形象与所述实景画面进行渲染融合,生成对应于所述动态虚拟形象的互动图像序列。
在本实施例中,通过读取并执行所述存储器存储的与基于增强现实的互动控制逻辑对应的机器可执行指令,所述处理器被促使:
对预设的装饰元素集合中的装饰元素进行排列组合生成若干种装饰元素搭配;
将生成的所述若干种装饰元素搭配分别在所述动态图像序列中预设的位置上进行增强显示,以生成对应于所述虚拟互动对象的若干种虚拟形象;
将所述若干种虚拟形象分别与所述实景画面进行渲染融合,生成对应于所述若干种虚拟形象的互动图像序列。
在本实施例中,通过读取并执行所述存储器存储的与基于增强现实的互动控制逻辑对应的机器可执行指令,所述处理器被促使:
从对应于所述若干种虚拟形象的互动图像序列中,获取与所述虚拟互动对象当前的虚拟形象对应的互动图像序列;
基于获取到的互动图像序列生成与所述虚拟互动形象的互动记录
在本实施例中,通过读取并执行所述存储器存储的与基于增强现实的互动控制逻辑对应的机器可执行指令,所述处理器被促使:
获取用户为所述虚拟互动对象更新的装饰元素;
将用户更新的装饰元素在所述动作图像序列中预设的位置上增强显示,以更新所述虚拟互动对象的虚拟形象;以及,
从对应于所述若干种虚拟形象的互动图像序列中,获取与所述更新后的虚拟形象对应的互动图像序列,并基于获取到的所述互动图像序列对所述互动记录中的互动图像序列进行同步更新。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本申请的其它实施方案。本申请旨在涵盖本申请的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本申请未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本申请的真正范围和精神由下面的权利要求指出。
应当理解的是,本申请并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本申请的范围仅由所附的权利要求来限制。
以上所述仅为本申请的较佳实施例而已,并不用以限制本申请,凡在本申请的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本申请保护的范围之内。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本申请的其它实施方案。本申请旨在涵盖本申请的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本申请未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本申请的真正范围和精神由下面的权利要求指出。
应当理解的是,本申请并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本申请的范围仅由所附的权利要求来限制。
以上所述仅为本申请的较佳实施例而已,并不用以限制本申请,凡在本申请的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本申请保护的范围之内。

Claims (25)

1.一种基于增强现实的互动方法,所述方法包括:
接收并响应于用户针对AR客户端的用户界面中的AR扫描入口的触发操作,对所处的真实环境进行图像扫描;
在扫描到的实景画面中增强显示预先生成的虚拟互动对象;所述虚拟互动对象为能够做出多样化的互动动作与用户进行互动的动态虚拟卡通形象;所述虚拟互动对象包括多个类别的能力属性;其中,各个类别的能力属性被划分了若干属性等级;属性等级提升时会触发解锁新的互动动作,各个类别的能力属性分别关联了用于提升能力属性的物品;
响应于用户发起的对所述实景画面中的目标物品进行图像识别的互动操作,针对扫描到的所述实景画面中的目标物品进行图像识别,并基于所述图像识别的结果确定所述目标物品是否匹配与所述虚拟互动对象的各个类别的能力属性关联的物品;如果所述目标物品匹配与任一类别的能力属性关联的物品,基于第一预设幅度提升该类别的能力属性对应的属性值,从而进一步确定该互动操作是否触发了对应于所述能力属性的等级提升事件;如果所述互动操作触发了对应于所述能力属性的等级提升事件,获取与解锁的互动动作对应的动作图像序列;
将获取到的动作图像序列与所述实景画面进行渲染融合,生成互动图像序列,并基于所述互动图像序列生成与所述虚拟互动对象的互动记录。
2.根据权利要求1所述的方法,还包括:
响应于用户发起的与所述虚拟互动对象的互动操作,获取所述虚拟互动对象当前展示的互动动作对应的动作图像序列。
3.根据权利要求1所述的方法,所述方法还包括:
如果所述目标物品与各个类别的能力属性关联的物品均不匹配,基于第二预设幅度分别提升各个类别的能力属性对应的属性值;
其中,所述第二预设幅度低于所述第一预设幅度。
4.根据权利要求3所述的方法,还包括:
基于所述图像识别的结果确定所述目标物品是否为指定物品;其中,所述指定物品关联了与所述虚拟互动对象相关的装饰元素;
如果所述目标物品为所述指定物品,获取所述指定物品关联的装饰元素,并将该装饰元素添加至与所述虚拟互动对象相关的装饰元素列表,以由用户基于所述装饰元素列表中的装饰元素为所述虚拟互动对象设置装饰元素。
5.根据权利要求3所述的方法,所述方法还包括:
针对各个类别的能力属性对应的属性值进行加权计算,得到所述虚拟互动对象的能力值;
基于所述能力值计算对应于所述虚拟互动对象的能力等级;以及,
将计算出的能力等级在所述实景画面中向用户输出。
6.根据权利要求5所述的方法,所述等级提升事件包括:
所述能力属性的属性等级的提升事件;和/或,所述能力等级的提升事件;
所述确定所述互动操作是否触发了对应于所述能力属性的等级提升事件,包括:
确定提升后的属性值是否触发了所述能力属性的属性等级的提升;
和/或,确定提升后的属性值是否触发了所述能力等级的提升。
7.根据权利要求6所述的方法,所述获取与解锁的互动动作对应的动作图像序列,包括:
确定各个类别的能力属性中,属性等级提升的目标能力属性;
如果各个类别的能力属性中,包括属性等级提升的唯一能力属性,将该能力属性确定为目标能力属性;
如果各个类别的能力属性中,包括属性等级提升的多个能力属性,将该多个能力属性中属性值最高的能力属性确定为所述目标能力属性;
获取所述目标能力属性的属性等级提升时解锁的互动动作对应的动作序列图像。
8.根据权利要求6所述的方法,所述获取与解锁的互动动作对应的动作图像序列,包括:
确定各个类别的能力属性中,当前的属性等级与所述能力等级相同的目标能力属性;
如果各个类别的能力属性中,包括当前的属性等级与所述能力等级相同的唯一能力属性,将该能力属性确定为所述目标能力属性;
如果各个类别的能力属性中,包括当前的属性等级与所述能力等级相同的多个能力属性时,将所述多个能力属性中属性值最高的能力属性确定为所述目标能力属性;
获取所述目标能力属性在提升至当前的属性等级时解锁的互动动作对应的动作序列图像。
9.根据权利要求1所述的方法,所述将获取到的动作图像序列与所述实景画面进行渲染融合,生成互动图像序列,包括:
获取用户为所述虚拟互动对象设置的装饰元素;
将用户设置的装饰元素在所述动作图像序列中预设的位置上进行增强显示,以生成对应于所述虚拟互动对象的动态虚拟形象;
将所述动态虚拟形象与所述实景画面进行渲染融合,生成对应于所述动态虚拟形象的互动图像序列。
10.根据权利要求1所述的方法,所述将获取到的动作图像序列与所述实景画面进行渲染融合,生成互动图像序列,包括:
对预设的装饰元素集合中的装饰元素进行排列组合生成若干种装饰元素搭配;
将生成的所述若干种装饰元素搭配分别在所述动作图像序列中预设的位置上进行增强显示,以生成对应于所述虚拟互动对象的若干种虚拟形象;
将所述若干种虚拟形象分别与所述实景画面进行渲染融合,生成对应于所述若干种虚拟形象的互动图像序列。
11.根据权利要求10所述的方法,所述基于所述互动图像序列生成与所述虚拟互动对象的互动记录,包括:
从对应于所述若干种虚拟形象的互动图像序列中,获取与所述虚拟互动对象当前的虚拟形象对应的互动图像序列;
基于获取到的互动图像序列生成与所述虚拟互动对象的互动记录。
12.根据权利要求11所述的方法,还包括:
获取用户为所述虚拟互动对象更新的装饰元素;
将用户更新的装饰元素在所述动作图像序列中预设的位置上增强显示,以更新所述虚拟互动对象的虚拟形象;以及,
从对应于所述若干种虚拟形象的互动图像序列中,获取与所述更新后的虚拟形象对应的互动图像序列,并基于获取到的所述互动图像序列对所述互动记录中的互动图像序列进行同步更新。
13.一种基于增强现实的互动装置,所述装置包括:
显示模块,接收并响应于用户针对AR客户端的用户界面中的AR扫描入口的触发操作,对所处的真实环境进行图像扫描;
所述显示模块进一步,在扫描到的实景画面中增强显示预先生成的虚拟互动对象;所述虚拟互动对象为能够做出多样化的互动动作与用户进行互动的动态虚拟卡通形象;所述虚拟互动对象包括多个类别的能力属性;其中,各个类别的能力属性被划分了若干属性等级;属性等级提升时会触发解锁新的互动动作,各个类别的能力属性分别关联了用于提升能力属性的物品;
获取模块,响应于用户发起的对所述实景画面中的目标物品进行图像识别的互动操作,针对扫描到的所述实景画面中的目标物品进行图像识别,并基于所述图像识别的结果确定所述目标物品是否匹配与所述虚拟互动对象的各个类别的能力属性关联的物品;如果所述目标物品匹配与任一类别的能力属性关联的物品,基于第一预设幅度提升该类别的能力属性对应的属性值,从而进一步确定该互动操作是否触发了对应于所述能力属性的等级提升事件;如果所述互动操作触发了对应于所述能力属性的等级提升事件,获取与解锁的互动动作对应的动作图像序列;
融合模块,将获取到的动作图像序列与所述实景画面进行渲染融合,生成互动图像序列;
生成模块,基于所述互动图像序列生成与所述虚拟互动对象的互动记录。
14.根据权利要求13所述的装置,所述获取模块:
响应于用户发起的与所述虚拟互动对象的互动操作,获取所述虚拟互动对象当前展示的互动动作对应的动作图像序列。
15.根据权利要求13所述的装置,所述装置还包括提升模块,所述提升模块进一步:
如果所述目标物品与各个类别的能力属性关联的物品均不匹配,基于第二预设幅度分别提升各个类别的能力属性对应的属性值;
其中,所述第二预设幅度低于所述第一预设幅度。
16.根据权利要求15所述的装置,所述装置还包括:
装饰模块,基于所述图像识别的结果确定所述目标物品是否为指定物品;其中,所述指定物品关联了与所述虚拟互动对象相关的装饰元素;如果所述目标物品为所述指定物品,获取所述指定物品关联的装饰元素,并将该装饰元素添加至与所述虚拟互动对象相关的装饰元素列表,以由用户基于所述装饰元素列表中的装饰元素为所述虚拟互动对象设置装饰元素。
17.根据权利要求15所述的装置,所述装置还包括:
计算模块,针对各个类别的能力属性对应的属性值进行加权计算,得到所述虚拟互动对象的能力值;基于所述能力值计算对应于所述虚拟互动对象的能力等级;
输出模块,将计算出的能力等级在所述实景画面中向用户输出。
18.根据权利要求17所述的装置,所述等级提升事件包括:
所述能力属性的属性等级的提升事件;和/或,所述能力等级的提升事件;
所述获取模块进一步:
确定提升后的属性值是否触发了所述能力属性的属性等级的提升;
和/或,确定提升后的属性值是否触发了所述能力等级的提升。
19.根据权利要求18所述的装置,所述获取模块进一步:
确定各个类别的能力属性中,属性等级提升的目标能力属性;
如果各个类别的能力属性中,包括属性等级提升的唯一能力属性,将该能力属性确定为目标能力属性;
如果各个类别的能力属性中,包括属性等级提升的多个能力属性,将该多个能力属性中属性值最高的能力属性确定为所述目标能力属性;
获取所述目标能力属性的属性等级提升时解锁的互动动作对应的动作序列图像。
20.根据权利要求19所述的装置,所述获取模块进一步:
确定各个类别的能力属性中,当前的属性等级与所述能力等级相同的目标能力属性;
如果各个类别的能力属性中,包括当前的属性等级与所述能力等级相同的唯一能力属性,将该能力属性确定为所述目标能力属性;
如果各个类别的能力属性中,包括当前的属性等级与所述能力等级相同的多个能力属性时,将所述多个能力属性中属性值最高的能力属性确定为所述目标能力属性;
获取所述目标能力属性在提升至当前的属性等级时解锁的互动动作对应的动作序列图像。
21.根据权利要求13所述的装置,所述融合模块:
获取用户为所述虚拟互动对象设置的装饰元素;
将用户设置的装饰元素在所述动作图像序列中预设的位置上进行增强显示,以生成对应于所述虚拟互动对象的动态虚拟形象;
将所述动态虚拟形象与所述实景画面进行渲染融合,生成对应于所述动态虚拟形象的互动图像序列。
22.根据权利要求13所述的装置,所述融合模块:
对预设的装饰元素集合中的装饰元素进行排列组合生成若干种装饰元素搭配;
将生成的所述若干种装饰元素搭配分别在所述动作图像序列中预设的位置上进行增强显示,以生成对应于所述虚拟互动对象的若干种虚拟形象;
将所述若干种虚拟形象分别与所述实景画面进行渲染融合,生成对应于所述若干种虚拟形象的互动图像序列。
23.根据权利要求22所述的装置,所述生成模块:
从对应于所述若干种虚拟形象的互动图像序列中,获取与所述虚拟互动对象当前的虚拟形象对应的互动图像序列;
基于获取到的互动图像序列生成与所述虚拟互动对象的互动记录。
24.根据权利要求23所述的装置,所述获取模块进一步:
获取用户为所述虚拟互动对象更新的装饰元素;
所述装置还包括:
更新模块,将用户更新的装饰元素在所述动作图像序列中预设的位置上增强显示,以更新所述虚拟互动对象的虚拟形象; 从对应于所述若干种虚拟形象的互动图像序列中,获取与所述更新后的虚拟形象对应的互动图像序列,并基于获取到的所述互动图像序列对所述互动记录中的互动图像序列进行同步更新。
25.一种电子设备,所述电子设备包括:
处理器;
用于存储机器可执行指令的存储器;
其中,通过读取并执行所述存储器存储的与基于增强现实的互动逻辑对应的机器可执行指令,所述处理器被促使:
接收并响应于用户针对AR客户端的用户界面中的AR扫描入口的触发操作,对所处的真实环境进行图像扫描;
在扫描到的实景画面中增强显示预先生成的虚拟互动对象;所述虚拟互动对象为能够做出多样化的互动动作与用户进行互动的动态虚拟卡通形象;所述虚拟互动对象包括多个类别的能力属性;其中,各个类别的能力属性被划分了若干属性等级;属性等级提升时会触发解锁新的互动动作,各个类别的能力属性分别关联了用于提升能力属性的物品;
响应于用户发起的对所述实景画面中的目标物品进行图像识别的互动操作,针对扫描到的所述实景画面中的目标物品进行图像识别,并基于所述图像识别的结果确定所述目标物品是否匹配与所述虚拟互动对象的各个类别的能力属性关联的物品;如果所述目标物品匹配与任一类别的能力属性关联的物品,基于第一预设幅度提升该类别的能力属性对应的属性值,从而进一步确定该互动操作是否触发了对应于所述能力属性的等级提升事件;如果所述互动操作触发了对应于所述能力属性的等级提升事件,获取与解锁的互动动作对应的动作图像序列;
将获取到的动作图像序列与所述实景画面进行渲染融合,生成互动图像序列,并基于所述互动图像序列生成与所述虚拟互动对象的互动记录。
CN201810982275.8A 2018-08-27 2018-08-27 基于增强现实的互动方法及装置 Active CN109345637B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201810982275.8A CN109345637B (zh) 2018-08-27 2018-08-27 基于增强现实的互动方法及装置
CN202110267750.5A CN113112614B (zh) 2018-08-27 2018-08-27 基于增强现实的互动方法及装置
TW108122074A TWI721466B (zh) 2018-08-27 2019-06-25 基於擴增實境的互動方法及裝置
PCT/CN2019/096094 WO2020042786A1 (zh) 2018-08-27 2019-07-16 基于增强现实的互动方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810982275.8A CN109345637B (zh) 2018-08-27 2018-08-27 基于增强现实的互动方法及装置

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN202110267750.5A Division CN113112614B (zh) 2018-08-27 2018-08-27 基于增强现实的互动方法及装置

Publications (2)

Publication Number Publication Date
CN109345637A CN109345637A (zh) 2019-02-15
CN109345637B true CN109345637B (zh) 2021-01-26

Family

ID=65291641

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201810982275.8A Active CN109345637B (zh) 2018-08-27 2018-08-27 基于增强现实的互动方法及装置
CN202110267750.5A Active CN113112614B (zh) 2018-08-27 2018-08-27 基于增强现实的互动方法及装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN202110267750.5A Active CN113112614B (zh) 2018-08-27 2018-08-27 基于增强现实的互动方法及装置

Country Status (3)

Country Link
CN (2) CN109345637B (zh)
TW (1) TWI721466B (zh)
WO (1) WO2020042786A1 (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109345637B (zh) * 2018-08-27 2021-01-26 创新先进技术有限公司 基于增强现实的互动方法及装置
CN110430553B (zh) * 2019-07-31 2022-08-16 广州小鹏汽车科技有限公司 车辆间的互动方法、装置、存储介质及控制终端
CN110716645A (zh) * 2019-10-15 2020-01-21 北京市商汤科技开发有限公司 一种增强现实数据呈现方法、装置、电子设备及存储介质
CN110941341B (zh) * 2019-11-29 2022-02-01 维沃移动通信有限公司 图像控制方法及电子设备
CN111083509B (zh) * 2019-12-16 2021-02-09 腾讯科技(深圳)有限公司 交互任务执行方法、装置、存储介质和计算机设备
CN113041615B (zh) * 2019-12-27 2024-09-13 阿里巴巴集团控股有限公司 场景呈现方法、装置、客户端、服务器、设备及存储介质
CN111192053B (zh) * 2020-01-11 2021-07-13 支付宝(杭州)信息技术有限公司 基于电子凭证的互动方法及装置、电子设备
CN112870709B (zh) * 2021-03-22 2023-03-17 腾讯科技(深圳)有限公司 虚拟道具的显示方法、装置、电子设备及存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107741809A (zh) * 2016-12-21 2018-02-27 腾讯科技(深圳)有限公司 一种虚拟形象之间的互动方法、终端、服务器及系统
CN108229937A (zh) * 2017-12-20 2018-06-29 阿里巴巴集团控股有限公司 基于增强现实的虚拟对象分配方法及装置

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101930284B (zh) * 2009-06-23 2014-04-09 腾讯科技(深圳)有限公司 一种实现视频和虚拟网络场景交互的方法、装置和系统
KR101227237B1 (ko) * 2010-03-17 2013-01-28 에스케이플래닛 주식회사 복수의 마커를 이용하여 가상 객체간 인터렉션을 구현하는 증강현실 시스템 및 방법
US20110316845A1 (en) * 2010-06-25 2011-12-29 Palo Alto Research Center Incorporated Spatial association between virtual and augmented reality
US20120113223A1 (en) * 2010-11-05 2012-05-10 Microsoft Corporation User Interaction in Augmented Reality
US8743244B2 (en) * 2011-03-21 2014-06-03 HJ Laboratories, LLC Providing augmented reality based on third party information
JP6192264B2 (ja) * 2012-07-18 2017-09-06 株式会社バンダイ 携帯端末装置、端末プログラム、拡張現実感システム、および衣類
US20160012136A1 (en) * 2013-03-07 2016-01-14 Eyeducation A.Y. LTD Simultaneous Local and Cloud Searching System and Method
US9791917B2 (en) * 2015-03-24 2017-10-17 Intel Corporation Augmentation modification based on user interaction with augmented reality scene
WO2017039348A1 (en) * 2015-09-01 2017-03-09 Samsung Electronics Co., Ltd. Image capturing apparatus and operating method thereof
TWI628614B (zh) * 2015-10-12 2018-07-01 李曉真 立體虛擬實境的互動房屋瀏覽方法及其系統
CN105976417B (zh) * 2016-05-27 2020-06-12 腾讯科技(深圳)有限公司 动画生成方法和装置
CN105959718A (zh) * 2016-06-24 2016-09-21 乐视控股(北京)有限公司 一种视频直播中实时互动的方法及装置
CN106131536A (zh) * 2016-08-15 2016-11-16 万象三维视觉科技(北京)有限公司 一种裸眼3d增强现实互动展示系统及其展示方法
TWI585617B (zh) * 2016-08-31 2017-06-01 宅妝股份有限公司 互動方法及系統
CN106502671A (zh) * 2016-10-21 2017-03-15 苏州天平先进数字科技有限公司 一种基于虚拟人物互动的锁屏系统
CN106920079B (zh) * 2016-12-13 2020-06-30 阿里巴巴集团控股有限公司 基于增强现实的虚拟对象分配方法及装置
CN111654473B (zh) * 2016-12-13 2022-07-19 创新先进技术有限公司 基于增强现实的虚拟对象分配方法及装置
CN107204031B (zh) * 2017-04-27 2021-08-24 腾讯科技(深圳)有限公司 信息展示方法及装置
CN107274465A (zh) * 2017-05-31 2017-10-20 珠海金山网络游戏科技有限公司 一种虚拟现实的主播方法、装置和系统
CN108021896B (zh) * 2017-12-08 2019-05-10 北京百度网讯科技有限公司 基于增强现实的拍摄方法、装置、设备及计算机可读介质
CN109345637B (zh) * 2018-08-27 2021-01-26 创新先进技术有限公司 基于增强现实的互动方法及装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107741809A (zh) * 2016-12-21 2018-02-27 腾讯科技(深圳)有限公司 一种虚拟形象之间的互动方法、终端、服务器及系统
CN108229937A (zh) * 2017-12-20 2018-06-29 阿里巴巴集团控股有限公司 基于增强现实的虚拟对象分配方法及装置

Also Published As

Publication number Publication date
WO2020042786A1 (zh) 2020-03-05
CN109345637A (zh) 2019-02-15
CN113112614A (zh) 2021-07-13
CN113112614B (zh) 2024-03-19
TW202009682A (zh) 2020-03-01
TWI721466B (zh) 2021-03-11

Similar Documents

Publication Publication Date Title
CN109345637B (zh) 基于增强现实的互动方法及装置
US11463631B2 (en) Method and apparatus for generating face image
CN109688451B (zh) 摄像机效应的提供方法及系统
US10970843B1 (en) Generating interactive content using a media universe database
CN111767554B (zh) 屏幕分享方法、装置、存储介质及电子设备
US20240276058A1 (en) Video-based interaction method and apparatus, computer device, and storage medium
US11513658B1 (en) Custom query of a media universe database
CN113727039B (zh) 视频生成方法、装置、电子设备及存储介质
CN112866577B (zh) 图像的处理方法、装置、计算机可读介质及电子设备
US20230368461A1 (en) Method and apparatus for processing action of virtual object, and storage medium
CN113487709A (zh) 一种特效展示方法、装置、计算机设备以及存储介质
KR101977893B1 (ko) 영상컨텐츠 적용 디지털액터의 운용방법
WO2022221042A1 (en) Producing a digital image representation of a body
CN113763568A (zh) 增强现实的显示处理方法、装置、设备及存储介质
CN110089076B (zh) 实现信息互动的方法和装置
CN111510582A (zh) 用于提供具有虚拟角色的图像的设备
CN115202481A (zh) 对象的交互方法、智能终端、电子设备及存储介质
CN116843802A (zh) 虚拟形象的处理方法及相关产品
CN116561439A (zh) 一种社交互动方法、装置、设备及存储介质、程序产品
CN113779293A (zh) 图像下载方法、装置、电子设备及介质
CN113707179A (zh) 一种音频识别方法、装置、设备及介质
JP6839771B2 (ja) 補正パターン分析による映像補正方法およびシステム
CN115311400A (zh) 一种社交互动方法、装置及设备
JP6857537B2 (ja) 情報処理装置
JP4351620B2 (ja) 画像検索システム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20200924

Address after: Cayman Enterprise Centre, 27 Hospital Road, George Town, Grand Cayman Islands

Applicant after: Innovative advanced technology Co.,Ltd.

Address before: Cayman Enterprise Centre, 27 Hospital Road, George Town, Grand Cayman Islands

Applicant before: Advanced innovation technology Co.,Ltd.

Effective date of registration: 20200924

Address after: Cayman Enterprise Centre, 27 Hospital Road, George Town, Grand Cayman Islands

Applicant after: Advanced innovation technology Co.,Ltd.

Address before: A four-storey 847 mailbox in Grand Cayman Capital Building, British Cayman Islands

Applicant before: Alibaba Group Holding Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant