CN115359220A - 虚拟世界的虚拟形象更新方法及装置 - Google Patents
虚拟世界的虚拟形象更新方法及装置 Download PDFInfo
- Publication number
- CN115359220A CN115359220A CN202210983501.0A CN202210983501A CN115359220A CN 115359220 A CN115359220 A CN 115359220A CN 202210983501 A CN202210983501 A CN 202210983501A CN 115359220 A CN115359220 A CN 115359220A
- Authority
- CN
- China
- Prior art keywords
- virtual image
- user
- avatar
- target user
- virtual
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 103
- 238000004364 calculation method Methods 0.000 claims description 64
- 238000003860 storage Methods 0.000 claims description 35
- 238000012549 training Methods 0.000 claims description 18
- 238000013507 mapping Methods 0.000 claims description 9
- 230000002452 interceptive effect Effects 0.000 claims description 8
- 230000003993 interaction Effects 0.000 claims description 6
- RWSOTUBLDIXVET-UHFFFAOYSA-N Dihydrogen sulfide Chemical compound S RWSOTUBLDIXVET-UHFFFAOYSA-N 0.000 claims 1
- 230000008569 process Effects 0.000 description 24
- 238000010586 diagram Methods 0.000 description 14
- 230000006870 function Effects 0.000 description 13
- 238000012545 processing Methods 0.000 description 12
- 230000006872 improvement Effects 0.000 description 9
- 238000004590 computer program Methods 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 238000004422 calculation algorithm Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000001537 neural effect Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000002085 persistent effect Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000001052 transient effect Effects 0.000 description 2
- 230000003044 adaptive effect Effects 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000000265 homogenisation Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 229920001296 polysiloxane Polymers 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/005—General purpose rendering architectures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/82—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
Abstract
本说明书实施例提供了虚拟世界的虚拟形象更新方法及装置,其中,一种虚拟世界的虚拟形象更新方法包括:计算目标用户在虚拟世界内的第一虚拟形象与形象更新获得的第二虚拟形象的残差数据;对所述残差数据进行编码,将获得的残差编码向亲密用户的接入设备发送,以在所述亲密用户的接入设备进行所述目标用户的虚拟形象生成;所述虚拟形象生成包括:将所述目标用户的表达特征以及对应的共享虚拟形象输入重建模型进行虚拟形象重建,并基于输出的虚拟形象以及解码所述残差编码获得的残差数据确定所述目标用户的目标虚拟形象。
Description
技术领域
本文件涉及虚拟化技术领域,尤其涉及一种虚拟世界的虚拟形象更新方法及装置。
背景技术
虚拟世界提供了对真实世界的模拟,甚至能够提供在真实世界难以实现的场景,因此虚拟世界越来越多地应用在各种场景。在虚拟世界场景中,用户通过特定的身份ID登录三维虚拟世界,通过虚拟世界中虚拟的用户角色进行活动,通常,在虚拟世界中存在不同的用户角色,这些用户角色各自进行不同的活动。
发明内容
本说明书一个或多个实施例提供了一种虚拟世界的虚拟形象更新方法,包括:计算目标用户在虚拟世界内的第一虚拟形象与形象更新获得的第二虚拟形象的残差数据。对所述残差数据进行编码,将获得的残差编码向亲密用户的接入设备发送,以在所述亲密用户的接入设备进行所述目标用户的虚拟形象生成。所述虚拟形象生成包括:将所述目标用户的表达特征以及对应的共享虚拟形象输入重建模型进行虚拟形象重建,并基于输出的虚拟形象以及解码所述残差编码获得的残差数据确定所述目标用户的目标虚拟形象。
本说明书一个或多个实施例提供了另一种虚拟世界的虚拟形象更新方法,包括:接收目标用户的接入设备发送的残差数据进行编码获得的残差编码。获取所述目标用户的表达特征以及对应的共享虚拟形象,并将所述表达特征和所述共享虚拟形象输入重建模型进行虚拟形象重建,输出虚拟形象。基于输出的虚拟形象和解码所述残差编码获得的残差数据确定所述目标用户的目标虚拟形象。
本说明书一个或多个实施例提供了一种虚拟世界的虚拟形象更新装置,包括:残差数据计算模块,被配置为计算目标用户在虚拟世界内的第一虚拟形象与形象更新获得的第二虚拟形象的残差数据。残差数据编码发送模块,被配置为对所述残差数据进行编码,将获得的残差编码向亲密用户的接入设备发送,以在所述亲密用户的接入设备进行所述目标用户的虚拟形象生成。所述虚拟形象生成包括:将所述目标用户的表达特征以及对应的共享虚拟形象输入重建模型进行虚拟形象重建,并基于输出的虚拟形象以及解码所述残差编码获得的残差数据确定所述目标用户的目标虚拟形象。
本说明书一个或多个实施例提供了另一种虚拟世界的虚拟形象更新装置,包括:残差编码接收模块,被配置为接收目标用户的接入设备发送的残差数据进行编码获得的残差编码。虚拟形象重建模块,被配置为获取所述目标用户的表达特征以及对应的共享虚拟形象,并将所述表达特征和所述共享虚拟形象输入重建模型进行虚拟形象重建,输出虚拟形象。目标虚拟形象确定模块,被配置为基于输出的虚拟形象和解码所述残差编码获得的残差数据确定所述目标用户的目标虚拟形象。
本说明书一个或多个实施例提供了一种虚拟世界的虚拟形象更新设备,包括:处理器;以及,被配置为存储计算机可执行指令的存储器,所述计算机可执行指令在被执行时使所述处理器:计算目标用户在虚拟世界内的第一虚拟形象与形象更新获得的第二虚拟形象的残差数据。对所述残差数据进行编码,将获得的残差编码向亲密用户的接入设备发送,以在所述亲密用户的接入设备进行所述目标用户的虚拟形象生成。所述虚拟形象生成包括:将所述目标用户的表达特征以及对应的共享虚拟形象输入重建模型进行虚拟形象重建,并基于输出的虚拟形象以及解码所述残差编码获得的残差数据确定所述目标用户的目标虚拟形象。
本说明书一个或多个实施例提供了另一种虚拟世界的虚拟形象更新设备,包括:处理器;以及,被配置为存储计算机可执行指令的存储器,所述计算机可执行指令在被执行时使所述处理器:接收目标用户的接入设备发送的残差数据进行编码获得的残差编码。获取所述目标用户的表达特征以及对应的共享虚拟形象,并将所述表达特征和所述共享虚拟形象输入重建模型进行虚拟形象重建,输出虚拟形象。基于输出的虚拟形象和解码所述残差编码获得的残差数据确定所述目标用户的目标虚拟形象。
本说明书一个或多个实施例提供了一种存储介质,用于存储计算机可执行指令,所述计算机可执行指令在被处理器执行时实现以下流程:计算目标用户在虚拟世界内的第一虚拟形象与形象更新获得的第二虚拟形象的残差数据。对所述残差数据进行编码,将获得的残差编码向亲密用户的接入设备发送,以在所述亲密用户的接入设备进行所述目标用户的虚拟形象生成。所述虚拟形象生成包括:将所述目标用户的表达特征以及对应的共享虚拟形象输入重建模型进行虚拟形象重建,并基于输出的虚拟形象以及解码所述残差编码获得的残差数据确定所述目标用户的目标虚拟形象。
本说明书一个或多个实施例提供了另一种存储介质,用于存储计算机可执行指令,所述计算机可执行指令在被处理器执行时实现以下流程:接收目标用户的接入设备发送的残差数据进行编码获得的残差编码。获取所述目标用户的表达特征以及对应的共享虚拟形象,并将所述表达特征和所述共享虚拟形象输入重建模型进行虚拟形象重建,输出虚拟形象。基于输出的虚拟形象和解码所述残差编码获得的残差数据确定所述目标用户的目标虚拟形象。
附图说明
为了更清楚地说明本说明书一个或多个实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本说明书中记载的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图;
图1为本说明书一个或多个实施例提供的一种虚拟世界的虚拟形象更新方法处理流程图;
图2为本说明书一个或多个实施例提供的另一种虚拟世界的虚拟形象更新方法处理流程图;
图3为本说明书一个或多个实施例提供的第三种虚拟世界的虚拟形象更新方法处理流程图;
图4为本说明书一个或多个实施例提供的一种虚拟世界的虚拟形象更新装置示意图;
图5为本说明书一个或多个实施例提供的另一种虚拟世界的虚拟形象更新装置示意图;
图6为本说明书一个或多个实施例提供的一种虚拟世界的虚拟形象更新设备的结构示意图;
图7为本说明书一个或多个实施例提供的另一种虚拟世界的虚拟形象更新设备的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本说明书一个或多个实施例中的技术方案,下面将结合本说明书一个或多个实施例中的附图,对本说明书一个或多个实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本说明书的一部分实施例,而不是全部的实施例。基于本说明书一个或多个实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本文件的保护范围。
本说明书提供的一种虚拟世界的虚拟形象更新方法实施例:
本申请提供的虚拟世界的虚拟形象更新方法,目标用户在虚拟世界内的虚拟形象被更新后,通过计算更新前后的虚拟形象的残差数据,并在将残差数据编码后发送至目标用户的亲密用户的接入设备,以在亲密用户的接入设备进行目标用户的虚拟形象生成,从而为在亲密用户的接入设备渲染展示目标用户的虚拟形象做数据准备,不仅提升了亲密用户与目标用户在虚拟世界内访问交互过程中的访问及时性,降低了虚拟世界内进行虚拟形象访问过程中的数据传输量,避免了通过接入设备的服务端将目标用户更新后的虚拟形象发送至亲密用户的接入设备导致的数据传输量较大和数据传输耗时较长的问题,从而降低了对服务端的资源消耗。
参照图1,本实施例提供的虚拟世界的虚拟形象更新方法,所述方法具体包括步骤S102至步骤S104。
步骤S102,计算目标用户在虚拟世界内的第一虚拟形象与形象更新获得的第二虚拟形象的残差数据。
本实施例所述虚拟世界,是指基于去中心化协作实现并且具有开放经济系统的虚拟的拟真世界,比如用户通过接入设备进行游戏交互的游戏虚拟世界,再比如用户通过接入设备进行在线会议的会议虚拟世界,或者用户通过接入设备进行在线交易的交易虚拟世界;可选的,所述虚拟世界中通过生成非同质化标识进行去中心化的交易,通过交易占有虚拟资产的所有权。进一步,还可建立虚拟世界中虚拟形象与用户的身份映射,基于建立的身份映射在虚拟世界中通过生成非同质化标识进行虚拟资产的交易,并通过交易占有虚拟资产的所有权。具体的,真实世界(物理世界)中的用户可通过接入设备接入虚拟世界,以在虚拟世界中进行去中心化的交易和其他行为,所述虚拟世界的接入设备,可以是连接虚拟世界的VR(Virtual Reality,虚拟现实)设备、AR(Augmented Reality,增强现实)设备等,比如连接虚拟世界的头戴式VR设备。所述服务端,是指为接入虚拟世界的接入设备提供相应服务的服务器或者服务平台,或者,维护虚拟世界运行的服务器或者服务平台。
本实施例中,虚拟形象是指从用户的图像出发,采用图像重建技术对用户的图像进行重建获得的用于在虚拟世界内展示用户形象的三维数字图像(三维数字形象),或者,从用户的图像出发,采用图像重建技术对用户的图像进行重建获得的虚拟世界内的与用户具有数字孪生关系或者身份映射的数字孪生形象。比如,在采集到用户在物理世界的多个视角的用户图像的基础上,通过将多个视角的用户图像输入神经辐射场NeRF(NeuralRadiance Fields)模型进行图像重建,获得虚拟世界内的三维数字形象、数字孪生形象或者身份映射形象。
实际应用中,包括目标用户在内的用户在虚拟世界内的虚拟形象被更新后,需要将该用户的虚拟形象更新同步到其他用户处,从而使其他用户能够在与目标用户在虚拟世界内进行交互时,能够基于目标用户更新后的虚拟形象进行交互。本实施例以任一用户(目标用户)在虚拟世界内的虚拟形象为例,对该任一用户的虚拟形象更新处理过程进行说明,其他用户在虚拟世界内的虚拟形象更新处理过程,与本实施例提供的目标用户的虚拟形象更新处理过程类似,本实施例不再一一赘述。
所述第一虚拟形象是指形象更新前的虚拟形象,第二虚拟形象是指形象更新后的虚拟形象;比如用户A对其在虚拟世界内的虚拟形象的衣物、配饰或者容貌进行调整后,形成新的虚拟形象,此处用户A调整前的虚拟形象即为第一虚拟形象,用户A调整后的虚拟形象即为第二虚拟形象。所述残差数据,是指形象更新前的第一虚拟形象与形象更新后获得的第二虚拟形象所存在的形象差异对应的形象数据,具体可通过残差算法计算第一虚拟形象与第二虚拟形象的残差数据。
具体实施时,由于将目标用户在虚拟世界内的虚拟形象更新,同步至其他所有用户的所需要耗费的资源较多,并且其他所有用户中也仅有少部分用户会与目标用户发生交互,大多数用户与目标用户发生交互的可能性较小,因此,为了降低资源消耗,本实施例通过定义目标用户的亲密用户,仅向目标用户的亲密用户同步目标用户在虚拟世界内的虚拟形象更新。
本实施例提供的一种可选实施方式中,所述亲密用户是指所述目标用户的亲密用户,具体采用如下方式确定:根据所述虚拟世界内与所述目标用户进行虚拟交互的交互用户的交互数据,确定满足亲密条件的交互用户作为所述目标用户的亲密用户;基于此,还可将所述虚拟世界内所述亲密用户之外的用户的作为所述目标用户的非亲密用户。
例如,对于用户A,确定一个季度内在虚拟世界内与其具有消息互动、游戏等社交活动的用户,并统计这些用户与用户A的社交次数,将社交次数最多的5个用户定义为用户A的亲密用户,并将这5个用户之外的所有用户定义为用户A的非亲密用户。
可选的,所述交互用户,包括在所述虚拟世界内基于生成的非同质化标识与所述目标用户进行虚拟资产交易的交易用户;此外,还可建立所述第二虚拟形象与所述目标用户具有身份映射,在所述第二虚拟形象与所述目标用户具有身份映射的基础上,所述目标用户和所述交易用户可基于所述身份映射进行所述虚拟资产交易,还可通过所述虚拟资产交易占有虚拟资产的所有权。
步骤S104,对所述残差数据进行编码,将获得的残差编码向亲密用户的接入设备发送,以在所述亲密用户的接入设备进行所述目标用户的虚拟形象生成。
本实施例中,为了降低资源消耗,通过向目标用户的亲密用户的接入设备发送更新前后的虚拟形象的残差数据的方式,来将目标用户对虚拟形象的更新同步至目标用户的亲密用户,以在亲密用户的接入设备进行目标用户的虚拟形象生成。具体在将更新前后的虚拟形象的残差数据向亲密用户的接入设备发送的过程中,为了提升数据发送效率,可通过对所述残差数据进行编码,以发送编码获得的残差编码的方式将残差数据发送至亲密用户的接入设备。
可选的,所述虚拟形象生成包括:将所述目标用户的表达特征以及对应的共享虚拟形象输入重建模型进行虚拟形象重建,并基于输出的虚拟形象以及解码所述残差编码获得的残差数据确定所述目标用户的目标虚拟形象。
本实施例提供的一种可选实施方式中,所述共享虚拟形象,采用如下方式生成:将所述目标用户的第一虚拟形象和所述亲密用户的第一虚拟形象输入形象计算模型进行共享虚拟形象计算,输出所述共享虚拟形象、所述目标用户的表达特征和所述亲密用户的表达特征。
其中,所述共享虚拟形象,是指针对目标用户的虚拟形象和亲密用户的虚拟形象,提取出的具有共性的虚拟形象,或者根据目标用户的虚拟形象和亲密用户的虚拟形象的共性特征形成的虚拟形象,所述表达特征,是指在共享虚拟形象的基础上目标用户和亲密用户各自不具有共性的特征,通过表达特征能够在目标用户和亲密用户构成的亲密用户组中区别各个用户。
可选的,所述共享虚拟形象计算,在所述接入设备的服务端进行,所述服务端在进行所述共享虚拟形象计算后执行如下操作:存储所述目标用户和所述亲密用户的表达特征,并删除所述服务端存储的所述目标用户的第一虚拟形象和所述亲密用户的第一虚拟形象。
上述通过形象计算模型计算获得的共享虚拟形象和表达特征来表征目标用户和亲密用户的虚拟形象,并通过存储一份共享虚拟形象以及目标用户和亲密用户各自的表达特征的方式来降低对存储空间的占用。
需要说明的是,除上述提供的通过形象计算模型计算目标用户和亲密用户的共享虚拟形象的实现方式,还可通过均值算法计算目标用户与亲密用户的虚拟形象的共享虚拟形象;或者,通过特征提取算法提取目标用户与亲密用户的虚拟形象的共性特征,并根据提取的共性特征重建共享虚拟形象。
实际应用中,形象计算模型和重建模型的训练可以预先完成,比如在云服务器上分别进行形象计算模型和重建模型的模型训练,为了提升模型训练效率,同时也为使形象计算模型对共享虚拟形象和表达特征的计算与重建模型基于共享虚拟形象和表达特征重建虚拟形象的能力更加适配,本实施例提供的一种可选实施方式中,所述重建模型和所述形象计算模型,采用如下方式进行训练:
获取所述虚拟世界内具有亲密关系的亲密用户组中各用户的虚拟形象作为训练样本;
将各用户的虚拟形象输入待训练的形象计算模型进行共享虚拟形象计算,并计算输出的共享虚拟形象与所述亲密用户组的平均形象的第一损失值;
将输出的共享虚拟形象与各用户的表达特征输入待训练的重建模型进行虚拟形象重建,并计算输出的虚拟形象与训练样本中虚拟形象的第二损失值;
基于所述第一损失值和所述第二损失值对待训练的形象计算模型和待训练的重建模型进行参数调整。
此外,在重建模型和形象计算模型的训练过程中,还可通过构建损失函数的方式来提升训练效率和训练效果,例如,构建的损失函数如下:
其中,Losstotal为第一损失值与第二损失值之和,为第二损失值,obase为训练过程中待训练的形象计算模型输出的共享虚拟形象,为用户A与用户A的5个亲密用户的平均形象,oi为训练过程中待训练的重建模型输出的虚拟形象,xi为用户A与用户A的5个亲密用户组成的亲密用户组中第i个用户的虚拟形象,表示对求二范数,或者表示obase与的欧氏距离,
表示对求二范数获得的结果的平方,或者obase与的欧氏距离的平方,并将作为第一损失值,‖oi-xi‖2表示对oi-xi求二范数,或者表示oi与xi的欧氏距离,表示对oi-xi求二范数获得的结果的平方,或者oi与xi的欧氏距离的平方。
需要说明的是,本实施例提供的重建模型,可被替换为重建网络,该重建网络能够根据输入的目标用户的表达特征以及对应的共享虚拟形象进行虚拟形象重建,输出虚拟形象;类似的,上述形象计算模型可被替换为形象计算网络,该形象计算网络能够根据输入的目标用户的第一虚拟形象和亲密用户的第一虚拟形象进行共享虚拟形象计算,输出共享虚拟形象以及目标用户和亲密用户的表达特征;进一步,还可将该重建网络和形象计算网络配置为虚拟形象更新模型配置的两个模块,在训练过程中,可通过构建损失函数对虚拟形象更新模型整体进行训练,在训练完成后实际使用该虚拟形象更新模型的过程中,可根据实际需要调用该虚拟形象更新模型重建网络或者形象计算网络进行相应处理,还可将数据输入虚拟形象更新模型经重建网络和形象计算网络的处理后输出相应处理结果。
此外,为了确保非亲密用户在与目标用户进行交互时能够及时获取到目标用户进行形象更新后的虚拟形象,本实施例提供的一种可选实施方式中,向所述接入设备的服务端发送所述残差编码,以在所述服务端进行所述目标用户的虚拟形象生成。此处虚拟形象生成的生成过程参照上述提供的虚拟形象实现方式,此处不再赘述。
在此基础上,为了降低非亲密用户的访问目标用户进行形象更新后的虚拟形象的过程中产生的资源消耗,可选的,接入设备的服务端采用“被动”同步的方式将所述残差数据进行编码获得的残差编码向针对所述目标用户提出访问请求的非亲密用户进行同步,即:对接收到针对目标用户提出访问请求的非亲密用户进行同步,其他未针对目标用户提出访问请求的非亲密用户则不进行同步,可选的,所述服务端在接收到非亲密用户提交的针对所述目标用户的访问请求后,执行如下操作:向所述非亲密用户的接入设备下发所述虚拟形象生成获得的所述目标用户的目标虚拟形象,以在所述非亲密用户的接入设备进行所述目标用户的目标虚拟形象的渲染输出。
具体实施时,在亲密用户的接入设备进行目标用户的虚拟形象生成的过程中,为了提升进行目标用户的虚拟形象生成的实时性,可将目标用户的表达特征预先存储至目标用户的亲密用户的接入设备,还可将重建模型也存储至目标用户的亲密用户的接入设备,从而在接收到残差编码后,能够更快的进行目标用户的虚拟形象,可选的,所述目标用户和所述亲密用户组成的亲密用户组中,任一用户的接入设备存储有所述重建模型以及所述亲密用户组中各用户的表达特征。
此外,为了降低接入设备的数据存储压力,节省数据存储空间,可选的,所述亲密用户的接入设备在接收到所述目标用户的接入设备发送的所述残差编码后,从接入设备的服务端获取所述重建模型和所述目标用户的表达特征。
本实施例中,还提供虚拟形象的批量更新方式,比如定期采用下述提供的批量更新方式进行虚拟形象更新,具体的,本实施例提供的一种可选实施方式中,所述接入设备的服务端,在检测到所述目标用户与所述亲密用户的虚拟形象均被更新后,执行如下操作:
将所述目标用户的第二虚拟形象和所述亲密用户的第二虚拟形象输入形象计算模型进行共享虚拟形象计算,输出第一共享虚拟形象、所述目标用户和所述亲密用户的第一表达特征;
将所述第一表达特征发送至对应的接入设备进行存储。
实际应用中,目标用户在虚拟世界内进行交互亲密用户,可能会随着虚拟世界的运行发生变化,本实施例通过提供亲密用户的更新机制,来保证目标用户的亲密用户的有效性,并在亲密用户更新的基础上更新共享虚拟形象,具体的,本实施例提供的一种可选实施方式中,所述接入设备的服务端,采用如下方式进行亲密用户和共享虚拟形象更新:
更新所述目标用户的亲密用户,并将所述第二虚拟形象和更新后的亲密用户的虚拟形象输入形象计算模型进行共享虚拟形象计算,输出第二共享虚拟形象、所述目标用户和更新后的亲密用户的第二表达特征;
将所述第二表达特征发送至对应的接入设备进行存储。
本实施例提供的上述虚拟世界的虚拟形象更新方法,应用于目标用户的接入设备,此外,下述实施例还提供应用于亲密用户的接入设备的虚拟世界的虚拟形象更新方法,以及应用于接入设备的服务端的虚拟世界的虚拟形象更新方法。
本说明书提供的另一种虚拟世界的虚拟形象更新方法实施例:
需要说明的是,本实施例提供的虚拟世界的虚拟形象更新方法,可应用于亲密用户的接入设备,由于本实施例与上述提供的应用于目标用户的接入设备的虚拟世界的虚拟形象更新方法,在执行过程中相互配合,因此,阅读本实施例请参照上述方法实施例的相应内容,下述描述的方法实施例仅仅是示意性的。
步骤S202,接收目标用户的接入设备发送的残差数据进行编码获得的残差编码。
可选的,所述残差数据根据所述目标用户在虚拟世界内的第一虚拟形象与形象更新获得的第二虚拟形象计算获得。
步骤S204,获取所述目标用户的表达特征以及对应的共享虚拟形象,并将所述表达特征和所述共享虚拟形象输入重建模型进行虚拟形象重建,输出虚拟形象。
本实施例提供的一种可选实施方式中,所述共享虚拟形象,采用如下方式生成:将所述目标用户的第一虚拟形象和所述亲密用户的第一虚拟形象输入形象计算模型进行共享虚拟形象计算,输出所述共享虚拟形象以及所述目标用户和所述亲密用户的表达特征。
可选的,所述共享虚拟形象计算,在所述接入设备的服务端进行,所述服务端在进行所述共享虚拟形象计算后执行如下操作:存储所述目标用户和所述亲密用户的表达特征,并删除所述服务端存储的所述目标用户的第一虚拟形象和所述亲密用户的第一虚拟形象。
可选的,所述目标用户和所述亲密用户组成的亲密用户组中,任一用户的接入设备存储有所述重建模型以及所述亲密用户组中各用户的表达特征。或者,所述亲密用户的接入设备在接收到所述目标用户的接入设备发送的所述残差编码后,从接入设备的服务端获取所述重建模型和所述目标用户的表达特征。
本实施例提供的一种可选实施方式中,所述重建模型和所述形象计算模型,采用如下方式进行训练:
获取所述虚拟世界内具有亲密关系的亲密用户组中各用户的虚拟形象作为训练样本;
将各用户的虚拟形象输入待训练的形象计算模型进行共享虚拟形象计算,并计算输出的共享虚拟形象与所述亲密用户组的平均形象的第一损失值;
将输出的共享虚拟形象与各用户的表达特征输入待训练的重建模型进行虚拟形象重建,并计算输出的虚拟形象与训练样本中虚拟形象的第二损失值;
基于所述第一损失值和所述第二损失值对待训练的形象计算模型和待训练的重建模型进行参数调整。
步骤S206,基于输出的虚拟形象和解码所述残差编码获得的残差数据确定所述目标用户的目标虚拟形象。
本实施例提供一种可选实施方式中,所述接入设备的服务端,在检测到所述目标用户与所述亲密用户的虚拟形象均被更新后,执行如下操作:
将所述目标用户的第二虚拟形象和所述亲密用户的第二虚拟形象输入形象计算模型进行共享虚拟形象计算,输出第一共享虚拟形象、所述目标用户和所述亲密用户的第一表达特征;
将所述第一表达特征发送至对应的接入设备进行存储。
本实施例提供另一种可选实施方式中,所述接入设备的服务端,执行如下操作:
更新所述目标用户的亲密用户,并将所述第二虚拟形象和更新后的亲密用户的虚拟形象输入形象计算模型进行共享虚拟形象计算,输出第二共享虚拟形象、所述目标用户和更新后的亲密用户的第二表达特征;
将所述第二表达特征发送至对应的接入设备进行存储。
本说明书提供的第三种虚拟世界的虚拟形象更新方法实施例:
需要说明的是,本实施例提供的虚拟世界的虚拟形象更新方法,可应用于亲密用户的接入设备,由于本实施例与上述提供的应用于目标用户的接入设备的虚拟世界的虚拟形象更新方法,在执行过程中相互配合,因此,阅读本实施例请参照上述方法实施例的相应内容,下述描述的方法实施例仅仅是示意性的。
步骤S302,接收目标用户的接入设备发送的残差数据进行编码获得的残差编码。
可选的,所述残差数据根据所述目标用户在虚拟世界内的第一虚拟形象与形象更新获得的第二虚拟形象计算获得。
步骤S304,读取所述目标用户的表达特征以及对应的共享虚拟形象,并将所述表达特征和所述共享虚拟形象输入重建模型进行虚拟形象重建,输出虚拟形象。
所述共享虚拟形象,采用如下方式生成:将所述目标用户的第一虚拟形象和所述亲密用户的第一虚拟形象输入形象计算模型进行共享虚拟形象计算,输出所述共享虚拟形象以及所述目标用户和所述亲密用户的表达特征。
本实施例提供的一种可选实施方式中,在生成所述共享虚拟形象后执行如下操作:存储所述目标用户和所述亲密用户的表达特征,并删除所述服务端存储的所述目标用户的第一虚拟形象和所述亲密用户的第一虚拟形象。
步骤S306,基于输出的虚拟形象和解码所述残差编码获得的残差数据确定所述目标用户的目标虚拟形象。
步骤S308,若接收到非亲密用户的接入设备提交的针对所述目标用户的访问请求,则向所述非亲密用户的接入设备下发所述目标用户的目标虚拟形象。
本实施例提供的一种可选实施方式中,重建模型和形象计算模型,采用如下方式进行训练:
获取所述虚拟世界内具有亲密关系的亲密用户组中各用户的虚拟形象作为训练样本;
将各用户的虚拟形象输入待训练的形象计算模型进行共享虚拟形象计算,并计算输出的共享虚拟形象与所述亲密用户组的平均形象的第一损失值;
将输出的共享虚拟形象与各用户的表达特征输入待训练的重建模型进行虚拟形象重建,并计算输出的虚拟形象与训练样本中虚拟形象的第二损失值;
基于所述第一损失值和所述第二损失值对待训练的形象计算模型和待训练的重建模型进行参数调整。
本实施例提供的一种可选实施方式中,在检测到所述目标用户与所述亲密用户的虚拟形象均被更新后,执行如下操作:
将所述目标用户的第二虚拟形象和所述亲密用户的第二虚拟形象输入形象计算模型进行共享虚拟形象计算,输出第一共享虚拟形象、所述目标用户和所述亲密用户的第一表达特征;
将所述第一表达特征发送至对应的接入设备进行存储。
本实施例提供的一种可选实施方式中,还包括:
更新所述目标用户的亲密用户,并将所述第二虚拟形象和更新后的亲密用户的虚拟形象输入形象计算模型进行共享虚拟形象计算,输出第二共享虚拟形象、所述目标用户和更新后的亲密用户的第二表达特征;
将所述第二表达特征发送至对应的接入设备进行存储。
本说明书提供的一种虚拟世界的虚拟形象更新装置实施例如下:
在上述的实施例中,提供了一种虚拟世界的虚拟形象更新方法,与之相对应的,还提供了一种虚拟世界的虚拟形象更新装置,下面结合附图进行说明。
参照图4,其示出了本实施例提供的一种虚拟世界的虚拟形象更新装置示意图。
由于装置实施例对应于方法实施例,所以描述得比较简单,相关的部分请参见上述提供的方法实施例的对应说明即可。下述描述的装置实施例仅仅是示意性的。
本实施例提供一种虚拟世界的虚拟形象更新装置,包括:
残差数据计算模块402,被配置为计算目标用户在虚拟世界内的第一虚拟形象与形象更新获得的第二虚拟形象的残差数据;
残差数据编码发送模块404,被配置为对所述残差数据进行编码,将获得的残差编码向亲密用户的接入设备发送,以在所述亲密用户的接入设备进行所述目标用户的虚拟形象生成;
所述虚拟形象生成包括:将所述目标用户的表达特征以及对应的共享虚拟形象输入重建模型进行虚拟形象重建,并基于输出的虚拟形象以及解码所述残差编码获得的残差数据确定所述目标用户的目标虚拟形象。
本说明书提供的另一种虚拟世界的虚拟形象更新装置实施例如下:
在上述的实施例中,提供了另一种虚拟世界的虚拟形象更新方法,与之相对应的,还提供了另一种虚拟世界的虚拟形象更新装置,下面结合附图进行说明。
参照图5,其示出了本实施例提供的一种虚拟世界的虚拟形象更新装置示意图。
由于装置实施例对应于方法实施例,所以描述得比较简单,相关的部分请参见上述提供的方法实施例的对应说明即可。下述描述的装置实施例仅仅是示意性的。
本实施例提供一种虚拟世界的虚拟形象更新装置,包括:
残差编码接收模块502,被配置为接收目标用户的接入设备发送的残差数据进行编码获得的残差编码;
虚拟形象重建模块504,被配置为获取所述目标用户的表达特征以及对应的共享虚拟形象,并将所述表达特征和所述共享虚拟形象输入重建模型进行虚拟形象重建,输出虚拟形象;
目标虚拟形象确定模块506,被配置为基于输出的虚拟形象和解码所述残差编码获得的残差数据确定所述目标用户的目标虚拟形象。
本说明书提供的一种虚拟世界的虚拟形象更新设备实施例如下:
对应上述描述的一种虚拟世界的虚拟形象更新方法,基于相同的技术构思,本说明书一个或多个实施例还提供一种虚拟世界的虚拟形象更新设备,该虚拟世界的虚拟形象更新设备用于执行上述提供的虚拟世界的虚拟形象更新方法,图6为本说明书一个或多个实施例提供的一种虚拟世界的虚拟形象更新设备的结构示意图。
本实施例提供的一种虚拟世界的虚拟形象更新设备,包括:
如图6所示,虚拟世界的虚拟形象更新设备可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上的处理器601和存储器602,存储器602中可以存储有一个或一个以上存储应用程序或数据。其中,存储器602可以是短暂存储或持久存储。存储在存储器602的应用程序可以包括一个或一个以上模块(图示未示出),每个模块可以包括虚拟世界的虚拟形象更新设备中的一系列计算机可执行指令。更进一步地,处理器601可以设置为与存储器602通信,在虚拟世界的虚拟形象更新设备上执行存储器602中的一系列计算机可执行指令。虚拟世界的虚拟形象更新设备还可以包括一个或一个以上电源603,一个或一个以上有线或无线网络接口604,一个或一个以上输入/输出接口605,一个或一个以上键盘606等。
在一个具体的实施例中,虚拟世界的虚拟形象更新设备包括有存储器,以及一个或一个以上的程序,其中一个或者一个以上程序存储于存储器中,且一个或者一个以上程序可以包括一个或一个以上模块,且每个模块可以包括对虚拟世界的虚拟形象更新设备中的一系列计算机可执行指令,且经配置以由一个或者一个以上处理器执行该一个或者一个以上程序包含用于进行以下计算机可执行指令:
计算目标用户在虚拟世界内的第一虚拟形象与形象更新获得的第二虚拟形象的残差数据;
对所述残差数据进行编码,将获得的残差编码向亲密用户的接入设备发送,以在所述亲密用户的接入设备进行所述目标用户的虚拟形象生成;
所述虚拟形象生成包括:将所述目标用户的表达特征以及对应的共享虚拟形象输入重建模型进行虚拟形象重建,并基于输出的虚拟形象以及解码所述残差编码获得的残差数据确定所述目标用户的目标虚拟形象。
本说明书提供的另一种虚拟世界的虚拟形象更新设备实施例如下:
对应上述描述的另一种虚拟世界的虚拟形象更新方法,基于相同的技术构思,本说明书一个或多个实施例还提供另一种虚拟世界的虚拟形象更新设备,该虚拟世界的虚拟形象更新设备用于执行上述提供的虚拟世界的虚拟形象更新方法,图7为本说明书一个或多个实施例提供的另一种虚拟世界的虚拟形象更新设备的结构示意图。
本实施例提供的一种虚拟世界的虚拟形象更新设备,包括:
如图7所示,虚拟世界的虚拟形象更新设备可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上的处理器701和存储器702,存储器702中可以存储有一个或一个以上存储应用程序或数据。其中,存储器702可以是短暂存储或持久存储。存储在存储器702的应用程序可以包括一个或一个以上模块(图示未示出),每个模块可以包括虚拟世界的虚拟形象更新设备中的一系列计算机可执行指令。更进一步地,处理器701可以设置为与存储器702通信,在虚拟世界的虚拟形象更新设备上执行存储器702中的一系列计算机可执行指令。虚拟世界的虚拟形象更新设备还可以包括一个或一个以上电源703,一个或一个以上有线或无线网络接口704,一个或一个以上输入/输出接口705,一个或一个以上键盘706等。
在一个具体的实施例中,虚拟世界的虚拟形象更新设备包括有存储器,以及一个或一个以上的程序,其中一个或者一个以上程序存储于存储器中,且一个或者一个以上程序可以包括一个或一个以上模块,且每个模块可以包括对虚拟世界的虚拟形象更新设备中的一系列计算机可执行指令,且经配置以由一个或者一个以上处理器执行该一个或者一个以上程序包含用于进行以下计算机可执行指令:
接收目标用户的接入设备发送的残差数据进行编码获得的残差编码;
获取所述目标用户的表达特征以及对应的共享虚拟形象,并将所述表达特征和所述共享虚拟形象输入重建模型进行虚拟形象重建,输出虚拟形象;
基于输出的虚拟形象和解码所述残差编码获得的残差数据确定所述目标用户的目标虚拟形象。
本说明书提供的一种存储介质实施例如下:
对应上述描述的一种虚拟世界的虚拟形象更新方法,基于相同的技术构思,本说明书一个或多个实施例还提供一种存储介质。
本实施例提供的存储介质,用于存储计算机可执行指令,所述计算机可执行指令在被处理器执行时实现以下流程:
计算目标用户在虚拟世界内的第一虚拟形象与形象更新获得的第二虚拟形象的残差数据;
对所述残差数据进行编码,将获得的残差编码向亲密用户的接入设备发送,以在所述亲密用户的接入设备进行所述目标用户的虚拟形象生成;
所述虚拟形象生成包括:将所述目标用户的表达特征以及对应的共享虚拟形象输入重建模型进行虚拟形象重建,并基于输出的虚拟形象以及解码所述残差编码获得的残差数据确定所述目标用户的目标虚拟形象。
需要说明的是,本说明书中关于存储介质的实施例与本说明书中关于虚拟世界的虚拟形象更新方法的实施例基于同一发明构思,因此该实施例的具体实施可以参见前述对应方法的实施,重复之处不再赘述。
本说明书提供的另一种存储介质实施例如下:
对应上述描述的另一种虚拟世界的虚拟形象更新方法,基于相同的技术构思,本说明书一个或多个实施例还提供另一种存储介质。
本实施例提供的存储介质,用于存储计算机可执行指令,所述计算机可执行指令在被处理器执行时实现以下流程:
接收目标用户的接入设备发送的残差数据进行编码获得的残差编码;
获取所述目标用户的表达特征以及对应的共享虚拟形象,并将所述表达特征和所述共享虚拟形象输入重建模型进行虚拟形象重建,输出虚拟形象;
基于输出的虚拟形象和解码所述残差编码获得的残差数据确定所述目标用户的目标虚拟形象。
需要说明的是,本说明书中关于存储介质的实施例与本说明书中另一种虚拟世界的虚拟形象更新方法的实施例基于同一发明构思,因此该实施例的具体实施可以参见前述对应方法的实施,重复之处不再赘述。
上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
在20世纪30年代,对于一个技术的改进可以很明显地区分是硬件上的改进(例如,对二极管、晶体管、开关等电路结构的改进)还是软件上的改进(对于方法流程的改进)。然而,随着技术的发展,当今的很多方法流程的改进已经可以视为硬件电路结构的直接改进。设计人员几乎都通过将改进的方法流程编程到硬件电路中来得到相应的硬件电路结构。因此,不能说一个方法流程的改进就不能用硬件实体模块来实现。例如,可编程逻辑器件(Programmable Logic Device,PLD)(例如现场可编程门阵列(Field Programmable GateArray,FPGA))就是这样一种集成电路,其逻辑功能由用户对器件编程来确定。由设计人员自行编程来把一个数字系统“集成”在一片PLD上,而不需要请芯片制造厂商来设计和制作专用的集成电路芯片。而且,如今,取代手工地制作集成电路芯片,这种编程也多半改用“逻辑编译器(logic compiler)”软件来实现,它与程序开发撰写时所用的软件编译器相类似,而要编译之前的原始代码也得用特定的编程语言来撰写,此称之为硬件描述语言(Hardware Description Language,HDL),而HDL也并非仅有一种,而是有许多种,如ABEL(Advanced Boolean Expression Language)、AHDL(Altera Hardware DescriptionLanguage)、Confluence、CUPL(Cornell University Programming Language)、HDCal、JHDL(Java Hardware Description Language)、Lava、Lola、MyHDL、PALASM、RHDL(RubyHardware Description Language)等,目前最普遍使用的是VHDL(Very-High-SpeedIntegrated Circuit Hardware Description Language)与Verilog。本领域技术人员也应该清楚,只需要将方法流程用上述几种硬件描述语言稍作逻辑编程并编程到集成电路中,就可以很容易得到实现该逻辑方法流程的硬件电路。
控制器可以按任何适当的方式实现,例如,控制器可以采取例如微处理器或处理器以及存储可由该(微)处理器执行的计算机可读程序代码(例如软件或固件)的计算机可读介质、逻辑门、开关、专用集成电路(Application Specific Integrated Circuit,ASIC)、可编程逻辑控制器和嵌入微控制器的形式,控制器的例子包括但不限于以下微控制器:ARC625D、Atmel AT91SAM、Microchip PIC18F26K20以及Silicone Labs C8051F320,存储器控制器还可以被实现为存储器的控制逻辑的一部分。本领域技术人员也知道,除了以纯计算机可读程序代码方式实现控制器以外,完全可以通过将方法步骤进行逻辑编程来使得控制器以逻辑门、开关、专用集成电路、可编程逻辑控制器和嵌入微控制器等的形式来实现相同功能。因此这种控制器可以被认为是一种硬件部件,而对其内包括的用于实现各种功能的装置也可以视为硬件部件内的结构。或者甚至,可以将用于实现各种功能的装置视为既可以是实现方法的软件模块又可以是硬件部件内的结构。
上述实施例阐明的系统、装置、模块或单元,具体可以由计算机芯片或实体实现,或者由具有某种功能的产品来实现。一种典型的实现设备为计算机。具体的,计算机例如可以为个人计算机、膝上型计算机、蜂窝电话、相机电话、智能电话、个人数字助理、媒体播放器、导航设备、电子邮件设备、游戏控制台、平板计算机、可穿戴设备或者这些设备中的任何设备的组合。
为了描述的方便,描述以上装置时以功能分为各种单元分别描述。当然,在实施本说明书实施例时可以把各单元的功能在同一个或多个软件和/或硬件中实现。
本领域内的技术人员应明白,本说明书一个或多个实施例可提供为方法、系统或计算机程序产品。因此,本说明书一个或多个实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本说明书可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本说明书是参照根据本说明书实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中,计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。
本说明书一个或多个实施例可以在由计算机执行的计算机可执行指令的一般上下文中描述,例如程序模块。一般地,程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等等。也可以在分布式计算环境中实践本说明书的一个或多个实施例,在这些分布式计算环境中,由通过通信网络而被连接的远程处理设备来执行任务。在分布式计算环境中,程序模块可以位于包括存储设备在内的本地和远程计算机存储介质中。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本文件的实施例而已,并不用于限制本文件。对于本领域技术人员来说,本文件可以有各种更改和变化。凡在本文件的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本文件的权利要求范围之内。
Claims (19)
1.一种虚拟世界的虚拟形象更新方法,包括:
计算目标用户在虚拟世界内的第一虚拟形象与形象更新获得的第二虚拟形象的残差数据;
对所述残差数据进行编码,将获得的残差编码向亲密用户的接入设备发送,以在所述亲密用户的接入设备进行所述目标用户的虚拟形象生成;
所述虚拟形象生成包括:将所述目标用户的表达特征以及对应的共享虚拟形象输入重建模型进行虚拟形象重建,并基于输出的虚拟形象以及解码所述残差编码获得的残差数据确定所述目标用户的目标虚拟形象。
2.根据权利要求1所述的虚拟世界的虚拟形象更新方法,所述共享虚拟形象,采用如下方式生成:
将所述目标用户的第一虚拟形象和所述亲密用户的第一虚拟形象输入形象计算模型进行共享虚拟形象计算,输出所述共享虚拟形象以及所述目标用户和所述亲密用户的表达特征。
3.根据权利要求2所述的虚拟世界的虚拟形象更新方法,所述共享虚拟形象计算,在所述接入设备的服务端进行,所述服务端在进行所述共享虚拟形象计算后执行如下操作:
存储所述目标用户和所述亲密用户的表达特征,并删除所述服务端存储的所述目标用户的第一虚拟形象和所述亲密用户的第一虚拟形象。
4.根据权利要求1所述的虚拟世界的虚拟形象更新方法,还包括:
向所述接入设备的服务端发送所述残差编码,以在所述服务端进行所述目标用户的虚拟形象生成。
5.根据权利要求4所述的虚拟世界的虚拟形象更新方法,所述服务端在接收到非亲密用户提交的针对所述目标用户的访问请求后,执行如下操作:
向所述非亲密用户的接入设备下发所述虚拟形象生成获得的所述目标用户的目标虚拟形象,以在所述非亲密用户的接入设备进行所述目标用户的目标虚拟形象的渲染输出。
6.根据权利要求1所述的虚拟世界的虚拟形象更新方法,所述目标用户和所述亲密用户组成的亲密用户组中,任一用户的接入设备存储有所述重建模型以及所述亲密用户组中各用户的表达特征。
7.根据权利要求1所述的虚拟世界的虚拟形象更新方法,所述亲密用户的接入设备在接收到所述目标用户的接入设备发送的所述残差编码后,从接入设备的服务端获取所述重建模型和所述目标用户的表达特征。
8.根据权利要求2所述的虚拟世界的虚拟形象更新方法,所述重建模型和所述形象计算模型,采用如下方式进行训练:
获取所述虚拟世界内具有亲密关系的亲密用户组中各用户的虚拟形象作为训练样本;
将各用户的虚拟形象输入待训练的形象计算模型进行共享虚拟形象计算,并计算输出的共享虚拟形象与所述亲密用户组的平均形象的第一损失值;
将输出的共享虚拟形象与各用户的表达特征输入待训练的重建模型进行虚拟形象重建,并计算输出的虚拟形象与训练样本中虚拟形象的第二损失值;
基于所述第一损失值和所述第二损失值对待训练的形象计算模型和待训练的重建模型进行参数调整。
9.根据权利要求1所述的虚拟世界的虚拟形象更新方法,所述接入设备的服务端,在检测到所述目标用户与所述亲密用户的虚拟形象均被更新后,执行如下操作:
将所述目标用户的第二虚拟形象和所述亲密用户的第二虚拟形象输入形象计算模型进行共享虚拟形象计算,输出第一共享虚拟形象、所述目标用户和所述亲密用户的第一表达特征;
将所述第一表达特征发送至对应的接入设备进行存储。
10.根据权利要求1所述的虚拟世界的虚拟形象更新方法,所述接入设备的服务端,执行如下操作:
更新所述目标用户的亲密用户,并将所述第二虚拟形象和更新后的亲密用户的虚拟形象输入形象计算模型进行共享虚拟形象计算,输出第二共享虚拟形象、所述目标用户和更新后的亲密用户的第二表达特征;
将所述第二表达特征发送至对应的接入设备进行存储。
11.根据权利要求1所述的虚拟世界的虚拟形象更新方法,所述亲密用户,采用如下方式确定:
根据所述虚拟世界内与所述目标用户进行虚拟交互的交互用户的交互数据,确定满足亲密条件的交互用户作为所述目标用户的亲密用户;
以及,将所述虚拟世界内所述亲密用户之外的用户的作为所述目标用户的非亲密用户。
12.根据权利要求11所述的虚拟世界的虚拟形象更新方法,所述交互用户,包括在所述虚拟世界内基于生成的非同质化标识与所述目标用户进行虚拟资产交易的交易用户;
其中,所述第二虚拟形象与所述目标用户具有身份映射,所述目标用户和所述交易用户基于所述身份映射进行所述虚拟资产交易,并通过所述虚拟资产交易占有虚拟资产的所有权。
13.一种虚拟世界的虚拟形象更新方法,包括:
接收目标用户的接入设备发送的残差数据进行编码获得的残差编码;
获取所述目标用户的表达特征以及对应的共享虚拟形象,并将所述表达特征和所述共享虚拟形象输入重建模型进行虚拟形象重建,输出虚拟形象;
基于输出的虚拟形象和解码所述残差编码获得的残差数据确定所述目标用户的目标虚拟形象。
14.一种虚拟世界的虚拟形象更新装置,包括:
残差数据计算模块,被配置为计算目标用户在虚拟世界内的第一虚拟形象与形象更新获得的第二虚拟形象的残差数据;
残差数据编码发送模块,被配置为对所述残差数据进行编码,将获得的残差编码向亲密用户的接入设备发送,以在所述亲密用户的接入设备进行所述目标用户的虚拟形象生成;
所述虚拟形象生成包括:将所述目标用户的表达特征以及对应的共享虚拟形象输入重建模型进行虚拟形象重建,并基于输出的虚拟形象以及解码所述残差编码获得的残差数据确定所述目标用户的目标虚拟形象。
15.一种虚拟世界的虚拟形象更新装置,包括:
残差编码接收模块,被配置为接收目标用户的接入设备发送的残差数据进行编码获得的残差编码;
虚拟形象重建模块,被配置为获取所述目标用户的表达特征以及对应的共享虚拟形象,并将所述表达特征和所述共享虚拟形象输入重建模型进行虚拟形象重建,输出虚拟形象;
目标虚拟形象确定模块,被配置为基于输出的虚拟形象和解码所述残差编码获得的残差数据确定所述目标用户的目标虚拟形象。
16.一种虚拟世界的虚拟形象更新设备,包括:
处理器;以及,被配置为存储计算机可执行指令的存储器,所述计算机可执行指令在被执行时使所述处理器:
计算目标用户在虚拟世界内的第一虚拟形象与形象更新获得的第二虚拟形象的残差数据;
对所述残差数据进行编码,将获得的残差编码向亲密用户的接入设备发送,以在所述亲密用户的接入设备进行所述目标用户的虚拟形象生成;
所述虚拟形象生成包括:将所述目标用户的表达特征以及对应的共享虚拟形象输入重建模型进行虚拟形象重建,并基于输出的虚拟形象以及解码所述残差编码获得的残差数据确定所述目标用户的目标虚拟形象。
17.一种虚拟世界的虚拟形象更新设备,包括:
处理器;以及,被配置为存储计算机可执行指令的存储器,所述计算机可执行指令在被执行时使所述处理器:
接收目标用户的接入设备发送的残差数据进行编码获得的残差编码;
获取所述目标用户的表达特征以及对应的共享虚拟形象,并将所述表达特征和所述共享虚拟形象输入重建模型进行虚拟形象重建,输出虚拟形象;
基于输出的虚拟形象和解码所述残差编码获得的残差数据确定所述目标用户的目标虚拟形象。
18.一种存储介质,用于存储计算机可执行指令,所述计算机可执行指令在被处理器执行时实现以下流程:
计算目标用户在虚拟世界内的第一虚拟形象与形象更新获得的第二虚拟形象的残差数据;
对所述残差数据进行编码,将获得的残差编码向亲密用户的接入设备发送,以在所述亲密用户的接入设备进行所述目标用户的虚拟形象生成;
所述虚拟形象生成包括:将所述目标用户的表达特征以及对应的共享虚拟形象输入重建模型进行虚拟形象重建,并基于输出的虚拟形象以及解码所述残差编码获得的残差数据确定所述目标用户的目标虚拟形象。
19.一种存储介质,用于存储计算机可执行指令,所述计算机可执行指令在被处理器执行时实现以下流程:
接收目标用户的接入设备发送的残差数据进行编码获得的残差编码;
获取所述目标用户的表达特征以及对应的共享虚拟形象,并将所述表达特征和所述共享虚拟形象输入重建模型进行虚拟形象重建,输出虚拟形象;
基于输出的虚拟形象和解码所述残差编码获得的残差数据确定所述目标用户的目标虚拟形象。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210983501.0A CN115359220A (zh) | 2022-08-16 | 2022-08-16 | 虚拟世界的虚拟形象更新方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210983501.0A CN115359220A (zh) | 2022-08-16 | 2022-08-16 | 虚拟世界的虚拟形象更新方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115359220A true CN115359220A (zh) | 2022-11-18 |
Family
ID=84001547
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210983501.0A Pending CN115359220A (zh) | 2022-08-16 | 2022-08-16 | 虚拟世界的虚拟形象更新方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115359220A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115731375A (zh) * | 2022-12-09 | 2023-03-03 | 支付宝(杭州)信息技术有限公司 | 虚拟形象的更新方法及装置 |
CN115809696A (zh) * | 2022-12-01 | 2023-03-17 | 支付宝(杭州)信息技术有限公司 | 虚拟形象模型训练方法及装置 |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101821698A (zh) * | 2007-10-15 | 2010-09-01 | 国际商业机器公司 | 用于连接真实世界web应用与3d虚拟世界的方法和装置 |
KR20120052772A (ko) * | 2010-11-16 | 2012-05-24 | 한국전자통신연구원 | 증강 현실 환경에서 증강 현실 서비스 제공 방법 및 이를 위한 시스템 |
CN108647229A (zh) * | 2018-03-29 | 2018-10-12 | 重庆柚瓣家科技有限公司 | 基于人工智能的虚拟人模型构建方法 |
US20200372687A1 (en) * | 2018-07-05 | 2020-11-26 | Tencent Technology (Shenzhen) Company Limited | Augmented reality data dissemination method, system and terminal and storage medium |
US20200380031A1 (en) * | 2018-07-04 | 2020-12-03 | Tencent Technology (Shenzhen) Company Limited | Image processing method, storage medium, and computer device |
CN112561076A (zh) * | 2020-12-10 | 2021-03-26 | 支付宝(杭州)信息技术有限公司 | 模型处理方法和装置 |
US10970923B1 (en) * | 2018-03-13 | 2021-04-06 | State Farm Mutual Automobile Insurance Company | Method and system for virtual area visualization |
CN112653898A (zh) * | 2020-12-15 | 2021-04-13 | 北京百度网讯科技有限公司 | 用户形象生成方法、相关装置及计算机程序产品 |
CN112699791A (zh) * | 2020-12-29 | 2021-04-23 | 百果园技术(新加坡)有限公司 | 虚拟对象的脸部生成方法、装置、设备和可读存储介质 |
CN113706678A (zh) * | 2021-03-23 | 2021-11-26 | 腾讯科技(深圳)有限公司 | 获取虚拟形象的方法、装置、设备及计算机可读存储介质 |
CN114612600A (zh) * | 2022-03-11 | 2022-06-10 | 北京百度网讯科技有限公司 | 虚拟形象生成方法、装置、电子设备和存储介质 |
CN114821004A (zh) * | 2022-04-25 | 2022-07-29 | 中国平安人寿保险股份有限公司 | 虚拟空间构建方法、虚拟空间构建装置、设备及存储介质 |
-
2022
- 2022-08-16 CN CN202210983501.0A patent/CN115359220A/zh active Pending
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101821698A (zh) * | 2007-10-15 | 2010-09-01 | 国际商业机器公司 | 用于连接真实世界web应用与3d虚拟世界的方法和装置 |
KR20120052772A (ko) * | 2010-11-16 | 2012-05-24 | 한국전자통신연구원 | 증강 현실 환경에서 증강 현실 서비스 제공 방법 및 이를 위한 시스템 |
US10970923B1 (en) * | 2018-03-13 | 2021-04-06 | State Farm Mutual Automobile Insurance Company | Method and system for virtual area visualization |
CN108647229A (zh) * | 2018-03-29 | 2018-10-12 | 重庆柚瓣家科技有限公司 | 基于人工智能的虚拟人模型构建方法 |
US20200380031A1 (en) * | 2018-07-04 | 2020-12-03 | Tencent Technology (Shenzhen) Company Limited | Image processing method, storage medium, and computer device |
US20200372687A1 (en) * | 2018-07-05 | 2020-11-26 | Tencent Technology (Shenzhen) Company Limited | Augmented reality data dissemination method, system and terminal and storage medium |
CN112561076A (zh) * | 2020-12-10 | 2021-03-26 | 支付宝(杭州)信息技术有限公司 | 模型处理方法和装置 |
CN112653898A (zh) * | 2020-12-15 | 2021-04-13 | 北京百度网讯科技有限公司 | 用户形象生成方法、相关装置及计算机程序产品 |
CN112699791A (zh) * | 2020-12-29 | 2021-04-23 | 百果园技术(新加坡)有限公司 | 虚拟对象的脸部生成方法、装置、设备和可读存储介质 |
CN113706678A (zh) * | 2021-03-23 | 2021-11-26 | 腾讯科技(深圳)有限公司 | 获取虚拟形象的方法、装置、设备及计算机可读存储介质 |
CN114612600A (zh) * | 2022-03-11 | 2022-06-10 | 北京百度网讯科技有限公司 | 虚拟形象生成方法、装置、电子设备和存储介质 |
CN114821004A (zh) * | 2022-04-25 | 2022-07-29 | 中国平安人寿保险股份有限公司 | 虚拟空间构建方法、虚拟空间构建装置、设备及存储介质 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115809696A (zh) * | 2022-12-01 | 2023-03-17 | 支付宝(杭州)信息技术有限公司 | 虚拟形象模型训练方法及装置 |
CN115809696B (zh) * | 2022-12-01 | 2024-04-02 | 支付宝(杭州)信息技术有限公司 | 虚拟形象模型训练方法及装置 |
CN115731375A (zh) * | 2022-12-09 | 2023-03-03 | 支付宝(杭州)信息技术有限公司 | 虚拟形象的更新方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
George et al. | Metaverse: The next stage of human culture and the internet | |
Qiao et al. | Web AR: A promising future for mobile augmented reality—State of the art, challenges, and insights | |
KR102141771B1 (ko) | 멀티 블록체인 네트워크 데이터 처리 방법, 장치 및 서버 | |
CN115359220A (zh) | 虚拟世界的虚拟形象更新方法及装置 | |
CN115359219B (zh) | 虚拟世界的虚拟形象处理方法及装置 | |
CN109754464B (zh) | 用于生成信息的方法和装置 | |
US20220335685A1 (en) | Method and apparatus for point cloud completion, network training method and apparatus, device, and storage medium | |
CN109086126B (zh) | 任务调度处理方法、装置、服务器、客户端及电子设备 | |
CN114792355B (zh) | 虚拟形象生成方法、装置、电子设备和存储介质 | |
CN115861498A (zh) | 动作捕捉的重定向方法和装置 | |
CN110728319B (zh) | 一种图像生成方法、装置以及计算机存储介质 | |
CN116977531A (zh) | 三维纹理图像的生成方法、装置、计算机设备和存储介质 | |
CN115357938A (zh) | 虚拟形象处理方法及装置 | |
Cappannari et al. | XR and metaverse software platforms | |
CN114863214A (zh) | 图像生成模型训练、图像生成方法、装置、介质及设备 | |
KR20230152723A (ko) | 평균 스무딩을 사용하여 이미지-대-이미지 모델들 압축 | |
CN112843681B (zh) | 虚拟场景控制方法、装置、电子设备及存储介质 | |
CN113316078A (zh) | 数据处理方法、装置、计算机设备及存储介质 | |
CN115393022A (zh) | 跨域推荐处理方法及装置 | |
CN115965735A (zh) | 纹理贴图的生成方法和装置 | |
CN115374298A (zh) | 基于索引的虚拟形象数据处理方法及装置 | |
CN115374141A (zh) | 虚拟形象的更新处理方法及装置 | |
CN115775024A (zh) | 虚拟形象模型训练方法及装置 | |
CN115346028A (zh) | 虚拟环境主题处理方法及装置 | |
CN116524151A (zh) | 用于生成虚拟形象的方法、设备和计算机程序产品 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |