CN107767438A - 一种基于虚拟对象进行用户交互的方法与设备 - Google Patents

一种基于虚拟对象进行用户交互的方法与设备 Download PDF

Info

Publication number
CN107767438A
CN107767438A CN201610675278.8A CN201610675278A CN107767438A CN 107767438 A CN107767438 A CN 107767438A CN 201610675278 A CN201610675278 A CN 201610675278A CN 107767438 A CN107767438 A CN 107767438A
Authority
CN
China
Prior art keywords
user
virtual objects
information
virtual
equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610675278.8A
Other languages
English (en)
Inventor
陈大年
王飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Zhangmen Science and Technology Co Ltd
Original Assignee
Shanghai Zhangmen Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Zhangmen Science and Technology Co Ltd filed Critical Shanghai Zhangmen Science and Technology Co Ltd
Priority to CN201610675278.8A priority Critical patent/CN107767438A/zh
Priority to US15/678,138 priority patent/US10628478B2/en
Publication of CN107767438A publication Critical patent/CN107767438A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/435Filtering based on additional data, e.g. user or group profiles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/10Program control for peripheral devices
    • G06F13/12Program control for peripheral devices using hardware independent of the central processor, e.g. channel or peripheral processor
    • G06F13/124Program control for peripheral devices using hardware independent of the central processor, e.g. channel or peripheral processor where hardware is a sequential transfer control unit, e.g. microprocessor, peripheral processor or state-machine
    • G06F13/128Program control for peripheral devices using hardware independent of the central processor, e.g. channel or peripheral processor where hardware is a sequential transfer control unit, e.g. microprocessor, peripheral processor or state-machine for dedicated transfers to a network
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/63Querying
    • G06F16/635Filtering based on additional data, e.g. user or group profiles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/2866Architectures; Arrangements
    • H04L67/30Profiles
    • H04L67/306User profiles

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Multimedia (AREA)
  • Data Mining & Analysis (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Computer Graphics (AREA)
  • Geometry (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请的目的是提供一种基于虚拟对象进行用户交互的方法与设备;获取第一用户的第一用户特征信息,其中,所述第一用户特征信息包含所述第一用户的动作信息与样貌信息;根据所述第一用户特征信息生成所述第一用户对应的第一虚拟对象,其中,所述第一虚拟对象包括与所述第一用户的样貌信息相匹配的外观,以及与所述第一用户的动作信息相匹配的待执行动作序列;将所述第一虚拟对象提供至所述第一用户对应的用户设备。与现有技术相比,本申请使得现实世界的各个用户之间可以通过虚拟世界中虚拟对象实现真实交互,并且所述交互信息的多样化、拟人化,使得用户的真实感体验大大增强。

Description

一种基于虚拟对象进行用户交互的方法与设备
技术领域
本申请涉及通信领域,尤其涉及一种基于虚拟对象进行用户交互的技术。
背景技术
在现有技术中,用户可以通过控制交互应用中的虚拟对象实现在虚拟场景中的应用操作,但虚拟对象与现实用户之间的关联性不强,现实用户无法完美投射成虚拟对象,基于此,交互应用的多个用户之间的互动方式也就相对单一。进一步,所述用户对应交互信息的输出、输入都局限于通过传统的电视、个人计算机、手机等设备实现,呈现方式单一,使得所述用户在进行交互操作过程中的角色代入感不强,无法实现沉浸式交互体验。因此,现有技术的用户交互操作无法满足用户在虚拟场景中实现与现实社交场景相似的、多元化交互体验的需要。
发明内容
本申请的目的是提供一种基于虚拟对象进行用户交互的方法与设备。
根据本申请的一个方面,提供了一种在网络设备端用基于虚拟对象进行用户交互的方法,包括:
获取第一用户的第一用户特征信息;
根据所述第一用户特征信息生成所述第一用户对应的第一虚拟对象;
确定所述第一交互信息,其中,所述第一交互信息来源于所述第一用户特征信息;
将所述第一虚拟对象发送至与所述第一用户交互的第二用户的用户设备,其中,所述第一虚拟对象包含所述第一交互信息。
根据本申请的另一方面,还提供了一种在用户设备端基于虚拟对象进行用户交互的方法,包括:
获取第一用户的第一用户特征信息,其中,所述第一用户特征信息包含所述第一用户的动作信息与样貌信息;
将所述第一用户特征信息发送至所述第一用户设备对应的网络设备。
根据本申请的又一个方面,提供了一种基于虚拟对象进行用户交互的网络设备,包括:
第一装置,用于获取第一用户的第一用户特征信息;
第二装置,用于根据所述第一用户特征信息生成所述第一用户对应的第一虚拟对象;
第三装置,用于确定所述第一交互信息,其中,所述第一交互信息来源于所述第一用户特征信息;
第四装置,用于将所述第一虚拟对象发送至与所述第一用户交互的第二用户的用户设备,其中,所述第一虚拟对象包含所述第一交互信息。
根据本申请的再一方面,还提供了一种基于虚拟对象进行用户交互的用户设备,包括:
第十二装置,用于获取第一用户的第一用户特征信息,其中,所述第一用户特征信息包含所述第一用户的动作信息与样貌信息;
第十三装置,用于将所述第一用户特征信息发送至所述第一用户设备对应的网络设备。
根据本申请的又一方面,还提供了一种基于虚拟对象进行用户交互的虚拟现实设备,其中,所述虚拟现实设备包括根据本申请再一方面提供的一种用于提供用户对应的虚拟对象的用户设备。
根据本申请的又一方面,还提供了一种基于虚拟对象进行用户交互的运动设备,其中,所述运动设备包括根据本申请再一方面提供的一种用于提供用户对应的虚拟对象的用户设备。
根据本申请的又一方面,还提供了一种基于虚拟对象进行用户交互的采集设备,其中,所述采集设备包括根据本申请再一方面提供的一种用于提供用户对应的虚拟对象的用户设备。
根据本申请的另一方面,还提供了一种基于虚拟对象进行用户交互的系统,其中所述系统包括:根据本申请又一方面提供的一种基于虚拟对象进行用户交互的网络设备,以及以下至少任一项设备:根据本申请再一方面提供的一种基于虚拟对象进行用户交互的用户设备;根据本申请又一方面提供的一种基于虚拟对象进行用户交互的虚拟现实设备;根据本申请又一方面提供的一种基于虚拟对象进行用户交互的运动设备;根据本申请又一方面提供的一种基于虚拟对象进行用户交互的采集设备。
在本申请中,所述网络设备基于获取的第一用户特征信息生成第一用户对应的第一虚拟对象,再基于所述第一用户特征信息提取所述第一用户的第一交互信息,进而,将包含有所述第一交互信息的第一虚拟对象发送至于所述第一用户交互的第二用户的用户设备。在此,所述第一用户的交互信息会基于所述第一虚拟对象提供至交互的第二用户的用户设备,将所述第一用户特征信息虚拟化为所述第一虚拟对象,从而能将第一用户在现实世界中多样化、真实性的交互请求传递出去,并且基于本申请,可以期待交互的对象,如所述第二用户,能够接收到所述交互请求。在此,本申请使得现实世界的各个用户之间可以通过虚拟世界中虚拟对象实现真实交互,并且所述交互信息的多样化、拟人化,使得用户的真实感体验大大增强。
进一步,在本申请一个优选实施例中,所述网络设备所采集到的第一用户特征信息包含所述第一用户的动作信息与样貌信息。进而,所述网络设备生成了包含有与所述第一用户的样貌信息相匹配的外观、及与所述第一用户的动作信息相匹配的待执行动作序列的第一虚拟对象。在此,基于所述采集到的第一用户特征信息,如样貌信息、动作信息的数据信息在虚拟场景中投射出与所述第一用户对应的第一虚拟对象,以接近用户真实特征信息的外观、待执行动作序列等信息,使得第一用户在基于所述第一虚拟对象进行的交互过程中角色代入感大大增强,用户体验得到优化。
进一步,在本申请一个优选实施例中,所述网络设备获取第一用户在跑步机上的第一用户特征信息,并基于该第一用户特征信息生成所述第一用户对应的、进行跑步运动的第一虚拟对象。在本实施例中所述虚拟场景对应为跑步运动场景,进一步,所述第一用户特征信息可以包括所述第一用户在所述跑步机上的跑步动作信息和/或跑步速度信息。在此,本申请可以基于现实实际中各种活动场景模拟出不同的虚拟场景,例如,本实施例中基于用户在跑步机上的跑步,对应模拟出跑步场景,又如,其他任意运动或是其他可交互环境,从而使得人们在各种类型的虚拟场景中,可以在运动的同时,进行交互,增加用户的真实感体验,使得用户可以在不过多依赖于现实环境条件的情况下,实现虚拟显示的仿真运动交互体验。
进一步,在本申请的另一个优选实施例中,所述网络设备可以确定所述第一虚拟对象所处虚拟场景中的一个或多个虚拟对象;进而从一个或多个虚拟对象中确定所述第一虚拟对象对应的第三虚拟对象。在此,本申请对相应的各个虚拟对象进行配对,由此在可以构建出不同区域的用户通过各自的虚拟对象在同一个虚拟场景中相遇的场景,并为进一步构建出相匹配的用户通过各自的虚拟对象在虚拟界面中进行拟人化的交互场景,使得不同地域的用户可以选择与他人在同一个虚拟场景中进行真实交流的技术实现奠定了基础。
进一步,在多个虚拟对象同处于同一个虚拟场景的应用场景中,还可以根据每个虚拟对象对应的运动特征信息从所述一个或多个虚拟对象中确定所述第一虚拟对象对应的第三虚拟对象,其中,所述运动特征信息包括跑步特征信息。在此,所述虚拟对象在虚拟场景中的操作可以与用户的运动体验相结合,例如,用户的跑步运动等,即将用户在现实世界的运动体验投射成虚拟场景中虚拟对象的运动相关操作。由此,可以基于每个虚拟对象对应的运动特征信息,对相应的各个虚拟对象进行配对,使得被匹配在一起的所述第一虚拟对象与所述第三虚拟对象各自对应的用户的运动互动效果最佳,从而提升了用户体验,例如,可以基于跑步场景、跑步级别等信息选择与所述第一虚拟对象对应的第三虚拟对象。
进一步,在本申请中,所述用户设备与所述网络设备配合,将所采集到的第一用户的特征信息提供至对应网络设备。进一步,将从所述网络设备接收到的第一虚拟对象提供至对应的虚拟现实装置,并在所述虚拟现实装置中执行所述第一虚拟对象。在此,有别于传统的电视、个人计算机、手机等设备的呈现效果,在所述虚拟现实装置呈现的三维虚拟世界中,基于本申请提供用户的第一虚拟对象能够以逼近真实感官的呈现效果,给用户带来全面沉浸式交互体验。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本申请的其它特征、目的和优点将会变得更明显:
图1示出根据本申请一个方面的一种基于虚拟对象进行用户交互的系统图;
图2示出根据本申请一个优选实施例的一种基于虚拟对象进行用户交互的网络设备的设备示意图;
图3示出根据本申请另一个方面的一种在网络设备端和用户设备端基于虚拟对象进行用户交互的方法流程图;
图4示出根据本申请一个优选实施例的一种在网络设备端基于虚拟对象进行用户交互的方法流程图。
附图中相同或相似的附图标记代表相同或相似的部件。
具体实施方式
下面结合附图对本申请作进一步详细描述。
在本申请一个典型的配置中,终端、服务网络的设备和可信方均包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flashRAM)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括非暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
图3示出根据本申请另一个方面的一种在网络设备端和用户设备端基于虚拟对象进行用户交互的方法流程图。
其中,在步骤S302中,所述用户设备2获取第一用户的第一用户特征信息,其中,所述第一用户特征信息包含所述第一用户的动作信息与样貌信息;在步骤S304中,所述用户设备2将所述第一用户特征信息发送至所述第一用户设备2对应的网络设备1;接着,在步骤S301中,所述网络设备1获取第一用户的第一用户特征信息;在步骤S303中,所述网络设备1根据所述第一用户特征信息生成所述第一用户对应的第一虚拟对象;在步骤S305中,所述网络设备1确定所述第一交互信息,其中,所述第一交互信息来源于所述第一用户特征信息;在步骤S307中,所述网络设备1将所述第一虚拟对象发送至与所述第一用户交互的第二用户的用户设备,其中,所述第一虚拟对象包含所述第一交互信息。
在此,所述网络设备1包括但不限于计算机、网络主机、单个网络服务器、多个网络服务器集或多个服务器构成的云;在此,云由基于云计算(Cloud Computing)的大量计算机或网络服务器构成,其中,云计算是分布式计算的一种,由一群松散耦合的计算机集组成的一个虚拟超级计算机。所述用户设备2包括各种智能终端,如移动智能设备、各种个人计算机等。在此,所述用户设备2可以是独立存在的设备,还可以加载在其他设备中,例如,加载在对应的虚拟现实设备中,所述虚拟现实设备包括但不限于VR(Virtual Reality,即虚拟现实)设备,或AR(Augmented Reality,或增强现实)设备等;又如,还可以加载在对应的运动设备中,所述运动装置包括但不限于跑步机、自行车、椭圆机等运动装置;又如,还可以加载在对应的采集装置中,所述采集装置包括各种信息采集装置,如包括但不限于各种语音输入/输出装置、样貌采集装置等。
具体地,在步骤S302中,所述用户设备2获取第一用户的第一用户特征信息。在此,优选地,所述第一用户特征信息可以包括第一用户的语音信息;此外,所述第一用户特征信息还可以包括但不限于第一用户的动作信息和样貌信息等其他类型的特征信息。在此,所述第十二装置201可以从其他第三方设备中接收相应的所述第一用户特征信息,例如,当所述第一用户特征信息包括所述动作信息时,所述第三方设备可以是各种动作设备,如,用于采集第一用户各关节活动的采集贴片、全系图像采集设备、3D摄像机、控制手柄等,所述第三方设备还可以是集成了运动采集装置的运动设备,如跑步机、自行车、椭圆机等,优选地,所述第三方设备通过捕捉所述用户的运动操作,如前进、后退、左拐、右拐的跑、跳、步行、挥手、踢腿等动作,进行所述第一用户的动作信息的采集;又如,当所述第一用户特征信息包括所述样貌信息时,可以通过各种类型的摄像头、或是摄像组合装置进行第一用户各个角度的样貌采集,可以是平面样貌信息采集,或是360度全方位样貌信息采集;又如,当所述第一用户特征信息包括语音信息时,则可以通过各种语音设备进行语音信息的采集。此外,所述第十二装置201还可以直接采集所述第一用户特征信息,此时,优选地,所述用户设备2加载于所述运动设备、或是其他采集设备中。
在此,本领域技术人员应该能够理解,上述第一用户特征信息仅为举例,其他现有的或今后可能出现的其他第一用户特征信息如可适用于本申请,也应包含在本申请保护范围以内,并在此以引用方式包含于此。
在此,本领域技术人员应该能够理解,上述各类第一用户特征信息的获取方式仅为举例,其他现有的或今后可能出现的其他第一用户特征信息的获取方式如可适用于本申请,也应包含在本申请保护范围以内,并在此以引用方式包含于此。
接着,在步骤S304中,所述用户设备2将所述第一用户特征信息发送至所述第一用户设备2对应的网络设备1;相应地,步骤S301中,所述网络设备1获取该第一用户特征信息。在此,可以基于实际需要,设置所述用户设备2将其直接采集或是接收的一个或多个第一用户特征信息中的部分、或全部发送至所述网络设备1。
接着,在步骤S303中,所述网络设备1根据所述第一用户特征信息生成所述第一用户对应的第一虚拟对象。在此,优选地,所述第一用户特征信息可以包括第一用户的动作信息和样貌信息;其中,在步骤S303中,所述网络设备1根据所述第一用户特征信息生成所述第一用户对应的第一虚拟对象,其中,所述第一虚拟对象包括与所述第一用户的样貌信息相匹配的外观,以及与所述第一用户的动作信息相匹配的待执行动作序列。具体地,所述第一虚拟对象可以对应为所述第一用户在当前应用对应的虚拟世界中的角色投射,所述第一虚拟对象给所述第一用户将带来真实度较高的角色代入感。在此,优选地,所述第一虚拟对象的外观与所述第一用户与的样貌信息相匹配达到一定的匹配度、或是满足一定的匹配阈值,从而可以在虚拟场景中准确地投射出用以指代所述第一用户的第一虚拟对象,使得所述第一虚拟对象相应于所述第一用户有极高的辨识度。在此,优选地,可以通过三维重建的方法生成所述与所述第一用户的样貌信息相匹配的外观。例如,首先通过摄像机、或摄像机组获取第一用户的二维图像;接着,通过摄像机标定来建立有效的成像模型,求解出摄像机的内外参数;接着,通过所述二维图像提取第一用户的样貌特征信息,包括特征点、特征线或特征区域;进而,进行图像间的立体匹配,即根据所提取的特征来建立图像对之间的对应关系;接着,基于所述立体匹配结果,结合摄像机标定的内外参数,即可重建三维场景信息。在此,优选地,可以将所述第一用户在现实世界的动作信息映射为所述第一虚拟对象在虚拟场景中待执行动作序列,优选地,所述第二装置102可以实现动作的一一对应,如,所述第一用户在现实世界中进行前进、后退、左拐、右拐的跑、跳、步行、挥手、踢腿等动作,可以对所述动作信息进行动作分解,提取动作特征,进而映射、或是复制为各个所述待执行动作序列。在此,所述第一用户在现实世界中的动作信息将会由所述第一虚拟对象在相应的虚拟场景中进行复制、或是相似投射,使得所述第一用户的操作代入感大大提升,优化了用户体验。
接着,在步骤S305中,所述网络设备1确定所述第一交互信息,其中,所述第一交互信息来源于所述第一用户特征信息;在步骤S307中,所述网络设备1将所述第一虚拟对象发送至与所述第一用户交互的第二用户的用户设备2,其中,所述第一虚拟对象包含所述第一交互信息。
具体地,所述交互应用对应的各个用户可以通过各自的虚拟对象在虚拟场景中进行拟人化的交互,实现用户跨地域的真实交流互动。在此,优选地,所述第一用户特征信息包括所述第一用户的语音信息;其中,所述网络设备1确定所述第一交互信息,其中,所述第一交互信息来源于所述第一用户的语音信息。进一步,所述第一交互信息还可以来源于第一用户的动作信息、或是所述第一用户的样貌信息等。在此,所述网络设备可以直接采集所述第一用户特征信息,并从中提取相应的第一交互信息;或者所述网络版设备还可以直接从其他第三方设备、应用、或数据库以采集好的第一用户特征信息中确定所述第一交互信息。在此,具体地,所述网络设备可以直接从语音信息中提取交互信息的音频信息,如问候、询问等音频内容。在此,还可以从所述动作信息中提取交互信息,例如,第一用户的动作信息是挥手,则可以通过动作特征匹配,基于预先设置的匹配规则,确定所述挥手动作表达为发送问候的交互信息,如具体表示为向对应在同一个虚拟场景中的第二用户对应的第二虚拟对象挥手;又如,所述第一用户的动作信息为作出OK的手势,表示同意的交互信息;又如,若是所述第一用户的动作信息是摇头,则可以表示不同意的交互信息。进一步,在网络设备1生成的所述第一虚拟对象中包含所述第一交互信息,此时,所述第一交互信息的形式,可以是与所述交互信息对应的动作信息相匹配的所述待执行动作序列,或是与所述用户语音信息相匹配的音频信息。在此,优选地,所述第二用户与所述第一用户各自的虚拟对象对应于同一个所述虚拟场景;进一步,优选地,若是同时存在多个虚拟对象在同一个虚拟场景中进行信息交互,可以预置相应的交互规则以准确锁定相应的交互对象,例如,可以由所述网络设备1为各个用户的虚拟对象在所述虚拟场景中匹配相应的位置信息,以便各个用户相互之间基于各自的所述位置信息进行准确辨识并交互;此外,还可以设置各个虚拟对象之间的相对位置,并将所述相对位置投射到各个用户的现实操作中,例如,若是三个用户基于同一个虚拟场景进行交互,在虚拟场景中,设置虚拟对象A的左边是虚拟对象B,右边是虚拟对象C,则可以设置当虚拟对象A对应的用户A在现实世界中用左手打招呼时是对虚拟对象B对应的用户B发送交互信息,而若用户A在现实世界中用右手打招呼时是对虚拟对象C对应的用户C发送交互信息。由此,可以通过上述交互规则的设置,确定所述第一交互信息对应的交互对象。
在此,本领域技术人员应该能够理解,上述交互规则仅为举例,其他现有的或今后可能出现的其他交互规则如可适用于本申请,也应包含在本申请保护范围以内,并在此以引用方式包含于此。
在本申请中,所述网络设备基于获取的第一用户特征信息生成第一用户对应的第一虚拟对象,再基于所述第一用户特征信息提取所述第一用户的第一交互信息,进而,将包含有所述第一交互信息的第一虚拟对象发送至于所述第一用户交互的第二用户的用户设备。在此,所述第一用户的交互信息会基于所述第一虚拟对象提供至交互的第二用户的用户设备,将所述第一用户特征信息虚拟化为所述第一虚拟对象,从而能将第一用户在现实世界中多样化、真实性的交互请求传递出去,并且基于本申请,可以期待交互的对象,如所述第二用户,能够接收到所述交互请求。在此,本申请使得现实世界的各个用户之间可以通过虚拟世界中虚拟对象实现真实交互,并且所述交互信息的多样化、拟人化,使得用户的真实感体验大大增强。
优选地,所述方法还包括步骤S309(未示出)、步骤S311(未示出)和步骤S313(未示出)。
其中,在步骤S309中,所述网络设备1获取所述第二用户基于所述第一交互信息提供的第二用户特征信息;在步骤S311中,所述网络设备1根据所述第二用户特征信息生成所述第二用户对应的第二虚拟对象,其中,所述第二虚拟对象包括从所述第二用户特征信息中抽取得到的第二交互信息;在步骤S313中,所述网络设备1将所述第二虚拟对象提供至所述第一用户对应的用户设备2。具体地,若所述第二用户对所述第一交互信息有回应,则所述网络设备1可以从所述第二用户特征信息中的抽取所述第一交互信息对应的交互响应信息,即所述第二交互信息,并将包含了有第二交互信息的第二虚拟对象提供给所述第一用户的用户设备。在此,所述第二用户信息、第二虚拟对象可以参考所述第一用户信息、第一虚拟对象,在此,相似的描述以引用的形式包含于此。
在本优选实施例中,所述网络设备1可以将从第一用户特征信息中提取的第一用户的第一交互信息发送至与所述第一用户交互的第二用户的用户设备2,进一步,还可以接受所述第二用户基于所述第一交互信息提供的包含了第二交互信息的第二虚拟对象,并将所述第二虚拟对象提供至所述第一用户设备2。其中,所述交互信息可以是从用户的语音信息和/或动作信息中提取的。在此,现实世界的各个用户之间可以通过虚拟世界中虚拟对象实现真实交互,并且所述交互信息的多样化、拟人化,使得用户的真实感体验大大增强。
图4示出根据本申请一个优选实施例的一种在网络设备端基于虚拟对象进行用户交互的方法流程图。
其中,所述步骤包括步骤S401、步骤S402、步骤S403和步骤S404,其中,所述步骤S402包括步骤S4021和步骤S4022。其中,在步骤S4021中,所述网络设备1根据所述第一用户的样貌信息确定所述第一用户对应的第一虚拟对象的外观,其中,所述外观与所述第一用户的样貌信息相匹配;在步骤S4022中,所述网络设备1根据所述第一用户的动作信息确定所述第一虚拟对象的待执行动作序列。在此,所述步骤S401、步骤S403和步骤S404与图3示出的所述步骤S301、步骤S305和步骤S307内容相同或基本相同,在此不在赘述,并以引用的形式包含于此。
具体地,在步骤S4021中,所述网络设备1根据所述第一用户的样貌信息确定所述第一用户对应的第一虚拟对象的外观,其中,所述外观与所述第一用户的样貌信息相匹配。在此,为了使得所述第一虚拟对象给所述第一用户将带来真实度较高的角色代入感,将提取所述第一用户的样貌信息的样貌特征系信息,或是进一步基于所述样貌信息的样貌子特征信息,基于样貌特征系信息、或所述样貌子特征信息确定所述第一虚拟对象的外观,并要求所述外观与所述第一用户的样貌信息相匹配,例如,匹配达到一定匹配度,或是满足一定的匹配阈值,使得所述第一虚拟对象相应于所述第一用户有极高的辨识度,优选地,所述外观与所述样貌信息高度相似。
此外,在步骤S4021中,所述网络设备1根据所述第一用户的动作信息确定所述第一虚拟对象的待执行动作序列。在此,优选地,可以将所述第一用户在现实世界的动作信息映射为所述第一虚拟对象在虚拟场景中待执行动作序列,优选地,所述网络设备1可以实现动作的一一对应,如,所述第一用户在现实世界中进行前进、后退、左拐、右拐的跑、跳、步行、挥手、踢腿等动作,可以对采集到的所述动作信息,如动作图像信息、或是预设的身体部位的运动信号等进行动作分解,提取动作特征,进而确定出所述待执行动作序列,如将所述动作信息复制、或是相似映射为所述待执行动作序列,在此,一个优选的效果是,使得所述其他用户通过所述第一虚拟对象的动作序列可以无障碍地推定出所述第一用户的动作信息。
优选地,所述步骤S4021包括步骤S40211(未示出)和步骤S40212(未示出)。其中,在步骤S40211中,所述网络设备1根据所述第一用户的样貌信息所包括的样貌子特征信息分别确定对应的外观子特征信息,其中,每个外观子特征信息与对应的样貌子特征信息相匹配;在步骤S40212中,所述网络设备1综合多个外观子特征信息获得所述第一用户对应的第一虚拟对象的外观。
具体地,所述第一用户的样貌信息可以对应多个样貌子特征信息,例如,以用户的五官、发型、身形、服装、配饰等确定多个样貌子特征信息,进而为每一个样貌子特征信息确定对应的外观子特征信息。在此,优选地,可以通过采集到的各个样貌子特征信息,在预置的特征数据库中进行所述样貌子特征信息与外观子特征信息的匹配,所述特征数据库存储了大量的外观子特征信息,例如,基于第一用户的发型信息对应的样貌子特征信息,从发型相关的外观子特征信息,如a1、a2……am等多个外观子特征信息中,确定与第一用户的发型信息对应的样貌子特征信息相匹配的某个外观子特征信息。在此,所述各个样貌子特征的采集可以是统一采集、或是分部采集。接着,所述第二子单元将多个所述外观子特征信息进行综合,生成所述第一用户对应的第一虚拟对象的整体外观,例如,将用户的五官、发型、身形、服装、配饰等对应的样貌子特征的各个外观子特征信息进行图像组合,得到一个完整的第一虚拟对象。
更优选地,在步骤S40211中,所述网络设备1根据所述第一用户的样貌信息所包括的样貌子特征信息分别确定对应的外观子特征信息,其中,每个外观子特征信息与对应的样貌子特征信息的匹配度信息等于或大于预定的子特征匹配阈值信息。
具体地,为了保证所述第一虚拟对象相应于所述第一用户有极高的辨识度,优选地,所述外观与所述样貌信息的相似度要到达一定的阈值,其中,具体到每个外观子特征信息与对应的样貌子特征信息的匹配度信息要不小于预定的子特征匹配阈值信息。在此假设,以{A1,A2……An},n为正整数,表示所述第一用户对应的样貌子特征信息的集合,Ai(i为正整数)表示其中第i个样貌子特征信息,以{B1,B2……Bn},n为正整数,表示与上述各个样貌子特征信息一一对应的外观子特征信息集合,其中,Bi(i为正整数)表示与第i个样貌子特征信息Ai相对应的外观子特征信息。在此,要求S(Ai,Bi)≥Vi,1≤i≤n,i为正整数,其中,所述S(Ai,Bi)表示每个外观子特征信息与对应的样貌子特征信息的匹配度信息,所述Vi表示第i个外观子特征信息对应的子特征匹配阈值信息,各个外观子特征信息对应的子特征匹配阈值信息可以设置为相同、或是不同。
进一步,优选地,所述步骤S4021包括步骤S40213(未示出)和步骤S40214(未示出)。其中,在步骤S40213中,所述网络设备1每个外观子特征信息与对应的样貌子特征信息的匹配度信息确定所述外观与所述第一用户的样貌信息的综合匹配度信息;在步骤S40214中,所述网络设备1当所述综合匹配度信息小于预定的用户与虚拟对象的综合匹配阈值信息,重新执行所述第一单元和所述第二单元对应的操作,直至所述综合匹配度信息等于或大于所述综合匹配阈值信息。
具体地,在本实施例中,不仅要求每个外观子特征信息与对应的样貌子特征信息的匹配度信息达到一定阈值,且要求所述外观与所述第一用户的样貌信息的综合匹配度信息的匹配度信息也要达到一定阈值。在此以上述假设为例,进一步要求,
1≤i≤n,i为正整数,其中,所述R表示所述外观与所述第一用户的样貌信息的综合匹配度信息,所述S(Ai,Bi)表示每个外观子特征信息与对应的样貌子特征信息的匹配度信息,所述wi表示第i个样貌子特征信息/外观子特征信息的权重信息,所述Ui表示预定的用户与虚拟对象的综合匹配阈值信息。在此,可以基于实际需要将不同样貌子特征信息/外观子特征信息的权重信息设置为相同,或是不同。
接着,当所述综合匹配度信息小于预定的所述综合匹配阈值信息时,重新执行所述第一单元和所述第二单元对应的操作,直至所述综合匹配度信息等于或大于所述综合匹配阈值信息。在此,若是综合匹配度信息小于预定的所述综合匹配阈值信息,则重新根据所述第一用户的样貌信息确定所述第一用户对应的第一虚拟对象的外观,其中,所述外观与所述第一用户的样貌信息相匹配;并根据所述第一用户的动作信息确定所述第一虚拟对象的待执行动作序列。在此,可以重新确定已纳入计算的所述样貌子特征信息对应的外观子特征信息,并且提高所述子特征匹配阈值信息的数值,使得重新确定的外观子特征信息与对应的样貌子特征信息的匹配度提高;或者,还可以增加所述第一用户的样貌信息对应的未曾计算过的其他样貌子特征信息,通过增加样貌子特征信息的种类和数量以提高所述综合匹配度信息的数值,从而实现更精确地匹配。
在一个优选实施例(参考图3)中,在步骤S301中,所述网络设备1获取第一用户在跑步机上的第一用户特征信息;其中,在步骤S303中,所述网络设备1根据所述第一用户特征信息生成所述第一用户对应的、进行跑步运动的第一虚拟对象。
具体地,本申请中,各个用户间基于虚拟对象进行交互的场景可以模拟各种现实生活中的场景,例如各种运动场景,具体可以是本实施例中用户跑步的场景。现实中,第一用户在所述跑步机上进行跑步运动,所述网络设备1获取第一用户在跑步机上与跑步运动相关的第一用户特征信息;所述网络设备1再根据所述第一用户特征信息生成所述第一用户对应的、进行跑步运动的第一虚拟对象;接着,基于所述第一用户特征信息提取到的所述第一交互信息会随着所述第一虚拟对象提供至所述与所述第一用户交互的第二用户的用户设备,在此,优选地,所述第二用户也在对应的跑步虚拟场景中,并且将其自身在现实生活中的跑步运动,例如在跑步机上的运动映射到虚拟场景中,由此,所述第一用户与第二用户虽然在现实中并没有在一起跑步,但可以基于各自对象的虚拟对象在模拟跑步的虚拟场景中共同运动、并进行语音、甚至是动作等交互。用户体验大大提升。
在本实施例中,所述跑步机可以是与所述第一用户对应的用户设备2相独立的设备,或者,所述跑步机即是所述用户设备2,又或者,所述跑步机上加载有所述用户设备2。
进一步,优选地,所述第一用户特征信息包括所述第一用户在所述跑步机上的跑步动作信息和/或跑步速度信息;其中,在步骤S303中,所述网络设备1根据所述第一用户特征信息生成所述第一用户对应的、进行跑步运动的第一虚拟对象,其中,所述第一虚拟对象满足以下至少任一项:所述第一虚拟对象对应的虚拟跑步动作信息与所述第一用户在所述跑步机上的跑步动作信息相匹配;所述第一虚拟对象对应的虚拟跑步速度信息与所述第一用户在所述跑步机上的跑步速度信息相匹配。
具体地,所述跑步动作信息包括所述第一用户在所述跑步机上进行的各种动作信息,可以是一般的跑步动作,如慢速跑、快速跑等,还可以是走路、跳跃、或其他自定以的动作信息。在此,优选地,所述跑步动作信息可以通过所述跑步机上加载的采集设备、或是配合的第三方采集设备进行抓取,例如,通过感应装置感知第一用户在跑步机上跑步区域的压力信息进行跑步动作信息采集,又如,通过摄像装置进行图片采集分析等。在此,所述跑步速度信息与跑步的状态对象,例如慢速跑、快速跑、停止等多种状态,所述跑步速度信息可以体现为具体的速度数值,优选地,可以通过当前跑步机设置的速度确定对应第一用户的跑步速度信息。在此,所述网络设备1根据所述第一用户特征信息生成所述第一用户对应的、进行跑步运动的第一虚拟对象,其中,所述第一虚拟对象满足以下至少任一项:所述第一虚拟对象对应的虚拟跑步动作信息与所述第一用户在所述跑步机上的跑步动作信息相匹配,例如当第一用户在跑步机上进行起跑时,所述第一虚拟对象的虚拟跑步动作信息也对应为对象起跑的动作;所述第一虚拟对象对应的虚拟跑步速度信息与所述第一用户在所述跑步机上的跑步速度信息相匹配,例如,若是第一用户设备在跑步机上的跑步速度由慢变快,则所述对应的虚拟跑步速度信息也要相应地体现由慢到快的变化。在此,上述所述虚拟跑步动作信息与所述跑步动作信息的匹配、以及所述虚拟跑步速度信息与所述跑步速度信息的匹配只要满足预设的对应关系即可,优选地,虚拟跑步速度信息和虚拟跑步速度信息可以高度还原现实中对应的跑步相关信息。
在本实施例中所述虚拟场景对应为跑步运动场景,进一步,所述第一用户特征信息可以包括所述第一用户在所述跑步机上的跑步动作信息和/或跑步速度信息。在此,本申请可以基于现实实际中各种活动场景模拟出不同的虚拟场景,例如,本实施例中基于用户在跑步机上的跑步,对应模拟出跑步场景,又如,其他任意运动或是其他可交互环境,从而使得人们在各种类型的虚拟场景中,可以在运动的同时,进行交互,增加用户的真实感体验,使得用户可以在不过多依赖于现实环境条件的情况下,实现虚拟显示的仿真运动交互体验。
在一个优选实施例中(参考图3),所述方法还包括步骤S309(未示出),其中,在步骤S309中,所述网络设备1将所述第一虚拟对象提供至所述第一用户对应的用户设备。在此,优选地,所述第一虚拟对象包括与所述第一用户的样貌信息相匹配的外观,以及与所述第一用户的动作信息相匹配的待执行动作序列。在此,将基于所述第一用户的第一用户特征信息生成的所述第一虚拟对象提供给所述第一用户,才能使得所述第一用户体验到现实世界向虚拟世界的投射,从而实现角色带入。
在与之对应的另一个优选实施例(参考图1)中,所述方法还包括步骤S306(未示出)和步骤S308(未示出)。
其中,在步骤S306中,所述用户设备2接收所述网络设备提供的所述第一虚拟对象,其中,所述第一虚拟对象包括与所述第一用户的样貌信息相匹配的外观,以及与所述第一用户的动作信息相匹配的待执行动作序列。在此,将基于所述第一用户的第一用户特征信息生成的所述第一虚拟对象提供给所述第一用户,才能使得所述第一用户体验到现实世界向虚拟世界的投射,从而实现角色带入。
接着,在步骤S308中,所述用户设备2将所述第一虚拟对象提供至对应的虚拟现实装置,以供通过所述虚拟现实装置执行所述第一虚拟对象。在此,所述虚拟现实设备包括但不限于VR(Virtual Reality,即虚拟现实)设备,或AR(Augmented Reality,或增强现实)设备等。在此,所述虚拟现实装置对应的虚拟场景将模拟用户真实的视觉、听觉、触觉等感官体验,让操作用户体验到身历其境的沉浸式感受。在此,所述用户设备2与所述虚拟现实装置可以是独立存在的,或者,所述用户设备2与所述虚拟现实装置是集成在一个设备整体中的,如所示用户设备2加载在所述虚拟现实装置中。在此,由所述用户设备2将所述第一虚拟对象提供至相应的虚拟现实装置,以通过所述虚拟现实装置为对应的第一用户呈现所述第一虚拟对象。
在本实施例中,所述用户设备2与所述网络设备1配合,将所采集到的第一用户的特征信息提供至对应网络设备1;并将从网络设备1接收到的第一虚拟对象提供至对应的虚拟现实装置,并在所述虚拟现实装置中执行所述第一虚拟对象。在此,有别于传统的电视、个人计算机、手机等设备的呈现效果,在所述虚拟现实装置呈现的三维虚拟世界中,基于本申请提供用户的第一虚拟对象能够以逼近真实感官的呈现效果,给用户带来全面沉浸式交互体验。
优选地,所述方法还包括步骤S311(未示出),在步骤S311中,所述网络设备1获取与所述第一虚拟对象处于同一虚拟场景的第三虚拟对象;其中,在步骤S309中,所述网络设备1将所述第一虚拟对象及所述第三虚拟对象提供至所述第一用户对应的用户设备2。
进一步优选地,在步骤S306中,所述用户设备2接收所述网络设备提供的与所述第一用户特征信息对应的第一虚拟对象及与所述第一虚拟对象处于同一虚拟场景的第三虚拟对象,其中,所述第一虚拟对象包括与所述第一用户的样貌信息相匹配的外观,以及与所述第一用户的动作信息相匹配的待执行动作序列;在步骤S308中,所述用户设备2将所述第一虚拟对象及所述第三虚拟对象提供至对应的虚拟现实装置,以供通过所述虚拟现实装置执行所述第一虚拟对象及所述第三虚拟对象。
具体地,实际的交互应用可能对应有多个用户,各个用户各自对应的虚拟对象可能对应同一个虚拟场景,在此,所述虚拟场景对应为所述各个虚拟对象所活动的非现实虚构空间,例如,所述虚拟场景可以是一个抽象的运动空间、又或是任意模拟现实场景的虚构空间。进而,优选地,所述第一用户对应的虚拟场景中对应有除了第一虚拟对象以外的其他虚拟对象,如所述第三虚拟对象。在此,所述第三虚拟对象不仅可以是其他用户基于相应的用户特征信息生成的虚拟对象,还可以是直接由系统产生并控制的虚拟对象。在此,优选地,与所述第一虚拟对象类似,所述第三虚拟对象也可以包括与所述对应用户的样貌信息相匹配的外观,以及与对应用户的动作信息相匹配的待执行动作序列;或者,所述第三虚拟对象包含系统预置的相应外观或是待执行动作序列。由此则构建出了不同区域的用户通过各自的虚拟对象在同一个虚拟场景中相遇的场景。
更优选地,所述方法还包括步骤S313(未示出),在步骤S313中,所述网络设备1确定所述第一虚拟对象所处虚拟场景中的一个或多个虚拟对象;接着,在步骤S311中,所述网络设备1从所述一个或多个虚拟对象中确定所述第一虚拟对象对应的第三虚拟对象。
具体地,在当前交互应用对应的同一个虚拟场景中存在一个或多个虚拟对象,所述虚拟场景与所述虚拟对象的对应关系,可以是由对应用户进行选择的结果,例如,用户基于虚拟场景的主题元素进行偏好选择;或是所述网络设备1基于不同用户的实际需要进行自动分配的结果,例如,所述网络设备1基于采集到的用户的特征信息,为用户匹配与其对应的虚拟场景。进一步,还可以结合虚拟场景对应的实际交互内容,在对应同一个虚拟场景的一个或多个虚拟对象中确定与所述第一虚拟对象对应的第三虚拟对象,即可以将与所述第一虚拟对象在同一虚拟场景中的部分或全部其他虚拟对象,有针对性匹配给所述第一用户,由此,对于所述虚拟场景中的每一个虚拟对象对应的用户,其获得的虚拟世界的信息的可选择性更加灵活多样。
在本实施例中,可以确定所述第一虚拟对象所处虚拟场景中的一个或多个虚拟对象;进而从一个或多个虚拟对象中确定所述第一虚拟对象对应的第三虚拟对象。在此,本申请通过对相应的各个虚拟对象进行配对以实现不同区域的用户通过各自的虚拟对象在同一个虚拟场景中相遇的场景,并为后续不同地域的用户通过各自的虚拟对象在虚拟界面中进行拟人化的真实交流奠定了基础。
优选地,在步骤S309中,所述网络设备1将所述第一虚拟对象、所述第三虚拟对象及所述虚拟场景提供至所述第一用户对应的用户设备2。在此,优选地,可以将所述第一虚拟对象、所述第三虚拟对象,加载在相匹配的虚拟场景中,提供给所述第一用户对应的用户设备2,在此,所述虚拟场景可以基于用户的选择、或是系统的设置而进行虚拟场景的元素,如虚拟场景中的背景、建筑等调整。在此,所述第一虚拟对象、所述第三虚拟对象结合多样化的虚拟场景可以进一步丰富所述第一用户的感官体验,用户的沉浸式代入感得到进一步提升。
在一个优选实施例中,在步骤S311中,所述网络设备1根据每个虚拟对象对应的运动特征信息从所述一个或多个虚拟对象中确定所述第一虚拟对象对应的第三虚拟对象,其中,所述运动特征信息包括跑步特征信息。
具体地,用户在不同类型的交互应用中,通过相应的第一虚拟对象会执行不同类型的交互操作。在此,优选地,若是所述交互应用与运动操作相关,例如,所述交互应用为模拟体育运动游戏,则所述第一用户的第一虚拟对象即体现相应的运动特征信息,在此,所述运动特征信息包括跑步特征信息,例如,与跑步运动相关的跑步场景信息、或是跑步级别信息等。在此,可以基于所述跑步特征信息为所述第一虚拟对象确定对应的第三虚拟对象。
优选地,在步骤S311中,所述网络设备1基于预定的配对规则,并根据每个虚拟对象对应的跑步特征信息从所述一个或多个虚拟对象确定所述第一虚拟对象对应的第三虚拟对象,其中,所述第一虚拟对象与所述第三虚拟对象的跑步特征信息满足所述配对规则;其中,所述配对规则包括以下至少任一项:所述第一虚拟对象与所述第三虚拟对象的跑步场景相同;所述第一虚拟对象与所述第三虚拟对象的跑步级别相匹配。
具体地,在此,所述跑步场景包括但不限于各种虚拟的跑步环境,例如标准田径赛道、海边、沙漠等。所述跑步级别包括但不限于跑步选手性别;跑步类型,如短跑、长跑、接力跑;跑步速度,如,慢速跑、快速跑等。在此,所述配对规则的设置是为了使得所述第一虚拟对象与对应的第三虚拟对象的用户之间的运动互动效果优化,例如,所述第一虚拟对象与第三虚拟对象的跑步场景都是田径赛道;又如,所述第一虚拟对象与第三虚拟对象的跑步级别都是女性选手、慢速跑。在此,所述跑步特征信息体现的是所述虚拟对象对应用户的跑步运动能力、或是跑步运动需求,在此,当所述用户之间、或是用户对应的虚拟对象之间的跑步运动环境一致、或跑步运动能力相当时,所述第一用户、或是对应的交互对象在所述虚拟场景中的运动真实感、运动竞技体验较佳。在此,本领域技术人员应该能够理解,上述配对规则仅为举例,其他现有的或今后可能出现的其他配对规则如可适用于本申请,也应包含在本申请保护范围以内,并在此以引用方式包含于此。
在本实施例中,在多个虚拟对象同处于同一个虚拟场景的应用场景中,还可以根据每个虚拟对象对应的运动特征信息从所述一个或多个虚拟对象中确定所述第一虚拟对象对应的第三虚拟对象,其中,所述运动特征信息包括跑步特征信息。在此,所述虚拟对象在虚拟场景中的操作可以与用户的运动体验相结合,例如,用户的跑步运动等,即将用户在现实世界的运动体验投射成虚拟场景中虚拟对象的运动相关操作。由此,可以基于每个虚拟对象对应的运动特征信息,对相应的各个虚拟对象进行配对,使得被匹配在一起的所述第一虚拟对象与所述第三虚拟对象各自对应的用户的运动互动效果最佳,从而提升了用户体验,例如,可以基于跑步场景、跑步级别等信息选择与所述第一虚拟对象对应的第三虚拟对象。
图1示出根据本申请一个方面的一种基于虚拟对象进行用户交互的系统图。其中,所述系统包括网络设备1,其中所述网络设备1包括第一装置101、第二装置102、第三装置103和第四装置104;进一步,优选地,所述系统还包括用户设备2,其中,所述用户设备2包括第十二装置201、和第十三装置202。
其中,所述第一装置101获取第一用户的第一用户特征信息;所述第二装置102根据所述第一用户特征信息生成所述第一用户对应的第一虚拟对象;所述第三装置103确定所述第一交互信息,其中,所述第一交互信息来源于所述第一用户特征信息;所述第四装置将所述第一虚拟对象发送至与所述第一用户交互的第二用户的用户设备2,其中,所述第一虚拟对象包含所述第一交互信息。进一步,与之相对应,所述第十二装置201获取第一用户的第一用户特征信息,其中,所述第一用户特征信息包含所述第一用户的动作信息与样貌信息;所述第十三装置202将所述第一用户特征信息发送至所述第一用户设备2对应的网络设备1。
在此,所述网络设备1包括但不限于计算机、网络主机、单个网络服务器、多个网络服务器集或多个服务器构成的云;在此,云由基于云计算(Cloud Computing)的大量计算机或网络服务器构成,其中,云计算是分布式计算的一种,由一群松散耦合的计算机集组成的一个虚拟超级计算机。所述用户设备2包括各种智能终端,如移动智能设备、各种个人计算机等。在此,所述用户设备2可以是独立存在的设备,还可以加载在其他设备中,例如,加载在对应的虚拟现实设备中,所述虚拟现实设备包括但不限于VR(Virtual Reality,即虚拟现实)设备,或AR(Augmented Reality,或增强现实)设备等;又如,还可以加载在对应的运动设备中,所述运动装置包括但不限于跑步机、自行车、椭圆机等运动装置;又如,还可以加载在对应的采集装置中,所述采集装置包括各种信息采集装置,如包括但不限于各种语音输入/输出装置、样貌采集装置等。
具体地,所述用户设备2的第十二装置201获取第一用户的第一用户特征信息。在此,优选地,所述第一用户特征信息可以包括第一用户的语音信息;此外,所述第一用户特征信息还可以包括但不限于第一用户的动作信息和样貌信息等其他类型的特征信息。在此,所述第十二装置201可以从其他第三方设备中接收相应的所述第一用户特征信息,例如,当所述第一用户特征信息包括所述动作信息时,所述第三方设备可以是各种动作设备,如,用于采集第一用户各关节活动的采集贴片、全系图像采集设备、3D摄像机、控制手柄等,所述第三方设备还可以是集成了运动采集装置的运动设备,如跑步机、自行车、椭圆机等,优选地,所述第三方设备通过捕捉所述用户的运动操作,如前进、后退、左拐、右拐的跑、跳、步行、挥手、踢腿等动作,进行所述第一用户的动作信息的采集;又如,当所述第一用户特征信息包括所述样貌信息时,可以通过各种类型的摄像头、或是摄像组合装置进行第一用户各个角度的样貌采集,可以是平面样貌信息采集,或是360度全方位样貌信息采集;又如,当所述第一用户特征信息包括语音信息时,则可以通过各种语音设备进行语音信息的采集。此外,所述第十二装置201还可以直接采集所述第一用户特征信息,此时,优选地,所述用户设备2加载于所述运动设备、或是其他采集设备中。
在此,本领域技术人员应该能够理解,上述第一用户特征信息仅为举例,其他现有的或今后可能出现的其他第一用户特征信息如可适用于本申请,也应包含在本申请保护范围以内,并在此以引用方式包含于此。
在此,本领域技术人员应该能够理解,上述各类第一用户特征信息的获取方式仅为举例,其他现有的或今后可能出现的其他第一用户特征信息的获取方式如可适用于本申请,也应包含在本申请保护范围以内,并在此以引用方式包含于此。
接着,所述用户设备2的第十三装置202将所述第一用户特征信息发送至所述第一用户设备2对应的网络设备1;相应地,由所述网络设备1的第一装置101获取该第一用户特征信息。在此,可以基于实际需要,设置所述用户设备2将其直接采集或是接收的一个或多个第一用户特征信息中的部分、或全部发送至所述网络设备1。
接着,所述网络设备1的第二装置102根据所述第一用户特征信息生成所述第一用户对应的第一虚拟对象。在此,优选地,所述第一用户特征信息可以包括第一用户的动作信息和样貌信息;其中,所述第二装置102根据所述第一用户特征信息生成所述第一用户对应的第一虚拟对象,其中,所述第一虚拟对象包括与所述第一用户的样貌信息相匹配的外观,以及与所述第一用户的动作信息相匹配的待执行动作序列。具体地,所述第一虚拟对象可以对应为所述第一用户在当前应用对应的虚拟世界中的角色投射,所述第一虚拟对象给所述第一用户将带来真实度较高的角色代入感。在此,优选地,所述第一虚拟对象的外观与所述第一用户与的样貌信息相匹配达到一定的匹配度、或是满足一定的匹配阈值,从而可以在虚拟场景中准确地投射出用以指代所述第一用户的第一虚拟对象,使得所述第一虚拟对象相应于所述第一用户有极高的辨识度。在此,优选地,可以通过三维重建的方法生成所述与所述第一用户的样貌信息相匹配的外观。例如,首先通过摄像机、或摄像机组获取第一用户的二维图像;接着,通过摄像机标定来建立有效的成像模型,求解出摄像机的内外参数;接着,通过所述二维图像提取第一用户的样貌特征信息,包括特征点、特征线或特征区域;进而,进行图像间的立体匹配,即根据所提取的特征来建立图像对之间的对应关系;接着,基于所述立体匹配结果,结合摄像机标定的内外参数,即可重建三维场景信息。在此,优选地,可以将所述第一用户在现实世界的动作信息映射为所述第一虚拟对象在虚拟场景中待执行动作序列,优选地,所述第二装置102可以实现动作的一一对应,如,所述第一用户在现实世界中进行前进、后退、左拐、右拐的跑、跳、步行、挥手、踢腿等动作,可以对所述动作信息进行动作分解,提取动作特征,进而映射、或是复制为各个所述待执行动作序列。在此,所述第一用户在现实世界中的动作信息将会由所述第一虚拟对象在相应的虚拟场景中进行复制、或是相似投射,使得所述第一用户的操作代入感大大提升,优化了用户体验。
接着,所述第三装置103确定所述第一交互信息,其中,所述第一交互信息来源于所述第一用户特征信息;所述第四装置104将所述第一虚拟对象发送至与所述第一用户交互的第二用户的用户设备2,其中,所述第一虚拟对象包含所述第一交互信息。
具体地,所述交互应用对应的各个用户可以通过各自的虚拟对象在虚拟场景中进行拟人化的交互,实现用户跨地域的真实交流互动。在此,优选地,所述第一用户特征信息包括所述第一用户的语音信息;其中,所述第三装置103确定所述第一交互信息,其中,所述第一交互信息来源于所述第一用户的语音信息。进一步,所述第一交互信息还可以来源于第一用户的动作信息、或是所述第一用户的样貌信息等。在此,所述网络设备可以直接采集所述第一用户特征信息,并从中提取相应的第一交互信息;或者所述网络版设备还可以直接从其他第三方设备、应用、或数据库以采集好的第一用户特征信息中确定所述第一交互信息。在此,具体地,所述网络设备可以直接从语音信息中提取交互信息的音频信息,如问候、询问等音频内容。在此,还可以从所述动作信息中提取交互信息,例如,第一用户的动作信息是挥手,则可以通过动作特征匹配,基于预先设置的匹配规则,确定所述挥手动作表达为发送问候的交互信息,如具体表示为向对应在同一个虚拟场景中的第二用户对应的第二虚拟对象挥手;又如,所述第一用户的动作信息为作出OK的手势,表示同意的交互信息;又如,若是所述第一用户的动作信息是摇头,则可以表示不同意的交互信息。进一步,在网络设备1生成的所述第一虚拟对象中包含所述第一交互信息,此时,所述第一交互信息的形式,可以是与所述交互信息对应的动作信息相匹配的所述待执行动作序列,或是与所述用户语音信息相匹配的音频信息。在此,优选地,所述第二用户与所述第一用户各自的虚拟对象对应于同一个所述虚拟场景;进一步,优选地,若是同时存在多个虚拟对象在同一个虚拟场景中进行信息交互,可以预置相应的交互规则以准确锁定相应的交互对象,例如,可以由所述网络设备1为各个用户的虚拟对象在所述虚拟场景中匹配相应的位置信息,以便各个用户相互之间基于各自的所述位置信息进行准确辨识并交互;此外,还可以设置各个虚拟对象之间的相对位置,并将所述相对位置投射到各个用户的现实操作中,例如,若是三个用户基于同一个虚拟场景进行交互,在虚拟场景中,设置虚拟对象A的左边是虚拟对象B,右边是虚拟对象C,则可以设置当虚拟对象A对应的用户A在现实世界中用左手打招呼时是对虚拟对象B对应的用户B发送交互信息,而若用户A在现实世界中用右手打招呼时是对虚拟对象C对应的用户C发送交互信息。由此,可以通过上述交互规则的设置,确定所述第一交互信息对应的交互对象。
在此,本领域技术人员应该能够理解,上述交互规则仅为举例,其他现有的或今后可能出现的其他交互规则如可适用于本申请,也应包含在本申请保护范围以内,并在此以引用方式包含于此。
在本申请中,所述网络设备基于获取的第一用户特征信息生成第一用户对应的第一虚拟对象,再基于所述第一用户特征信息提取所述第一用户的第一交互信息,进而,将包含有所述第一交互信息的第一虚拟对象发送至于所述第一用户交互的第二用户的用户设备。在此,所述第一用户的交互信息会基于所述第一虚拟对象提供至交互的第二用户的用户设备,将所述第一用户特征信息虚拟化为所述第一虚拟对象,从而能将第一用户在现实世界中多样化、真实性的交互请求传递出去,并且基于本申请,可以期待交互的对象,如所述第二用户,能够接收到所述交互请求。在此,本申请使得现实世界的各个用户之间可以通过虚拟世界中虚拟对象实现真实交互,并且所述交互信息的多样化、拟人化,使得用户的真实感体验大大增强。
优选地,所述网络设备1还包括第五装置(未示出)、第六装置(未示出)和第七装置(未示出)。
其中,所述第五装置获取所述第二用户基于所述第一交互信息提供的第二用户特征信息;所述第六装置根据所述第二用户特征信息生成所述第二用户对应的第二虚拟对象,其中,所述第二虚拟对象包括从所述第二用户特征信息中抽取得到的第二交互信息;第七装置将所述第二虚拟对象提供至所述第一用户对应的用户设备2。具体地,若所述第二用户对所述第一交互信息有回应,则所述网络设备1可以从所述第二用户特征信息中的抽取所述第一交互信息对应的交互响应信息,即所述第二交互信息,并将包含了有第二交互信息的第二虚拟对象提供给所述第一用户的用户设备。在此,所述第二用户信息、第二虚拟对象可以参考所述第一用户信息、第一虚拟对象,在此,相似的描述以引用的形式包含于此。
在本优选实施例中,所述网络设备1可以将从第一用户特征信息中提取的第一用户的第一交互信息发送至与所述第一用户交互的第二用户的用户设备2,进一步,还可以接受所述第二用户基于所述第一交互信息提供的包含了第二交互信息的第二虚拟对象,并将所述第二虚拟对象提供至所述第一用户设备2。其中,所述交互信息可以是从用户的语音信息和/或动作信息中提取的。在此,现实世界的各个用户之间可以通过虚拟世界中虚拟对象实现真实交互,并且所述交互信息的多样化、拟人化,使得用户的真实感体验大大增强。
图2示出根据本申请一个优选实施例的一种基于虚拟对象进行用户交互的网络设备1的设备示意图。其中,所述网络设备1包括第一装置101’、第二装置102’、第三装置103’和第四装置104’。其中,所述第二装置102’包括第一单元1021’和第二单元1022’。其中,所述第一单元1021’根据所述第一用户的样貌信息确定所述第一用户对应的第一虚拟对象的外观,其中,所述外观与所述第一用户的样貌信息相匹配;所述第二单元1022’根据所述第一用户的动作信息确定所述第一虚拟对象的待执行动作序列。在此,所述第一装置101’、第三装置103’、第四装置104’与图1示出的所述第一装置101、第三装置103、第四装置104内容相同或基本相同,在此不在赘述,并以引用的形式包含于此。
具体地,所述第一单元1021’根据所述第一用户的样貌信息确定所述第一用户对应的第一虚拟对象的外观,其中,所述外观与所述第一用户的样貌信息相匹配。在此,为了使得所述第一虚拟对象给所述第一用户将带来真实度较高的角色代入感,将提取所述第一用户的样貌信息的样貌特征系信息,或是进一步基于所述样貌信息的样貌子特征信息,基于样貌特征系信息、或所述样貌子特征信息确定所述第一虚拟对象的外观,并要求所述外观与所述第一用户的样貌信息相匹配,例如,匹配达到一定匹配度,或是满足一定的匹配阈值,使得所述第一虚拟对象相应于所述第一用户有极高的辨识度,优选地,所述外观与所述样貌信息高度相似。
此外,所述第二单元1022’根据所述第一用户的动作信息确定所述第一虚拟对象的待执行动作序列。在此,优选地,可以将所述第一用户在现实世界的动作信息映射为所述第一虚拟对象在虚拟场景中待执行动作序列,优选地,第二单元1022’可以实现动作的一一对应,如,所述第一用户在现实世界中进行前进、后退、左拐、右拐的跑、跳、步行、挥手、踢腿等动作,可以对采集到的所述动作信息,如动作图像信息、或是预设的身体部位的运动信号等进行动作分解,提取动作特征,进而确定出所述待执行动作序列,如将所述动作信息复制、或是相似映射为所述待执行动作序列,在此,一个优选的效果是,使得所述其他用户通过所述第一虚拟对象的动作序列可以无障碍地推定出所述第一用户的动作信息。
优选地,所述第一单元1021’包括第一子单元(未示出)和第二子单元(未示出)。其中,所述第一子单元根据所述第一用户的样貌信息所包括的样貌子特征信息分别确定对应的外观子特征信息,其中,每个外观子特征信息与对应的样貌子特征信息相匹配;所述第二子单元综合多个外观子特征信息获得所述第一用户对应的第一虚拟对象的外观。
具体地,所述第一用户的样貌信息可以对应多个样貌子特征信息,例如,以用户的五官、发型、身形、服装、配饰等确定多个样貌子特征信息,进而为每一个样貌子特征信息确定对应的外观子特征信息。在此,优选地,可以通过采集到的各个样貌子特征信息,在预置的特征数据库中进行所述样貌子特征信息与外观子特征信息的匹配,所述特征数据库存储了大量的外观子特征信息,例如,基于第一用户的发型信息对应的样貌子特征信息,从发型相关的外观子特征信息,如a1、a2……am等多个外观子特征信息中,确定与第一用户的发型信息对应的样貌子特征信息相匹配的某个外观子特征信息。在此,所述各个样貌子特征的采集可以是统一采集、或是分部采集。接着,所述第二子单元将多个所述外观子特征信息进行综合,生成所述第一用户对应的第一虚拟对象的整体外观,例如,将用户的五官、发型、身形、服装、配饰等对应的样貌子特征的各个外观子特征信息进行图像组合,得到一个完整的第一虚拟对象。
更优选地,所述第一子单元根据所述第一用户的样貌信息所包括的样貌子特征信息分别确定对应的外观子特征信息,其中,每个外观子特征信息与对应的样貌子特征信息的匹配度信息等于或大于预定的子特征匹配阈值信息。
具体地,为了保证所述第一虚拟对象相应于所述第一用户有极高的辨识度,优选地,所述外观与所述样貌信息的相似度要到达一定的阈值,其中,具体到每个外观子特征信息与对应的样貌子特征信息的匹配度信息要不小于预定的子特征匹配阈值信息。在此假设,以{A1,A2……An},n为正整数,表示所述第一用户对应的样貌子特征信息的集合,Ai(i为正整数)表示其中第i个样貌子特征信息,以{B1,B2……Bn},n为正整数,表示与上述各个样貌子特征信息一一对应的外观子特征信息集合,其中,Bi(i为正整数)表示与第i个样貌子特征信息Ai相对应的外观子特征信息。在此,要求S(Ai,Bi)≥Vi,1≤i≤n,i为正整数,其中,所述S(Ai,Bi)表示每个外观子特征信息与对应的样貌子特征信息的匹配度信息,所述Vi表示第i个外观子特征信息对应的子特征匹配阈值信息,各个外观子特征信息对应的子特征匹配阈值信息可以设置为相同、或是不同。
进一步,优选地,所述第一单元还包括第三子单元(未示出)、第四子单元(未示出)。其中,第三子单元根据每个外观子特征信息与对应的样貌子特征信息的匹配度信息确定所述外观与所述第一用户的样貌信息的综合匹配度信息;第四子单元当所述综合匹配度信息小于预定的用户与虚拟对象的综合匹配阈值信息,重新执行所述第一单元和所述第二单元对应的操作,直至所述综合匹配度信息等于或大于所述综合匹配阈值信息。
具体地,在本实施例中,不仅要求每个外观子特征信息与对应的样貌子特征信息的匹配度信息达到一定阈值,且要求所述外观与所述第一用户的样貌信息的综合匹配度信息的匹配度信息也要达到一定阈值。在此以上述假设为例,进一步要求,
1≤i≤n,i为正整数,其中,所述R表示所述外观与所述第一用户的样貌信息的综合匹配度信息,所述S(Ai,Bi)表示每个外观子特征信息与对应的样貌子特征信息的匹配度信息,所述wi表示第i个样貌子特征信息/外观子特征信息的权重信息,所述Ui表示预定的用户与虚拟对象的综合匹配阈值信息。在此,可以基于实际需要将不同样貌子特征信息/外观子特征信息的权重信息设置为相同,或是不同。
接着,当所述综合匹配度信息小于预定的所述综合匹配阈值信息时,重新执行所述第一单元和所述第二单元对应的操作,直至所述综合匹配度信息等于或大于所述综合匹配阈值信息。在此,若是综合匹配度信息小于预定的所述综合匹配阈值信息,则重新根据所述第一用户的样貌信息确定所述第一用户对应的第一虚拟对象的外观,其中,所述外观与所述第一用户的样貌信息相匹配;并根据所述第一用户的动作信息确定所述第一虚拟对象的待执行动作序列。在此,可以重新确定已纳入计算的所述样貌子特征信息对应的外观子特征信息,并且提高所述子特征匹配阈值信息的数值,使得重新确定的外观子特征信息与对应的样貌子特征信息的匹配度提高;或者,还可以增加所述第一用户的样貌信息对应的未曾计算过的其他样貌子特征信息,通过增加样貌子特征信息的种类和数量以提高所述综合匹配度信息的数值,从而实现更精确地匹配。
在一个优选实施例(参考图1)中,所述第一装置101获取第一用户在跑步机上的第一用户特征信息;其中,所述第二装置102根据所述第一用户特征信息生成所述第一用户对应的、进行跑步运动的第一虚拟对象。
具体地,本申请中,各个用户间基于虚拟对象进行交互的场景可以模拟各种现实生活中的场景,例如各种运动场景,具体可以是本实施例中用户跑步的场景。现实中,第一用户在所述跑步机上进行跑步运动,所述第一装置101获取第一用户在跑步机上与跑步运动相关的第一用户特征信息;所述第二装置102再根据所述第一用户特征信息生成所述第一用户对应的、进行跑步运动的第一虚拟对象;接着,基于所述第一用户特征信息提取到的所述第一交互信息会随着所述第一虚拟对象提供至所述与所述第一用户交互的第二用户的用户设备,在此,优选地,所述第二用户也在对应的跑步虚拟场景中,并且将其自身在现实生活中的跑步运动,例如在跑步机上的运动映射到虚拟场景中,由此,所述第一用户与第二用户虽然在现实中并没有在一起跑步,但可以基于各自对象的虚拟对象在模拟跑步的虚拟场景中共同运动、并进行语音、甚至是动作等交互。用户体验大大提升。
在本实施例中,所述跑步机可以是与所述第一用户对应的用户设备2相独立的设备,或者,所述跑步机即是所述用户设备2,又或者,所述跑步机上加载有所述用户设备2。
进一步,优选地,所述第一用户特征信息包括所述第一用户在所述跑步机上的跑步动作信息和/或跑步速度信息;其中,所述第二装置102根据所述第一用户特征信息生成所述第一用户对应的、进行跑步运动的第一虚拟对象,其中,所述第一虚拟对象满足以下至少任一项:所述第一虚拟对象对应的虚拟跑步动作信息与所述第一用户在所述跑步机上的跑步动作信息相匹配;所述第一虚拟对象对应的虚拟跑步速度信息与所述第一用户在所述跑步机上的跑步速度信息相匹配。
具体地,所述跑步动作信息包括所述第一用户在所述跑步机上进行的各种动作信息,可以是一般的跑步动作,如慢速跑、快速跑等,还可以是走路、跳跃、或其他自定以的动作信息。在此,优选地,所述跑步动作信息可以通过所述跑步机上加载的采集设备、或是配合的第三方采集设备进行抓取,例如,通过感应装置感知第一用户在跑步机上跑步区域的压力信息进行跑步动作信息采集,又如,通过摄像装置进行图片采集分析等。在此,所述跑步速度信息与跑步的状态对象,例如慢速跑、快速跑、停止等多种状态,所述跑步速度信息可以体现为具体的速度数值,优选地,可以通过当前跑步机设置的速度确定对应第一用户的跑步速度信息。在此,所述第二装置102根据所述第一用户特征信息生成所述第一用户对应的、进行跑步运动的第一虚拟对象,其中,所述第一虚拟对象满足以下至少任一项:所述第一虚拟对象对应的虚拟跑步动作信息与所述第一用户在所述跑步机上的跑步动作信息相匹配,例如当第一用户在跑步机上进行起跑时,所述第一虚拟对象的虚拟跑步动作信息也对应为对象起跑的动作;所述第一虚拟对象对应的虚拟跑步速度信息与所述第一用户在所述跑步机上的跑步速度信息相匹配,例如,若是第一用户设备在跑步机上的跑步速度由慢变快,则所述对应的虚拟跑步速度信息也要相应地体现由慢到快的变化。在此,上述所述虚拟跑步动作信息与所述跑步动作信息的匹配、以及所述虚拟跑步速度信息与所述跑步速度信息的匹配只要满足预设的对应关系即可,优选地,虚拟跑步速度信息和虚拟跑步速度信息可以高度还原现实中对应的跑步相关信息。
在本实施例中所述虚拟场景对应为跑步运动场景,进一步,所述第一用户特征信息可以包括所述第一用户在所述跑步机上的跑步动作信息和/或跑步速度信息。在此,本申请可以基于现实实际中各种活动场景模拟出不同的虚拟场景,例如,本实施例中基于用户在跑步机上的跑步,对应模拟出跑步场景,又如,其他任意运动或是其他可交互环境,从而使得人们在各种类型的虚拟场景中,可以在运动的同时,进行交互,增加用户的真实感体验,使得用户可以在不过多依赖于现实环境条件的情况下,实现虚拟显示的仿真运动交互体验。
在一个优选实施例中(参考图1),所述网络设备1还包括第八装置(未示出),其中,所述第八装置将所述第一虚拟对象提供至所述第一用户对应的用户设备。在此,优选地,所述第一虚拟对象包括与所述第一用户的样貌信息相匹配的外观,以及与所述第一用户的动作信息相匹配的待执行动作序列。在此,将基于所述第一用户的第一用户特征信息生成的所述第一虚拟对象提供给所述第一用户,才能使得所述第一用户体验到现实世界向虚拟世界的投射,从而实现角色带入。
在与之对应的另一个优选实施例(参考图1)中,所述用户设备2还包括第十四装置(未示出)和第十五装置(未示出)。
其中,所述第十四装置接收所述网络设备提供的所述第一虚拟对象,其中,所述第一虚拟对象包括与所述第一用户的样貌信息相匹配的外观,以及与所述第一用户的动作信息相匹配的待执行动作序列。在此,将基于所述第一用户的第一用户特征信息生成的所述第一虚拟对象提供给所述第一用户,才能使得所述第一用户体验到现实世界向虚拟世界的投射,从而实现角色带入。
接着,所述第十五装置将所述第一虚拟对象提供至对应的虚拟现实装置,以供通过所述虚拟现实装置执行所述第一虚拟对象。在此,所述虚拟现实设备包括但不限于VR(Virtual Reality,即虚拟现实)设备,或AR(Augmented Reality,或增强现实)设备等。在此,所述虚拟现实装置对应的虚拟场景将模拟用户真实的视觉、听觉、触觉等感官体验,让操作用户体验到身历其境的沉浸式感受。在此,所述用户设备2与所述虚拟现实装置可以是独立存在的,或者,所述用户设备2与所述虚拟现实装置是集成在一个设备整体中的,如所示用户设备2加载在所述虚拟现实装置中。在此,由所述用户设备2将所述第一虚拟对象提供至相应的虚拟现实装置,以通过所述虚拟现实装置为对应的第一用户呈现所述第一虚拟对象。
在本实施例中,所述用户设备2与所述网络设备1配合,将所采集到的第一用户的特征信息提供至对应网络设备1;并将从网络设备1接收到的第一虚拟对象提供至对应的虚拟现实装置,并在所述虚拟现实装置中执行所述第一虚拟对象。在此,有别于传统的电视、个人计算机、手机等设备的呈现效果,在所述虚拟现实装置呈现的三维虚拟世界中,基于本申请提供用户的第一虚拟对象能够以逼近真实感官的呈现效果,给用户带来全面沉浸式交互体验。
优选地,所述网络设备1还包括第九装置(未示出),所述第九装置获取与所述第一虚拟对象处于同一虚拟场景的第三虚拟对象;其中,所述第八装置将所述第一虚拟对象及所述第三虚拟对象提供至所述第一用户对应的用户设备2。
进一步优选地,所述用户设备2还包括第十四装置(未示出)和第十五装置(未示出)。所述第十四装置接收所述网络设备提供的与所述第一用户特征信息对应的第一虚拟对象及与所述第一虚拟对象处于同一虚拟场景的第三虚拟对象,其中,所述第一虚拟对象包括与所述第一用户的样貌信息相匹配的外观,以及与所述第一用户的动作信息相匹配的待执行动作序列;所述第十五装置将所述第一虚拟对象及所述第三虚拟对象提供至对应的虚拟现实装置,以供通过所述虚拟现实装置执行所述第一虚拟对象及所述第三虚拟对象。
具体地,实际的交互应用可能对应有多个用户,各个用户各自对应的虚拟对象可能对应同一个虚拟场景,在此,所述虚拟场景对应为所述各个虚拟对象所活动的非现实虚构空间,例如,所述虚拟场景可以是一个抽象的运动空间、又或是任意模拟现实场景的虚构空间。进而,优选地,所述第一用户对应的虚拟场景中对应有除了第一虚拟对象以外的其他虚拟对象,如所述第三虚拟对象。在此,所述第三虚拟对象不仅可以是其他用户基于相应的用户特征信息生成的虚拟对象,还可以是直接由系统产生并控制的虚拟对象。在此,优选地,与所述第一虚拟对象类似,所述第三虚拟对象也可以包括与所述对应用户的样貌信息相匹配的外观,以及与对应用户的动作信息相匹配的待执行动作序列;或者,所述第三虚拟对象包含系统预置的相应外观或是待执行动作序列。由此则构建出了不同区域的用户通过各自的虚拟对象在同一个虚拟场景中相遇的场景。
更优选地,所述网络设备1还包括第十装置(未示出),所述第十装置确定所述第一虚拟对象所处虚拟场景中的一个或多个虚拟对象;接着,所述第九装置从所述一个或多个虚拟对象中确定所述第一虚拟对象对应的第三虚拟对象。
具体地,在当前交互应用对应的同一个虚拟场景中存在一个或多个虚拟对象,所述虚拟场景与所述虚拟对象的对应关系,可以是由对应用户进行选择的结果,例如,用户基于虚拟场景的主题元素进行偏好选择;或是所述网络设备1基于不同用户的实际需要进行自动分配的结果,例如,所述网络设备1基于采集到的用户的特征信息,为用户匹配与其对应的虚拟场景。进一步,还可以结合虚拟场景对应的实际交互内容,在对应同一个虚拟场景的一个或多个虚拟对象中确定与所述第一虚拟对象对应的第三虚拟对象,即可以将与所述第一虚拟对象在同一虚拟场景中的部分或全部其他虚拟对象,有针对性匹配给所述第一用户,由此,对于所述虚拟场景中的每一个虚拟对象对应的用户,其获得的虚拟世界的信息的可选择性更加灵活多样。
在本实施例中,可以确定所述第一虚拟对象所处虚拟场景中的一个或多个虚拟对象;进而从一个或多个虚拟对象中确定所述第一虚拟对象对应的第三虚拟对象。在此,本申请通过对相应的各个虚拟对象进行配对以实现不同区域的用户通过各自的虚拟对象在同一个虚拟场景中相遇的场景,并为后续不同地域的用户通过各自的虚拟对象在虚拟界面中进行拟人化的真实交流奠定了基础。
优选地,所述第八装置将所述第一虚拟对象、所述第三虚拟对象及所述虚拟场景提供至所述第一用户对应的用户设备2。在此,优选地,可以将所述第一虚拟对象、所述第三虚拟对象,加载在相匹配的虚拟场景中,提供给所述第一用户对应的用户设备2,在此,所述虚拟场景可以基于用户的选择、或是系统的设置而进行虚拟场景的元素,如虚拟场景中的背景、建筑等调整。在此,所述第一虚拟对象、所述第三虚拟对象结合多样化的虚拟场景可以进一步丰富所述第一用户的感官体验,用户的沉浸式代入感得到进一步提升。
在一个优选实施例中,所述第九装置根据每个虚拟对象对应的运动特征信息从所述一个或多个虚拟对象中确定所述第一虚拟对象对应的第三虚拟对象,其中,所述运动特征信息包括跑步特征信息。
具体地,用户在不同类型的交互应用中,通过相应的第一虚拟对象会执行不同类型的交互操作。在此,优选地,若是所述交互应用与运动操作相关,例如,所述交互应用为模拟体育运动游戏,则所述第一用户的第一虚拟对象即体现相应的运动特征信息,在此,所述运动特征信息包括跑步特征信息,例如,与跑步运动相关的跑步场景信息、或是跑步级别信息等。在此,可以基于所述跑步特征信息为所述第一虚拟对象确定对应的第三虚拟对象。
优选地,所述第九装置基于预定的配对规则,并根据每个虚拟对象对应的跑步特征信息从所述一个或多个虚拟对象确定所述第一虚拟对象对应的第三虚拟对象,其中,所述第一虚拟对象与所述第三虚拟对象的跑步特征信息满足所述配对规则;其中,所述配对规则包括以下至少任一项:所述第一虚拟对象与所述第三虚拟对象的跑步场景相同;所述第一虚拟对象与所述第三虚拟对象的跑步级别相匹配。
具体地,在此,所述跑步场景包括但不限于各种虚拟的跑步环境,例如标准田径赛道、海边、沙漠等。所述跑步级别包括但不限于跑步选手性别;跑步类型,如短跑、长跑、接力跑;跑步速度,如,慢速跑、快速跑等。在此,所述配对规则的设置是为了使得所述第一虚拟对象与对应的第三虚拟对象的用户之间的运动互动效果优化,例如,所述第一虚拟对象与第三虚拟对象的跑步场景都是田径赛道;又如,所述第一虚拟对象与第三虚拟对象的跑步级别都是女性选手、慢速跑。在此,所述跑步特征信息体现的是所述虚拟对象对应用户的跑步运动能力、或是跑步运动需求,在此,当所述用户之间、或是用户对应的虚拟对象之间的跑步运动环境一致、或跑步运动能力相当时,所述第一用户、或是对应的交互对象在所述虚拟场景中的运动真实感、运动竞技体验较佳。在此,本领域技术人员应该能够理解,上述配对规则仅为举例,其他现有的或今后可能出现的其他配对规则如可适用于本申请,也应包含在本申请保护范围以内,并在此以引用方式包含于此。
在本实施例中,在多个虚拟对象同处于同一个虚拟场景的应用场景中,还可以根据每个虚拟对象对应的运动特征信息从所述一个或多个虚拟对象中确定所述第一虚拟对象对应的第三虚拟对象,其中,所述运动特征信息包括跑步特征信息。在此,所述虚拟对象在虚拟场景中的操作可以与用户的运动体验相结合,例如,用户的跑步运动等,即将用户在现实世界的运动体验投射成虚拟场景中虚拟对象的运动相关操作。由此,可以基于每个虚拟对象对应的运动特征信息,对相应的各个虚拟对象进行配对,使得被匹配在一起的所述第一虚拟对象与所述第三虚拟对象各自对应的用户的运动互动效果最佳,从而提升了用户体验,例如,可以基于跑步场景、跑步级别等信息选择与所述第一虚拟对象对应的第三虚拟对象。
对于本领域技术人员而言,显然本申请不限于上述示范性实施例的细节,而且在不背离本申请的精神或基本特征的情况下,能够以其他的具体形式实现本申请。因此,无论从哪一点来看,均应将实施例看作是示范性的,而且是非限制性的,本申请的范围由所附权利要求而不是上述说明限定,因此旨在将落在权利要求的等同要件的含义和范围内的所有变化涵括在本申请内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。此外,显然“包括”一词不排除其他单元或步骤,单数不排除复数。装置权利要求中陈述的多个单元或装置也可以由一个单元或装置通过软件或者硬件来实现。第一,第二等词语用来表示名称,而并不表示任何特定的顺序。

Claims (35)

1.一种在网络设备端基于虚拟对象进行用户交互的方法,其中,所述方法包括:
获取第一用户的第一用户特征信息;
根据所述第一用户特征信息生成所述第一用户对应的第一虚拟对象;
确定所述第一交互信息,其中,所述第一交互信息来源于所述第一用户特征信息;
将所述第一虚拟对象及所述第一交互信息发送至与所述第一用户交互的第二用户的用户设备,其中,所述第一虚拟对象用于执行所述第一交互信息。
2.根据权利要求1所述的方法,其中,所述方法还包括:
获取所述第二用户基于所述第一交互信息提供的第二用户特征信息;
根据所述第二用户特征信息生成所述第二用户对应的第二虚拟对象,其中,所述第二虚拟对象用于执行从所述第二用户特征信息中抽取得到的第二交互信息;
将所述第二虚拟对象及所述第二交互信息提供至所述第一用户对应的用户设备。
3.根据权利要求1或2所述的方法,其中,所述第一用户特征信息包括所述第一用户的语音信息;
其中,所述确定所述第一交互信息,其中,所述第一交互信息来源于所述第一用户特征信息包括:
确定所述第一交互信息,其中,所述第一交互信息来源于所述第一用户的语音信息。
4.根据权利要求1至3中任一项所述的方法,其中,所述第一用户特征信息还包含所述第一用户的动作信息与样貌信息;
其中,所述根据所述第一用户特征信息生成所述第一用户对应的第一虚拟对象包括:
根据所述第一用户特征信息生成所述第一用户对应的第一虚拟对象,其中,所述第一虚拟对象包括与所述第一用户的样貌信息相匹配的外观,以及与所述第一用户的动作信息相匹配的待执行动作序列。
5.根据权利要求1至4中任一项所述的方法,其中,所述根据所述第一用户特征信息生成所述第一用户对应的第一虚拟对象包括:
根据所述第一用户的样貌信息确定所述第一用户对应的第一虚拟对象的外观,其中,所述外观与所述第一用户的样貌信息相匹配;
根据所述第一用户的动作信息确定所述第一虚拟对象的待执行动作序列。
6.根据权利要求5所述的方法,其中,所述根据所述第一用户的样貌信息确定所述第一用户对应的第一虚拟对象的外观,其中,所述外观与所述第一用户的样貌信息相匹配包括:
根据所述第一用户的样貌信息所包括的样貌子特征信息分别确定对应的外观子特征信息,其中,每个外观子特征信息与对应的样貌子特征信息相匹配;
综合多个外观子特征信息获得所述第一用户对应的第一虚拟对象的外观。
7.根据权利要求1所述的方法,其中,所述获取第一用户的第一用户特征信息包括:
获取第一用户在跑步机上的第一用户特征信息;
其中,所述根据所述第一用户特征信息生成所述第一用户对应的第一虚拟对象包括:
根据所述第一用户特征信息生成所述第一用户对应的、进行跑步运动的第一虚拟对象。
8.根据权利要求7所述的方法,其中,所述第一用户特征信息包括所述第一用户在所述跑步机上的跑步动作信息和/或跑步速度信息;
其中,所述根据所述第一用户特征信息生成所述第一用户对应的第一虚拟对象包括:
根据所述第一用户特征信息生成所述第一用户对应的、进行跑步运动的第一虚拟对象,其中,所述第一虚拟对象满足以下至少任一项:
所述第一虚拟对象对应的虚拟跑步动作信息与所述第一用户在所述跑步机上的跑步动作信息相匹配;
所述第一虚拟对象对应的虚拟跑步速度信息与所述第一用户在所述跑步机上的跑步速度信息相匹配。
9.根据权利要求1至8中任一项所述的方法,其中,所述方法还包括:
将所述第一虚拟对象提供至所述第一用户对应的用户设备。
10.根据权利要求9所述的方法,其中,所述方法还包括:
获取与所述第一虚拟对象处于同一虚拟场景的第三虚拟对象;
其中,所述将所述第一虚拟对象提供至所述第一用户对应的用户设备包括:
将所述第一虚拟对象及所述第三虚拟对象提供至所述第一用户对应的用户设备。
11.根据权利要求10所述的方法,其中,所述方法还包括:
确定所述第一虚拟对象所处虚拟场景中的一个或多个虚拟对象;
其中,所述获取与所述第一虚拟对象处于同一虚拟场景的第三虚拟对象包括:
从所述一个或多个虚拟对象中确定所述第一虚拟对象对应的第三虚拟对象。
12.根据权利要求10或11所述的方法,其中,所述将所述第一虚拟对象提供至所述第一用户对应的用户设备包括:
将所述第一虚拟对象、所述第三虚拟对象及所述虚拟场景提供至所述第一用户对应的用户设备。
13.根据权利要求11所述的方法,其中,所述获取与所述第一虚拟对象处于同一虚拟场景的第三虚拟对象包括:
根据每个虚拟对象对应的运动特征信息从所述一个或多个虚拟对象中确定所述第一虚拟对象对应的第三虚拟对象,其中,所述运动特征信息包括跑步特征信息。
14.根据权利要求13所述的方法,其中,所述获取与所述第一虚拟对象处于同一虚拟场景的第三虚拟对象包括:
基于预定的配对规则,并根据每个虚拟对象对应的跑步特征信息从所述一个或多个虚拟对象确定所述第一虚拟对象对应的第三虚拟对象,其中,所述第一虚拟对象与所述第三虚拟对象的跑步特征信息满足所述配对规则;
其中,所述配对规则包括以下至少任一项:
所述第一虚拟对象与所述第三虚拟对象的跑步运动场景相同;
所述第一虚拟对象与所述第三虚拟对象的跑步运动级别相匹配。
15.一种在用户设备端基于虚拟对象进行用户交互的方法,其中,所述方法包括:
获取第一用户的第一用户特征信息,其中,所述第一用户特征信息包含所述第一用户的动作信息与样貌信息;
将所述第一用户特征信息发送至所述第一用户设备对应的网络设备。
16.根据权利要求15所述的方法,其中,所述方法还包括:
接收所述网络设备提供的与所述第一用户特征信息对应的第一虚拟对象,其中,所述第一虚拟对象包括与所述第一用户的样貌信息相匹配的外观,以及与所述第一用户的动作信息相匹配的待执行动作序列;
将所述第一虚拟对象提供至对应的虚拟现实装置,以供通过所述虚拟现实装置执行所述第一虚拟对象。
17.根据权利要求16所述的方法,其中,所述接收所述网络设备提供的与所述第一用户特征信息对应的第一虚拟对象,其中,所述第一虚拟对象包括与所述第一用户的样貌信息相匹配的外观,以及与所述第一用户的动作信息相匹配的待执行动作序列包括:
接收所述网络设备提供的与所述第一用户特征信息对应的第一虚拟对象及与所述第一虚拟对象处于同一虚拟场景的第三虚拟对象,其中,所述第一虚拟对象包括与所述第一用户的样貌信息相匹配的外观,以及与所述第一用户的动作信息相匹配的待执行动作序列;
其中,所述将所述第一虚拟对象提供至对应的虚拟现实装置,以供通过所述虚拟现实装置执行所述第一虚拟对象包括:
将所述第一虚拟对象及所述第三虚拟对象提供至对应的虚拟现实装置,以供通过所述虚拟现实装置执行所述第一虚拟对象及所述第三虚拟对象。
18.一种基于虚拟对象进行用户交互的网络设备,其中,所述设备包括:
第一装置,用于获取第一用户的第一用户特征信息;
第二装置,用于根据所述第一用户特征信息生成所述第一用户对应的第一虚拟对象;
第三装置,用于确定所述第一交互信息,其中,所述第一交互信息来源于所述第一用户特征信息;
第四装置,用于将所述第一虚拟对象发送至与所述第一用户交互的第二用户的用户设备,其中,所述第一虚拟对象包含所述第一交互信息。
19.根据权利要求18所述的设备,其中,所述设备还包括:
第五装置,用于获取所述第二用户基于所述第一交互信息提供的第二用户特征信息;
第六装置,用于根据所述第二用户特征信息生成所述第二用户对应的第二虚拟对象,其中,所述第二虚拟对象包括从所述第二用户特征信息中抽取得到的第二交互信息;
第七装置,用于将所述第二虚拟对象提供至所述第一用户对应的用户设备。
20.根据权利要求18或19所述的方法,其中,所述第一用户特征信息包括所述第一用户的语音信息;
其中,所述第三装置用于:
确定所述第一交互信息,其中,所述第一交互信息来源于所述第一用户的语音信息。
21.根据权利要求18至20中任一项所述的设备,其中,所述第一用户特征信息还包含所述第一用户的动作信息与样貌信息;
其中,所述第二装置用于:
根据所述第一用户特征信息生成所述第一用户对应的第一虚拟对象,其中,所述第一虚拟对象包括与所述第一用户的样貌信息相匹配的外观,以及与所述第一用户的动作信息相匹配的待执行动作序列。
22.根据权利要求18所述的设备,其中,所述第一装置用于:
获取第一用户在跑步机上的第一用户特征信息;
其中,所述第二装置用于:
根据所述第一用户特征信息生成所述第一用户对应的、进行跑步运动的第一虚拟对象。
23.根据权利要求22所述的设备,其中,所述第一用户特征信息包括所述第一用户在所述跑步机上的跑步动作信息和/或跑步速度信息;
其中,所述第二装置用于:
根据所述第一用户特征信息生成所述第一用户对应的、进行跑步运动的第一虚拟对象,其中,所述第一虚拟对象满足以下至少任一项:
所述第一虚拟对象对应的虚拟跑步动作信息与所述第一用户在所述跑步机上的跑步动作信息相匹配;
所述第一虚拟对象对应的虚拟跑步速度信息与所述第一用户在所述跑步机上的跑步速度信息相匹配。
24.根据权利要求18至23中任一项所述的设备,其中,所述设备还包括:
第八装置,用于将所述第一虚拟对象提供至所述第一用户对应的用户设备。
25.根据权利要求24所述的设备,其中,所述设备还包括:
第九装置,用于获取与所述第一虚拟对象处于同一虚拟场景的第三虚拟对象;
其中,所述第八装置用于:
将所述第一虚拟对象及所述第三虚拟对象提供至所述第一用户对应的用户设备。
26.根据权利要求25所述的设备,其中,所述设备还包括:
第十装置,用于确定所述第一虚拟对象所处虚拟场景中的一个或多个虚拟对象;
其中,所述第九装置用于:
从所述一个或多个虚拟对象中确定所述第一虚拟对象对应的第三虚拟对象。
27.根据权利要求26所述的设备,其中,所述第九装置用于:
根据每个虚拟对象对应的运动特征信息从所述一个或多个虚拟对象中确定所述第一虚拟对象对应的第三虚拟对象,其中,所述运动特征信息包括跑步特征信息。
28.根据权利要求27所述的设备,其中,所述第九装置用于:
基于预定的配对规则,并根据每个虚拟对象对应的跑步特征信息从所述一个或多个虚拟对象确定所述第一虚拟对象对应的第三虚拟对象,其中,所述第一虚拟对象与所述第三虚拟对象的跑步特征信息满足所述配对规则;
其中,所述配对规则包括以下至少任一项:
所述第一虚拟对象与所述第三虚拟对象的跑步场景相同;
所述第一虚拟对象与所述第三虚拟对象的跑步级别相匹配。
29.一种基于虚拟对象进行用户交互的用户设备,其中,所述设备包括:
第十二装置,用于获取第一用户的第一用户特征信息,其中,所述第一用户特征信息包含所述第一用户的动作信息与样貌信息;
第十三装置,用于将所述第一用户特征信息发送至所述第一用户设备对应的网络设备。
30.根据权利要求29所述的设备,其中,所述设备还包括:
第十四装置,用于接收所述网络设备提供的与所述第一用户特征信息对应的第一虚拟对象,其中,所述第一虚拟对象包括与所述第一用户的样貌信息相匹配的外观,以及与所述第一用户的动作信息相匹配的待执行动作序列;
第十五装置,用于将所述第一虚拟对象提供至对应的虚拟现实装置,以供通过所述虚拟现实装置执行所述第一虚拟对象。
31.根据权利要求30所述的设备,其中,所述第十四装置用于:
接收所述网络设备提供的与所述第一用户特征信息对应的第一虚拟对象及与所述第一虚拟对象处于同一虚拟场景的第三虚拟对象,其中,所述第一虚拟对象包括与所述第一用户的样貌信息相匹配的外观,以及与所述第一用户的动作信息相匹配的待执行动作序列;
其中,所述第十五装置用于:
将所述第一虚拟对象及所述第三虚拟对象提供至对应的虚拟现实装置,以供通过所述虚拟现实装置执行所述第一虚拟对象及所述第三虚拟对象。
32.一种基于虚拟对象进行用户交互的虚拟现实设备,其中,所述虚拟现实设备包括如权利要求29至31中任一项所述的用户设备。
33.一种基于虚拟对象进行用户交互的运动设备,其中,所述运动设备包括如权利要求29至31中任一项所述的用户设备。
34.一种基于虚拟对象进行用户交互的采集设备,其中,所述采集设备包括如权利要求29至31中任一项所述的用户设备。
35.一种基于虚拟对象进行用户交互的系统,包括如权利要求18至28中任一项的网络设备,以及以下至少任一项设备:
如权利要求29至31中任一项所述的用户设备;
如权利要求32所述的虚拟现实设备;
如权利要求33所述的运动设备;
如权利要求34所述的采集设备。
CN201610675278.8A 2016-08-16 2016-08-16 一种基于虚拟对象进行用户交互的方法与设备 Pending CN107767438A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201610675278.8A CN107767438A (zh) 2016-08-16 2016-08-16 一种基于虚拟对象进行用户交互的方法与设备
US15/678,138 US10628478B2 (en) 2016-08-16 2017-08-16 Method and device thereof for user interaction based on virtual objects and non-volatile storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610675278.8A CN107767438A (zh) 2016-08-16 2016-08-16 一种基于虚拟对象进行用户交互的方法与设备

Publications (1)

Publication Number Publication Date
CN107767438A true CN107767438A (zh) 2018-03-06

Family

ID=61191780

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610675278.8A Pending CN107767438A (zh) 2016-08-16 2016-08-16 一种基于虚拟对象进行用户交互的方法与设备

Country Status (2)

Country Link
US (1) US10628478B2 (zh)
CN (1) CN107767438A (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108919951A (zh) * 2018-06-28 2018-11-30 联想(北京)有限公司 一种信息交互方法及装置
CN110064177A (zh) * 2019-04-16 2019-07-30 绍兴文理学院 一种基于智能手环的间歇式训练监测系统及方法
CN110308792A (zh) * 2019-07-01 2019-10-08 北京百度网讯科技有限公司 虚拟角色的控制方法、装置、设备及可读存储介质
CN110322377A (zh) * 2019-06-28 2019-10-11 德普信(天津)软件技术有限责任公司 基于虚拟现实的教学方法及系统
CN111383313A (zh) * 2020-03-31 2020-07-07 歌尔股份有限公司 一种虚拟模型渲染方法、装置、设备及可读存储介质
CN111596554A (zh) * 2019-02-20 2020-08-28 罗伯特·博世有限公司 用于基于物理实体的虚拟表示来操作物理实体的系统和方法
WO2021073269A1 (zh) * 2019-10-15 2021-04-22 北京市商汤科技开发有限公司 增强现实数据呈现方法、装置、设备、存储介质和程序
CN112875131A (zh) * 2020-01-08 2021-06-01 房小明 物联网、大数据下信息化档案数据查询系统
CN115191788A (zh) * 2022-07-14 2022-10-18 慕思健康睡眠股份有限公司 一种基于智能床垫的体感互动方法及相关产品

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110853148A (zh) * 2019-09-29 2020-02-28 深圳市火乐科技发展有限公司 跑步场景的构建方法及相关装置
CN111583355B (zh) * 2020-05-09 2024-01-23 维沃移动通信有限公司 面部形象生成方法、装置、电子设备及可读存储介质
CN111627097B (zh) * 2020-06-01 2023-12-01 上海商汤智能科技有限公司 一种虚拟景物的展示方法及装置
CN117899478B (zh) * 2024-03-18 2024-06-04 腾讯科技(深圳)有限公司 一种虚拟角色的控制方法和相关装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102176197A (zh) * 2011-03-23 2011-09-07 上海那里网络科技有限公司 一种使用虚拟化身和实时影像进行实时互动的方法
CN103209201A (zh) * 2012-01-16 2013-07-17 上海那里信息科技有限公司 基于社交关系的虚拟化身互动系统和方法
CN103838982A (zh) * 2014-03-27 2014-06-04 优视科技有限公司 一种虚拟游戏对象生成方法及装置
CN105450736A (zh) * 2015-11-12 2016-03-30 小米科技有限责任公司 与虚拟现实连接的方法和装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100938922B1 (ko) * 2009-06-26 2010-01-27 (주)이랜서 트레드밀 시스템 및 그 구동 방법
US9779633B2 (en) * 2014-08-08 2017-10-03 Greg Van Curen Virtual reality system enabling compatibility of sense of immersion in virtual space and movement in real space, and battle training system using same
US9704298B2 (en) * 2015-06-23 2017-07-11 Paofit Holdings Pte Ltd. Systems and methods for generating 360 degree mixed reality environments

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102176197A (zh) * 2011-03-23 2011-09-07 上海那里网络科技有限公司 一种使用虚拟化身和实时影像进行实时互动的方法
CN103209201A (zh) * 2012-01-16 2013-07-17 上海那里信息科技有限公司 基于社交关系的虚拟化身互动系统和方法
CN103838982A (zh) * 2014-03-27 2014-06-04 优视科技有限公司 一种虚拟游戏对象生成方法及装置
CN105450736A (zh) * 2015-11-12 2016-03-30 小米科技有限责任公司 与虚拟现实连接的方法和装置

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
KEIRA郝: "【YOTOVR】Facebook在开发者大会演示VR社交demo,以及如何秀出VR自拍照", 《HTTPS://WWW.BILIBILI.COM/VIDEO/BV12S411Z7YL?FROM=SEARCH&SEID=1457686728401030363》 *
本站整理: "VR目前的社交软件介绍 vr社交平台有哪些", 《HTTP://WWW.PAOPAOCHE.NET/ARTICLE/104766.HTML》 *
胡痴儿2.0: "以目前的技术VR社交中能做哪些?国内外有哪些类似的软件吗?", 《HTTPS://WWW.ZHIHU.COM/QUESTION/41768932》 *

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108919951A (zh) * 2018-06-28 2018-11-30 联想(北京)有限公司 一种信息交互方法及装置
CN111596554A (zh) * 2019-02-20 2020-08-28 罗伯特·博世有限公司 用于基于物理实体的虚拟表示来操作物理实体的系统和方法
CN110064177A (zh) * 2019-04-16 2019-07-30 绍兴文理学院 一种基于智能手环的间歇式训练监测系统及方法
CN110322377A (zh) * 2019-06-28 2019-10-11 德普信(天津)软件技术有限责任公司 基于虚拟现实的教学方法及系统
CN110308792A (zh) * 2019-07-01 2019-10-08 北京百度网讯科技有限公司 虚拟角色的控制方法、装置、设备及可读存储介质
CN110308792B (zh) * 2019-07-01 2023-12-12 北京百度网讯科技有限公司 虚拟角色的控制方法、装置、设备及可读存储介质
WO2021073269A1 (zh) * 2019-10-15 2021-04-22 北京市商汤科技开发有限公司 增强现实数据呈现方法、装置、设备、存储介质和程序
CN112875131A (zh) * 2020-01-08 2021-06-01 房小明 物联网、大数据下信息化档案数据查询系统
CN111383313A (zh) * 2020-03-31 2020-07-07 歌尔股份有限公司 一种虚拟模型渲染方法、装置、设备及可读存储介质
CN115191788A (zh) * 2022-07-14 2022-10-18 慕思健康睡眠股份有限公司 一种基于智能床垫的体感互动方法及相关产品

Also Published As

Publication number Publication date
US10628478B2 (en) 2020-04-21
US20180052841A1 (en) 2018-02-22

Similar Documents

Publication Publication Date Title
CN107767438A (zh) 一种基于虚拟对象进行用户交互的方法与设备
US11845008B2 (en) Building virtual reality (VR) gaming environments using real-world virtual reality maps
JP7299414B2 (ja) 画像処理方法、装置、電子機器及びコンピュータプログラム
WO2022205760A1 (zh) 三维人体重建方法、装置、设备及存储介质
CN106780421A (zh) 基于全景平台的装修效果展示方法
TWI795845B (zh) 伺服器及資訊處理方法
CN103258338A (zh) 利用真实数据来驱动仿真的虚拟环境的方法和系统
CN108257195A (zh) 一种基于几何对比生成对抗网络的面部表情合成方法
CN109035415B (zh) 虚拟模型的处理方法、装置、设备和计算机可读存储介质
CN108983974B (zh) Ar场景处理方法、装置、设备和计算机可读存储介质
CN114554111B (zh) 视频生成方法和装置、存储介质及电子设备
WO2024027063A1 (zh) 直播方法、装置、存储介质、电子设备及产品
Zhang et al. Application research of virtual reality technology in film and television technology
WO2023185241A1 (zh) 数据处理方法、装置、设备以及介质
Boukhris et al. 360 versus 3D Environments in VR Headsets for an Exploration Task
CN108320331A (zh) 一种生成用户场景的增强现实视频信息的方法与设备
Lin et al. Temporal IK: Data-Driven Pose Estimation for Virtual Reality
CA3204613A1 (en) Volumetric video from an image source
CN114422862A (zh) 服务视频生成方法、装置、设备、存储介质和程序产品
KR20200134623A (ko) 3차원 가상 캐릭터의 표정모사방법 및 표정모사장치
CN116570921B (zh) 虚拟对象的姿态控制方法、装置、计算机设备、存储介质
US11527032B1 (en) Systems and methods to generate and utilize content styles for animation
WO2024149120A1 (zh) 场景描述文件的生成方法及装置
Wang et al. Automatic generation of game content customized by players: Generate 3D game character based on pictures
US20240048780A1 (en) Live broadcast method, device, storage medium, electronic equipment and product

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination