CN111381967A - 虚拟对象的处理方法及装置 - Google Patents

虚拟对象的处理方法及装置 Download PDF

Info

Publication number
CN111381967A
CN111381967A CN202010158839.3A CN202010158839A CN111381967A CN 111381967 A CN111381967 A CN 111381967A CN 202010158839 A CN202010158839 A CN 202010158839A CN 111381967 A CN111381967 A CN 111381967A
Authority
CN
China
Prior art keywords
virtual object
angle
image
processing
target virtual
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010158839.3A
Other languages
English (en)
Inventor
赵斌
栗霖
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China United Network Communications Group Co Ltd
Original Assignee
China United Network Communications Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China United Network Communications Group Co Ltd filed Critical China United Network Communications Group Co Ltd
Priority to CN202010158839.3A priority Critical patent/CN111381967A/zh
Publication of CN111381967A publication Critical patent/CN111381967A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • G06F9/5044Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering hardware capabilities
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • G06T1/20Processor architectures; Processor configuration, e.g. pipelining
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/04Indexing scheme for image data processing or generation, in general involving 3D image data

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Graphics (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请实施例提供一种虚拟对象的处理方法及装置,涉及虚拟现实技术领域,用于解决当体验相同的VR内容的用户较多时,服务器的GPU出现超负荷运行的问题。该方法包括:接收M个虚拟现实VR设备中的每个VR设备发送的第一请求,M个VR设备部署有相同的应用,该应用用于显示虚拟内容,第一VR设备发送的第一请求包括第一VR设备的标识和第一角度;第一角度用于表征第一VR设备的空间姿态信息,第一VR设备为所述M个VR设备中任一个VR设备,M为正整数;在M大于预设阈值的情况下,对目标虚拟对象进行渲染,得到渲染后的目标虚拟对象;向每个VR设备发送第一影像,第一影像是渲染后的目标虚拟对象中与第一角度对应的虚拟对象。

Description

虚拟对象的处理方法及装置
技术领域
本申请涉及虚拟现实技术领域,尤其涉及一种虚拟对象的处理方法及装置。
背景技术
目前,对于多个虚拟现实(virtual reality,VR)设备体验相同的VR对象的场景,提供VR对象的服务器需要对VR对象中每个VR设备的所需要的影像进行渲染。当VR设备较多时,由于每个VR设备的需要的VR对象的影像可能不一样。因此,服务器需要对VR对象进行多次渲染。这样一来,服务器的图形处理器(graphics processing unit,GPU)会出现超负荷运行的问题。
发明内容
本申请提供一种虚拟对象的处理方法及装置,用于解决当共享相同VR对象的VR设备较多时,服务器的GPU出现超负荷运行的问题。
为达到上述目的,本申请采用如下技术方案:
第一方面,提供一种虚拟对象的处理方法,虚拟对象的处理装置(后续为了简化描述,均以处理装置为例进行描述)获取M个VR设备中每个VR设备的第一请求,该M个VR设备部署有相同的应用,该应用用于显示目标虚拟内容。对于第一VR设备,第一VR设备的第一请求包括第一VR设备的标识以及第一角度,第一VR设备为M个VR设备中的任一个VR设备。第一角度用于表征第一VR设备的空间姿态信息,第一请求用于获取目标虚拟对象中与第一角度对应的虚拟对象。然后,在M大于预设阈值的情况下,处理装置对目标虚拟对象进行渲染,得到渲染后的目标虚拟对象。最后,处理装置向每个VR设备发送第一影像,对于第一VR设备,第一影像为渲染后的目标虚拟对象中与第一角度对应的虚拟对象。
上述方法中,处理装置在接收到来自多个VR设备中每个VR设备的第一请求后,在VR设备的数量大于预设阈值的情况下,处理装置将目标虚拟对象渲染成全视角的虚拟对象。然后,处理装置向VR设备发送该全视角的虚拟对象中与该VR设备的角度对应的第一影像。相较于现有技术中,处理装置需要根据对虚拟对象进行多次渲染。本申请中,处理装置只需要对虚拟对象进行一次处理,减少了处理装置的渲染次数。因此,本申请提供的技术方案可以减轻处理装置的负荷。
第二方面,提供一种虚拟对象的处理装置,该处理装置包括:通信单元,用于接收M个VR设备中的每个VR设备发送的第一请求,该M个VR设备部署有相同的应用,该应用用于显示目标虚拟内容。对于第一VR设备,第一VR设备发送的第一请求包括第一VR设备的标识和第一角度;第一角度用于表征第一VR设备的空间姿态信息,第一请求用于获取与第一角度对应的影像,第一VR设备为M个VR设备中任一个VR设备,M为正整数。处理单元,用于若M大于预设阈值,对目标虚拟对象进行渲染,得到渲染后的目标虚拟对象。通信单元,还用于向每个VR设备发送第一影像,对于第一VR设备,第一影像是渲染后的目标虚拟对象中与第一角度对应的虚拟对象。
第三方面,提供一种虚拟对象的处理装置,包括存储器和处理器。存储器用于存储计算机执行指令,处理器与存储器通过总线连接。当虚拟对象的处理装置运行时,处理器执行存储器存储的计算机执行指令,以使虚拟对象的处理装置执行第一方面所述的虚拟对象的处理方法。
该虚拟对象的处理装置可以是网络设备,也可以是网络设备中的一部分装置,例如网络设备中的芯片系统。该芯片系统用于支持网络设备实现第一方面及其任意一种可能的实现方式中所涉及的功能,例如,接收、确定、分流上述虚拟对象的处理方法中所涉及的数据和/或信息。该芯片系统包括芯片,也可以包括其他分立器件或电路结构。
第四方面,提供一种计算机可读存储介质,计算机可读存储介质包括计算机执行指令,当计算机执行指令在计算机上运行时,使得该计算机执行第一方面所述的虚拟对象的处理方法。
第五方面,提供一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机执行如第一方面及其任一种可能的设计方式所述的虚拟对象的处理方法。
需要说明的是,上述计算机指令可以全部或者部分存储在第一计算机存储介质上。其中,第一计算机存储介质可以与虚拟对象的处理装置的处理器封装在一起的,也可以与虚拟对象的处理装置的处理器单独封装,本申请实施例对此不作限定。
本发明中第二方面、第三方面、第四方面以及第五方面的描述,可以参考第一方面的详细描述;并且,第二方面、第三方面、第四方面以及第五方面的有益效果,可以参考第一方面的有益效果分析,此处不再赘述。
在本申请实施例中,上述虚拟对象的处理装置的名字对设备或功能模块本身不构成限定,在实际实现中,这些设备或功能模块可以以其他名称出现。只要各个设备或功能模块的功能和本发明类似,属于本发明权利要求及其等同技术的范围之内。
本发明的这些方面或其他方面在以下的描述中会更加简明易懂。
附图说明
图1为本申请实施例提供一种VR设备的角度的示例图;
图2为本申请实施例提供的一种通信系统的结构示意图;
图3为本申请实施例提供的一种虚拟对象的处理装置的硬件结构示意图;
图4为本申请实施例提供的另一种虚拟对象的处理装置的硬件结构示意图;
图5为本申请实施例提供的一种虚拟对象的处理方法的流程示意图;
图6为本申请实施例提供的另一种虚拟对象的处理方法的流程示意图;
图7为本申请实施例提供的一种虚拟对象的处理装置的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本申请实施例中,“示例性的”或者“例如”等词用于表示作例子、例证或说明。本申请实施例中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言,使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。
为了便于清楚描述本申请实施例的技术方案,在本申请实施例中,采用了“第一”、“第二”等字样对功能和作用基本相同的相同项或相似项进行区分,本领域技术人员可以理解“第一”、“第二”等字样并不是在对数量和执行次序进行限定。
当前,在多个VR设备共享相同的虚拟对象的应用场景下,例如,多人体验商场里的大型VR设施,如VR太空飞船等。又例如,家庭环境下,与家人共同体验某一VR游戏或VR视频。又例如,多人教室环境,老师对多个学生进行VR教学。上述应用场景的特点就是多个用户通过VR设备同时体验相同的虚拟对象(例如,VR游戏、计算机动画(computer animation,CG)类视频或者VR视频等)。提供虚拟对象的服务器(也可以称为处理装置,后续为了便于描述,简称为“服务器”)需要根据多个VR设备中每个VR设备的请求,对每个VR设备所需的虚拟对象进行渲染,得到每个VR设备所需的渲染后的虚拟对象。
例如,该多个VR设备包括VR设备1和VR设备2,VR设备1和VR设备2具有相同的应用,该应用用于显示相同的虚拟对象。当VR设备1和VR设备2在预设时间内都向服务器发送用于获取相同虚拟对象的请求后。其中,VR设备1的请求用于获取影像1,VR设备2的请求用于获取影像2,影像1和影像2都为虚拟对象中的部分影像。服务器对影像1进行渲染,得到渲染后的影像1;对影像2进行渲染,得到渲染后的影像2。然后,服务器向VR设备1发送渲染后的影像1,向VR设备2发送渲染后的影像2。但是,在服务器接收到多个VR设备的情求的情况下,服务器需要根据每个VR设备的请求,对虚拟对象进行多次渲染,从而给服务器的GPU造成较大的负荷。
针对上述问题,本申请实施例提供了一种虚拟对象的处理方法,首先,处理装置获取M个VR设备中每个VR设备的第一请求,该M个VR设备都部署有相同的应用,该应用用于显示相同的目标虚拟对象。对于第一VR设备,第一VR设备为该M个VR设备中的任一个VR设备,该第一VR设备的第一请求包括第一VR设备的标识以及第一角度。该第一角度用于表示第一VR设备的空间姿态信息。然后,在M大于预设阈值的情况下,处理装置对目标虚拟对象进行渲染,得到渲染后的目标虚拟对象(也可以称为全视角的目标虚拟对象)。最后,处理装置向第一VR设备发送第一影像,第一影像为渲染后的目标虚拟对象中与第一角度对应的影像。相比现有技术,本申请实施例提供的方案中处理装置将目标虚拟对象一次性处理成全视角的虚拟对象,不需要多次对虚拟对象进行单独处理,从而可以减轻处理装置的负荷。
下面先对处理装置对虚拟对象的渲染过程进行说明。
处理装置具有存储单元以及GPU。存储单元用于存储原始的目标虚拟对象。该原始的目标虚拟对象为VR设备需要但无法正常显示(或者不能显示)的虚拟对象。例如,用户需要通过VR设备观看立体的目标虚拟对象(如,仿真的地球),但是原始的目标虚拟对象则为二维的虚拟对象(如,平面地图)。处理装置在获取到原始的目标虚拟对象后,可以通过GPU对该原始的目标虚拟对象进行渲染,得到渲染后的目标虚拟对象,其中,渲染后的目标虚拟对象为VR设备可以正常显示(或可以显示)的虚拟对象。
需要说明的是,上述目标虚拟对象可以为VR游戏、VR视频以及CG类视频中的任一种。在虚拟对象包括VR游戏或CG类视频的情况下,处理装置可以对虚拟对象进行渲染,得到全视角的虚拟对象。在虚拟对象包括VR视频的情况下,处理装置可以对虚拟对象进行视频解码,得到全视角的虚拟对象。
下面对本申请实施例中的“VR设备的角度”进行说明。
VR设备的角度用于表示VR设备的空间姿态信息。VR设备的角度可以包括用户使用VR设备观看虚拟对象的视线与水平面的夹角(也即,用户的仰角或者俯角),及用户使用VR设备以预设基准线为轴,向预设方向旋转的角度。
示例性的,如图1所示,处理装置可以以VR设备为原点O,建立三维空间直角坐标系。该三维空间直角坐标系的X轴的方向为第一方向(例如,第一方向为地理上的正北方向),Z轴的方向为与第二方向垂直的第二方向(例如,第二方向可以为地理上的正东方向),Y轴的方向为朝上且地面垂直。图1中,用户通过该VR设备(如,头戴式VR设备)观看虚拟对象的视线与第一平面的夹角为α,与第二平面的夹角为β,其中,第一平面为与X轴与Z轴所在的平面平行或重合的平面,第二平面为于Y轴与Z轴所在的平面平行或重合的平面。也即,α为用户的仰角,β为以Z轴为基准线向左旋转的角度。
需要说明的是,VR设备的角度包括α以及β时,则用户使用VR设备观看虚拟对象的区域为图1中的圆形虚线对应的区域。本申请实施例涉及到的“VR设备的角度”,均可以参照此处描述,后续不再赘述。
本申请实施例提供的虚拟对象的处理方法适用于通信系统。图2示出了该通信系统的结构。如图2所示,该通信系统包括处理装置100以及多个VR设备110(图2中仅示出了4个)。处理装置100与该多个VR设备110通信连接。
其中,处理装置100可以通过无线网络(例如,第五代(5th-Generation,5G)网络、无线保真(wireless-fidelity,WIFI)等)与每个VR设备110通信连接。当然,处理装置还可以通过有线方式与每个VR设备110通信连接。
本申请实施例中,VR设备110,也可以称为“VR终端”。VR设备110可以是头戴式VR设备(例如,VR头盔),也可以是VR眼镜等。
一种可能的设计中,VR设备110具有角度传感器。该角度传感器用于确定VR设备的角度。例如,该角度传感器可以陀螺仪传感器(也可以称为陀螺仪)。
需要说明的是,VR设备的角度与虚拟对象的区域对应。例如,VR设备的角度为第一角度值,也就是说,该VR设备获取的虚拟对象的区域为第一区域。
VR设备110还具有通信模块。通信模块与角度传感器通信连接。通信模块用于向处理装置100发送VR设备110的角度。
上述处理装置100可以为对虚拟对象进行处理的设备,也可以为该设备中的芯片,还可以为该设备中的片上系统。
可选的,该设备可以是物理机,例如:个式电脑,又称个式机或桌面机(desktopcomputer)、手机、平板电脑、笔记本电脑、超级移动个人计算机(ultra-mobile personalcomputer,UMPC)、上网本、个人数字助理(personal digital assistant,PDA)等终端设备。该设备也可以是服务器,例如,移动边缘计算(mobile edge computing,MEC)服务器,或云端服务器。
可选的,上述处理装置也可以通过部署在物理机上的虚拟机(virtual machine,VM),实现上述处理装置所要实现的功能。
为了便于理解,下面对本申请实施例中的处理装置的结构进行描述。
图3示出了本申请实施例提供的处理装置的一种硬件结构示意图。如图3所示,该处理装置包括处理器11,存储器12、通信接口13、总线14。处理器11,存储器12以及通信接口13之间可以通过总线14连接。
处理器11是处理装置的控制中心,可以是一个处理器,也可以是多个处理元件的统称。例如,处理器11可以是一个通用中央处理单元(central processing unit,CPU),也可以是其他通用处理器等。其中,通用处理器可以是微处理器或者是任何常规的处理器等。
作为一种实施例,处理器11可以包括一个或多个CPU,例如图3中所示的CPU 0和CPU 1。
存储器12可以是只读存储器(read-only memory,ROM)或可存储静态信息和指令的其他类型的静态存储设备,随机存取存储器(random access memory,RAM)或者可存储信息和指令的其他类型的动态存储设备,也可以是电可擦可编程只读存储器(electricallyerasable programmable read-only memory,EEPROM)、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质,但不限于此。
一种可能的实现方式中,存储器12可以独立于处理器11存在,存储器12可以通过总线14与处理器11相连接,用于存储指令或者程序代码。处理器11调用并执行存储器12中存储的指令或程序代码时,能够实现本申请实施例提供的虚拟对象的处理方法。
另一种可能的实现方式中,存储器12也可以和处理器11集成在一起。
通信接口13,用于与其他设备通过通信网络连接。所述通信网络可以是以太网,无线接入网,无线局域网(wireless local area networks,WLAN)等。通信接口13可以包括用于接收数据的接收单元,以及用于发送数据的发送单元。
总线14,可以是工业标准体系结构(Industry Standard Architecture,ISA)总线、外部设备互连(Peripheral Component Interconnect,PCI)总线或扩展工业标准体系结构(Extended Industry Standard Architecture,EISA)总线等。该总线可以分为地址总线、数据总线、控制总线等。为便于表示,图3中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
需要指出的是,图3示出的结构并不构成对该处理装置的限定。除图3所示部件之外,该处理装置可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
图4示出了本申请实施例中处理装置的另一种硬件结构。如图4所示,处理装置可以包括处理器21以及通信接口22。处理器21与通信接口22耦合。
处理器21的功能可以参考上述处理器11的描述。此外,处理器21还具备存储功能,可以参考上述存储器12的功能。
通信接口22用于为处理器21提供数据。该通信接口22可以是处理装置的内部接口,也可以是处理装置对外的接口(相当于通信接口13)。
需要指出的是,图3(或图4)中示出的结构并不构成对处理装置的限定,除图3(或图4)所示部件之外,该处理装置可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
下面结合附图对本申请实施例提供的虚拟对象的处理方法进行详细介绍。
结合图2所示的通信系统,如图5所示,图5示出了本申请实施例提供的一种虚拟对象的处理方法,包括:
步骤101、处理装置接收M个VR设备中的每个VR设备发送的第一请求。
其中,该M个VR设备部署有相同的应用,该应用用于显示目标虚拟对象。以第一VR设备为例,第一VR设备为该M个VR设备中任一个VR设备。第一VR设备发送的第一请求包括第一VR设备的标识以及第一角度。第一请求用于获取与目标虚拟对象中与第一角度对应的影像,M为正整数。
一种可能的实现方式中,在使用VR设备的用户只能观看一种虚拟对象的情况下,每个VR设备具有开关装置。当VR设备的开关装置处于打开的状态下,VR设备可以向处理装置发送第一请求。相应的,处理装置可以接收来自VR设备的第一请求。
当然,处理装置也可以主动获取VR设备的第一请求,也即,在检测到VR设备处于工作状态(例如,开关装置处于打开状态)的情况下,处理装置可以向处于工作状态的VR设备发送第一指示消息,该第一指示消息用于指示VR设备发送第一请求。处于工作状态的VR设备接收到来自处理装置的第一指示装置后,向处理装置发送第一请求。
另一种可能的实现方式中,在使用VR设备的用户可以观看多种虚拟对象的情况下,例如,VR设备具有虚拟内容的选择装置,该选择装置可以为多个按键(如多个具有序号的触摸按键,其中,一个序号对应一种虚拟内容)。
在这种情况下,用户通过选择装置可以向处理装置发送第一请求。第一请求还可以包括目标虚拟内容的标识。例如,用户触摸序号1对应的按键,响应于用户的触摸操作,VR设备向处理装置发送的第一请求中包括序号1对应的虚拟对象的标识。
处理装置在接收到包含有虚拟对象的标识的第一请求后,处理装置可以根据虚拟对象的标识,确定VR设备需要的目标虚拟对象。其中,虚拟对象的标识用于唯一的标识目标虚拟对象。例如,标识可以编号。
示例性的,若处理装置确定VR设备1发送的第一请求中包括标识1,则处理装置确定VR设备1需要的目标虚拟对象为虚拟对象1。若处理装置确定VR设备1发送的第一请求中包括标识2,则处理装置确定VR设备1需要的目标虚拟对象为虚拟对象2。
步骤102、若M大于预设阈值,处理装置对目标虚拟对象进行渲染,得到渲染后的目标虚拟对象。
其中,渲染后的目标虚拟对象为全视角(field of view,FOV)的虚拟对象。目标虚拟对象可以为VR游戏、CG类视频或者VR视频中的任一个。
一种可能的实现方式中,处理装置具有计数器,该计数器用于统计接入的VR设备(也即,发送第一请求的VR设备)的数量M。若计数器统计接入的VR设备的数量超过预设阈值(例如,预设阈值可以为3),处理装置开启共享算力模式。其中,共享算力模式是指处理装置将目标虚拟对象渲染为全视角的虚拟对象。在该共享算力模式下,处理装置可以对目标虚拟对象进行渲染,得到渲染后的目标虚拟对象。
步骤103、处理装置向每个VR设备发送第一影像。
其中,第一影像为渲染后的目标虚拟对象中与第一角度对应的虚拟对象。
示例性的,对于第一VR设备,处理装置向第一VR设备发送的第一影像为该渲染后的虚拟对象中与第一VR设备的第一角度对应的虚拟对象。
具体的,在得到渲染后的虚拟对象之后,处理装置可以确定渲染后的虚拟对象中与第一角度对应的第一影像。然后,处理装置根据第一VR设备的标识将该第一影像发送给(或者投影至)第一VR设备。相应的,第一VR设备接收并显示该第一影像。
需要说明的是,由于处理装置可以根据VR设备的标识,将每个VR设备所需的虚拟对象投影到相应的VR设备,从而实现了相同的虚拟对象,被多个VR设备使用的目的。
本申请实施例提供的处理方法,处理装置在接收到来自多个VR设备中每个VR设备的第一请求后,在VR设备的数量大于预设阈值的情况下,处理装置将目标虚拟对象渲染成全视角的虚拟对象。然后,处理装置向VR设备发送该全视角的虚拟对象中与该VR设备的角度对应的第一影像。相较于现有技术中,处理装置需要根据对虚拟对象进行多次渲染。本申请中,处理装置只需要对虚拟对象进行一次处理,减少了处理装置的渲染次数。因此,本申请实施例提供的技术方案可以减轻处理装置的负荷。
结合图5所示的技术方案,如图6所示,以第一VR设备为例,本申请实施例提供的虚拟对象的处理方法,还可以包括:
步骤104、处理装置接收第一VR设备发送的第二请求。
其中,第二请求包括第一VR设备的标识以及第二角度。第二角度与第一角度不同。
示例性的,第一VR设备在获取到第一影像后,由于使用第一VR设备的用户观看目标虚拟对象的角度发生改变,例如,从第一角度变为第二角度,第一VR设备可以向处理装置发送第二请求。相应的,处理装置接收来自第一VR设备的第二请求。
步骤105、处理装置向第一VR设备发送第二影像。
其中,第二影像是渲染后的目标虚拟对象中与第二角度对应的虚拟对象。
一种可能的实现方式中,在处理装置已经具有渲染后的目标虚拟对象的情况下(也即M大于预设阈值),处理装置可以根据第二角度,确定渲染后的目标虚拟对象的第二影像。
另一种可能的实现方式中,在处理装置不具有渲染后的目标虚拟对象的情况下,例如,M小于或等于预设阈值。在这种情况下,处理装置需要对目标虚拟对象中与第二角度对应的区域进行渲染,得到第二影像。
需要说明的是,步骤104和步骤105仅以第一VR设备为例进行说明,M个VR设备的其他VR设备在获取第一影像之后,还需要获取目标虚拟对象中其他区域的虚拟对象,可以参考第一VR设备的描述,此处不在赘述。
应理解,当使用VR设备的用户的角度不同时,VR设备的角度也会改变。例如,当使用第一VR设备的用户的观看目标虚拟内容的角度从第一角度变为第二角度后,第一VR设备可以向处理装置发送第二角度。处理装置在接收到第一VR设备发送的第二角度后,根据第二角度,确定渲染后的虚拟对象中的第二影像。然后,处理装置向第一VR设备发送第二影像。这样,处理装置不需要再对目标虚拟对象进行渲染,就可以确定VR设备需要的虚拟对象。因此,处理装置可以进一步降低负荷。
结合图5所示的技术方案,如图6所示,本申请实施例提供的虚拟对象的处理方法,还可以包括:
步骤106、若M小于或等于预设阈值,对于第一VR设备,处理装置对目标虚拟对象中与第一角度对应的区域进行渲染,得到第一影像。
一种可能的实现方式中,在处理装置的计数器统计接入的VR设备的数量M小于或等于预设阈值的情况下,处理装置开启独立渲染模式。其中,独立渲染模式是指处理装置对每个VR设备所需的虚拟对象单独进行渲染。以第一VR设备为例,处理装置将目标虚拟对象中与第一VR设备的第一角度对应的区域进行渲染。
步骤107、处理装置向第一VR设备发送第一影像。
处理装置根据第一VR设备的标识向第一VR设备发送第一影像。相应的,第一VR设备接收并显示虚拟对象。
需要说明的是,若后续第一VR设备还要获取目标虚拟对象中的其他区域,例如,第二影像。处理装置根据第一VR设备发送的请求,对目标虚拟对象中与第二影像对应的区域进行渲染,得到渲染后的第二影像。
若处理装置存储有渲染后的第二影像,则处理装置可以将第二影像发送至第一VR设备。
示例性的,以接入处理装置的M个VR设备中,VR设备1与VR设备2处于工作状态。处理装置在渲染好目标虚拟对象中VR设备1对应的影像1,以及VR设备2对应的影像2后,可以存储渲染后的影像1和影像2。若后续VR设备1需要获取的影像为影像2,处理装置可以将影像2发送给VR设备1。这样,处理装置可以不需要对目标虚拟对象进行渲染。因此,处理装置可以减少渲染的时间,也即缩短了时延,提升了用户的体验。同时,处理装置还可以降低能耗。
应理解,在VR设备的数量小于等于预设阈值的情况下,处理装置单独处理多个VR设备的虚拟对象所需要消耗的GPU的总算力,小于处理成全视角的虚拟对象所需要消耗的GPU的算力。因此,在M小于或等于预设阈值的情况,处理装置对VR设备所需的虚拟对象进行单独处理,可以降低能耗。
上述主要从方法的角度对本申请实施例提供的方案进行了介绍。为了实现上述功能,其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,本申请实施例能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
本申请实施例可以根据上述方法示例对虚拟对象的处理装置进行功能模块的划分,例如,可以对应各个功能划分各个功能模块,也可以将两个或两个以上的功能集成在一个处理模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。可选的,本申请实施例中对模块的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
如图7所示,为本申请实施例提供的一种虚拟对象的处理装置500的结构示意图。虚拟对象的处理装置500包括:通信单元501、处理单元502。
通信单元501,用于获取M个VR设备中每个VR设备发送的第一请求。
其中,M个VR设备为共享相同的虚拟对象的设备,对于第一VR设备,第一VR设备发送的第一请求包括第一VR设备的标识和第一角度;第一角度用于表征第一VR设备的角度,第一请求用于获取与第一角度对应的虚拟对象,第一VR设备为所述M个VR设备中任一个VR设备,M为正整数。
例如,结合图5,通信单元501可以用于执行步骤101。
处理单元502,用于在M大于预设阈值的情况下,对虚拟对象进行渲染,得到渲染后的虚拟对象。
例如,结合图5,处理单元502可以用于执行步骤102。
通信单元501,还用于向每个VR设备发送第一影像。
其中,对于第一VR设备,第一影像为渲染后后的虚拟对象中与第一角度对应的虚拟对象。
例如,结合图5,通信单元501可以用于执行步骤103。
可选的,通信单元501,还用于接收来自第一VR设备的第二请求,第二请求包括第一VR设备的标识以及第二角度;第二角度与第一角度不同;向第一VR设备发送第二影像,第二影像是渲染后的目标虚拟对象中与第二角度对应的虚拟对象。
例如,结合图6,处理单元502,用于执行步骤104、步骤105。
可选的,处理单元502,还用于:在M小于或等于预设阈值的情况下,对目标虚拟对象中与第一角度对应的区域进行渲染,得到第一影像。
例如,结合图6,处理单元502,用于执行步骤106。
通信单元501,用于向第一VR设备发送第一影像。
例如,结合图6,通信单元501,用于执行步骤107。
可选的,虚拟对象可以包括VR游戏、VR视频或CG类视频。
本申请实施例还提供一种计算机可读存储介质,计算机可读存储介质包括计算机执行指令。当计算机执行指令在计算机上运行时,使得计算机执行如上述实施例提供的虚拟对象的处理方法中,处理装置执行的各个步骤。
本申请实施例还提供一种计算机程序产品,该计算机程序产品可直接加载到存储器中,并含有软件代码,该计算机程序产品经由计算机载入并执行后能够实现上述实施例提供的虚拟对象的处理方法中,处理装置执行的各个步骤。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件程序实现时,可以全部或部分地以计算机程序产品的形式来实现。该计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行计算机执行指令时,全部或部分地产生按照本申请实施例的流程或功能。计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,计算机指令可以从一个网站站点、计算机、服务器或者数据中心通过有线(例如同轴电缆、光纤、数字用户线(digitalsubscriber line,DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可以用介质集成的服务器、数据中心等数据存储设备。可用介质可以是磁性介质(例如,软盘、硬盘、磁带),光介质(例如,DVD)、或者半导体介质(例如固态硬盘(solid state disk,SSD))等。
通过以上的实施方式的描述,所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。
在本发明所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。例如多个单元或组件可以结合或者可以集成到另一个装置,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是一个物理单元或多个物理单元,即可以位于一个地方,或者也可以分布到多个不同地方。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该软件产品存储在一个存储介质中,包括若干指令用以使得一个设备(可以是单片机,芯片等)或处理器(processor)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以权利要求的保护范围为准。

Claims (10)

1.一种虚拟对象的处理方法,其特征在于,包括:
接收M个虚拟现实VR设备中的每个VR设备发送的第一请求,所述M个VR设备部署有相同的应用,所述应用用于显示目标虚拟对象,对于第一VR设备,所述第一VR设备发送的第一请求包括所述第一VR设备的标识和第一VR设备的第一角度,所述第一角度用于表示所述第一VR设备的空间姿势信息,所述第一请求用于获取所述目标虚拟对象中与所述第一角度对应的影像,所述第一VR设备为所述M个VR设备中任一个VR设备,M为正整数;
在M大于预设阈值的情况下,对所述目标虚拟对象进行渲染,得到渲染后的目标虚拟对象;
向每个VR设备发送第一影像;对于所述第一VR设备,所述第一影像是所述渲染后的目标虚拟对象中与所述第一角度对应的虚拟对象。
2.根据权利要求1所述的处理方法,其特征在于,所述处理方法还包括:
接收来自所述第一VR设备的第二请求,所述第二请求包括所述第一VR设备的标识以及第二角度;所述第二角度与所述第一角度不同;
向所述第一VR设备发送第二影像,所述第二影像是所述渲染后的目标虚拟对象中与所述第二角度对应的影像。
3.根据权利要求1或2所述的处理方法,其特征在于,所述处理方法还包括:
在M小于或等于所述预设阈值的情况下,对于所述第一VR设备,对所述目标虚拟对象中与所述第一角度对应的区域进行渲染,得到所述第一影像;
向所述第一VR设备发送所述第一影像。
4.根据权利要求3所述的处理方法,其特征在于,所述目标虚拟对象包括VR游戏、VR视频、计算机动画CG类视频。
5.一种虚拟对象的处理装置,其特征在于,包括:
通信单元,用于接收M个VR设备中的每个VR设备发送的第一请求,所述M个VR设备部署有相同的应用,所述应用用于显示目标虚拟对象,对于第一VR设备,所述第一VR设备发送的第一请求包括所述第一VR设备的标识和第一VR设备的第一角度,所述第一角度用于表示所述第一VR设备的空间姿势信息,所述第一请求用于获取所述目标虚拟对象中与所述第一角度对应的影像,所述第一VR设备为所述M个VR设备中任一个VR设备,M为正整数;
处理单元,用于在M大于预设阈值的情况下,对所述目标虚拟对象进行渲染,得到渲染后的目标虚拟对象;
所述通信单元,还用于向每个VR设备发送第一影像;对于所述第一VR设备,所述第一影像是所述渲染后的目标虚拟对象中与所述第一角度对应的虚拟对象。
6.根据权利要求5所述的处理装置,其特征在于,所述通信单元,还用于:
接收来自所述第一VR设备的第二请求,所述第二请求包括所述第一VR设备的标识以及第二角度;所述第二角度与所述第一角度不同;
向所述第一VR设备发送第二影像,所述第二影像是所述渲染后的目标虚拟对象中与所述第二角度对应的虚拟对象。
7.根据权利要求5或6所述的处理装置,其特征在于,
对于所述第一VR设备,所述处理单元,还用于:
在M小于或等于所述预设阈值的情况下,对所述目标虚拟对象中与所述第一角度对应的区域进行渲染,得到所述第一影像;
所述通信单元,还用于:
向所述第一VR设备发送所述第一影像。
8.根据权利要求7所述的处理装置,其特征在于,所述目标虚拟对象包括VR游戏、VR视频或计算机动画CG类视频。
9.一种虚拟对象的处理装置,其特征在于,包括存储器和处理器;所述存储器用于存储计算机执行指令,所述处理器与所述存储器通过总线连接;
当所述虚拟对象的处理装置运行时,所述处理器执行所述存储器存储的所述计算机执行指令,以使所述虚拟对象的处理装置执行如权利要求1-4任一项所述的虚拟对象的处理方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质包括计算机执行指令,当所述计算机执行指令在计算机上运行时,使得所述计算机执行如权利要求1-4任一项所述的虚拟对象的处理方法。
CN202010158839.3A 2020-03-09 2020-03-09 虚拟对象的处理方法及装置 Pending CN111381967A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010158839.3A CN111381967A (zh) 2020-03-09 2020-03-09 虚拟对象的处理方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010158839.3A CN111381967A (zh) 2020-03-09 2020-03-09 虚拟对象的处理方法及装置

Publications (1)

Publication Number Publication Date
CN111381967A true CN111381967A (zh) 2020-07-07

Family

ID=71219980

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010158839.3A Pending CN111381967A (zh) 2020-03-09 2020-03-09 虚拟对象的处理方法及装置

Country Status (1)

Country Link
CN (1) CN111381967A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107274469A (zh) * 2017-06-06 2017-10-20 清华大学 面向虚拟现实的协同渲染方法
CN108351691A (zh) * 2015-10-26 2018-07-31 微软技术许可有限责任公司 用于虚拟图像的远程渲染
CN108648257A (zh) * 2018-04-09 2018-10-12 腾讯科技(深圳)有限公司 全景画面的获取方法、装置、存储介质及电子装置
CN109741463A (zh) * 2019-01-02 2019-05-10 京东方科技集团股份有限公司 虚拟现实场景的渲染方法、装置及设备
CN110163943A (zh) * 2018-11-21 2019-08-23 深圳市腾讯信息技术有限公司 图像的渲染方法和装置、存储介质、电子装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108351691A (zh) * 2015-10-26 2018-07-31 微软技术许可有限责任公司 用于虚拟图像的远程渲染
CN107274469A (zh) * 2017-06-06 2017-10-20 清华大学 面向虚拟现实的协同渲染方法
CN108648257A (zh) * 2018-04-09 2018-10-12 腾讯科技(深圳)有限公司 全景画面的获取方法、装置、存储介质及电子装置
CN110163943A (zh) * 2018-11-21 2019-08-23 深圳市腾讯信息技术有限公司 图像的渲染方法和装置、存储介质、电子装置
CN109741463A (zh) * 2019-01-02 2019-05-10 京东方科技集团股份有限公司 虚拟现实场景的渲染方法、装置及设备

Similar Documents

Publication Publication Date Title
US20170186219A1 (en) Method for 360-degree panoramic display, display module and mobile terminal
US20170154468A1 (en) Method and electronic apparatus for constructing virtual reality scene model
CN112933599B (zh) 三维模型渲染方法、装置、设备及存储介质
US11893702B2 (en) Virtual object processing method and apparatus, and storage medium and electronic device
CN101937358B (zh) 虚拟图形设备驱动器
US20170192734A1 (en) Multi-interface unified displaying system and method based on virtual reality
CN102695032A (zh) 信息处理装置、信息共享方法、程序以及终端设备
KR20160130629A (ko) 양안 시차 영상에 대한 렌더링 방법 및 장치
KR20180080474A (ko) 뷰 벡터별 다른 렌더링 품질을 갖는 영상을 생성하는 전자 장치
US20190122421A1 (en) Batch rendering method, device, and apparatus
CN113077548B (zh) 针对物体的碰撞检测方法、装置、设备和存储介质
CN114461064B (zh) 虚拟现实交互方法、装置、设备和存储介质
CN104765636B (zh) 一种远程桌面图像的合成方法和装置
US9047244B1 (en) Multi-screen computing device applications
CN109801354A (zh) 全景处理方法和装置
CN110889384A (zh) 场景切换方法及装置、电子设备和存储介质
CN117130518A (zh) 控件显示方法、头显设备、电子设备及可读存储介质
CN111381967A (zh) 虚拟对象的处理方法及装置
CN114398018B (zh) 画面显示方法、装置、存储介质及电子设备
CN114470786B (zh) 帧同步数据处理方法、装置、可读介质和电子设备
CN110568927A (zh) 增强现实的信息交互方法、装置、电子设备和存储介质
US20170186218A1 (en) Method for loading 360 degree images, a loading module and mobile terminal
US10262631B1 (en) Large scale highly detailed model review using augmented reality
CN113051491B (zh) 地图数据处理的方法、设备、存储介质及程序产品
Košťák et al. Mobile phone as an interactive device in augmented reality system

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20200707