CN111583375A - 虚拟画面的显示方法、装置、设备及存储介质 - Google Patents

虚拟画面的显示方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN111583375A
CN111583375A CN202010589583.1A CN202010589583A CN111583375A CN 111583375 A CN111583375 A CN 111583375A CN 202010589583 A CN202010589583 A CN 202010589583A CN 111583375 A CN111583375 A CN 111583375A
Authority
CN
China
Prior art keywords
virtual
light source
picture
virtual object
terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010589583.1A
Other languages
English (en)
Other versions
CN111583375B (zh
Inventor
周靖奇
岳宗元
林雪莹
陈楚
季明阳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN202010589583.1A priority Critical patent/CN111583375B/zh
Publication of CN111583375A publication Critical patent/CN111583375A/zh
Application granted granted Critical
Publication of CN111583375B publication Critical patent/CN111583375B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/005General purpose rendering architectures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/50Lighting effects

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Graphics (AREA)
  • Human Computer Interaction (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请公开了一种虚拟画面的显示方法、装置、终端及存储介质,所述方法包括:显示第一虚拟画面,所述第一虚拟画面中的虚拟物体的第一表面区域上显示有光影效果;通过所述终端内的物理传感器采集所述终端的机身姿态变化;根据所述机身姿态变化显示第二虚拟画面,所述第二虚拟画面中的所述虚拟物体的第二表面区域上显示有所述光影效果。本申请能够渲染出更贴近现实中的动态表面效果,能够在手持式终端上获得更为真实的渲染效果。

Description

虚拟画面的显示方法、装置、设备及存储介质
技术领域
本申请涉及计算机技术领域,特别涉及一种虚拟画面的显示方法、装置、设备及存储介质。
背景技术
画面渲染技术是对位于虚拟场景中的虚拟物体,采用物理渲染方式渲染出场景画面的技术。
在虚拟场景中布置有虚拟物体、光源和摄像机。光源用于向位于虚拟场景中的虚拟物体提供照明光,摄像机用于按照在虚拟场景中所处的角度采集场景画面。虚拟物体的表面贴有不同材质的表面素材,比如石材素材、金属素材、纸张素材等。应用程序会根据光源所提供的照明光,以及摄像机所处的角度,对虚拟物体的表面反射光进行计算,从而渲染得到场景画面。
上述技术方案在台式电脑中能够取得较为真实的材质效果,但是在手持式的终端上的渲染效果较差。
发明内容
本申请实施例提供了一种虚拟画面的显示方法、装置、设备及介质,能够在手持式终端上获得更为真实的渲染效果。所述技术方案如下:
根据本申请的一个方面,提供了一种虚拟画面的显示方法,应用于终端中,所述方法包括:
显示第一虚拟画面,所述第一虚拟画面中的虚拟物体的第一表面区域上显示有光影效果;
通过所述终端内的物理传感器采集所述终端的机身姿态变化;
根据所述机身姿态变化显示第二虚拟画面,所述第二虚拟画面中的所述虚拟物体的第二表面区域上显示有所述光影效果。
根据本申请的另一方面,提供了一种虚拟画面的显示装置,所述装置包括:
显示第一虚拟画面,所述第一虚拟画面中的虚拟物体的第一表面区域上显示有光影效果;
通过所述终端内的物理传感器采集所述终端的机身姿态变化;
根据所述机身姿态变化显示第二虚拟画面,所述第二虚拟画面中的所述虚拟物体的第二表面区域上显示有所述光影效果。
根据本申请的另一方面,提供了一种终端,所述终端包括处理器和存储器,所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现如上述本申请实施例中提供的虚拟画面的显示方法。
根据本申请的另一方面,提供了一种计算机可读存储介质,所述可读存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现如上述本申请实施例中提供的虚拟画面的显示方法。
根据本申请的另一方面,提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。终端的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该终端执行上述虚拟画面的显示方法。
本申请实施例提供的技术方案带来的有益效果至少包括:
通过在终端的机身姿态发生变化时,调整虚拟场景中的光源也发生相应的旋转或位移,改变位置后的光源会对位于虚拟场景中的虚拟物体的不同表面区域产生不同的光影效果,从而渲染出更贴近现实中的物体表面效果,能够在手持式终端上获得更为真实的渲染效果。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请一个示例性实施例提供的虚拟画面的显示方法的界面示意图;
图2是本申请一个示例性实施例提供的虚拟画面的显示方法的流程图;
图3是本申请一个示例性实施例提供的虚拟画面的采集过程示意图;
图4是本申请另一个示例性实施例提供的虚拟画面的显示方法的流程图;
图5是本申请一个示例性实施例提供的光源从第一位置变换至第二位置时的变化示意图;
图6是本申请另一个示例性实施例提供的光源从第一位置变换至第二位置时的变化示意图;
图7是本申请另一个示例性实施例提供的光源从第一位置变换至第二位置时的变化示意图;
图8是本申请另一个示例性实施例提供的光源从第一位置变换至第二位置时的变化示意图;
图9是本申请另一个示例性实施例提供的虚拟画面的显示方法的流程图;
图10是本申请另一个示例性实施例提供的重力传感器生成倾斜向量的示意图;
图11是本申请一个示例性实施例提供的虚拟物体的光影效果的变化示意图;
图12是本申请一个示例性实施例提供的虚拟画面的显示装置的框图;
图13是本申请一个示例性实施例提供的终端的结构框图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施方式作进一步地详细描述。
图1示出了本申请一个示例性实施例提供的虚拟画面的显示方法的示意图。终端的应用程序中提供有虚拟世界,该虚拟世界上提供有虚拟画卷10。该虚拟画卷10与终端的屏幕平行。在初始状态下,虚拟画卷10的第一表面区域12上显示有高亮的金箔龙纹效果。在用户将终端的左侧向远离用户的方向移动,将终端的右侧向靠近用户的方向移动时,虚拟画卷10的第二表面区域14上显示有高亮的金箔龙纹效果,从而将终端的屏幕模仿成为现实世界中的一个画卷。假设现实世界中的光源位置不同,而该画卷上的巨龙的边缘纹路均为金箔所制,则按照不同角度倾斜该画卷时,会使得画卷上的不同表面区域产生不同的光照效果,本申请能够模拟出更为真实的物理材质效果。
图2示出了本申请一个示例性实施例提供的虚拟画面的显示方法的流程图。本实施例以该方法由终端执行为例进行说明,该终端可以是手持式终端。该方法包括:
步骤202,显示第一虚拟画面,第一虚拟画面中的虚拟物体的第一表面区域上显示有光影效果;
手持式终端中运行有应用程序。该应用程序中提供有虚拟世界。以该虚拟世界为三维虚拟世界为例,该三维虚拟世界包括:虚拟物体22、光源24和摄像机26,如图3所示。示意性的,第一虚拟画面是摄像机26对位于虚拟世界中的虚拟物体进行采集得到的画面。
在虚拟物体22上设置有表面图层(也称材质贴图)。当光源24在虚拟世界中照射到虚拟物体22时,虚拟物体22的表面图层会反射出一定的光影效果。摄像机26对位于虚拟世界中的虚拟物体22进行画面采集,得到第一虚拟画面28。在第一虚拟画面28中,虚拟物体的第一表面区域上显示有光影效果。
设光源24位于虚拟世界的第一位置,第一虚拟画面中的光影效果是由处于第一位置的光源提供的照射光,照射在虚拟物体的第一表面区域上产生的。
由于光源24和摄像机26均位于虚拟世界中,所以通常情况下,第一虚拟画面28中不会显示光源24和摄像机26。
步骤204,通过终端内的物理传感器采集终端的机身姿态变化;
物理传感器可以是重力加速度传感器、陀螺仪传感器、加速度传感器中的至少一种。
终端的机身姿态变化包括:倾斜姿态变化和位移姿态变化中的至少一种。
步骤206,根据机身姿态变化显示第二虚拟画面,第二虚拟画面中的虚拟物体的第二表面区域上显示有光影效果。
可选地,终端根据机身姿态变化将光源在虚拟世界中的位置,从第一位置改变为第二位置。
第二虚拟画面中的光影效果是由处于第二位置的光源提供的照明光,照射在虚拟物体的第二表面区域上产生的。
可选地,第一表面区域和第二表面区域是不同的表面区域。在一个示例中,第一表面区域和第二表面区域对应的表面图层是相同的,第一表面区域和第二表面区域上的光影效果是相同的(可能存在大小差异);在另一个示例中,第一表面区域和第二表面区域对应的表面图层是不同的,第一表面区域和第二表面区域上的光影效果是不同的。
综上所述,本实施例提供的方法,通过在终端的机身姿态发生变化时,调整虚拟场景中的光源也发生相应的旋转或位移,改变位置后的光源会对位于虚拟场景中的虚拟物体的不同表面区域产生不同的光影效果,从而渲染出更贴近现实中的表面图层,能够在手持式终端上获得更为真实的渲染效果。
图4示出了本申请一个示例性实施例提供的虚拟画面的显示方法的流程图。本实施例以该方法由终端执行为例进行说明,该终端可以是手持式终端。该方法包括:
步骤401,设置光源在虚拟世界中处于第一位置;
手持式终端中运行有应用程序。该应用程序中提供有虚拟世界。以该虚拟世界为三维虚拟世界为例,该三维虚拟世界包括:虚拟物体、光源和摄像机。
在应用程序启动后,应用程序设置光源在虚拟世界中的位置为第一位置。或者,应用程序根据终端的当前机身姿态,设置光源在虚拟世界中的第一位置。或者,应用程序根据终端的历史机身姿态变化,设置光源在虚拟世界中的第一位置,本实施例对光源在虚拟世界中的第一位置的设置方式不加以限定。
步骤402,根据光源对虚拟物体提供的照射光,对虚拟物体的表面图层渲染得到第一虚拟画面,第一虚拟画面中的虚拟物体的第一表面区域上具有光源产生的光影效果;
可选地,根据光源对虚拟物体提供的照射光,采用基于物理的渲染技术(Physically Based Rendering,PBR)对虚拟物体的表面图层渲染得到第一虚拟画面,第一虚拟画面中的虚拟物体的第一表面区域上具有光源产生的光影效果。
示意性的,第一虚拟画面是摄像机对位于虚拟世界中的虚拟物体进行采集得到的画面。
示意性的,虚拟物体是扁平状物体,虚拟物体的上表面与终端的触摸屏平行。在一个示例中,虚拟物体是虚拟画卷,该虚拟画卷是平铺显示在终端的触摸屏上,从而将终端的触摸屏模拟为一个画卷,供用户进行涂鸦。另一个示例中,虚拟物体是虚拟笔记本,该虚拟笔记本中的页面平铺显示在终端的触摸屏上,从而将终端的触摸屏模拟为一个笔记本,供用户记录笔记。在另一个示例中,虚拟物体是古籍绘本,该古籍绘本中的页面平铺显示在终端的触摸屏上,从而将终端的触摸屏模拟为一个古籍,供用户阅读。当然,虚拟物体也可以是其它物体,并不局限于扁平状物体,还可以是其它形态的静物或生物或卡通形象等。
步骤403,通过终端内的物理传感器采集终端的机身姿态变化;
示意性的,物理传感器是重力加速度传感器、陀螺仪传感器、加速度传感器中的至少一种。终端的机身姿态变化包括:倾斜姿态变化和位移姿态变化中的至少一种。
由于用户在观察诸如手机、平板电脑之类的终端的过程中,大部分场景都是旋转终端为主且移动终端为辅,因此本实施例中以终端的机身姿态变化为倾斜姿态变化为例,但对机身姿态变化的具体变化内容不加以限定。
步骤404,根据机身姿态变化将光源在虚拟世界中从第一位置改变为第二位置;
应用程序根据机身姿态变化将光源在虚拟世界中从第一位置改变为第二位置。示意性的,在改变光源位置的过程中,虚拟物体和摄像机在虚拟世界中的位置保持不变。
在一个示例中,终端会判断机身姿态变化的变化幅度是否大于阈值。当机身姿态变化的变化幅度小于阈值时,终端将光源在虚拟世界中的位置保持在第一位置;当机身姿态变化的变化幅度大于阈值时,终端根据机身姿态变化将光源在虚拟世界中从第一位置改变为第二位置。比如,在机身倾斜角度小于15度时,应用程序将光源在虚拟世界中的位置保持在第一位置;当机身倾斜角度大于15度时,终端根据机身姿态变化将光源在虚拟世界中从第一位置改变为第二位置。
以机身姿态变化采用倾斜向量表示为例,终端根据倾斜向量的倾斜方向和倾斜向量、以及虚拟物体和光源之间的距离,将光源在虚拟世界中的位置,从第一位置改变为第二位置。
在一个示例中,第二位置用于在虚拟物体跟随终端的机身姿态变化在真实世界中发生位置改变时,模拟光源在真实世界中的位置保持不变。设虚拟物体在虚拟世界中的位置(中心点或重心点)为O点,光源在虚拟世界中的第一位置为X点,光源在虚拟世界中的第二位置为Y点,则∠XOY=倾斜向量所指示的倾斜角度α,长度XO=长度YO,方向XY与倾斜向量所指示的倾斜方向相反,如图5所示。
在另一个示例中,第二位置用于模拟光源跟随终端的机身姿态变化在真实世界中发生位置改变。设虚拟物体在虚拟世界中的位置(中心点或重心点)为O点,光源在虚拟世界中的第一位置为X点,光源在虚拟世界中的第二位置为Y点,则∠XOY=倾斜向量所指示的倾斜角度α,长度XO=长度YO,方向XY与倾斜向量所指示的倾斜方向相同,如图6所示。
在另一个示例中,第二位置用于模拟光源跟随终端的机身姿态变化在真实世界中发生角度改变,且该角度改变与倾斜向量所指示的倾斜角度具有倍数关系。设虚拟物体在虚拟世界中的位置(中心点或重心点)为O点,光源在虚拟世界中的第一位置为X点,光源在虚拟世界中的第二位置为Y点,则∠XOY=倾斜向量所指示的倾斜角度α*预设倍数k,长度XO=长度YO,方向XY与倾斜向量所指示的倾斜方向相同,如图7所示。
在另一个示例中,第二位置用于模拟光源跟随终端的机身姿态变化在真实世界中发生角度改变和距离改变,且该距离位置改变与倾斜向量所指示的倾斜角度具有倍数关系。设虚拟物体在虚拟世界中的位置(中心点或重心点)为O点,光源在虚拟世界中的第一位置为X点,光源在虚拟世界中的第二位置为Y点,则∠XOY=倾斜向量所指示的倾斜角度α,长度XO*m=长度YO,m是与倾斜角度α的大小呈正比例关系的参数且m大于1,如图8所示。
需要说明的一点是,图5至图8中以倾斜角度α发生在某一个坐标平面来举例说明,但该倾斜角度α可以发生在虚拟世界中的任意方向。需要说明的另一点是,本实施例对终端根据机身姿态变化将光源在虚拟世界中从第一位置改变为第二位置的方式不加以限定。
在一个示例中,虚拟世界是基于虚拟物体来构建的,比如虚拟世界的原点是虚拟物体的中心点,虚拟世界的三个坐标轴的正方向与终端在未发生倾斜时的长宽高三个方向分别对应。
步骤405,根据光源对虚拟物体提供的照射光,对虚拟物体的表面图层渲染得到第二虚拟画面,第二虚拟画面中的虚拟物体的第二表面区域上具有光源产生的光影效果;
终端根据光源对虚拟物体提供的照射光,采用PBR技术对虚拟物体的表面图层渲染得到第二虚拟画面,第二虚拟画面中的虚拟物体的第二表面区域上具有光源产生的光影效果。
可选地,虚拟物体的表面图层包括至少两个,每个表面图层对应有各自的透明度。可选地,非最低层的表面图层均具有一定的透明度,以透明度的取值范围为0至1,数值越小,越透明为例,非最底层的表面图层的数值小于1,从而实现多个表面图层叠加,显示出复杂的光影效果。
在一个示例中,虚拟物体是虚拟画卷,虚拟画卷的至少两个表面图层包括:画布图层、宣纸图层、颜料图层、贴图图层、金箔图层、涂鸦图层中的至少两种。比如,从下往上依次包括画布图层、宣纸图层、颜料图层和金箔图层。
在虚拟物体设置有至少两个表面图层的情况下,终端根据位于第二位置的光源对虚拟物体提供的照射光,采用PBR技术对虚拟物体的至少两个表面图层进行分别渲染,得到至少两个表面图层对应的渲染结果;按照每个表面图层对应有各自的透明度,对至少两个表面图层对应的渲染结果进行叠加,得到第二虚拟画面。由于至少两个表面图层的图层材质不同,不同的表面图层会渲染出不同的光影效果,在按照图层顺序以及透明度进行叠加后,能够较为真实地模拟出真实物体的复杂表面材质。
可选地,光影效果是物体表面的反射光效果,也称光泽效果。
步骤406,显示第二虚拟画面。
可选地,上述步骤在显示每帧虚拟画面时执行,第i帧虚拟画面可视为第一虚拟画面,第i+1帧虚拟画面可视为第二虚拟画面。
综上所述,本实施例提供的方法,通过在终端的机身姿态发生变化时,调整虚拟场景中的光源也发生相应的旋转或位移,改变位置后的光源会对位于虚拟场景中的虚拟物体的不同表面区域产生不同的光影效果,从而渲染出更贴近现实中的表面图层,能够在手持式终端上获得更为真实的渲染效果。
本实施例提供的方法,还通过在终端的机身姿态发生变化时,根据机身姿态发生变化时的倾斜向量,将光源在虚拟世界中从第一位置改变为第二位置。由于该第二位置可以用于模拟在虚拟物体跟随终端的机身姿态变化在真实世界中发生位置改变时,光源在真实世界中的位置保持不变,或者,用于模拟光源跟随终端的机身姿态变化在真实世界中发生位置改变,从而能够模拟出多种不同的光影效果。
本实施例提供的方法,还通过在虚拟物体设置至少两个表面图层的情况下,采用PBR技术对虚拟物体的至少两个表面图层进行分别渲染,得到至少两个表面图层对应的渲染结果,利用至少两个渲染效果的叠加,能够较为真实地模拟出真实物体的复杂表面材质,体现出真实世界中名画画作的丰富层次质感。
图9示出了本申请一个示例性实施例提供的虚拟画面的显示方法的流程图。本实施例以该方法由终端执行为例进行说明,该终端可以是手持式终端。该方法包括:
步骤901,在显示每帧虚拟画面时,应用程序获取传感器采集的倾斜向量;
以物理传感器是重力传感器为例,重力传感器在工作过程中按照预设的采样频率,对终端的机身姿态变化进行采集。示意性的,终端的机身姿态变化采用倾斜向量来表示。可选地,重力传感器通过硬件接口向CPU上报该倾斜向量,如图10所示。
在显示每帧虚拟画面时,应用程序向CPU发送请求,该请求用于获取重力传感器采集的倾斜向量。CPU在接收到该请求后,通过硬件接口获取重力传感器采集的倾斜向量,将该倾斜向量传递给应用程序。
应用程序判断该倾斜向量是否的倾斜变化量是否大于阈值。当小于阈值时,进入步骤902;当等于或大于阈值时,进入步骤903。
步骤902,当倾斜向量指示的倾斜变化量较小时,保持虚拟世界中的光源处于第一三维坐标;
第一三维坐标用于指示光源在虚拟世界中的第一位置。
步骤903,当倾斜向量指示的倾斜变化量较大时,根据倾斜向量计算得到第二三维坐标,更新光源在虚拟世界中的位置为第二三维坐标;
第二三维坐标用于指示光源在虚拟世界中的第二位置。第二位置与第一位置不同。
步骤904,使用基于PBR制作的物体表面图层,显示出光源的位置变化带来的物体光泽变化。
参考图11,在手持式终端70的机身姿态变化后,光源在虚拟世界中的位置从第一位置71移动到第二位置73。由于光源的位置发生变化,光源所提供的照射光照射在虚拟球72的不同表面位置,使得虚拟球72产生不同的表面光泽变化。
图12示出了本申请一个示例性实施例提供的虚拟画面的显示装置的框图。该装置可以实现成为终端,或者设置在终端中。该装置包括:
显示模块1220,用于显示第一虚拟画面,所述第一虚拟画面中的虚拟物体的第一表面区域上显示有光影效果;
采集模块1240,用于通过终端内的物理传感器采集所述终端的机身姿态变化;
所述显示模块1220,还用于根据所述机身姿态变化显示第二虚拟画面,所述第二虚拟画面中的所述虚拟物体的第二表面区域上显示有所述光影效果。
在本申请的可选实施例中,所述虚拟物体是位于虚拟世界中的物体,所述虚拟世界中存在光源;
所述显示模块1220包括:调整子模块1222、渲染子模块1224和显示子模块1226。调整子模块1222,用于根据所述机身姿态变化将所述光源在所述虚拟世界中从第一位置改变为第二位置;渲染子模块1224,用于根据所述光源对所述虚拟物体提供的照射光,对所述虚拟物体的表面图层渲染得到所述第二虚拟画面,所述第二虚拟画面中的所述虚拟物体的第二表面区域上具有所述光源产生的所述光影效果;显示子模块1226,用于显示所述第二虚拟画面。
在本申请的可选实施例中,所述机身姿态变化采用倾斜向量来表示,所述调整子模块1222,用于根据所述倾斜向量的倾斜方向和倾斜角度、以及所述虚拟物体和所述光源之间的距离,将所述光源在所述虚拟世界中的位置,从所述第一位置改变为所述第二位置。
在本申请的可选实施例中,所述调整子模块1222,用于响应于所述机身姿态变化大于阈值,将所述光源在所述虚拟世界中的位置,从所述第一位置改变为所述第二位置。
在本申请的可选实施例中,所述渲染子模块1224,用于根据所述光源对所述虚拟物体提供的照射光,采用基于物理的渲染技术对所述虚拟物体的表面图层进行渲染,得到所述第二虚拟画面。
在本申请的可选实施例中,所述表面图层包括至少两个,每个表面图层对应有各自的透明度;
所述渲染子模块1224,用于根据所述光源对所述虚拟物体提供的照射光,采用基于物理的渲染技术对所述虚拟物体的至少两个表面图层进行分别渲染,得到所述至少两个表面图层对应的渲染结果;按照所述每个表面图层对应有各自的透明度,对所述至少两个表面图层对应的渲染结果进行叠加,得到所述第二虚拟画面。
在本申请的可选实施例中,所述虚拟物体是虚拟画卷,所述至少两个表面图层包括:画布图层、宣纸图层、颜料图层、贴图图层、金箔图层、涂鸦图层中的至少两种。
在本申请的可选实施例中,所述显示模块1220,还用于设置光源在虚拟世界中处于第一位置;根据光源对虚拟物体提供的照射光,对所述虚拟物体的表面图层渲染得到第一虚拟画面,所述第一虚拟画面中的所述虚拟物体的第一表面区域上具有所述光源产生的光影效果。
本申请还提供了一种终端(终端或服务器),该终端包括处理器和存储器,存储器中存储有至少一条指令,至少一条指令由处理器加载并执行以实现上述各个方法实施例提供的虚拟画面的显示方法。
图13示出了本申请一个示例性实施例提供的终端1300的结构框图。该终端1300可以是:智能手机、平板电脑、MP3播放器(Moving Picture Experts Group Audio LayerIII,动态影像专家压缩标准音频层面3)、MP4(Moving PictureExperts Group AudioLayer IV,动态影像专家压缩标准音频层面4)播放器、笔记本电脑或台式电脑。终端1300还可能被称为用户设备、便携式终端、膝上型终端、台式终端等其他名称。
通常,终端1300包括有:处理器1301和存储器1302。
处理器1301可以包括一个或多个处理核心,比如4核心处理器、8核心处理器等。处理器1301可以采用DSP(Digital Signal Processing,数字信号处理)、FPGA(Field-Programmable Gate Array,现场可编程门阵列)、PLA(Programmable Logic Array,可编程逻辑阵列)中的至少一种硬件形式来实现。处理器1301也可以包括主处理器和协处理器,主处理器是用于对在唤醒状态下的数据进行处理的处理器,也称CPU(Central ProcessingUnit,中央处理器);协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中,处理器1301可以在集成有GPU(Graphics Processing Unit,图像处理器),GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中,处理器1301还可以包括AI(Artificial Intelligence,人工智能)处理器,该AI处理器用于处理有关机器学习的计算操作。
存储器1302可以包括一个或多个计算机可读存储介质,该计算机可读存储介质可以是非暂态的。存储器1302还可包括高速随机存取存储器,以及非易失性存储器,比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中,存储器1302中的非暂态的计算机可读存储介质用于存储至少一个指令,该至少一个指令用于被处理器1301所执行以实现本申请中方法实施例提供的消息发送方法。
在一些实施例中,终端1300还可选包括有:外围设备接口1303和至少一个外围设备。处理器1301、存储器1302和外围设备接口1303之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口1303相连。具体地,外围设备包括:射频电路1304、触摸显示屏1305、摄像头1306、音频电路1307、定位组件1308和电源1309中的至少一种。
外围设备接口1303可被用于将I/O(Input/Output,输入/输出)相关的至少一个外围设备连接到处理器1301和存储器1302。在一些实施例中,处理器1301、存储器1302和外围设备接口1303被集成在同一芯片或电路板上;在一些其他实施例中,处理器1301、存储器1302和外围设备接口1303中的任意一个或两个可以在单独的芯片或电路板上实现,本实施例对此不加以限定。
射频电路1304用于接收和发射RF(Radio Frequency,射频)信号,也称电磁信号。射频电路1304通过电磁信号与通信网络以及其他通信设备进行通信。射频电路1304将电信号转换为电磁信号进行发送,或者,将接收到的电磁信号转换为电信号。可选地,射频电路1304包括:天线系统、RF收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频电路1304可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于:万维网、城域网、内联网、各代移动通信网络(2G、3G、4G及5G)、无线局域网和/或WiFi(Wireless Fidelity,无线保真)网络。在一些实施例中,射频电路1304还可以包括NFC(Near FieldCommunication,近距离无线通信)有关的电路,本申请对此不加以限定。
显示屏1305用于显示UI(User Interface,用户界面)。该UI可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏1305是触摸显示屏时,显示屏1305还具有采集在显示屏1305的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器1301进行处理。此时,显示屏1305还可以用于提供虚拟按钮和/或虚拟键盘,也称软按钮和/或软键盘。在一些实施例中,显示屏1305可以为一个,设置终端1300的前面板;在另一些实施例中,显示屏1305可以为至少两个,分别设置在终端1300的不同表面或呈折叠设计;在再一些实施例中,显示屏1305可以是柔性显示屏,设置在终端1300的弯曲表面上或折叠面上。甚至,显示屏1305还可以设置成非矩形的不规则图形,也即异形屏。显示屏1305可以采用LCD(Liquid Crystal Display,液晶显示屏)、OLED(Organic Light-Emitting Diode,有机发光二极管)等材质制备。
摄像头组件1306用于采集图像或视频。可选地,摄像头组件1306包括前置摄像头和后置摄像头。通常,前置摄像头设置在终端的前面板,后置摄像头设置在终端的背面。在一些实施例中,后置摄像头为至少两个,分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种,以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及VR(Virtual Reality,虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中,摄像头组件1306还可以包括闪光灯。闪光灯可以是单色温闪光灯,也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合,可以用于不同色温下的光线补偿。
音频电路1307可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波,并将声波转换为电信号输入至处理器1301进行处理,或者输入至射频电路1304以实现语音通信。出于立体声采集或降噪的目的,麦克风可以为多个,分别设置在终端1300的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器1301或射频电路1304的电信号转换为声波。扬声器可以是传统的薄膜扬声器,也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时,不仅可以将电信号转换为人类可听见的声波,也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中,音频电路1307还可以包括耳机插孔。
定位组件1308用于定位终端1300的当前地理位置,以实现导航或LBS(LocationBased Service,基于位置的服务)。定位组件1308可以是基于美国的GPS(GlobalPositioning System,全球定位系统)、中国的北斗系统或俄罗斯的伽利略系统的定位组件。
电源1309用于为终端1300中的各个组件进行供电。电源1309可以是交流电、直流电、一次性电池或可充电电池。当电源1309包括可充电电池时,该可充电电池可以是有线充电电池或无线充电电池。有线充电电池是通过有线线路充电的电池,无线充电电池是通过无线线圈充电的电池。该可充电电池还可以用于支持快充技术。
在一些实施例中,终端1300还包括有一个或多个传感器1310。该一个或多个传感器1310包括但不限于:加速度传感器1311、陀螺仪传感器1312、压力传感器1313、指纹传感器1314、光学传感器1315以及接近传感器1313。
加速度传感器1311可以检测以终端1300建立的坐标系的三个坐标轴上的加速度大小。比如,加速度传感器1311可以用于检测重力加速度在三个坐标轴上的分量。处理器1301可以根据加速度传感器1311采集的重力加速度信号,控制触摸显示屏1305以横向视图或纵向视图进行用户界面的显示。加速度传感器1311还可以用于游戏或者用户的运动数据的采集。
陀螺仪传感器1312可以检测终端1300的机体方向及转动角度,陀螺仪传感器1312可以与加速度传感器1311协同采集用户对终端1300的3D动作。处理器1301根据陀螺仪传感器1312采集的数据,可以实现如下功能:动作感应(比如根据用户的倾斜操作来改变UI)、拍摄时的图像稳定、游戏控制以及惯性导航。
压力传感器1313可以设置在终端1300的侧边框和/或触摸显示屏1305的下层。当压力传感器1313设置在终端1300的侧边框时,可以检测用户对终端1300的握持信号,由处理器1301根据压力传感器1313采集的握持信号进行左右手识别或快捷操作。当压力传感器1313设置在触摸显示屏1305的下层时,由处理器1301根据用户对触摸显示屏1305的压力操作,实现对UI界面上的可操作性控件进行控制。可操作性控件包括按钮控件、滚动条控件、图标控件、菜单控件中的至少一种。
指纹传感器1314用于采集用户的指纹,由处理器1301根据指纹传感器1314采集到的指纹识别用户的身份,或者,由指纹传感器1314根据采集到的指纹识别用户的身份。在识别出用户的身份为可信身份时,由处理器1301授权该用户执行相关的敏感操作,该敏感操作包括解锁屏幕、查看加密信息、下载软件、支付及更改设置等。指纹传感器1314可以被设置终端1300的正面、背面或侧面。当终端1300上设置有物理按键或厂商Logo时,指纹传感器1314可以与物理按键或厂商Logo集成在一起。
光学传感器1315用于采集环境光强度。在一个实施例中,处理器1301可以根据光学传感器1315采集的环境光强度,控制触摸显示屏1305的显示亮度。具体地,当环境光强度较高时,调高触摸显示屏1305的显示亮度;当环境光强度较低时,调低触摸显示屏1305的显示亮度。在另一个实施例中,处理器1301还可以根据光学传感器1315采集的环境光强度,动态调整摄像头组件1306的拍摄参数。
接近传感器1313,也称距离传感器,通常设置在终端1300的前面板。接近传感器1313用于采集用户与终端1300的正面之间的距离。在一个实施例中,当接近传感器1313检测到用户与终端1300的正面之间的距离逐渐变小时,由处理器1301控制触摸显示屏1305从亮屏状态切换为息屏状态;当接近传感器1313检测到用户与终端1300的正面之间的距离逐渐变大时,由处理器1301控制触摸显示屏1305从息屏状态切换为亮屏状态。
本领域技术人员可以理解,图13中示出的结构并不构成对终端1300的限定,可以包括比图示更多或更少的组件,或者组合某些组件,或者采用不同的组件布置。
本申请实施例还提供一种终端,该终端包括存储器和处理器,存储器中存储有至少一条指令、至少一段程序、代码集或指令集,至少一条指令、至少一段程序、代码集或指令集由处理器加载并实现上述虚拟画面的显示方法。
本申请实施例还提供一种计算机可读存储介质,该可读存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,至少一条指令、至少一段程序、代码集或指令集由处理器加载并执行以实现上述虚拟画面的显示方法。
本申请还提供了一种计算机程序产品,当计算机程序产品在计算机上运行时,使得计算机执行上述各个方法实施例提供的上述虚拟画面的显示方法。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,该计算机可读存储介质可以是上述实施例中的存储器中所包含的计算机可读存储介质;也可以是单独存在,未装配入终端中的计算机可读存储介质。该计算机可读存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,至少一条指令、至少一段程序、代码集或指令集由处理器加载并执行以实现上述虚拟画面的显示方法。
可选地,该计算机可读存储介质可以包括:只读存储器(ROM,Read Only Memory)、随机存取记忆体(RAM,Random Access Memory)、固态硬盘(SSD,Solid State Drives)或光盘等。其中,随机存取记忆体可以包括电阻式随机存取记忆体(ReRAM,Resistance RandomAccess Memory)和动态随机存取存储器(DRAM,Dynamic Random Access Memory)。上述本申请实施例序号仅仅为了描述,不代表实施例的优劣。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,上述提到的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上仅为本申请的可选实施例,并不用以限制本申请,凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。

Claims (11)

1.一种虚拟画面的显示方法,其特征在于,应用于终端中,所述方法包括:
显示第一虚拟画面,所述第一虚拟画面中的虚拟物体的第一表面区域上显示有光影效果;
通过所述终端内的物理传感器采集所述终端的机身姿态变化;
根据所述机身姿态变化显示第二虚拟画面,所述第二虚拟画面中的所述虚拟物体的第二表面区域上显示有所述光影效果。
2.根据权利要求1所述的方法,其特征在于,所述虚拟物体是位于虚拟世界中的物体,所述虚拟世界中存在光源;
所述根据所述机身姿态变化显示第二虚拟画面,包括;
根据所述机身姿态变化将所述光源在所述虚拟世界中从第一位置改变为第二位置;
根据所述光源对所述虚拟物体提供的照射光,对所述虚拟物体的表面图层渲染得到所述第二虚拟画面,所述第二虚拟画面中的所述虚拟物体的第二表面区域上具有所述光源产生的所述光影效果;
显示所述第二虚拟画面。
3.根据权利要求2所述的方法,其特征在于,所述机身姿态变化采用倾斜向量表示;所述根据所述机身姿态变化将所述光源在所述虚拟世界中从第一位置改变为第二位置,包括:
根据所述倾斜向量所指示的倾斜方向和倾斜角度、以及所述虚拟物体和所述光源之间的距离,将所述光源在所述虚拟世界中的位置,从所述第一位置改变为所述第二位置。
4.根据权利要求2所述的方法,其特征在于,所述根据所述机身姿态变化将所述光源在所述虚拟世界中的位置,从第一位置改变为第二位置,包括:
响应于所述机身姿态变化大于阈值,将所述光源在所述虚拟世界中的位置,从所述第一位置改变为所述第二位置。
5.根据权利要求2所述的方法,其特征在于,所述根据所述光源对所述虚拟物体提供的照射光,对所述虚拟物体的表面图层渲染得到所述第二虚拟画面,包括:
根据所述光源对所述虚拟物体提供的照射光,采用基于物理的渲染技术对所述虚拟物体的表面图层进行渲染,得到所述第二虚拟画面。
6.根据权利要求5所述的方法,其特征在于,所述表面图层包括至少两个,每个表面图层对应有各自的透明度;
所述根据所述光源对所述虚拟物体提供的照射光,采用基于物理的渲染技术对所述虚拟物体的表面图层进行渲染,得到所述第二虚拟画面,包括:
根据所述光源对所述虚拟物体提供的照射光,采用基于物理的渲染技术对所述虚拟物体的至少两个表面图层进行分别渲染,得到所述至少两个表面图层对应的渲染结果;
按照所述每个表面图层对应有各自的透明度,对所述至少两个表面图层对应的渲染结果进行叠加,得到所述第二虚拟画面。
7.根据权利要求6所述的方法,其特征在于,所述虚拟物体是虚拟画卷,所述至少两个表面图层包括:画布图层、宣纸图层、颜料图层、贴图图层、金箔图层、涂鸦图层中的至少两种。
8.根据权利要求1至7任一所述的方法,其特征在于,所述显示第一虚拟画面,包括:
设置光源在虚拟世界中处于第一位置;
根据所述光源对所述虚拟物体提供的照射光,对所述虚拟物体的表面图层渲染得到第一虚拟画面,所述第一虚拟画面中的所述虚拟物体的第一表面区域上具有所述光源产生的光影效果。
9.一种虚拟画面的显示装置,其特征在于,所述装置包括:
显示模块,用于显示第一虚拟画面,所述第一虚拟画面中的虚拟物体的第一表面区域上显示有光影效果;
采集模块,用于通过终端内的物理传感器采集所述终端的机身姿态变化;
所述显示模块,还用于根据所述机身姿态变化显示第二虚拟画面,所述第二虚拟画面中的所述虚拟物体的第二表面区域上显示有所述光影效果。
10.一种终端,其特征在于,所述终端包括处理器和存储器,所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、至少一段程序、代码集或指令集由所述处理器加载并执行以实现如权利要求1至8任一所述的虚拟画面的显示方法。
11.一种计算机可读存储介质,其特征在于,所述可读存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、至少一段程序、代码集或指令集由处理器加载并执行以实现如权利要求1至8任一所述的虚拟画面的显示方法。
CN202010589583.1A 2020-06-24 2020-06-24 虚拟画面的显示方法、装置、设备及存储介质 Active CN111583375B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010589583.1A CN111583375B (zh) 2020-06-24 2020-06-24 虚拟画面的显示方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010589583.1A CN111583375B (zh) 2020-06-24 2020-06-24 虚拟画面的显示方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN111583375A true CN111583375A (zh) 2020-08-25
CN111583375B CN111583375B (zh) 2023-04-07

Family

ID=72111285

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010589583.1A Active CN111583375B (zh) 2020-06-24 2020-06-24 虚拟画面的显示方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN111583375B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112416218A (zh) * 2020-09-08 2021-02-26 上海哔哩哔哩科技有限公司 虚拟卡片的显示方法、装置、计算机设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105825544A (zh) * 2015-11-25 2016-08-03 维沃移动通信有限公司 一种图像处理方法及移动终端
CN108664231A (zh) * 2018-05-11 2018-10-16 腾讯科技(深圳)有限公司 2.5维虚拟环境的显示方法、装置、设备及存储介质
CN110665230A (zh) * 2019-09-26 2020-01-10 腾讯科技(深圳)有限公司 虚拟世界中的虚拟角色控制方法、装置、设备及介质
CN110717993A (zh) * 2019-10-12 2020-01-21 西安维度视界科技有限公司 一种分体式ar眼镜系统的交互方法、系统及介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105825544A (zh) * 2015-11-25 2016-08-03 维沃移动通信有限公司 一种图像处理方法及移动终端
CN108664231A (zh) * 2018-05-11 2018-10-16 腾讯科技(深圳)有限公司 2.5维虚拟环境的显示方法、装置、设备及存储介质
CN110665230A (zh) * 2019-09-26 2020-01-10 腾讯科技(深圳)有限公司 虚拟世界中的虚拟角色控制方法、装置、设备及介质
CN110717993A (zh) * 2019-10-12 2020-01-21 西安维度视界科技有限公司 一种分体式ar眼镜系统的交互方法、系统及介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
覃海宁;: "基于真实感约束的VR虚拟人物图形生成方法改进研究" *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112416218A (zh) * 2020-09-08 2021-02-26 上海哔哩哔哩科技有限公司 虚拟卡片的显示方法、装置、计算机设备及存储介质
WO2022052729A1 (zh) * 2020-09-08 2022-03-17 上海哔哩哔哩科技有限公司 虚拟卡片的显示方法、装置、计算机设备及存储介质
CN112416218B (zh) * 2020-09-08 2023-12-29 上海哔哩哔哩科技有限公司 虚拟卡片的显示方法、装置、计算机设备及存储介质

Also Published As

Publication number Publication date
CN111583375B (zh) 2023-04-07

Similar Documents

Publication Publication Date Title
US11205282B2 (en) Relocalization method and apparatus in camera pose tracking process and storage medium
CN111464749B (zh) 进行图像合成的方法、装置、设备及存储介质
CN110427110B (zh) 一种直播方法、装置以及直播服务器
CN111324250B (zh) 三维形象的调整方法、装置、设备及可读存储介质
CN112870707B (zh) 虚拟场景中的虚拟物体展示方法、计算机设备及存储介质
CN110064200B (zh) 基于虚拟环境的物体构建方法、装置及可读存储介质
CN108965922B (zh) 视频封面生成方法、装置和存储介质
CN110992493A (zh) 图像处理方法、装置、电子设备及存储介质
CN109166150B (zh) 获取位姿的方法、装置存储介质
CN109862412B (zh) 合拍视频的方法、装置及存储介质
CN109886208B (zh) 物体检测的方法、装置、计算机设备及存储介质
CN111680758B (zh) 图像训练样本生成方法和装置
CN110225390B (zh) 视频预览的方法、装置、终端及计算机可读存储介质
CN111897429A (zh) 图像显示方法、装置、计算机设备及存储介质
CN112565806B (zh) 虚拟礼物赠送方法、装置、计算机设备及介质
CN110853128A (zh) 虚拟物体显示方法、装置、计算机设备及存储介质
CN112922589A (zh) 尖灭线确定方法、装置、终端及存储介质
CN113384880A (zh) 虚拟场景显示方法、装置、计算机设备及存储介质
CN112308103B (zh) 生成训练样本的方法和装置
CN112396076A (zh) 车牌图像生成方法、装置及计算机存储介质
CN111583375B (zh) 虚拟画面的显示方法、装置、设备及存储介质
CN113160031A (zh) 图像处理方法、装置、电子设备及存储介质
CN109833623B (zh) 基于虚拟环境的物体构建方法、装置及可读存储介质
CN109032492B (zh) 一种切歌的方法及装置
CN115904079A (zh) 显示设备调整方法、装置、终端及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40027407

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant