CN112691378B - 图像处理方法、设备及可读介质 - Google Patents
图像处理方法、设备及可读介质 Download PDFInfo
- Publication number
- CN112691378B CN112691378B CN202011556205.XA CN202011556205A CN112691378B CN 112691378 B CN112691378 B CN 112691378B CN 202011556205 A CN202011556205 A CN 202011556205A CN 112691378 B CN112691378 B CN 112691378B
- Authority
- CN
- China
- Prior art keywords
- texture
- pixels
- vector
- image
- coordinates
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/60—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/40—Analysis of texture
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
Abstract
本申请公开了一种图像处理方法、设备及可读介质，其中，图像处理方法包括：获取第一遮挡纹理图中多个像素的第一纹理坐标；根据所述多个像素的第一纹理坐标，对预设噪声向量纹理进行采样，得到含有所述多个像素对应的噪声值的抖动向量；根据所述抖动向量，确定所述多个像素对应的抖动后的第二纹理坐标；基于所述第二纹理坐标及参照坐标，对所述第一遮挡纹理图进行径向模糊处理，得到光线纹理图像；其中，所述光线纹理图像用于确定具有体积光效果的目标图像，以减小采样点数对体积光分段效果的影响。
Description
技术领域
本申请实施例涉及游戏开发技术领域，尤其涉及图像处理方法、设备及可读介质。
背景技术
现有技术中，常用的体积光效果的实现方案主要有两种：第一种是通过在场景中摆放半透明的有光线纹理的矩形面片来实现体积光的效果。另一种是在屏幕空间将画面中的天空与不透明的物体拆分出来，然后，以光源位置点在当前屏幕上的投影坐标为中心点进行径向模糊得到光线图，最后将光线图与原始游戏画面叠加即可得到有体积光效果的图像。
但是，第一种方式不能实现任意形状物体的体积光效果，当光源的方向发生变化后，光线的方向不会发生变化；另一种方式，虽然可支持任意形状物体的体积光效果，并能根据光源的方向正确变化，但是当采样点数较少时，确定出的光线图分段效果较严重，只能通过增加采样点数来减轻分段现象，该方案受采样点数的影响较大，局限性较强。
发明内容
本申请实施例提供了一种图像处理方法、设备及可读介质，用以减小采样点数对体积光分段效果的影响。
第一方面，本申请实施例提供一种图像处理方法，包括：获取第一遮挡纹理图中多个像素的第一纹理坐标；根据所述多个像素的第一纹理坐标，对预设噪声向量纹理进行采样，得到含有所述多个像素对应的噪声值的抖动向量；根据所述抖动向量，确定所述多个像素对应的抖动后的第二纹理坐标；基于所述第二纹理坐标及参照坐标，对所述第一遮挡纹理图进行径向模糊处理，得到光线纹理图像；其中，所述光线纹理图像用于确定具有体积光效果的目标图像。
可选地，所述方法还包括：
获取所述目标图像对应的初始图像中，不透明物体的深度纹理图；
对所述深度纹理图进行二值化处理，得到第二遮挡纹理图；
对所述第二遮挡纹理图进行下采样，得到所述第一遮挡纹理图。
可选地，根据所述多个像素的第一纹理坐标，对预设噪声向量纹理进行采样，得到含有所述多个像素对应的噪声值的抖动向量，包括：
获取第一时间信息；
将所述多个像素的第一纹理坐标及所述第一时间信息，作为预设函数的输入，得到采样纹理坐标；
利用所述采样纹理坐标，对所述预设噪声向量纹理进行采样，得到含有所述多个像素对应的噪声值的抖动向量。
可选地，将所述多个像素的第一纹理坐标及所述第一时间信息，作为预设函数的输入，得到采样纹理坐标，包括：
根据所述多个像素的第一纹理坐标及所述第一时间信息，得到第一二维向量；
将所述第一二维向量作为所述预设函数的输入，以通过所述预设函数提取所述第一二维向量的各分量的小数部分构建出第二二维向量；
其中，所述第二二维向量中含有多个采样纹理坐标。
可选地，根据所述抖动向量，确定所述多个像素对应的抖动后的第二纹理坐标，包括：
获取所述第一遮挡纹理图的分辨率；
利用所述分辨率，对所述抖动向量中的向量值进行处理，得到处理后的所述抖动向量；
根据处理后的所述抖动向量及所述多个像素的第一纹理坐标，确定所述第二纹理坐标。
可选地，根据处理后的所述抖动向量及所述多个像素的第一纹理坐标，确定所述第二纹理坐标，包括：
将处理后的所述抖动向量及所述多个像素的第一纹理坐标做加和处理，得到所述第二纹理坐标。
可选地，利用所述分辨率，对所述抖动向量中的向量值进行处理，得到处理后的所述抖动向量，包括：
利用所述分辨率，对所述抖动向量中的向量值进行缩小处理，得到处理后的所述抖动向量。
可选地，所述方法还包括：
获取虚拟太阳的世界坐标；
对所述虚拟太阳的世界坐标进行坐标变换，得到所述虚拟太阳在二维屏幕空间的屏幕坐标；
基于所述屏幕坐标确定所述参照坐标。
可选地，所述方法还包括：
获取所述第一遮挡纹理图经所述径向模糊处理后的处理结果；
将所述处理结果作为下次径向模糊处理的输入图像。
可选地，所述方法还包括：
对所述光线纹理图像进行滤波处理，得到目标光线纹理图像；
获取太阳光颜色信息；
利用所述目标光线纹理图像，与所述太阳光颜色信息确定出体积光光线纹理图像；
将所述体积光光线纹理图像与所述目标图像对应的场景颜色纹理图像进行叠加，得到具有体积光效果的所述目标图像。
第二方面，本申请实施例提供一种电子设备，包括处理器和存储器，所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、至少一段程序、代码集或指令集由所述处理器加载并执行以实现前述的图像处理方法。
第三方面，本申请实施例提供一种计算机可读介质，其上存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、至少一段程序、代码集或指令集由处理器加载并执行以实现前述的图像处理方法。
在本申请中，通过获取第一遮挡纹理图中多个像素的第一纹理坐标；根据所述多个像素的第一纹理坐标，对预设噪声向量纹理进行采样，得到含有所述多个像素对应的噪声值的抖动向量；根据所述抖动向量，确定所述多个像素对应的抖动后的第二纹理坐标；基于所述第二纹理坐标及参照坐标，对所述第一遮挡纹理图进行径向模糊处理，得到光线纹理图像；其中，所述光线纹理图像用于确定具有体积光效果的目标图像的方案，依据噪声向量纹理，对用于对第一遮挡纹理图进行模糊处理的采样坐标进行扰动，通过噪声向量的随机特性，以减小采样点数对体积光分段效果的影响，并且可以进一步起到基于较少的采样点实现高质量的体积光效果图像的效果。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施例，对于本领域普通技术人员来讲在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种图像处理方法的流程示意图；
图2为本申请实施例提供的一种第一遮挡纹理图的示意图；
图3为本申请实施例提供的一种体积光效果处理方法的流程示意图；
图4为本申请实施例提供的一种数据处理装置的结构示意图；
图5为本申请实施例提供的一种图像处理方法的流程示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
在本申请实施例中使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本申请。在本申请中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义，“多种”一般包含至少两种。
取决于语境，如在此所使用的词语“如果”、“若”可以被解释成为“在……时”或“当……时”或“响应于确定”或“响应于检测”。类似地，取决于语境，短语“如果确定”或“如果检测(陈述的条件或事件)”可以被解释成为“当确定时”或“响应于确定”或“当检测(陈述的条件或事件)时”或“响应于检测(陈述的条件或事件)”。
另外，下述各方法实施例中的步骤时序仅为一种举例，而非严格限定。
如图1为本申请实施例提供的一种图像处理方法的流程示意图，该方法的执行主体可以为计算机设备，该方法可至少包括以下步骤：
101、获取第一遮挡纹理图中多个像素的第一纹理坐标；
102、根据所述多个像素的第一纹理坐标，对预设噪声向量纹理进行采样，得到含有所述多个像素对应的噪声值的抖动向量；
103、根据所述抖动向量，确定所述多个像素对应的抖动后的第二纹理坐标；
104、基于所述第二纹理坐标及参照坐标，对所述第一遮挡纹理图进行径向模糊处理，得到光线纹理图像；其中，所述光线纹理图像用于确定具有体积光效果的目标图像。
在本申请中的一些可选的实施例中，前述第一遮挡纹理图中多个像素可以为第一遮挡纹理图中的全部像素，第一遮挡纹理图可以为待实现体积光效果的帧画面对应的遮挡信息纹理，基于此，本申请的图像处理方法还包括以下步骤：
001、获取所述目标图像对应的初始图像中，不透明物体的深度纹理图；
002、对所述深度纹理图进行二值化处理，得到第二遮挡纹理图；
003、对所述第二遮挡纹理图进行下采样，得到所述第一遮挡纹理图。
其中，初始图像可以为待赋予体积光效果的帧画面图像，目标图像是具有体积光效果的图像，前述深度纹理图中存储的是标准设备坐标系中，初始图像中的各像素对应的深度值，且各像素深度值的范围为[0,1]。其中，0对应于相机的近裁剪平面，1对应相机的远裁剪平面。在游戏场景中，对初始图像中的不透明物体渲染完毕之后，即可得到该深度纹理图。
本申请中，对第二遮挡纹理图进行下采样，可以减少采样数量以提高渲染效率，上述第一遮挡纹理图的分辨率小于第二遮挡纹理图的分辨率。具体地，相关人员还可以对下采样的采样间隔进行设定，以确定第二遮挡纹理图与第一遮挡纹理图的分辨率的倍数关系，例如：相关人员可以对下采样的采样间隔进行设定，使第一遮挡纹理图的分辨率为第二遮挡纹理图的分辨率的八分之一。
进一步地，第一遮挡纹理图中多个像素的第一纹理坐标可以为初始图像对应的遮挡信息纹理的屏幕坐标，其中，屏幕坐标的范围可以为[(0,0)，(1,1)]。
进一步地，上述预设噪声向量纹理包括多个像素，各个像素都对应有一个二维噪声向量(也就是噪声值)；每个第一纹理坐标都在预设噪声向量纹理中有其对应的噪声向量纹理坐标，根据各第一纹理坐标对应的噪声向量纹理坐标，即可进一步实现对预设噪声向量纹理的采样，第一纹理坐标对应的噪声向量纹理坐标处的二维噪声向量，即为第一纹理坐标对应的像素对应的噪声值的抖动向量。
进一步地，上述预设噪声向量纹理可根据预设算法得到，例如：该预设噪声向量纹理可以基于柏林噪声生成算法得到，在本申请的方案中，为了使各第一纹理坐标的抖动范围限定在对应的预设范围内，可将预设噪声向量纹理中各像素对应的二维噪声向量的各分量的大小限定至[-1,1]，具体限定方式可参见现有技术，此处不再赘述。
进一步地，前述步骤103中，“根据所述抖动向量，确定所述多个像素对应的抖动后的第二纹理坐标”包括以下步骤：
1031、获取所述第一遮挡纹理图的分辨率；
1032、利用所述分辨率，对所述抖动向量中的向量值进行处理，得到处理后的所述抖动向量；
1033、根据处理后的所述抖动向量及所述多个像素的第一纹理坐标，确定所述第二纹理坐标。
具体地，前述步骤1032中，“利用所述分辨率，对所述抖动向量中的向量值进行处理，得到处理后的所述抖动向量”，可包括：
利用所述分辨率，对所述抖动向量中的向量值进行缩小处理，得到处理后的所述抖动向量。
在本申请的一些可选的实施例中，利用所述分辨率，对所述抖动向量中的向量值进行缩小处理，得到处理后的所述抖动向量的方式，可通过以下公式(1)进行实现：
UVDither1＝UVDither0/(n*float2(Width,Height)) (1)
公式(1)中，(Width,Height)指第一遮挡纹理图的分辨率、Width可指第一遮挡纹理图的宽包括的像素的数量、Height指第一遮挡纹理图的高包括的像素的数量、UVDither0指处理前的抖动向量、UVDither1为处理后的抖动向量，n可以为正整数。
通过前述公式(1)，可通过对n的设定，来限定根据处理后的所述抖动向量及所述多个像素的第一纹理坐标，确定的所述第二纹理坐标相对于第一纹理坐标的偏移范围。当n＝2时，具体可参见图2所示，图2为本申请实施例提供的第一遮挡纹理图的示意图，该图中，第一遮挡纹理图的分辨率为10*4；该图仅针对一个第一纹理坐标(0.45，0.625)中的位置进行了示意；若预设噪声向量纹理中，各像素对应的二维噪声向量中，分量的范围为[-1，1]，通过前述公式(1)(n＝2)，得到的处理后的所述抖动向量中，其中一个分量的范围为[-1/20，1/20],另一个分量的范围为[-1/8，1/8]。可将第一纹理坐标(0.45，0.625)的偏移范围限定在图2中的虚线区域，也就是将对应的第二纹理坐标的水平坐标的范围限定在0.4至0.5之间，将对应的第二纹理坐标的垂直坐标的范围限定在0.5至0.75之间。
在本申请的另一些可选的实施例中，还可以通过设定公式(1)中n值将第一纹理坐标的偏移范围限定至多个像素或半个像素之内，对此，本申请不做限定。
相应地，前述1033中，“根据处理后的所述抖动向量及所述多个像素的第一纹理坐标，确定所述第二纹理坐标”可具体包括：
将处理后的所述抖动向量及所述多个像素的第一纹理坐标做加和处理，得到所述第二纹理坐标。
具体地，将处理后的所述抖动向量及所述多个像素的第一纹理坐标做加和处理，得到所述第二纹理坐标可通过以下公式(2)进行实现：
PosPixelDithered＝UVPixel+UVDither 1 (2)
公式(2)中，UVDither1为处理后的抖动向量、UVPixel为第一纹理坐标、PosPixelDithered为第二纹理坐标。此处公式(2)仅为一个第一纹理坐标的处理示例，本申请中需对第一遮挡纹理图中各个像素对应的第一纹理坐标都做相应的处理。
进一步地，上述步骤104中的参照坐标可以为虚拟太阳在屏幕空间的屏幕坐标，相应地，本申请的方法还包括以下步骤：
S01、获取虚拟太阳的世界坐标；
S02、对所述虚拟太阳的世界坐标进行坐标变换，得到所述虚拟太阳在二维屏幕空间的屏幕坐标；
S03、基于所述屏幕坐标确定所述参照坐标。
其中，虚拟太阳在二维屏幕空间的屏幕坐标可作为所述参照坐标。
具体地，前述步骤104中，基于所述第二纹理坐标及参照坐标，对所述第一遮挡纹理图进行模糊处理的方式，可参见现有技术，此处不再赘述。
进一步地，所述方法还包括以下步骤：
105、获取所述第一遮挡纹理图经所述径向模糊处理后的处理结果；
106、将所述处理结果作为下次径向模糊处理的输入图像。
具体地，下次径向模糊处理的输入图像就是下次模糊处理时(也就是下次执行前述步骤101至104时)，步骤104以及步骤101中的第一遮挡纹理图；用户可以输入迭代次数，多次循环执行前述步骤101至104，每次循环结束得到的处理结果，作为下次迭代的第一遮挡纹理图；迭代次数由用户来控制，迭代次数越多，模糊效果越好。
在本申请的另一些可选的实施例中，上述步骤101中的第一纹理坐标还可以为空白纹理图像中多个像素的纹理坐标，空白纹理图像中多个像素的纹理坐标，与第一遮挡纹理图中多个像素的第一纹理坐标一一对应且相同。
相应地，若步骤101中的第一纹理坐标为空白纹理图像中多个像素的纹理坐标时，步骤106中的输入图像，可仅作为下次模糊处理时步骤104中的第一遮挡纹理图。
进一步地，所述方法还包括以下步骤：
111、对所述光线纹理图像进行滤波处理，得到目标光线纹理图像；
112、获取太阳光颜色信息；
113、利用所述目标光线纹理图像，与所述太阳光颜色信息确定出体积光光线纹理图像；
114、将所述体积光光线纹理图像与所述目标图像对应的场景颜色纹理图像进行叠加，得到具有体积光效果的所述目标图像。
具体地，模糊处理的次数可以由用户设定，上述步骤111中，对光线纹理图像进行滤波处理是为了滤除光线纹理图像中含有的大量噪声，具体的滤波方式可以为双边模糊滤波算法，以进一步避免光线纹理图像中分段现象的产生，双边模糊滤波算法可以有效的移除光线纹理图像中的噪声，并能保证图像中边缘的锐度。
进一步地，上述目标光线纹理图像为灰度图，前述步骤112中，太阳光颜色信息可以根据用户的输入指令获取，太阳光颜色信息可以包括分别对应于RGB值的数值信息；上述步骤113中，“利用所述目标光线纹理图像，与所述太阳光颜色信息确定出体积光光线纹理图像”，可具体通过以下方式进行实现：将前述目标光线纹理图像中的多个像素中，各个像素对应的灰度值信息，与太阳光颜色信息相乘即可得到具备颜色的体积光光线纹理图像。将体积光光线纹理图像与目标图像对应的，已计算完光照之后的场景颜色纹理图像进行叠加，则可得到有体积光效果的游戏画面。
需要说明的是，若第一遮挡纹理图为对所述第二遮挡纹理图进行下采样，得到的第一遮挡纹理图，在前述步骤114之前，还需对体积光光线纹理图像进行上采样，以使体积光光线纹理图像的分辨率与目标图像对应的场景颜色纹理图像的分辨率相同，具体的上采样方式可参见现有技术，此处不再赘述。
进一步地，在对深度纹理图进行二值化时，可根据用户指定的深度阈值对深度纹理图进行二值化，以得到前述第二遮挡纹理图。例如：深度阈值可以为0.99，当深度纹理图中的像素对应的深度值大于或等于0.99时，该像素对应的深度值二值化结果为1，当深度纹理图中的像素对应的深度值小于0.99时，该像素对应的深度值二值化结果为0；也可以为当深度纹理图中的像素对应的深度值大于或等于0.99时，该像素对应的深度值二值化结果0，当深度纹理图中的像素对应的深度值小于0.99时，该像素对应的深度值二值化结果为1；具体的二值化结果与深度阈值的关系可以由相关人员设定，对此，本申请不做限定。
可选地，通过前述方式得到的第二遮挡纹理图中，像素对应的二值化结果为1时，该像素对应遮挡物，像素对应的二值化结果为0时，该像素对应非遮挡物。
在本申请的一些可选的实施例中，在一次执行前述步骤101至104，或多次执行前述步骤101至步骤104，以达到更好的体积光效果时，上述步骤102中，“根据所述多个像素的第一纹理坐标，对预设噪声向量纹理进行采样，得到含有所述多个像素对应的噪声值的抖动向量”，至少包括以下步骤：
1021、获取第一时间信息；
1022、将所述多个像素的第一纹理坐标及所述第一时间信息，作为预设函数的输入，得到采样纹理坐标；
1023、利用所述采样纹理坐标，对所述预设噪声向量纹理进行采样，得到含有所述多个像素对应的噪声值的抖动向量。
其中，第一时间信息可以为时间量信息，具体可以为计时器中的记录的从游戏开始到现在经过的总时间，单位是秒或毫秒，第一时间信息对应的数值可以为小数。
在本申请的一些可选的实施例中，前述步骤1022中，“将所述多个像素的第一纹理坐标及所述第一时间信息，作为预设函数的输入，得到采样纹理坐标”，可具体包括以下步骤：
S1、根据所述多个像素的第一纹理坐标及所述第一时间信息，得到第一二维向量；
S2、将所述第一二维向量作为所述预设函数的输入，以通过所述预设函数提取所述第一二维向量的各分量的小数部分构建出第二二维向量；
其中，所述第二二维向量中含有多个采样纹理坐标。
具体地，上述预设函数为frac()，将所述多个像素的第一纹理坐标及所述第一时间信息，作为预设函数的输入，得到采样纹理坐标可以通过以下公式(3)进行实现：
UVNoise＝frac(UVPixel+Time) (3)
公式(3)中，UVPixel为第一纹理坐标，Time为第一时间信息，具体可以为二维时间信息，UVPixel与Time的和为第一二维向量、UVNoise为第二二维向量，公式(3)适用于所有的第一纹理坐标，得到的第二二维向量对应的采样纹理坐标的数目与第一纹理坐标的数目相同。也就是说，第一纹理坐标、第一二维向量、第二二维向量以及采样纹理坐标一一对应。
进一步地，在本申请的另一些可选的实施例中，上述步骤101中的第一纹理坐标还可以为第一遮挡纹理图对应的空白纹理图像中多个像素的纹理坐标，该空白纹理图像中的像素数量，与第一遮挡纹理图中的像素数量相同，且该空白纹理图像中的多个像素的纹理坐标，与第一遮挡纹理图中的像素的第一纹理坐标相同，即该空白纹理图像中的多个像素的纹理坐标与所述第一纹理坐标一一对应且相同。
在本申请中，通过获取第一遮挡纹理图中多个像素的第一纹理坐标；根据所述多个像素的第一纹理坐标，对预设噪声向量纹理进行采样，得到含有所述多个像素对应的噪声值的抖动向量；根据所述抖动向量，确定所述多个像素对应的抖动后的第二纹理坐标；基于所述第二纹理坐标及参照坐标，对所述第一遮挡纹理图进行径向模糊处理，得到光线纹理图像；其中，所述光线纹理图像用于确定具有体积光效果的目标图像的方案，依据噪声向量纹理，对用于对第一遮挡纹理图进行模糊处理的采样坐标进行扰动，通过噪声向量的随机特性，以减小采样点数对体积光分段效果的影响，并且可以进一步起到基于较少的采样点实现高质量的体积光效果图像的效果。
如图3为本申请实施例提供的一种体积光效果处理方法的流程示意图，该方法的执行主体可以为计算机设备，该方法可至少包括以下步骤：
301、获取目标图像对应的第一遮挡纹理图中多个像素的第一纹理坐标；
302、根据所述多个像素的第一纹理坐标，对预设噪声向量纹理进行采样，得到含有所述多个像素对应的噪声值的抖动向量；
303、根据所述抖动向量，确定所述多个像素对应的抖动后的第二纹理坐标；
304、基于所述第二纹理坐标及参照坐标，对所述第一遮挡纹理图进行一次模糊处理，得到光线纹理图像；
305、利用所述光线纹理图像与所述目标图像对应的场景颜色纹理图像，得到具有体积光效果的画面信息。
本实施例对应的具体实现方式可参见前述内容，此处不再赘述。
图4为本申请实施例提供的一种数据处理装置的结构示意图，该装置包括：获取模块41、采样模块42、确定模块43以及处理模块44；其中：
获取模块41，用于获取第一遮挡纹理图中多个像素的第一纹理坐标；
采样模块42，用于根据所述多个像素的第一纹理坐标，对预设噪声向量纹理进行采样，得到含有所述多个像素对应的噪声值的抖动向量；
确定模块43，用于根据所述抖动向量，确定所述多个像素对应的抖动后的第二纹理坐标；
处理模块44，用于基于所述第二纹理坐标及参照坐标，对所述第一遮挡纹理图进行径向模糊处理，得到光线纹理图像；其中，所述光线纹理图像用于确定具有体积光效果的目标图像。
可选地，上述装置还用于：
获取目标图像对应的初始图像中，不透明物体的深度纹理图；
对所述深度纹理图进行二值化处理，得到第二遮挡纹理图；
对所述第二遮挡纹理图进行下采样，得到所述第一遮挡纹理图。
可选地，上述采样模块42，在用于根据所述多个像素的第一纹理坐标，对预设噪声向量纹理进行采样，得到含有所述多个像素对应的噪声值的抖动向量时，具体用于：
获取第一时间信息；
将所述多个像素的第一纹理坐标及所述第一时间信息，作为预设函数的输入，得到采样纹理坐标；
利用所述采样纹理坐标，对所述预设噪声向量纹理进行采样，得到含有所述多个像素对应的噪声值的抖动向量。
可选地，上述采样模块42，在用于将所述多个像素的第一纹理坐标及所述第一时间信息，作为预设函数的输入，得到采样纹理坐标时，具体用于：
根据所述多个像素的第一纹理坐标及所述第一时间信息，得到第一二维向量；
将所述第一二维向量作为所述预设函数的输入，以通过所述预设函数提取所述第一二维向量的各分量的小数部分构建出第二二维向量；
其中，所述第二二维向量中含有多个采样纹理坐标。
可选地，上述确定模块43，在用于根据所述抖动向量，确定所述多个像素对应的抖动后的第二纹理坐标时，具体用于：
获取所述第一遮挡纹理图的分辨率；
利用所述分辨率，对所述抖动向量中的向量值进行处理，得到处理后的所述抖动向量；
根据处理后的所述抖动向量及所述多个像素的第一纹理坐标，确定所述第二纹理坐标。
可选地，在上述确定模块43，在用于根据处理后的所述抖动向量及所述多个像素的第一纹理坐标，确定所述第二纹理坐标时，具体用于：
将处理后的所述抖动向量及所述多个像素的第一纹理坐标做加和处理，得到所述第二纹理坐标。
可选地，在上述确定模块43用于利用所述分辨率，对所述抖动向量中的向量值进行处理，得到处理后的所述抖动向量时，具体用于：
利用所述分辨率，对所述抖动向量中的向量值进行缩小处理，得到处理后的所述抖动向量。
可选地，上述装置还用于：
获取虚拟太阳的世界坐标；
对所述虚拟太阳的世界坐标进行坐标变换，得到所述虚拟太阳在二维屏幕空间的屏幕坐标；
基于所述屏幕坐标确定所述参照坐标。
可选地，上述装置还用于：
获取所述第一遮挡纹理图经所述径向模糊处理后的处理结果；
将所述处理结果作为下次径向模糊处理的输入图像。
可选地，上述装置还用于：
对所述光线纹理图像进行滤波处理，得到目标光线纹理图像；
获取太阳光颜色信息；
利用所述目标光线纹理图像，与所述太阳光颜色信息确定出体积光光线纹理图像；
将所述体积光光线纹理图像与所述目标图像对应的场景颜色纹理图像进行叠加，得到具有体积光效果的所述目标图像。
本实施例对应的具体实现方式可参见前述内容，此处不再赘述。
本申请还提供了一种电子设备，包括处理器和存储器，所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、至少一段程序、代码集或指令集由所述处理器加载并执行以实现前述的图像处理方法，和/或体积光效果处理方法。
本申请还提供了一种计算机可读介质，其上存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、至少一段程序、代码集或指令集由处理器加载并执行以实现前述的图像处理方法，和/或体积光效果处理方法。
下面结合具体应用场景对本申请实施例提供的技术方案进行进一步补充说明。
应用场景一
参见图5所示，本申请提供的图像处理方法可包括以下步骤：
501、获取当前帧的不透明物体的深度纹理；
502、根据用户输入的深度阈值，对深度纹理进行二值化，得到遮挡信息纹理；
503、对遮挡信息纹理进行下采样，得到经下采样后的遮挡信息纹理；
504、以太阳在二维屏幕空间的坐标值为中心点，对下采样后的遮挡信息纹理进行多次迭代径向模糊，得到具有体积光效果的光线纹理(对应前述104中的光线纹理图像)；
505、对光线纹理进行双边模糊操作，移除光线图中的噪点，得到平滑的光线纹理；
506、利用用户指定的太阳光颜色与平滑后的光线纹理相乘，得到具有颜色的体积光光线纹理，并将体积光光线纹理与当前帧计算光照之后的颜色纹理相加，得到有体积光效果的画面。
具体地，待赋予体积光效果的当前帧的不透明物体的深度纹理中存储有对应标准设备坐标系(NDC)的深度值，一般而言，其范围是[0,1]，0表示相机的近裁剪平面，1表示相机的远裁剪平面。在游戏场景中的不透明物体渲染完毕之后，得到该深度纹理。
进一步地，可将虚拟太阳在世界空间的位置坐标进行投影变换，得到太阳在二维屏幕空间的坐标值。前述迭代次数由用户来控制，迭代次数越多，模糊效果越好。经过径向模糊之后，则可得到具有体积光效果的光线纹理。
进一步地，在利用用户指定的太阳光颜色与光线纹理相乘之前，还需对前述得到的平滑的光线纹理进行上采样，以使平滑后的光线纹理的分辨率与前述深度纹理的分辨率相同。
进一步地，前述光线纹理为灰度图，该光线纹理中各个像素对应的灰度值与用户输入的太阳光颜色信息相乘，即可得到有颜色的体积光光线纹理；体积光光线纹理与游戏的计算完光照之后的场景颜色纹理进行叠加，就可以得到有体积光效果的游戏画面。
应用场景二
针对前述步骤504，以太阳在二维屏幕空间的坐标值为中心点，对下采样后的遮挡信息纹理进行多次迭代径向模糊，得到具有体积光效果的光线纹理时，迭代次数由用户来控制，迭代次数越多，模糊效果越好。经过径向模糊之后，则可得到具有体积光效果的光线纹理。
其中，针对设定迭代次数M后的每次迭代的径向模糊算法的详细流程如下：
取用于存储径向模糊中间结果的空白帧的多个(全部)像素的纹理坐标UVPixel1和时间量Time1计算出对噪声向量纹理采样的纹理坐标UVNoise1
UVNoise 1＝frac(UVPixel 1+Time1)
其中，frac()函数作用是取传入二维向量的各个分量的小数部分构建出新的二维向量并返回。上述空白帧与待赋予体积光效果的当前帧有对应关系，其分辨率与待采样的遮挡信息纹理的分辨率相同。
利用UVNoise1对噪声向量纹理进行采样，并对采样结果进行处理，以使采样得到的向量的分量的范围为[-1,1]；得到抖动向量UVDither2，根据当前渲染分辨率Width1和Height1对抖动向量进行缩小，并将缩小后的抖动向量与空白帧的多个像素的纹理坐标相加得到抖动后的纹理坐标PosPixelDithered1：
PosPixelDithered1＝UVPixel1+UVDither2/n1*float2(Width1,Height1)
n1可以由用户设定，例如可以为2，进一步地，利用抖动后的坐标PosPixelDithered1和太阳在屏幕空间的坐标PosSun得到当前像素到太阳的方向向量V:
V＝PosSun-PosPixelDithered1
对方向向量V根据采样次数N进行等分得到每次采样的步长向量DeltaV:
DeltaV＝V/N
针对空白帧的多个像素中的每个像素，以自身对应的PosPixelDithered1作为初始坐标开始循环N次，对当前待赋予体积光效果的当前帧对应的遮挡信息纹理(被采样纹理)进行采样，每次循环纹理采样坐标都累加DeltaV，采样结果加到总采样值TotalOccu中，循环结束之后计算得到纹理采样坐标自身对应的最终的遮挡值FinalOccu：
FinalOccu＝TotalOccu/N
进一步得到针对空白帧的多个像素的多个纹理坐标对应的遮挡值，进而得到对当前待赋予体积光效果的当前帧对应的遮挡信息纹理的模糊结果，将该模糊结果存储于临时纹理(也可以存储于前述空白帧)中，以作为下次迭代的被采样纹理(也就是下次迭代被采样的遮挡信息纹理)。
当迭代次数达到预设迭代次数M时，迭代停止，将最后一次迭代结束时，得到的经过M次径向模糊的遮挡信息纹理，作为具有体积光效果的光线纹理。
以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的各个模块可以是或者也可以不是物理上分开的。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
通过以上的实施例的描述，本领域的技术人员可以清楚地了解到各实施例可借助加必需的通用硬件平台的方式来实现，当然也可以通过硬件和软件结合的方式来实现。基于这样的理解，上述技术方案本质上或者说做出贡献的部分可以以计算机产品的形式体现出来，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
最后应说明的是：以上实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。
Claims (10)
1.一种图像处理方法，其特征在于，包括：
获取第一遮挡纹理图中多个像素的第一纹理坐标；
根据所述多个像素的第一纹理坐标，对预设噪声向量纹理进行采样，得到含有所述多个像素对应的噪声值的抖动向量；
获取所述第一遮挡纹理图的分辨率；
利用所述分辨率，通过公式，对所述抖动向量中的向量值进行缩小处理，得到处理后的抖动向量；
根据所述处理后的抖动向量以及所述多个像素的第一纹理坐标，确定所述多个像素对应的抖动后的第二纹理坐标；
基于所述第二纹理坐标及参照坐标，对所述第一遮挡纹理图进行径向模糊处理，得到光线纹理图像；其中，所述光线纹理图像用于确定具有体积光效果的目标图像；
其中，所述公式为：
UVDither1＝UVDither0/(n*float2(Width,Height))
所述(Width,Height)是指所述第一遮挡纹理图的分辨率，所述Width是指所述第一遮挡纹理图的宽包括的像素的数量，所述Height是指所述第一遮挡纹理图的高包括的像素的数量，所述UVDither0是指处理前的抖动向量，所述UVDither1为所述处理后的抖动向量，所述n为正整数。
2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
获取所述目标图像对应的初始图像中，不透明物体的深度纹理图；
对所述深度纹理图进行二值化处理，得到第二遮挡纹理图；
对所述第二遮挡纹理图进行下采样，得到所述第一遮挡纹理图。
3.根据权利要求1所述的方法，其特征在于，根据所述多个像素的第一纹理坐标，对预设噪声向量纹理进行采样，得到含有所述多个像素对应的噪声值的抖动向量，包括：
获取第一时间信息；
将所述多个像素的第一纹理坐标及所述第一时间信息，作为预设函数的输入，得到采样纹理坐标；
利用所述采样纹理坐标，对所述预设噪声向量纹理进行采样，得到含有所述多个像素对应的噪声值的抖动向量。
4.根据权利要求3所述的方法，其特征在于，将所述多个像素的第一纹理坐标及所述第一时间信息，作为预设函数的输入，得到采样纹理坐标，包括：
根据所述多个像素的第一纹理坐标及所述第一时间信息，得到第一二维向量；
将所述第一二维向量作为所述预设函数的输入，以通过所述预设函数提取所述第一二维向量的各分量的小数部分构建出第二二维向量；
其中，所述第二二维向量中含有多个采样纹理坐标。
5.根据权利要求1所述的方法，其特征在于，根据所述处理后的抖动向量以及所述多个像素的第一纹理坐标，确定所述多个像素对应的抖动后的第二纹理坐标，包括：
将处理后的所述抖动向量及所述多个像素的第一纹理坐标做加和处理，得到所述第二纹理坐标。
6.根据权利要求1所述的方法，其特征在于，所述方法还包括：
获取虚拟太阳的世界坐标；
对所述虚拟太阳的世界坐标进行坐标变换，得到所述虚拟太阳在二维屏幕空间的屏幕坐标；
基于所述屏幕坐标确定所述参照坐标。
7.根据权利要求1所述的方法，其特征在于，所述方法还包括：
获取所述第一遮挡纹理图经所述径向模糊处理后的处理结果；
将所述处理结果作为下次径向模糊处理的输入图像。
8.根据权利要求1所述的方法，其特征在于，所述方法还包括：
对所述光线纹理图像进行滤波处理，得到目标光线纹理图像；
获取太阳光颜色信息；
利用所述目标光线纹理图像与所述太阳光颜色信息，确定出体积光光线纹理图像；
将所述体积光光线纹理图像与所述目标图像对应的场景颜色纹理图像进行叠加，得到具有体积光效果的所述目标图像。
9.一种电子设备，包括处理器和存储器，所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、至少一段程序、代码集或指令集由所述处理器加载并执行以实现根据权利要求1至8中任一项所述的方法。
10.一种计算机可读介质，其上存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、至少一段程序、代码集或指令集由处理器加载并执行以实现根据权利要求1至8中任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011556205.XA CN112691378B (zh) | 2020-12-23 | 2020-12-23 | 图像处理方法、设备及可读介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011556205.XA CN112691378B (zh) | 2020-12-23 | 2020-12-23 | 图像处理方法、设备及可读介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN112691378A CN112691378A (zh) | 2021-04-23 |
| CN112691378B true CN112691378B (zh) | 2022-06-07 |
Family
ID=75510100
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011556205.XA Active CN112691378B (zh) | 2020-12-23 | 2020-12-23 | 图像处理方法、设备及可读介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112691378B (zh) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114339448B (zh) * | 2021-12-31 | 2024-02-13 | 深圳万兴软件有限公司 | 光束视频特效的制作方法、装置、计算机设备及存储介质 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106504310A (zh) * | 2015-09-04 | 2017-03-15 | Arm有限公司 | 图形处理系统 |
| CN110211215A (zh) * | 2013-02-20 | 2019-09-06 | 佳能医疗系统株式会社 | 医用图像处理装置以及医用图像处理方法 |
| CN111951345A (zh) * | 2020-08-10 | 2020-11-17 | 杭州趣维科技有限公司 | 一种基于gpu的实时图像视频油画风格化方法 |
| CN111968215A (zh) * | 2020-07-29 | 2020-11-20 | 完美世界(北京)软件科技发展有限公司 | 一种体积光渲染方法、装置、电子设备及存储介质 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP3737997A4 (en) * | 2018-01-14 | 2021-09-29 | Light Field Lab, Inc. | SYSTEMS AND METHODS FOR RENDERING DATA OF A 3D ENVIRONMENT |
-
2020
- 2020-12-23 CN CN202011556205.XA patent/CN112691378B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110211215A (zh) * | 2013-02-20 | 2019-09-06 | 佳能医疗系统株式会社 | 医用图像处理装置以及医用图像处理方法 |
| CN106504310A (zh) * | 2015-09-04 | 2017-03-15 | Arm有限公司 | 图形处理系统 |
| CN111968215A (zh) * | 2020-07-29 | 2020-11-20 | 完美世界(北京)软件科技发展有限公司 | 一种体积光渲染方法、装置、电子设备及存储介质 |
| CN111951345A (zh) * | 2020-08-10 | 2020-11-17 | 杭州趣维科技有限公司 | 一种基于gpu的实时图像视频油画风格化方法 |
Non-Patent Citations (1)
| Title |
|---|
| 在Unity中实现体积光渲染;SardineFish;《https://zhuanlan.zhihu.com/p/124297905》;20200507;全文 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN112691378A (zh) | 2021-04-23 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Cho et al. | Removing non-uniform motion blur from images | |
| CN106934397B (zh) | 图像处理方法、装置及电子设备 | |
| CN111476737B (zh) | 一种图像处理方法、智能设备及计算机可读存储介质 | |
| Baker et al. | Limits on super-resolution and how to break them | |
| KR101036787B1 (ko) | 움직임 벡터 연산 방법과 이 방법을 이용한 손 떨림 보정장치, 촬상 장치, 및 동영상 생성 장치 | |
| CN107220931B (zh) | 一种基于灰度级映射的高动态范围图像重建方法 | |
| AU2013206601A1 (en) | Variable blend width compositing | |
| US8902229B2 (en) | Method and system for rendering three dimensional views of a scene | |
| JP2001238073A (ja) | 画像処理方法及び装置 | |
| CN113992861A (zh) | 一种图像处理方法及图像处理装置 | |
| CN111402111B (zh) | 图像虚化方法、装置、终端及计算机可读存储介质 | |
| CN111325667B (zh) | 图像处理方法及相关产品 | |
| CN112652046B (zh) | 游戏画面的生成方法、装置、设备及存储介质 | |
| CN113674159A (zh) | 图像处理方法、装置、电子设备及可读存储介质 | |
| CN112691378B (zh) | 图像处理方法、设备及可读介质 | |
| CN110415193A (zh) | 煤矿低照度模糊图像的复原方法 | |
| CN111353955A (zh) | 一种图像处理方法、装置、设备和存储介质 | |
| CN116012232A (zh) | 图像处理方法、装置及存储介质、电子设备 | |
| EP3070670B1 (en) | Using frequency decomposition for better color consistency in a synthesized region | |
| RU2583725C1 (ru) | Способ и система для обработки изображения | |
| CN113793257A (zh) | 图像处理方法及装置、电子设备、计算机可读存储介质 | |
| CN111882498A (zh) | 图像处理方法、装置、电子设备及存储介质 | |
| US9412188B2 (en) | Method and image processing system for removing a visual object from an image | |
| CN112419147A (zh) | 图像渲染方法及装置 | |
| CN112070954A (zh) | 活体识别方法、装置、设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |