CN115330640A - 光照贴图降噪方法、装置、设备和介质 - Google Patents
光照贴图降噪方法、装置、设备和介质 Download PDFInfo
- Publication number
- CN115330640A CN115330640A CN202211240562.4A CN202211240562A CN115330640A CN 115330640 A CN115330640 A CN 115330640A CN 202211240562 A CN202211240562 A CN 202211240562A CN 115330640 A CN115330640 A CN 115330640A
- Authority
- CN
- China
- Prior art keywords
- pixel point
- illumination
- noise reduction
- target pixel
- distance
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000005286 illumination Methods 0.000 title claims abstract description 680
- 230000009467 reduction Effects 0.000 title claims abstract description 296
- 238000000034 method Methods 0.000 title claims abstract description 82
- 238000013507 mapping Methods 0.000 title claims description 26
- 238000012545 processing Methods 0.000 claims abstract description 118
- 238000005070 sampling Methods 0.000 claims description 36
- 238000004590 computer program Methods 0.000 claims description 25
- 238000012512 characterization method Methods 0.000 claims description 23
- 238000009877 rendering Methods 0.000 abstract description 28
- 230000000694 effects Effects 0.000 abstract description 22
- 238000001914 filtration Methods 0.000 description 17
- 238000010586 diagram Methods 0.000 description 15
- 238000004891 communication Methods 0.000 description 11
- 238000011946 reduction process Methods 0.000 description 9
- 238000004364 calculation method Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 8
- 230000002159 abnormal effect Effects 0.000 description 7
- 239000003638 chemical reducing agent Substances 0.000 description 4
- 238000001514 detection method Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 238000013528 artificial neural network Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 239000011159 matrix material Substances 0.000 description 3
- 238000007781 pre-processing Methods 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 230000000903 blocking effect Effects 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000009499 grossing Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000012538 light obscuration Methods 0.000 description 2
- 238000010606 normalization Methods 0.000 description 2
- 230000003405 preventing effect Effects 0.000 description 2
- 230000002265 prevention Effects 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/04—Texture mapping
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/50—Lighting effects
- G06T15/506—Illumination models
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Graphics (AREA)
- Image Processing (AREA)
Abstract
本申请涉及一种光照贴图降噪方法、装置、设备和介质。所述方法包括:针对待降噪的光照贴图中每一个目标像素点,确定目标像素点在光照贴图中对应的降噪参考区域;降噪参考区域内包括用于降噪参考的至少一个参考像素点;针对每个参考像素点,确定参考像素点与目标像素点在三维空间中的世界空间距离;根据世界空间距离确定参考像素点对目标像素点的光照贡献参数;根据每个参考像素点的光照贡献参数,以及光照贴图中针对参考像素点记录的光照数据,对光照贴图中针对目标像素点记录的光照数据进行降噪处理,得到降噪处理后的光照贴图。本方法可以提升针对光照贴图的降噪效果,从而提升基于光照贴图进行光照渲染的图像质量。
Description
技术领域
本申请涉及图像处理技术,更涉及图像降噪技术领域,特别是涉及一种光照贴图降噪方法、装置、设备和介质。
背景技术
烘焙系统会对光源稳定的静态物体所受到的光照和阴影等进行预先光照计算,计算产生的结果存放在一张纹理贴图中,这张贴图可称之为光照贴图。在光源固定的场景中,使用光照贴图代替实时的光照计算,可以减少资源消耗,从而提高场景运行效率。比如,针对游戏领域,在对虚拟场景进行渲染时,可通过光照贴图代替实时的光照计算,可以提升虚拟场景的运行效率。然而,在生成光照贴图的过程中,由于各种原因(比如,光源采样时采样的数量不足)会导致最终生成的光照贴图存在较多的噪声,进而后续利用光照贴图进行光照渲染时,会导致渲染出来的图像质量较差。因此,在利用光照贴图进行光照渲染之前,通常需要对光照贴图进行降噪。
传统技术中,通常采用针对普通图像的降噪方式(比如,神经网络降噪器)对光照贴图进行降噪。由于光照贴图的特殊性,比如,光照贴图中像素距离很远的两个像素点,他们在三维空间中的距离可能很近。通过传统的降噪方式对光照贴图进行降噪,会导致降噪后的光照贴图存在接缝瑕疵,从而影响最终渲染的图像质量。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提升降噪效果的光照贴图降噪方法、装置、设备和介质。
第一方面,本申请提供了一种光照贴图降噪方法,所述方法包括:
针对待降噪的光照贴图中每一个目标像素点,确定所述目标像素点在所述光照贴图中对应的降噪参考区域;所述降噪参考区域内包括用于降噪参考的至少一个参考像素点;
针对每个所述参考像素点,确定所述参考像素点与所述目标像素点在三维空间中的世界空间距离;
根据所述世界空间距离确定所述参考像素点对所述目标像素点的光照贡献参数;
根据每个所述参考像素点的所述光照贡献参数,以及所述光照贴图中针对所述参考像素点记录的光照数据,对所述光照贴图中针对所述目标像素点记录的光照数据进行降噪处理,得到降噪处理后的光照贴图。
第二方面,本申请提供了一种光照贴图降噪装置,所述装置包括:
确定模块,用于针对待降噪的光照贴图中每一个目标像素点,确定所述目标像素点在所述光照贴图中对应的降噪参考区域;所述降噪参考区域内包括用于降噪参考的至少一个参考像素点;针对每个所述参考像素点,确定所述参考像素点与所述目标像素点在三维空间中的世界空间距离;根据所述世界空间距离确定所述参考像素点对所述目标像素点的光照贡献参数;
降噪模块,用于根据每个所述参考像素点的所述光照贡献参数,以及所述光照贴图中针对所述参考像素点记录的光照数据,对所述光照贴图中针对所述目标像素点记录的光照数据进行降噪处理,得到降噪处理后的光照贴图。
在一个实施例中,所述确定模块还用于针对待降噪的光照贴图中每一个目标像素点,确定本轮降噪处理中所述目标像素点对应的降噪参考区域;
所述确定模块还用于将本轮降噪处理后的光照贴图作为下一轮待降噪的光照贴图,并将下一轮作为新的一轮,返回所述针对待降噪的光照贴图中每一个目标像素点,确定本轮降噪处理中所述目标像素点对应的降噪参考区域以迭代降噪,直至满足迭代停止条件。
在一个实施例中,在前预设轮次内的每轮降噪处理中,是根据第一滤波核的采样范围确定所述目标像素点对应的降噪参考区域;在所述前预设轮次之后的每轮降噪处理中,是根据第二滤波核的采样范围确定所述目标像素点对应的降噪参考区域;其中,所述第一滤波核的采样范围小于所述第二滤波核的采样范围。
在一个实施例中,所述确定模块还用于根据所述世界空间距离确定所述参考像素点对所述目标像素点的距离影响参数;所述距离影响参数用于表征所述世界空间距离对光照贡献的影响程度;根据所述距离影响参数确定光照贡献参数。
在一个实施例中,所述确定模块还用于根据所述世界空间距离和预先设置的距离调整参数,确定距离表征参数;所述距离表征参数,用于表征所述参考像素点与所述目标像素点在三维空间中的世界空间距离的远近;根据所述距离表征参数确定所述参考像素点对所述目标像素点的距离影响参数。
在一个实施例中,所述确定模块还用于确定法线影响参数和亮度影响参数中的至少一种;所述法线影响参数用于表征所述目标像素点的法线和所述参考像素点的法线对光照贡献的影响程度;所述亮度影响参数用于表征所述目标像素点的亮度和所述参考像素点的亮度对光照贡献的影响程度;所述法线影响参数是根据所述目标像素点的法线和所述参考像素点的法线确定的;所述亮度影响参数是根据所述目标像素点的亮度和所述参考像素点的亮度确定的;根据所述距离影响参数、所述法线影响参数和所述亮度影响参数中的至少一种,确定所述参考像素点对所述目标像素点的光照贡献参数。
在一个实施例中,所述确定模块还用于确定所述目标像素点在多个预设方向上对应的光照贡献距离;位于所述光照贡献距离之内的像素点对所述目标像素点具有光照贡献;针对每个所述参考像素点,若所述参考像素点与所述目标像素点在二维空间中的像素距离未超过所述光照贡献距离,则执行所述确定所述参考像素点与所述目标像素点在三维空间中的世界空间距离,根据所述世界空间距离确定所述参考像素点对所述目标像素点的光照贡献参数的步骤;若所述参考像素点与所述目标像素点在二维空间中的像素距离已超过所述光照贡献距离,则判定所述参考像素点对所述目标像素点没有光照贡献。
在一个实施例中,所述确定模块还用于以所述目标像素点为起始点,分别向所述目标像素点的多个预设方向进行遮挡像素探测;针对每一个所述预设方向,在所述预设方向上探测到被遮挡的像素点的情况下,根据所述目标像素点与探测的所述被遮挡的像素点之间的像素距离,确定所述目标像素点在所述预设方向上对应的光照贡献距离。
在一个实施例中,所述确定模块还用于确定所述光照贴图中处于被遮挡状态的像素点,并在所述光照贴图中对所述处于被遮挡状态的像素点添加遮挡标记;
所述确定模块还用于针对每一个所述预设方向,在沿着所述预设方向从所述光照贴图中探测到具有所述遮挡标记的像素点的情况下,根据所述目标像素点与探测的所述具有所述遮挡标记的像素点之间的像素距离,确定所述目标像素点在所述方向上对应的光照贡献距离。
在一个实施例中,所述光照贴图是对三维空间的虚拟场景中三维虚拟模型进行二维拆分得到的;所述确定模块还用于针对所述光照贴图中的每一个像素点,确定所述像素点对应的目标几何面;所述目标几何面,是所述三维空间的虚拟场景中与从所述像素点发出的多条射线最近相交的几何面;根据所述像素点的法线的方向与所述目标几何面的法线的方向之间的关系,从所述光照贴图的像素点中确定处于被遮挡状态的像素点。
在一个实施例中,所述降噪模块还用于根据每个所述参考像素点的所述光照贡献参数,以及所述光照贴图中针对所述参考像素点记录的光照数据,确定各个所述参考像素点对所述目标像素点贡献的光照总量;根据所述光照总量与综合光照贡献参数的比值,对所述光照贴图中针对所述目标像素点记录的光照数据进行降噪处理,得到降噪处理后的光照贴图;所述综合光照贡献参数,是根据各个所述参考像素点的光照贡献参数之和确定的。
在一个实施例中,所述装置还包括:
预处理模块,用于获取初始光照贴图;针对所述初始光照贴图中的每一个像素点,根据所述像素点对应的各个邻域像素点的亮度值,确定所述像素点的目标亮度范围;所述邻域像素点,是所述像素点的预设邻域范围内的像素点;针对亮度值未落在所述目标亮度范围内的像素点,则将所述像素点的亮度值调整至所述目标亮度范围内,得到待降噪的光照贴图。
第三方面,本申请提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现本申请各方法实施例中的步骤。
第四方面,本申请提供了一种计算机可读存储介质,存储有计算机程序,该计算机程序被处理器执行时实现本申请各方法实施例中的步骤。
第五方面,本申请提供了一种计算机程序产品,包括计算机程序,计算机程序被处理器执行时实现本申请各方法实施例中的步骤。
上述光照贴图降噪方法、装置、设备、介质和计算机程序产品,通过针对待降噪的光照贴图中每一个目标像素点,确定目标像素点在光照贴图中对应的降噪参考区域,降噪参考区域内包括用于降噪参考的至少一个参考像素点。针对每个参考像素点,确定参考像素点与目标像素点在三维空间中的世界空间距离。由于参考像素点与目标像素点在三维空间中的世界空间距离,可以直接准确地表征参考像素点与目标像素点在三维空间中的相对位置远近,因此根据世界空间距离确定参考像素点对目标像素点的光照贡献参数,可以提升光照贡献参数的准确性。进而根据每个参考像素点的较为准确的光照贡献参数,以及光照贴图中针对参考像素点记录的光照数据,对光照贴图中针对目标像素点记录的光照数据进行降噪处理,可以提升针对光照贴图的降噪效果,得到可避免接缝瑕疵的光照贴图,从而提升基于光照贴图进行光照渲染得到的图像质量。
附图说明
图1为一个实施例中光照贴图降噪方法的应用环境图;
图2为一个实施例中光照贴图降噪方法的流程示意图;
图3为一个实施例中火台对应的光照贴图的示意图;
图4为一个实施例中滤波核中的采样点分布示意图;
图5为一个实施例中对火台的光照贴图进行降噪的效果对比示意图;
图6为一个实施例中防漏光效果示意图;
图7为另一个实施例中防漏光效果示意图;
图8为一个实施例中可视化的参数配置界面示意图;
图9为一个实施例中对光照贴图中异常像素点的亮度进行预处理前后渲染得到的场景图像的对比示意图;
图10为一个实施例中采用本申请降噪方法对光照贴图进行降噪前后渲染得到的场景图像的对比示意图;
图11为一个实施例中采用传统降噪方法和本申请降噪方法对光照贴图进行降噪后渲染得到的场景图像的对比示意图;
图12为一个实施例中平板对应的光照贴图的示意图;
图13为一个实施例中采用传统降噪方法和本申请降噪方法对平板对应的光照贴图进行降噪后渲染得到的平板场景图像的对比示意图;
图14为另一个实施例中光照贴图降噪方法的流程示意图;
图15为一个实施例中光照贴图降噪装置的结构框图;
图16为一个实施例中计算机设备的内部结构图;
图17为另一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的光照贴图降噪方法,可以应用于如图1所示的应用环境中。其中,终端102通过网络与服务器104进行通信。数据存储系统可以存储服务器104需要处理的数据。数据存储系统可以集成在服务器104上,也可以放在云上或其他服务器上。其中,终端102可以但不限于是各种台式计算机、笔记本电脑、智能手机、平板电脑、物联网设备和便携式可穿戴设备,物联网设备可为智能音箱、智能电视、智能空调、智能车载设备等。便携式可穿戴设备可为智能手表、智能手环、头戴设备等。服务器104可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN、以及大数据和人工智能平台等基础云计算服务的云服务器。终端102以及服务器104可以通过有线或无线通信方式进行直接或间接地连接,本申请在此不做限制。
针对待降噪的光照贴图中每一个目标像素点,服务器104可确定目标像素点在光照贴图中对应的降噪参考区域,降噪参考区域内包括用于降噪参考的至少一个参考像素点。针对每个参考像素点,服务器104可确定参考像素点与目标像素点在三维空间中的世界空间距离,并根据世界空间距离确定参考像素点对目标像素点的光照贡献参数。服务器104可根据每个参考像素点的光照贡献参数,以及光照贴图中针对参考像素点记录的光照数据,对光照贴图中针对目标像素点记录的光照数据进行降噪处理,得到降噪处理后的光照贴图。
可以理解,服务器104可将降噪后的光照贴图发送至终端102。终端102可基于接收的光照贴图进行相应的光照渲染,得到渲染图像并显示。本实施例对此不做限定,可以理解,图1中的应用场景仅为示意说明,并不限定于此。
在一个实施例中,如图2所示,提供了一种光照贴图降噪方法,该方法可应用于计算机设备,计算机设备可以是终端或服务器,由终端或服务器自身单独执行,也可以通过终端和服务器之间的交互来实现。本实施例以该方法应用于计算机设备为例进行说明,包括以下步骤:
步骤202,针对待降噪的光照贴图中每一个目标像素点,确定目标像素点在光照贴图中对应的降噪参考区域;降噪参考区域内包括用于降噪参考的至少一个参考像素点。
其中,光照贴图,是对三维空间的虚拟场景中三维虚拟模型进行UV拆分(即二维拆分)得到的二维图像。降噪参考区域,是在对目标像素点进行降噪过程中所参考的像素区域,降噪参考区域内包括用于降噪参考的至少一个参考像素点。参考像素点,是在对目标像素点进行降噪过程中所参考的像素点。
可以理解,相较于普通图像,由于光照贴图是对三维空间的虚拟场景中三维虚拟模型进行UV拆分得到的二维图像,因此,光照贴图具有一定的特殊性。比如,光照贴图中像素距离很远的两个像素点,他们在三维空间中的距离可能很近。再比如,光照贴图由拆分得到的至少一个UV岛(即光照数据记录区域)组成,UV岛中的各个像素点记录有光照数据,UV岛之间的填充区域是无效的,即,填充区域中的像素点没有记录有光照数据。
在一个实施例中,光照数据可以包括颜色数据、球谐系数、环境光遮蔽数据和天光遮蔽数据等中的至少一种。可以理解,颜色数据、球谐系数、环境光遮蔽数据和天光遮蔽数据是记录在光照贴图中不同类型的数据,他们均可用于表示光照效果。
在一个实施例中,如图3所示,白色区域中展示的是三维空间的虚拟场景中的火台301(即三维虚拟模型),灰色区域中展示的是对火台301进行UV拆分得到的光照贴图。火台301的光照贴图中包括302、303和304这三个UV岛,每个UV岛中的各个像素点记录有针对火台301的光照数据。相较于普通图像,光照贴图具有一定的特殊性。比如,在三维空间中,像素点A和像素点B在火台301上的距离很近,沿着拆分线3011对火台的手柄部分进行拆分之后,在火台301的光照贴图中,像素点A和像素点B的像素距离却很远。
具体地,计算机设备可获取待降噪的光照贴图,针对待降噪的光照贴图中每一个目标像素点,计算机设备可确定目标像素点在光照贴图中对应的降噪参考区域,其中,降噪参考区域内包括用于降噪参考的至少一个参考像素点。
在一个实施例中,针对每一个目标像素点,计算机设备可以将以该目标像素点为中心的预设范围区域,作为该目标像素点在光照贴图中对应的降噪参考区域。可以理解,该预设范围区域内的像素点即为参考像素点。
在一个实施例中,计算机设备可对光照贴图进行多轮降噪,可以理解,每轮的待降噪的光照贴图是上一轮降噪后的光照贴图。若本轮是首轮降噪处理,则本轮的带降噪的光照贴图是计算机设备最开始获取得到的光照贴图。计算机设备可分别确定每一轮降噪处理中目标像素点对应的降噪参考区域。
步骤204,针对每个参考像素点,确定参考像素点与目标像素点在三维空间中的世界空间距离。
其中,世界空间距离,是三维空间中参考像素点与目标像素点之间的距离,可以理解,参考像素点与目标像素点在三维空间中的世界空间距离,可以直接准确地表征参考像素点与目标像素点在三维空间中的相对位置远近。
具体地,计算机设备可获取光照贴图中各个像素点在三维空间中分别对应的世界空间坐标,针对每个参考像素点,计算机设备可根据该参考像素点的世界空间坐标与目标像素点的世界空间坐标,确定该参考像素点与目标像素点在三维空间中的世界空间距离。
步骤206,根据世界空间距离确定参考像素点对目标像素点的光照贡献参数。
其中,光照贡献参数,用于表征参考像素点对目标像素点的光照贡献的大小。可以理解,光照贡献参数的数值越大,参考像素点对目标像素点的光照贡献就越大,反之则越小。
在一个实施例中,计算机设备可根据参考像素点与目标像素点在三维空间中的世界空间距离,确定参考像素点对目标像素点的光照贡献参数。可以理解,参考像素点与目标像素点在三维空间中的世界空间距离越近,则参考像素点对目标像素点的光照贡献参数就越大,反之则越小。
在一个实施例中,光照贴图中的各个目标像素点分别对应有预设的光照贡献距离,位于光照贡献距离之内的参考像素点对该目标像素点具有光照贡献,位于光照贡献距离之外的参考像素点对该目标像素点没有光照贡献。可以理解,针对位于光照贡献距离之内的每一个参考像素点,计算机设备可确定该参考像素点与目标像素点在三维空间中的世界空间距离,并根据世界空间距离确定参考像素点对目标像素点的光照贡献参数。针对位于光照贡献距离之外的每一个参考像素点,计算机设备可判定该参考像素点对目标像素点没有光照贡献。
步骤208,根据每个参考像素点的光照贡献参数,以及光照贴图中针对参考像素点记录的光照数据,对光照贴图中针对目标像素点记录的光照数据进行降噪处理,得到降噪处理后的光照贴图。
具体地,计算机设备可获取光照贴图中针对目标像素点和参考像素点记录的光照数据。针对光照贴图中的每一个目标像素点,计算机设备可根据该目标像素点对应的各个参考像素点的光照贡献参数,以及光照贴图中针对各个参考像素点记录的光照数据,对光照贴图中针对该目标像素点记录的光照数据进行降噪处理。在光照贴图中的每一个目标像素点都降噪处理完成之后,得到降噪处理后的光照贴图。
在一个实施例中,针对光照贴图中的每一个目标像素点,计算机设备可将该目标像素点对应的各个参考像素点的光照贡献参数,分别作为各个参考像素点的光照贡献权重。通过各个参考像素点分别对应的光照贡献权重,对各个参考像素点记录的光照数据进行加权平均处理,并将光照贴图中针对该目标像素点记录的光照数据,替换为加权平均处理之后得到的光照数据,以实现对光照贴图中针对该目标像素点记录的光照数据的降噪处理。在光照贴图中的每一个目标像素点都降噪处理完成之后,得到降噪处理后的光照贴图。其中,光照贡献权重的数值越大,参考像素点对目标像素点的光照贡献就越大,反之则越小。
上述光照贴图降噪方法中,通过针对待降噪的光照贴图中每一个目标像素点,确定目标像素点在光照贴图中对应的降噪参考区域,降噪参考区域内包括用于降噪参考的至少一个参考像素点。针对每个参考像素点,确定参考像素点与目标像素点在三维空间中的世界空间距离。由于参考像素点与目标像素点在三维空间中的世界空间距离,可以直接准确地表征参考像素点与目标像素点在三维空间中的相对位置远近,因此根据世界空间距离确定参考像素点对目标像素点的光照贡献参数,可以提升光照贡献参数的准确性。进而根据每个参考像素点的较为准确的光照贡献参数,以及光照贴图中针对参考像素点记录的光照数据,对光照贴图中针对目标像素点记录的光照数据进行降噪处理,可以提升针对光照贴图的降噪效果,得到可避免接缝瑕疵的光照贴图,从而提升基于光照贴图进行光照渲染得到的图像质量。
由于传统降噪方法中采样的神经网络降噪器是针对普通图像训练得到的降噪器,而普通图像中的各个像素点仅记录有颜色数据,因此,通过神经网络降噪器对光照贴图进行降噪处理,仅能对光照贴图中的颜色数据进行降噪,而无法对除颜色数据之外的光照数据进行降噪。而本申请的光照贴图降噪方法,通过可以直接准确地表征参考像素点与目标像素点在三维空间中的相对位置远近的世界空间距离,确定参考像素点对目标像素点的光照贡献参数,进而再根据每个参考像素点的光照贡献参数,以及光照贴图中针对参考像素点记录的光照数据,直接对光照贴图中针对目标像素点记录的光照数据进行降噪处理,可以对像素点记录的所有类型的光照数据进行降噪,而不局限于仅对颜色数据类型的光照数据进行降噪,提升了针对光照贴图的降噪效果。
在一个实施例中,针对待降噪的光照贴图中每一个目标像素点,确定目标像素点在光照贴图中对应的降噪参考区域,包括:针对待降噪的光照贴图中每一个目标像素点,确定本轮降噪处理中目标像素点对应的降噪参考区域;方法还包括:将本轮降噪处理后的光照贴图作为下一轮待降噪的光照贴图,并将下一轮作为新的一轮,返回针对待降噪的光照贴图中每一个目标像素点,确定本轮降噪处理中目标像素点对应的降噪参考区域以迭代降噪,直至满足迭代停止条件。
具体地,针对待降噪的光照贴图中每一个目标像素点,计算机设备可确定本轮降噪处理中该目标像素点对应的降噪参考区域。针对降噪参考区域中的每个参考像素点,计算机设备可确定该参考像素点与该目标像素点在三维空间中的世界空间距离,并根据世界空间距离确定该参考像素点对该目标像素点的光照贡献参数。进而,计算机设备可根据该目标像素点对应的每个参考像素点的光照贡献参数,以及光照贴图中针对参考像素点记录的光照数据,对光照贴图中针对该目标像素点记录的光照数据进行降噪处理。在光照贴图中每一个目标像素点降噪处理结束之后,可以得到本轮降噪处理后的光照贴图。计算机设备可将本轮降噪处理后的光照贴图作为下一轮待降噪的光照贴图,并将下一轮作为新的一轮,返回针对待降噪的光照贴图中每一个目标像素点,确定本轮降噪处理中目标像素点对应的降噪参考区域以迭代降噪,直至满足迭代停止条件,得到针对待降噪的光照贴图降噪处理后的光照贴图。
上述实施例中,通过将上一轮降噪处理后的光照贴图作为下一轮待降噪的光照贴图,以对光照贴图进行多轮降噪处理,可以进一步提升针对光照贴图的降噪效果。
在一个实施例中,在前预设轮次内的每轮降噪处理中,是根据第一滤波核的采样范围确定目标像素点对应的降噪参考区域;在前预设轮次之后的每轮降噪处理中,是根据第二滤波核的采样范围确定目标像素点对应的降噪参考区域;其中,第一滤波核的采样范围小于第二滤波核的采样范围。
其中,第一滤波核是在前预设轮次内的每轮降噪处理中使用的滤波核。第二滤波核是在前预设轮次之后的每轮降噪处理中使用的滤波核。第一滤波核的采样范围小于第二滤波核的采样范围。第一滤波核的采样范围是指第一滤波核中的采样点所覆盖的范围,第二滤波核的采样范围是指第二滤波核中的采样点所覆盖的范围。可以理解,第一滤波核的采样点的数量小于第二滤波核的采样点的数量。比如,第一滤波核的采样范围可以是5*5,包括了25个采样点。第二滤波核的采样范围是64*64,包括了4096个采样点。可以理解,滤波核本质上是一个用于滤波的滤波矩阵,该滤波矩阵中的一个元素对应一个采样点。举例说明,一个采样范围为5*5的滤波核,其本质上就是一个5*5的滤波矩阵。
在一个实施例中,参考图4,在前预设轮次内的每轮降噪处理中,本轮使用的第一滤波核中任意两相邻的采样点(即,图4中黑色的点)之间的间距大于上一轮任意两相邻的采样点之间的间距。同样参考图4,在前预设轮次之后的每轮降噪处理中,本轮使用的第二滤波核中任意两相邻的采样点之间的间距大于上一轮任意两相邻的采样点之间的间距。这样,通过多轮迭代降噪,可以将滤波核的采样范围逐渐覆盖整张光照贴图,可以更加完善地利用各个参考像素点与目标像素点的世界空间距离,从而可以进一步避免接缝瑕疵,提升针对光照贴图的降噪效果。可以理解,前预设轮次是指预先设置的、且位于迭代降噪处理中在先的迭代轮次。举例说明,若迭代降噪处理一共包括10轮,前预设轮次是前6轮,则前预设轮次之后还包括4轮的迭代降噪处理。
上述实施例中,在前预设轮次内的每轮降噪处理中,通过采样范围较小的第一滤波核确定目标像素点对应的降噪参考区域,可以先逐步地将频率较大的光照贴图的频率慢慢降低,这样可以进一步提升针对光照贴图的降噪效果,可以理解,频率越大说明光照贴图中的噪声水平越高。进而,在前预设轮次之后的每轮降噪处理中,通过采样范围较大的第二滤波核确定目标像素点对应的降噪参考区域,可以更加完善地利用各个参考像素点与目标像素点的世界空间距离,从而可以进一步避免接缝瑕疵,提升针对光照贴图的降噪效果。
在一个实施例中,根据世界空间距离确定参考像素点对目标像素点的光照贡献参数,包括:根据世界空间距离确定参考像素点对目标像素点的距离影响参数;距离影响参数用于表征世界空间距离对光照贡献的影响程度;根据距离影响参数确定光照贡献参数。
具体地,计算机设备可根据世界空间距离,确定参考像素点对目标像素点的距离影响参数,并根据距离影响参数确定光照贡献参数。其中,距离影响参数用于表征世界空间距离对光照贡献的影响程度,可以理解,目标像素点与参考像素点之间的世界空间距离越近,参考像素点对目标像素点的距离影响参数的数值就越大,反之则越小。
在一个实施例中,计算机设备可对世界空间距离进行归一化处理,并根据归一化处理后的结果,确定参考像素点对目标像素点的距离影响参数。
在一个实施例中,计算机设备可直接将距离影响参数,作为光照贡献参数。
上述实施例中,通过世界空间距离确定参考像素点对目标像素点的距离影响参数,并根据距离影响参数确定光照贡献参数,可以提升光照贡献参数的计算准确率。
在一个实施例中,根据世界空间距离确定参考像素点对目标像素点的距离影响参数,包括:根据世界空间距离和预先设置的距离调整参数,确定距离表征参数;距离表征参数,用于表征参考像素点与目标像素点在三维空间中的世界空间距离的远近;根据距离表征参数确定参考像素点对目标像素点的距离影响参数。
具体地,计算机设备可根据世界空间距离和预先设置的距离调整参数,确定距离表征参数,并根据距离表征参数确定参考像素点对目标像素点的距离影响参数。其中,距离表征参数,用于表征参考像素点与目标像素点在三维空间中的世界空间距离的远近,可以理解,参考像素点与目标像素点在三维空间中的世界空间距离越近,距离表征参数的数值就越大,反之则越小。
在一个实施例中,计算机设备可根据世界空间距离与预先设置的距离调整参数的比值,确定距离表征参数。
上述实施例中,通过世界空间距离和预先设置的距离调整参数,确定距离表征参数,并根据距离表征参数确定参考像素点对目标像素点的距离影响参数,可以提升距离影响参数的计算准确率。
在一个实施例中,根据距离影响参数确定光照贡献参数,包括:确定法线影响参数和亮度影响参数中的至少一种;法线影响参数用于表征目标像素点的法线和参考像素点的法线对光照贡献的影响程度;亮度影响参数用于表征目标像素点的亮度和参考像素点的亮度对光照贡献的影响程度;法线影响参数是根据目标像素点的法线和参考像素点的法线确定的;亮度影响参数是根据目标像素点的亮度和参考像素点的亮度确定的;根据距离影响参数、法线影响参数和亮度影响参数中的至少一种,确定参考像素点对目标像素点的光照贡献参数。
在一个实施例中,法线影响参数,是根据目标像素点的法线向量和参考像素点的法线向量之间的乘积确定的。可以理解,目标像素点的法线向量和参考像素点的法线向量之间的乘积,可以用于表征目标像素点的法线和参考像素点的法线的相似度。目标像素点的法线和参考像素点的法线的相似度越大,则参考像素点对目标像素点的光照贡献就越大,法线影响参数也越大。
在一个实施例中,亮度影响参数,是根据目标像素点的亮度值和参考像素点的亮度值之间的差异确定的。目标像素点的亮度和参考像素点的亮度差异越小,则参考像素点对目标像素点的光照贡献就越大,亮度影响参数也越大。
在一个实施例中,计算机设备可根据距离影响参数、法线影响参数和亮度影响参数,确定参考像素点对目标像素点的光照贡献参数,并基于该光照贡献参数对光照贴图进行降噪处理。可以理解,法线影响参数可以在降噪过程中更好地识别几何物体的边界,避免不同几何物体间的模糊。亮度影响参数可以在降噪过程中自适应地根据噪声程度进行降噪,使得基于降噪后的光照贴图渲染得到的图像具有平滑的光照效果。
如图5所示,(a)为降噪前的光照贴图,其含有较多的噪声。(b)为仅通过法线影响参数确定光照贡献参数,并基于该光照贡献参数对光照贴图进行降噪处理后得到的光照贴图,相较于(a)噪声有所减少,但还是存在较多噪声。(c)为仅通过亮度影响参数确定光照贡献参数,并基于该光照贡献参数对光照贴图进行降噪处理后得到的光照贴图,相较于(a)噪声有所减少,但还是存在较多噪声。(d)为同时通过距离影响参数、法线影响参数和亮度影响参数确定光照贡献参数,并基于该光照贡献参数对光照贴图进行降噪处理后得到的光照贴图,相较于(a)基本对光照贴图中的噪声进行了有效的去除。对比图5中的(a)、(b)、(c)和(d)可知,同时通过距离影响参数、法线影响参数和亮度影响参数确定光照贡献参数,并基于该光照贡献参数对光照贴图进行降噪处理,可以提升针对光照贴图的降噪效果。
上述实施例中,根据距离影响参数、法线影响参数和亮度影响参数中的至少一种,确定参考像素点对目标像素点的光照贡献参数,可以进一步提升光照贡献参数的准确率,从而进一步提升针对光照贴图的降噪效果。
在一个实施例中,根据世界空间距离确定参考像素点对目标像素点的光照贡献参数,包括:确定目标像素点在多个预设方向上对应的光照贡献距离;位于光照贡献距离之内的像素点对目标像素点具有光照贡献;针对每个参考像素点,若参考像素点与目标像素点在二维空间中的像素距离未超过光照贡献距离,则执行确定参考像素点与目标像素点在三维空间中的世界空间距离,根据世界空间距离确定参考像素点对目标像素点的光照贡献参数的步骤;若参考像素点与目标像素点在二维空间中的像素距离已超过光照贡献距离,则判定参考像素点对目标像素点没有光照贡献。
其中,光照贡献距离,是用于表征对目标像素点具有光照贡献的有效距离,位于光照贡献距离之内的像素点对目标像素点具有光照贡献。像素距离,是光照贴图中任意两个像素在二维空间中的距离。
具体地,计算机设备可分别确定目标像素点在多个预设方向上对应的光照贡献距离。针对每个参考像素点,计算机设备可将该参考像素点与目标像素点在二维空间中的像素距离与光照贡献距离进行比对,若该参考像素点与目标像素点在二维空间中的像素距离未超过光照贡献距离,则计算机设备可执行确定参考像素点与目标像素点在三维空间中的世界空间距离,根据世界空间距离确定参考像素点对目标像素点的光照贡献参数的步骤。若参考像素点与目标像素点在二维空间中的像素距离已超过光照贡献距离,则计算机设备可直接判定参考像素点对目标像素点没有光照贡献。
在一个实施例中,预设方向具体可以包括目标像素点的上、下、左、右、左上、左下、右上和右下等方向中的至少一个。
在一个实施例中,计算机设备可针对多个预设方向中的每一个预设方向设置预设距离,并将多个预设方向分别对应的预设距离,作为目标像素点在多个预设方向上分别对应的光照贡献距离。
上述实施例中,由于位于光照贡献距离之内的像素点与目标像素点之间没有遮挡,位于光照贡献距离之外的像素点与目标像素点之间可能存在遮挡,因此,若参考像素点与目标像素点在二维空间中的像素距离未超过光照贡献距离,则确定参考像素点对目标像素点的光照贡献参数。若参考像素点与目标像素点在二维空间中的像素距离已超过光照贡献距离,则判定参考像素点对目标像素点没有光照贡献,这样可避免基于光照贴图渲染得到的图像中的场景中出现漏光现象,进一步提升了基于光照贴图渲染得到的图像的质量。
如图6所示,通过传统的光照贴图降噪方式对光照贴图进行降噪,会出现漏光的效果,比如(a)中的601所示的明亮部分,就是室外透过墙体漏进室内的光照效果。通过本申请的光照贴图降噪方式,在确定参考像素点对目标像素点的光照贡献参数过程中,会考虑参考像素点与目标像素点之间是否存在遮挡,这样可避免基于光照贴图渲染得到的图像中的场景中出现漏光现象,进一步提升了基于光照贴图渲染得到的图像的质量。比如(b)中室内的墙体下方602部分没有出现漏光的情况,从而使得(b)中图像的渲染场景更加逼真。
在一个实施例中,确定目标像素点在多个预设方向上对应的光照贡献距离,包括:以目标像素点为起始点,分别向目标像素点的多个预设方向进行遮挡像素探测;针对每一个预设方向,在预设方向上探测到被遮挡的像素点的情况下,根据目标像素点与探测的被遮挡的像素点之间的像素距离,确定目标像素点在预设方向上对应的光照贡献距离。
其中,被遮挡的像素点,是指被三维空间的虚拟场景中的几何体遮挡的像素点。
具体地,计算机设备可以目标像素点为起始点,分别向目标像素点的多个预设方向进行遮挡像素探测。针对每一个预设方向,在该预设方向上首次探测到被遮挡的像素点的情况下,计算机设备可根据目标像素点与首次探测的被遮挡的像素点之间的像素距离,确定目标像素点在该预设方向上对应的光照贡献距离。
在一个实施例中,计算机设备可将目标像素点与首次探测的被遮挡的像素点之间的像素距离,直接作为目标像素点在该预设方向上对应的光照贡献距离。
上述实施例中,一旦在预设方向上探测到被遮挡的像素点,则根据目标像素点与首次探测的被遮挡的像素点之间的像素距离,确定目标像素点在预设方向上对应的光照贡献距离,可以提升该预设方向上光照贡献距离的准确率,从而可以进一步避免基于光照贴图渲染得到的图像中的场景中出现漏光现象。
在一个实施例中,方法还包括:确定光照贴图中处于被遮挡状态的像素点,并在光照贴图中对处于被遮挡状态的像素点添加遮挡标记;针对每一个预设方向,在预设方向上探测到被遮挡的像素点的情况下,根据目标像素点与探测的被遮挡的像素点之间的像素距离,确定目标像素点在预设方向上对应的光照贡献距离,包括:针对每一个预设方向,在沿着预设方向从光照贴图中探测到具有遮挡标记的像素点的情况下,根据目标像素点与探测的具有遮挡标记的像素点之间的像素距离,确定目标像素点在方向上对应的光照贡献距离。
具体地,在光照计算生成光照贴图过程中,计算机设备可确定光照贴图中处于被遮挡状态的像素点,并在光照贴图中对处于被遮挡状态的像素点添加遮挡标记。在对光照贴图进行降噪处理过程中,计算机设备可以目标像素点为起始点,分别向目标像素点的多个预设方向进行遮挡像素探测。针对每一个预设方向,计算机设备可在沿着预设方向从光照贴图中首次探测到具有遮挡标记的像素点的情况下,根据目标像素点与首次探测的具有遮挡标记的像素点之间的像素距离,确定目标像素点在方向上对应的光照贡献距离。
在一个实施例中,针对光照贴图中的每一个像素点,若在三维空间中该像素点的预设邻域范围内存在几何体,且该几何体的法线与该像素点的法线方向相反,则计算机设备可将该像素点判定为光照贴图中处于被遮挡状态的像素点。
如图7所示,(a)中展示的是通过传统降噪方式对光照贴图进行降噪后,基于降噪后的光照贴图进行光照渲染所得到的场景图像,很明显,(a)中室内墙体下方区域(比如,(a)中的701区域)出现了漏光现象。(b)中展示的是在光照贴图中对处于被遮挡状态的像素点添加了遮挡标记(比如,(b)中的702区域)。(c)中展示的是通过本申请的光照贴图降噪方法对光照贴图进行降噪,并基于降噪后的光照贴图进行光照渲染所得到的场景图像,很明显,(c)中室内墙体下方区域(比如,(c)中的703区域)避免了漏光现象,使得渲染得到的场景图像更加逼真。
上述实施例中,通过在光照贴图中对处于被遮挡状态的像素点添加遮挡标记,可以便于后续光照贡献距离的计算。在沿着预设方向从光照贴图中首次探测到具有遮挡标记的像素点的情况下,此时,根据目标像素点与探测的具有遮挡标记的像素点之间的像素距离,确定目标像素点在方向上对应的光照贡献距离,可以进一步提升该预设方向上光照贡献距离的准确率。
在一个实施例中,光照贴图是对三维空间的虚拟场景中三维虚拟模型进行二维拆分得到的;确定光照贴图中处于被遮挡状态的像素点,包括:针对光照贴图中的每一个像素点,确定像素点对应的目标几何面;目标几何面,是三维空间的虚拟场景中与从像素点发出的多条射线最近相交的几何面;根据像素点的法线的方向与目标几何面的法线的方向之间的关系,从光照贴图的像素点中确定处于被遮挡状态的像素点。
具体地,针对光照贴图中的每一个像素点,计算机设备可将三维空间的虚拟场景中与从该像素点发出的多条射线最近相交的几何面,作为该像素点对应的目标几何面。计算机设备可根据各个像素点的法线的方向与目标几何面的法线的方向之间的关系,从光照贴图的各个像素点中确定处于被遮挡状态的像素点。
在一个实施例中,针对光照贴图中的每一个像素点,若该像素点的法线的方向与相应目标几何面的法线的满足方向接近相反条件,则计算机设备可将该像素点确定为处于被遮挡状态的像素点。其中,方向接近相反条件,是指该像素点的法线向量与相应目标几何面的法线向量之间的夹角落在预设的角度范围之内。
在一个实施例中,针对光照贴图中的每一个像素点,若该像素点的法线的方向与相应目标几何面的法线的方向相反,则计算机设备可将该像素点确定为处于被遮挡状态的像素点。
上述实施例中,由于像素点的法线的方向与对应目标几何面的法线的方向之间的关系,可以表征像素点和目标几何面的朝向,因此,根据像素点的法线的方向与对应目标几何面的法线的方向之间的关系,从光照贴图的像素点中确定处于被遮挡状态的像素点,可以提升被遮挡状态的像素点的检测准确率。
在一个实施例中,根据每个参考像素点的光照贡献参数,以及光照贴图中针对参考像素点记录的光照数据,对光照贴图中针对目标像素点记录的光照数据进行降噪处理,得到降噪处理后的光照贴图,包括:根据每个参考像素点的光照贡献参数,以及光照贴图中针对参考像素点记录的光照数据,确定各个参考像素点对目标像素点贡献的光照总量;根据光照总量与综合光照贡献参数的比值,对光照贴图中针对目标像素点记录的光照数据进行降噪处理,得到降噪处理后的光照贴图;综合光照贡献参数,是根据各个参考像素点的光照贡献参数之和确定的。
其中,光照总量,是目标像素点对应的各个参考像素点对该目标像素点贡献的光照的总量。
具体地,针对光照贴图中的每一个目标像素点,计算机设备可根据该目标像素点对应的每个参考像素点的光照贡献参数,以及光照贴图中针对参考像素点记录的光照数据,确定各个参考像素点对该目标像素点贡献的光照总量。计算机设备可根据各个参考像素点的光照贡献参数之和,确定综合光照贡献参数,并根据光照总量与综合光照贡献参数的比值,对光照贴图中针对目标像素点记录的光照数据进行降噪处理,得到降噪处理后的光照贴图。
在一个实施例中,计算机设备可将各个参考像素点的光照贡献参数之和,作为综合光照贡献参数。
在一个实施例中,计算机设备可将光照总量与综合光照贡献参数的比值,作为针对目标像素点降噪后的光照数据,并将光照贴图中针对目标像素点记录的光照数据,替换为针对目标像素点降噪后的光照数据,得到降噪处理后的光照贴图。
在一个实施例中,针对光照贴图的降噪可以是多轮的降噪处理,具体地,针对待降噪的光照贴图中每一个目标像素点,计算机设备可确定本轮降噪处理中目标像素点对应的降噪参考区域。针对每个参考像素点,确定参考像素点与目标像素点在三维空间中的世界空间距离,根据世界空间距离确定参考像素点对目标像素点的距离影响参数,根据目标像素点的法线和参考像素点的法线,确定法线影响参数,根据目标像素点的亮度和参考像素点的亮度,确定亮度影响参数。进而计算机设备可根据距离影响参数、法线影响参数和亮度影响参数,确定参考像素点对目标像素点的光照贡献参数。计算机设备可根据每个参考像素点的光照贡献参数,以及光照贴图中针对参考像素点记录的光照数据,确定各个参考像素点对目标像素点贡献的光照总量,并根据光照总量与综合光照贡献参数的比值,对光照贴图中针对目标像素点记录的光照数据进行降噪处理,得到本轮降噪处理后的光照贴图。计算机设备可将本轮降噪处理后的光照贴图作为下一轮待降噪的光照贴图,并将下一轮作为新的一轮,返回针对待降噪的光照贴图中每一个目标像素点,确定本轮降噪处理中目标像素点对应的降噪参考区域以迭代降噪,直至满足迭代停止条件,得到针对待降噪的光照贴图的降噪处理后的光照贴图。
在一个实施例中,每一轮降噪处理后光照贴图中目标像素点的光照数据,可以通过以下方式计算得到:
其中,p表示目标像素点,q表示参考像素点,表示降噪参考区域,i表示上一轮降噪处理,i+1表示本轮降噪处理,、、和是预先设置的常量,Dis(p,q)是参考像素点与目标像素点在三维空间中的世界空间距离,n(p)是目标像素点的法线向量,n(q)是参考像素点的法线向量,是上一轮降噪处理后目标像素点的亮度值, 是上一轮降噪处理后参考像素点的亮度值,Var表示方差函数, 表示3*3的高斯函数,表示距离影响参数,表示法线影响参数,表示亮度影响参数,表示上一轮降噪处理后参考像素点对目标像素点的光照贡献参数,表示上一轮降噪处理后光照贴图中针对参考像素点记录的光照数据,表示本轮降噪处理后光照贴图中针对目标像素点记录的光照数据。
在一个实施例中,本申请可提供针对光照贴图降噪的参数配置界面,如图8所示,若用户勾选“防漏光”,则可以实现防漏光效果。用户还可以通过修改“直接光平滑参数”和“间接光平滑系数”,相应调整上述公式中的、、这三个常量,以控制针对光照贴图的降噪程度。
上述实施例中,根据每个参考像素点的光照贡献参数,以及光照贴图中针对参考像素点记录的光照数据,确定各个参考像素点对目标像素点贡献的光照总量,并根据光照总量与综合光照贡献参数的比值,对目标像素点的光照数据进行降噪处理,可以进一步提升针对光照贴图的降噪效果,从而进一步提升基于光照贴图进行光照渲染得到的图像质量。
在一个实施例中,方法还包括:获取初始光照贴图;针对初始光照贴图中的每一个像素点,根据像素点对应的各个邻域像素点的亮度值,确定像素点的目标亮度范围;邻域像素点,是像素点的预设邻域范围内的像素点;针对亮度值未落在目标亮度范围内的像素点,则将像素点的亮度值调整至目标亮度范围内,得到待降噪的光照贴图。
其中,初始光照贴图,是未经过亮度值调整的初始的光照贴图。
具体地,计算机设备可获取初始光照贴图,针对初始光照贴图中的每一个像素点,计算机设备可根据该像素点对应的各个邻域像素点的亮度值,确定该像素点的目标亮度范围。针对亮度值未落在目标亮度范围内的像素点,计算机设备可将这些像素点的亮度值调整至相应目标亮度范围内,得到待降噪的光照贴图。
在一个实施例中,针对初始光照贴图中的每一个像素点,计算机设备可根据该像素点对应的各个邻域像素点的亮度值,确定该像素点在相应的预设邻域范围内的亮度均值和亮度方差。进而,计算机设备可根据该像素点的亮度均值和亮度方差,确定该像素点的目标亮度范围。
在一个实施例中,针对初始光照贴图中的每一个像素点,若该像素点在相应的预设邻域范围内(比如7*7)的亮度均值为E,亮度方差为D,则该像素点的目标亮度范围可以为[E-kD,E+kD],其中,k表示允许偏离均值的程度,k可以从[1,3]范围内进行取值。可以理解,若该像素点的亮度值小于E-kD或大于E+kD,则计算机设备可将该像素点的亮度值调整至[E-kD,E+kD]范围内。比如,若该像素点的亮度值小于E-kD,则可将像素点的亮度值调整为E-kD,若该像素点的亮度值大于E+kD,则可将像素点的亮度值调整为E+kD。
上述实施例中,像素点的亮度值未落在目标亮度范围内,说明该像素点的亮度相较于周围像素的亮度过高或过低,属于异常像素点。针对亮度值未落在目标亮度范围内的像素点,则将像素点的亮度值调整至目标亮度范围内,可将该异常像素点的亮度调整至与周围像素的亮度相近,从而可避免后续对光照贴图进行降噪时,将过亮或过暗的异常像素点扩散为亮片区域或暗片区域,从而提升了针对光照贴图的降噪效果。
如图9所示,(a)展示的是没有对亮度异常的像素点的亮度值进行调整,即,直接基于对初始光照贴图进行降噪得到的光照贴图进行渲染得到的场景图像,很明显,得到的场景图像的质量较差。(b)展示的是本申请对亮度异常的像素点的亮度值进行调整,即,基于对初始光照贴图中亮度异常的像素点进行亮度值调整后的光照贴图进行渲染得到的场景图像,很明显,相较于(a),(b)的场景图像的质量有较大提升。
在一个实施例中,如图10所示,(a)展示的是直接基于对降噪前的光照贴图进行渲染得到的场景图像,很明显,得到的场景图像的质量较差。(b)展示的是基于通过本申请的光照贴图降噪方法降噪后的光照贴图进行渲染得到的场景图像,很明显,相较于(a),(b)的场景图像的质量有较大提升。
在一个实施例中,如图11所示,(a)展示的是直接基于对降噪前的光照贴图进行渲染得到的窗帘场景图像,很明显,得到的场景图像的质量较差。(b)展示的是基于通过传统的光照贴图降噪方法降噪后的光照贴图进行渲染得到的窗帘场景图像,相较于(a)噪声有所较少,但还是残留了很多噪声。(c)展示的是基于通过本申请的光照贴图降噪方法降噪后的光照贴图进行渲染得到的窗帘场景图像,很明显,相较于(a)和(b),(c)的窗帘场景图像的质量有较大提升。
在一个实施例中,如图12所示,1001展示的是三维空间的虚拟场景中的一块平板(即三维虚拟模型),1002中展示的是对这块平板进行UV拆分得到的光照贴图。相较于普通图像,光照贴图具有一定的特殊性。比如,在三维空间中,1001a是平板中的同一个区域,对平板进行拆分之后,在平板的光照贴图1002中,1001a被拆分为位于不同UV岛的两个部分,即1002a和1002b。
如图13所示,(a)展示的是直接基于对降噪前的光照贴图进行渲染得到的平板所在的场景图像,很明显,得到的场景图像的质量较差。(b)展示的是基于通过传统的光照贴图降噪方法降噪后的光照贴图进行渲染得到的平板所在的场景图像,相较于(a)噪声有所较少,但还是残留了很多噪声,同时,平板去噪后被划分为多块不同的区域,接缝瑕疵明显,严重影响了图像质量。(c)展示的是基于通过本申请的光照贴图降噪方法降噪后的光照贴图进行渲染得到的平板所在的场景图像,很明显,相较于(a)和(b),(c)的平板所在的场景图像的质量有较大提升,且相较于(b)中的平板1302,(c)中的平板1303相较于(a)中的平板130,去噪后还是一块完整的平板,避免了接缝瑕疵。
如图14所示,在一个实施例中,提供了一种光照贴图降噪方法,该方法可应用于计算机设备,计算机设备可以是终端或服务器,由终端或服务器自身单独执行,也可以通过终端和服务器之间的交互来实现。本实施例以该方法应用于计算机设备为例进行说明,该方法具体包括以下步骤:
步骤1402,针对待降噪的光照贴图中每一个目标像素点,确定本轮降噪处理中目标像素点对应的降噪参考区域;降噪参考区域内包括用于降噪参考的至少一个参考像素点。
在一个实施例中,在前预设轮次内的每轮降噪处理中,是根据第一滤波核的采样范围确定目标像素点对应的降噪参考区域;在前预设轮次之后的每轮降噪处理中,是根据第二滤波核的采样范围确定目标像素点对应的降噪参考区域;其中,第一滤波核的采样范围小于第二滤波核的采样范围。
步骤1404,确定目标像素点在多个预设方向上对应的光照贡献距离;位于光照贡献距离之内的像素点对目标像素点具有光照贡献。
步骤1406,针对每个参考像素点,若参考像素点与目标像素点在二维空间中的像素距离未超过光照贡献距离,则针对每个参考像素点,确定参考像素点与目标像素点在三维空间中的世界空间距离。
步骤1408,根据世界空间距离和预先设置的距离调整参数,确定距离表征参数;距离表征参数,用于表征参考像素点与目标像素点在三维空间中的世界空间距离的远近。
步骤1410,根据距离表征参数确定参考像素点对目标像素点的距离影响参数;距离影响参数用于表征世界空间距离对光照贡献的影响程度。
步骤1412,确定法线影响参数和亮度影响参数中的至少一种;法线影响参数用于表征目标像素点的法线和参考像素点的法线对光照贡献的影响程度;亮度影响参数用于表征目标像素点的亮度和参考像素点的亮度对光照贡献的影响程度;法线影响参数是根据目标像素点的法线和参考像素点的法线确定的;亮度影响参数是根据目标像素点的亮度和参考像素点的亮度确定的。
步骤1414,根据距离影响参数、法线影响参数和亮度影响参数中的至少一种,确定参考像素点对目标像素点的光照贡献参数。
步骤1416,若参考像素点与目标像素点在二维空间中的像素距离已超过光照贡献距离,则判定参考像素点对目标像素点没有光照贡献。
步骤1418,根据每个参考像素点的光照贡献参数,以及光照贴图中针对参考像素点记录的光照数据,确定各个参考像素点对目标像素点贡献的光照总量。
步骤1420,根据光照总量与综合光照贡献参数的比值,对光照贴图中针对目标像素点记录的光照数据进行降噪处理,得到本轮降噪处理后的光照贴图;综合光照贡献参数,是根据各个参考像素点的光照贡献参数之和确定的。
步骤1422,将本轮降噪处理后的光照贴图作为下一轮待降噪的光照贴图,并将下一轮作为新的一轮,返回针对待降噪的光照贴图中每一个目标像素点,确定本轮降噪处理中目标像素点对应的降噪参考区域以迭代降噪,直至满足迭代停止条件,得到针对待降噪的光照贴图的降噪处理后的光照贴图。
本申请还提供一种应用场景,该应用场景应用上述的光照贴图降噪方法。具体地,该光照贴图降噪方法可应用于游戏领域中三维虚拟对象渲染的场景。可以理解,在基于光照贴图对三维虚拟对象进行渲染之前,需要对三维虚拟对象对应的光照贴图进行降噪处理。针对待降噪的三维虚拟对象对应的光照贴图中每一个目标像素点,计算机设备可确定本轮降噪处理中目标像素点对应的降噪参考区域;降噪参考区域内包括用于降噪参考的至少一个参考像素点。确定目标像素点在多个预设方向上对应的光照贡献距离;位于光照贡献距离之内的像素点对目标像素点具有光照贡献。
针对每个参考像素点,若参考像素点与目标像素点在二维空间中的像素距离未超过光照贡献距离,则针对每个参考像素点,计算机设备可确定参考像素点与目标像素点在三维空间中的世界空间距离。根据世界空间距离和预先设置的距离调整参数,确定距离表征参数;距离表征参数,用于表征参考像素点与目标像素点在三维空间中的世界空间距离的远近。根据距离表征参数确定参考像素点对目标像素点的距离影响参数;距离影响参数用于表征世界空间距离对光照贡献的影响程度。确定法线影响参数和亮度影响参数中的至少一种;法线影响参数用于表征目标像素点的法线和参考像素点的法线对光照贡献的影响程度;亮度影响参数用于表征目标像素点的亮度和参考像素点的亮度对光照贡献的影响程度;法线影响参数是根据目标像素点的法线和参考像素点的法线确定的;亮度影响参数是根据目标像素点的亮度和参考像素点的亮度确定的。根据距离影响参数、法线影响参数和亮度影响参数中的至少一种,确定参考像素点对目标像素点的光照贡献参数。若参考像素点与目标像素点在二维空间中的像素距离已超过光照贡献距离,则判定参考像素点对目标像素点没有光照贡献。
计算机设备可根据每个参考像素点的光照贡献参数,以及三维虚拟对象对应的光照贴图中针对参考像素点记录的光照数据,确定各个参考像素点对目标像素点贡献的光照总量。根据光照总量与综合光照贡献参数的比值,对该光照贴图中针对目标像素点记录的光照数据进行降噪处理,得到本轮降噪处理后的三维虚拟对象对应的光照贴图;综合光照贡献参数,是根据各个参考像素点的光照贡献参数之和确定的。
计算机设备可将本轮降噪处理后的三维虚拟对象对应的光照贴图,作为下一轮待降噪的三维虚拟对象对应的光照贴图,并将下一轮作为新的一轮,返回针对待降噪的三维虚拟对象对应的光照贴图中每一个目标像素点,确定本轮降噪处理中目标像素点对应的降噪参考区域以迭代降噪,直至满足迭代停止条件,得到针对待降噪的三维虚拟对象对应的光照贴图的降噪处理后的光照贴图,进而,计算机设备可基于三维虚拟对象对应的光照贴图对三维虚拟对象进行渲染。
本申请还另外提供一种应用场景,该应用场景应用上述的光照贴图降噪方法。具体地,该光照贴图降噪方法还可以应用于影视特效、可视化设计、VR(Virtual Reality,虚拟现实)、工业仿真和数字文创等场景中。可以理解,影视特效、可视化设计、VR(VirtualReality,虚拟现实)、工业仿真和数字文创等场景中涉及基于光照贴图对虚拟对象进行渲染,在对虚拟对象进行渲染之前,需要对虚拟对象对应的光照贴图进行降噪处理,以提升渲染图像的质量。
应该理解的是,虽然上述各实施例的流程图中的各个步骤按照顺序依次显示,但是这些步骤并不是必然按照顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,上述各实施例中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图15所示,提供了一种光照贴图降噪装置1500,该装置可以采用软件模块或硬件模块,或者是二者的结合成为计算机设备的一部分,该装置具体包括:
确定模块1502,用于针对待降噪的光照贴图中每一个目标像素点,确定目标像素点在光照贴图中对应的降噪参考区域;降噪参考区域内包括用于降噪参考的至少一个参考像素点;针对每个参考像素点,确定参考像素点与目标像素点在三维空间中的世界空间距离;根据世界空间距离确定参考像素点对目标像素点的光照贡献参数;
降噪模块1504,用于根据每个参考像素点的光照贡献参数,以及光照贴图中针对参考像素点记录的光照数据,对光照贴图中针对目标像素点记录的光照数据进行降噪处理,得到降噪处理后的光照贴图。
在一个实施例中,确定模块1502还用于针对待降噪的光照贴图中每一个目标像素点,确定本轮降噪处理中目标像素点对应的降噪参考区域;
确定模块1502还用于将本轮降噪处理后的光照贴图作为下一轮待降噪的光照贴图,并将下一轮作为新的一轮,返回针对待降噪的光照贴图中每一个目标像素点,确定本轮降噪处理中目标像素点对应的降噪参考区域以迭代降噪,直至满足迭代停止条件。
在一个实施例中,在前预设轮次内的每轮降噪处理中,是根据第一滤波核的采样范围确定目标像素点对应的降噪参考区域;在前预设轮次之后的每轮降噪处理中,是根据第二滤波核的采样范围确定目标像素点对应的降噪参考区域;其中,第一滤波核的采样范围小于第二滤波核的采样范围。
在一个实施例中,确定模块1502还用于根据世界空间距离确定参考像素点对目标像素点的距离影响参数;距离影响参数用于表征世界空间距离对光照贡献的影响程度;根据距离影响参数确定光照贡献参数。
在一个实施例中,确定模块1502还用于根据世界空间距离和预先设置的距离调整参数,确定距离表征参数;距离表征参数,用于表征参考像素点与目标像素点在三维空间中的世界空间距离的远近;根据距离表征参数确定参考像素点对目标像素点的距离影响参数。
在一个实施例中,确定模块1502还用于确定法线影响参数和亮度影响参数中的至少一种;法线影响参数用于表征目标像素点的法线和参考像素点的法线对光照贡献的影响程度;亮度影响参数用于表征目标像素点的亮度和参考像素点的亮度对光照贡献的影响程度;法线影响参数是根据目标像素点的法线和参考像素点的法线确定的;亮度影响参数是根据目标像素点的亮度和参考像素点的亮度确定的;根据距离影响参数、法线影响参数和亮度影响参数中的至少一种,确定参考像素点对目标像素点的光照贡献参数。
在一个实施例中,确定模块1502还用于确定目标像素点在多个预设方向上对应的光照贡献距离;位于光照贡献距离之内的像素点对目标像素点具有光照贡献;针对每个参考像素点,若参考像素点与目标像素点在二维空间中的像素距离未超过光照贡献距离,则执行确定参考像素点与目标像素点在三维空间中的世界空间距离,根据世界空间距离确定参考像素点对目标像素点的光照贡献参数的步骤;若参考像素点与目标像素点在二维空间中的像素距离已超过光照贡献距离,则判定参考像素点对目标像素点没有光照贡献。
在一个实施例中,确定模块1502还用于以目标像素点为起始点,分别向目标像素点的多个预设方向进行遮挡像素探测;针对每一个预设方向,在预设方向上探测到被遮挡的像素点的情况下,根据目标像素点与探测的被遮挡的像素点之间的像素距离,确定目标像素点在预设方向上对应的光照贡献距离。
在一个实施例中,确定模块1502还用于确定光照贴图中处于被遮挡状态的像素点,并在光照贴图中对处于被遮挡状态的像素点添加遮挡标记;
确定模块1502还用于针对每一个预设方向,在沿着预设方向从光照贴图中探测到具有遮挡标记的像素点的情况下,根据目标像素点与探测的具有遮挡标记的像素点之间的像素距离,确定目标像素点在方向上对应的光照贡献距离。
在一个实施例中,光照贴图是对三维空间的虚拟场景中三维虚拟模型进行二维拆分得到的;确定模块1502还用于针对光照贴图中的每一个像素点,确定像素点对应的目标几何面;目标几何面,是三维空间的虚拟场景中与从像素点发出的多条射线最近相交的几何面;根据像素点的法线的方向与目标几何面的法线的方向之间的关系,从光照贴图的像素点中确定处于被遮挡状态的像素点。
在一个实施例中,降噪模块1504还用于根据每个参考像素点的光照贡献参数,以及光照贴图中针对参考像素点记录的光照数据,确定各个参考像素点对目标像素点贡献的光照总量;根据光照总量与综合光照贡献参数的比值,对光照贴图中针对目标像素点记录的光照数据进行降噪处理,得到降噪处理后的光照贴图;综合光照贡献参数,是根据各个参考像素点的光照贡献参数之和确定的。
在一个实施例中,装置还包括:
预处理模块,用于获取初始光照贴图;针对初始光照贴图中的每一个像素点,根据像素点对应的各个邻域像素点的亮度值,确定像素点的目标亮度范围;邻域像素点,是像素点的预设邻域范围内的像素点;针对亮度值未落在目标亮度范围内的像素点,则将像素点的亮度值调整至目标亮度范围内,得到待降噪的光照贴图。
上述光照贴图降噪装置,通过针对待降噪的光照贴图中每一个目标像素点,确定目标像素点在光照贴图中对应的降噪参考区域,降噪参考区域内包括用于降噪参考的至少一个参考像素点。针对每个参考像素点,确定参考像素点与目标像素点在三维空间中的世界空间距离。由于参考像素点与目标像素点在三维空间中的世界空间距离,可以直接准确地表征参考像素点与目标像素点在三维空间中的相对位置远近,因此根据世界空间距离确定参考像素点对目标像素点的光照贡献参数,可以提升光照贡献参数的准确性。进而根据每个参考像素点的较为准确的光照贡献参数,以及光照贴图中针对参考像素点记录的光照数据,对光照贴图中针对目标像素点记录的光照数据进行降噪处理,可以提升针对光照贴图的降噪效果,得到可避免接缝瑕疵的光照贴图,从而提升基于光照贴图进行光照渲染得到的图像质量。
上述光照贴图降噪装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图16所示。该计算机设备包括处理器、存储器、输入/输出接口(Input/Output,简称I/O)和通信接口。其中,处理器、存储器和输入/输出接口通过系统总线连接,通信接口通过输入/输出接口连接到系统总线。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质和内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的输入/输出接口用于处理器与外部设备之间交换信息。该计算机设备的通信接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种光照贴图降噪方法。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是终端,其内部结构图可以如图17所示。该计算机设备包括处理器、存储器、输入/输出接口、通信接口、显示单元和输入装置。其中,处理器、存储器和输入/输出接口通过系统总线连接,通信接口、显示单元和输入装置通过输入/输出接口连接到系统总线。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的输入/输出接口用于处理器与外部设备之间交换信息。该计算机设备的通信接口用于与外部的终端进行有线或无线方式的通信,无线方式可通过WIFI、移动蜂窝网络、NFC(近场通信)或其他技术实现。该计算机程序被处理器执行时以实现一种光照贴图降噪方法。该计算机设备的显示单元用于形成视觉可见的画面,可以是显示屏、投影装置或虚拟现实成像装置,显示屏可以是液晶显示屏或电子墨水显示屏,该计算机设备的输入装置可以是显示屏上覆盖的触摸层,也可以是计算机设备外壳上设置的按键、轨迹球或触控板,还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解,图16和图17中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,还提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现上述各方法实施例中的步骤。
在一个实施例中,提供了一种计算机可读存储介质,存储有计算机程序,该计算机程序被处理器执行时实现上述各方法实施例中的步骤。
在一个实施例中,提供了一种计算机程序产品,包括计算机程序,计算机程序被处理器执行时实现上述各方法实施例中的步骤。
需要说明的是,本申请所涉及的用户信息(包括但不限于用户设备信息、用户个人信息等)和数据(包括但不限于用于分析的数据、存储的数据、展示的数据等),均为经用户授权或者经过各方充分授权的信息和数据,且相关数据的收集、使用和处理需要遵守相关国家和地区的相关法律法规和标准。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-Only Memory,ROM)、磁带、软盘、闪存或光存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic Random Access Memory,DRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (16)
1.一种光照贴图降噪方法,其特征在于,所述方法包括:
针对待降噪的光照贴图中每一个目标像素点,确定所述目标像素点在所述光照贴图中对应的降噪参考区域;所述降噪参考区域内包括用于降噪参考的至少一个参考像素点;
针对每个所述参考像素点,确定所述参考像素点与所述目标像素点在三维空间中的世界空间距离;
根据所述世界空间距离确定所述参考像素点对所述目标像素点的光照贡献参数;
根据每个所述参考像素点的所述光照贡献参数,以及所述光照贴图中针对所述参考像素点记录的光照数据,对所述光照贴图中针对所述目标像素点记录的光照数据进行降噪处理,得到降噪处理后的光照贴图。
2.根据权利要求1所述的方法,其特征在于,所述针对待降噪的光照贴图中每一个目标像素点,确定所述目标像素点在所述光照贴图中对应的降噪参考区域,包括:
针对待降噪的光照贴图中每一个目标像素点,确定本轮降噪处理中所述目标像素点对应的降噪参考区域;
所述方法还包括:
将本轮降噪处理后的光照贴图作为下一轮待降噪的光照贴图,并将下一轮作为新的一轮,返回所述针对待降噪的光照贴图中每一个目标像素点,确定本轮降噪处理中所述目标像素点对应的降噪参考区域以迭代降噪,直至满足迭代停止条件。
3.根据权利要求2所述的方法,其特征在于,在前预设轮次内的每轮降噪处理中,是根据第一滤波核的采样范围确定所述目标像素点对应的降噪参考区域;在所述前预设轮次之后的每轮降噪处理中,是根据第二滤波核的采样范围确定所述目标像素点对应的降噪参考区域;其中,所述第一滤波核的采样范围小于所述第二滤波核的采样范围。
4.根据权利要求1所述的方法,其特征在于,所述根据所述世界空间距离确定所述参考像素点对所述目标像素点的光照贡献参数,包括:
根据所述世界空间距离确定所述参考像素点对所述目标像素点的距离影响参数;所述距离影响参数用于表征所述世界空间距离对光照贡献的影响程度;
根据所述距离影响参数确定光照贡献参数。
5.根据权利要求4所述的方法,其特征在于,所述根据所述世界空间距离确定所述参考像素点对所述目标像素点的距离影响参数,包括:
根据所述世界空间距离和预先设置的距离调整参数,确定距离表征参数;所述距离表征参数,用于表征所述参考像素点与所述目标像素点在三维空间中的世界空间距离的远近;
根据所述距离表征参数确定所述参考像素点对所述目标像素点的距离影响参数。
6.根据权利要求4所述的方法,其特征在于,所述根据所述距离影响参数确定光照贡献参数,包括:
确定法线影响参数和亮度影响参数中的至少一种;所述法线影响参数用于表征所述目标像素点的法线和所述参考像素点的法线对光照贡献的影响程度;所述亮度影响参数用于表征所述目标像素点的亮度和所述参考像素点的亮度对光照贡献的影响程度;所述法线影响参数是根据所述目标像素点的法线和所述参考像素点的法线确定的;所述亮度影响参数是根据所述目标像素点的亮度和所述参考像素点的亮度确定的;
根据所述距离影响参数、所述法线影响参数和所述亮度影响参数中的至少一种,确定所述参考像素点对所述目标像素点的光照贡献参数。
7.根据权利要求1所述的方法,其特征在于,所述根据所述世界空间距离确定所述参考像素点对所述目标像素点的光照贡献参数,包括:
确定所述目标像素点在多个预设方向上对应的光照贡献距离;位于所述光照贡献距离之内的像素点对所述目标像素点具有光照贡献;
针对每个所述参考像素点,若所述参考像素点与所述目标像素点在二维空间中的像素距离未超过所述光照贡献距离,则执行所述确定所述参考像素点与所述目标像素点在三维空间中的世界空间距离,根据所述世界空间距离确定所述参考像素点对所述目标像素点的光照贡献参数的步骤;
若所述参考像素点与所述目标像素点在二维空间中的像素距离已超过所述光照贡献距离,则判定所述参考像素点对所述目标像素点没有光照贡献。
8.根据权利要求7所述的方法,其特征在于,所述确定所述目标像素点在多个预设方向上对应的光照贡献距离,包括:
以所述目标像素点为起始点,分别向所述目标像素点的多个预设方向进行遮挡像素探测;
针对每一个所述预设方向,在所述预设方向上探测到被遮挡的像素点的情况下,根据所述目标像素点与探测的所述被遮挡的像素点之间的像素距离,确定所述目标像素点在所述预设方向上对应的光照贡献距离。
9.根据权利要求8所述的方法,其特征在于,所述方法还包括:
确定所述光照贴图中处于被遮挡状态的像素点,并在所述光照贴图中对所述处于被遮挡状态的像素点添加遮挡标记;
所述针对每一个所述预设方向,在所述预设方向上探测到被遮挡的像素点的情况下,根据所述目标像素点与探测的所述被遮挡的像素点之间的像素距离,确定所述目标像素点在所述预设方向上对应的光照贡献距离,包括:
针对每一个所述预设方向,在沿着所述预设方向从所述光照贴图中探测到具有所述遮挡标记的像素点的情况下,根据所述目标像素点与探测的所述具有所述遮挡标记的像素点之间的像素距离,确定所述目标像素点在所述方向上对应的光照贡献距离。
10.根据权利要求9所述的方法,其特征在于,所述光照贴图是对三维空间的虚拟场景中三维虚拟模型进行二维拆分得到的;所述确定所述光照贴图中处于被遮挡状态的像素点,包括:
针对所述光照贴图中的每一个像素点,确定所述像素点对应的目标几何面;所述目标几何面,是所述三维空间的虚拟场景中与从所述像素点发出的多条射线最近相交的几何面;
根据所述像素点的法线的方向与所述目标几何面的法线的方向之间的关系,从所述光照贴图的像素点中确定处于被遮挡状态的像素点。
11.根据权利要求1所述的方法,其特征在于,所述根据每个所述参考像素点的所述光照贡献参数,以及所述光照贴图中针对所述参考像素点记录的光照数据,对所述光照贴图中针对所述目标像素点记录的光照数据进行降噪处理,得到降噪处理后的光照贴图,包括:
根据每个所述参考像素点的所述光照贡献参数,以及所述光照贴图中针对所述参考像素点记录的光照数据,确定各个所述参考像素点对所述目标像素点贡献的光照总量;
根据所述光照总量与综合光照贡献参数的比值,对所述光照贴图中针对所述目标像素点记录的光照数据进行降噪处理,得到降噪处理后的光照贴图;所述综合光照贡献参数,是根据各个所述参考像素点的光照贡献参数之和确定的。
12.根据权利要求1至11中任一项所述的方法,其特征在于,所述方法还包括:
获取初始光照贴图;
针对所述初始光照贴图中的每一个像素点,根据所述像素点对应的各个邻域像素点的亮度值,确定所述像素点的目标亮度范围;所述邻域像素点,是所述像素点的预设邻域范围内的像素点;
针对亮度值未落在所述目标亮度范围内的像素点,则将所述像素点的亮度值调整至所述目标亮度范围内,得到待降噪的光照贴图。
13.一种光照贴图降噪装置,其特征在于,所述装置包括:
确定模块,用于针对待降噪的光照贴图中每一个目标像素点,确定所述目标像素点在所述光照贴图中对应的降噪参考区域;所述降噪参考区域内包括用于降噪参考的至少一个参考像素点;针对每个所述参考像素点,确定所述参考像素点与所述目标像素点在三维空间中的世界空间距离;根据所述世界空间距离确定所述参考像素点对所述目标像素点的光照贡献参数;
降噪模块,用于根据每个所述参考像素点的所述光照贡献参数,以及所述光照贴图中针对所述参考像素点记录的光照数据,对所述光照贴图中针对所述目标像素点记录的光照数据进行降噪处理,得到降噪处理后的光照贴图。
14.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至12中任一项所述的方法的步骤。
15.一种计算机可读存储介质,存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至12中任一项所述的方法的步骤。
16.一种计算机程序产品,包括计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至12中任一项所述的方法的步骤。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211240562.4A CN115330640B (zh) | 2022-10-11 | 2022-10-11 | 光照贴图降噪方法、装置、设备和介质 |
PCT/CN2023/116123 WO2024078179A1 (zh) | 2022-10-11 | 2023-08-31 | 光照贴图降噪方法、装置、设备和介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211240562.4A CN115330640B (zh) | 2022-10-11 | 2022-10-11 | 光照贴图降噪方法、装置、设备和介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115330640A true CN115330640A (zh) | 2022-11-11 |
CN115330640B CN115330640B (zh) | 2023-01-10 |
Family
ID=83913450
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211240562.4A Active CN115330640B (zh) | 2022-10-11 | 2022-10-11 | 光照贴图降噪方法、装置、设备和介质 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN115330640B (zh) |
WO (1) | WO2024078179A1 (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115797226A (zh) * | 2023-01-09 | 2023-03-14 | 腾讯科技(深圳)有限公司 | 图像降噪方法、装置、计算机设备和存储介质 |
CN116612225A (zh) * | 2023-07-18 | 2023-08-18 | 腾讯科技(深圳)有限公司 | 光照渲染方法、装置、设备和介质 |
WO2024078179A1 (zh) * | 2022-10-11 | 2024-04-18 | 腾讯科技(深圳)有限公司 | 光照贴图降噪方法、装置、设备和介质 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6701024B1 (en) * | 1999-08-05 | 2004-03-02 | Nucore Technology Inc. | Image processing apparatus |
CN101308573A (zh) * | 2008-06-30 | 2008-11-19 | 北京中星微电子有限公司 | 一种消除噪声的方法和装置 |
US20110228167A1 (en) * | 2007-07-11 | 2011-09-22 | Hiroshi Sasaki | Image processing apparatus, image processing method, and recording medium for image processing program |
WO2016113805A1 (en) * | 2015-01-16 | 2016-07-21 | Canon Kabushiki Kaisha | Image processing method, image processing apparatus, image pickup apparatus, program, and storage medium |
JP2016201037A (ja) * | 2015-04-13 | 2016-12-01 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
CN107452048A (zh) * | 2016-05-30 | 2017-12-08 | 网易(杭州)网络有限公司 | 全局光照的计算方法及装置 |
CN111311723A (zh) * | 2020-01-22 | 2020-06-19 | 腾讯科技(深圳)有限公司 | 像素点识别及光照渲染方法、装置、电子设备和存储介质 |
CN111932664A (zh) * | 2020-08-27 | 2020-11-13 | 腾讯科技(深圳)有限公司 | 图像渲染方法、装置、电子设备及存储介质 |
CN114419240A (zh) * | 2022-04-01 | 2022-04-29 | 腾讯科技(深圳)有限公司 | 光照渲染方法、装置、计算机设备和存储介质 |
US20220309742A1 (en) * | 2021-03-24 | 2022-09-29 | Sony Interactive Entertainment Inc. | Image rendering method and apparatus |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9715720B1 (en) * | 2014-12-15 | 2017-07-25 | Marvell International Ltd. | System and method for reducing image noise |
US9940701B2 (en) * | 2015-09-25 | 2018-04-10 | Intel Corporation | Device and method for depth image dequantization |
KR20180071767A (ko) * | 2016-12-20 | 2018-06-28 | 삼성전자주식회사 | 큐브 맵을 텍스쳐링하기 위한 LOD(level of detail)를 결정하는 방법 및 장치 |
CN109697699A (zh) * | 2017-10-24 | 2019-04-30 | 比亚迪股份有限公司 | 图像处理方法、装置、设备及存储介质 |
CN115330640B (zh) * | 2022-10-11 | 2023-01-10 | 腾讯科技(深圳)有限公司 | 光照贴图降噪方法、装置、设备和介质 |
-
2022
- 2022-10-11 CN CN202211240562.4A patent/CN115330640B/zh active Active
-
2023
- 2023-08-31 WO PCT/CN2023/116123 patent/WO2024078179A1/zh unknown
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6701024B1 (en) * | 1999-08-05 | 2004-03-02 | Nucore Technology Inc. | Image processing apparatus |
US20110228167A1 (en) * | 2007-07-11 | 2011-09-22 | Hiroshi Sasaki | Image processing apparatus, image processing method, and recording medium for image processing program |
CN101308573A (zh) * | 2008-06-30 | 2008-11-19 | 北京中星微电子有限公司 | 一种消除噪声的方法和装置 |
WO2016113805A1 (en) * | 2015-01-16 | 2016-07-21 | Canon Kabushiki Kaisha | Image processing method, image processing apparatus, image pickup apparatus, program, and storage medium |
JP2016201037A (ja) * | 2015-04-13 | 2016-12-01 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
CN107452048A (zh) * | 2016-05-30 | 2017-12-08 | 网易(杭州)网络有限公司 | 全局光照的计算方法及装置 |
CN111311723A (zh) * | 2020-01-22 | 2020-06-19 | 腾讯科技(深圳)有限公司 | 像素点识别及光照渲染方法、装置、电子设备和存储介质 |
CN111932664A (zh) * | 2020-08-27 | 2020-11-13 | 腾讯科技(深圳)有限公司 | 图像渲染方法、装置、电子设备及存储介质 |
US20220309742A1 (en) * | 2021-03-24 | 2022-09-29 | Sony Interactive Entertainment Inc. | Image rendering method and apparatus |
CN114419240A (zh) * | 2022-04-01 | 2022-04-29 | 腾讯科技(深圳)有限公司 | 光照渲染方法、装置、计算机设备和存储介质 |
Non-Patent Citations (1)
Title |
---|
杨海林等: "数字地球中实时地形晕渲的实现方法", 《北京航空航天大学学报》 * |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2024078179A1 (zh) * | 2022-10-11 | 2024-04-18 | 腾讯科技(深圳)有限公司 | 光照贴图降噪方法、装置、设备和介质 |
CN115797226A (zh) * | 2023-01-09 | 2023-03-14 | 腾讯科技(深圳)有限公司 | 图像降噪方法、装置、计算机设备和存储介质 |
CN116612225A (zh) * | 2023-07-18 | 2023-08-18 | 腾讯科技(深圳)有限公司 | 光照渲染方法、装置、设备和介质 |
CN116612225B (zh) * | 2023-07-18 | 2023-12-22 | 腾讯科技(深圳)有限公司 | 光照渲染方法、装置、设备和介质 |
Also Published As
Publication number | Publication date |
---|---|
WO2024078179A1 (zh) | 2024-04-18 |
CN115330640B (zh) | 2023-01-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN115330640B (zh) | 光照贴图降噪方法、装置、设备和介质 | |
US11238644B2 (en) | Image processing method and apparatus, storage medium, and computer device | |
US9600869B2 (en) | Image editing method and system | |
CN114419240B (zh) | 光照渲染方法、装置、计算机设备和存储介质 | |
CN112308797B (zh) | 角点检测方法、装置、电子设备及可读存储介质 | |
CN115115554B (zh) | 基于增强图像的图像处理方法、装置和计算机设备 | |
CN113658316B (zh) | 三维模型的渲染方法和装置、存储介质及计算机设备 | |
CN113689373B (zh) | 图像处理方法、装置、设备及计算机可读存储介质 | |
CN110335330A (zh) | 图像模拟生成方法及其系统、深度学习算法训练方法及电子设备 | |
CN114565708A (zh) | 一种选择抗锯齿算法的方法、装置、设备及可读存储介质 | |
Wu et al. | Reflectance-guided histogram equalization and comparametric approximation | |
CN113052923B (zh) | 色调映射方法、装置、电子设备和存储介质 | |
Zhou et al. | Image illumination adaptive correction algorithm based on a combined model of bottom-hat and improved gamma transformation | |
Huang et al. | Image dehazing based on robust sparse representation | |
CN110047126B (zh) | 渲染图像的方法、装置、电子设备和计算机可读存储介质 | |
CN109658360B (zh) | 图像处理的方法、装置、电子设备和计算机存储介质 | |
CN112465692A (zh) | 图像处理方法、装置、设备及存储介质 | |
CN108280887B (zh) | 一种阴影图确定方法及装置 | |
CN112819929B (zh) | 渲染水面方法及装置、电子设备、存储介质 | |
CN113592753A (zh) | 基于工业相机拍摄的图像的处理方法、装置和计算机设备 | |
Bae et al. | Non-iterative tone mapping with high efficiency and robustness | |
Oulasvirta et al. | How real is real enough? Optimal reality sampling for fast recognition of mobile imagery | |
US20210217227A1 (en) | Image processing method, apparatus and device | |
Andrade et al. | An unstructured lumigraph based approach to the SVBRDF estimation problem | |
CN109949212B (zh) | 图像映射方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
REG | Reference to a national code |
Ref country code: HK Ref legal event code: DE Ref document number: 40076032 Country of ref document: HK |