CN112907451A - 图像处理方法、装置、计算机设备和存储介质 - Google Patents
图像处理方法、装置、计算机设备和存储介质 Download PDFInfo
- Publication number
- CN112907451A CN112907451A CN202110326419.6A CN202110326419A CN112907451A CN 112907451 A CN112907451 A CN 112907451A CN 202110326419 A CN202110326419 A CN 202110326419A CN 112907451 A CN112907451 A CN 112907451A
- Authority
- CN
- China
- Prior art keywords
- scene
- expansion
- initial
- blocks
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 60
- 238000003860 storage Methods 0.000 title claims abstract description 22
- 238000003672 processing method Methods 0.000 title claims abstract description 17
- 238000007499 fusion processing Methods 0.000 claims abstract description 116
- 238000000034 method Methods 0.000 claims abstract description 48
- 230000004927 fusion Effects 0.000 claims description 88
- 238000004590 computer program Methods 0.000 claims description 17
- 230000003416 augmentation Effects 0.000 claims description 7
- 238000002156 mixing Methods 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 20
- 238000005516 engineering process Methods 0.000 description 17
- 230000008569 process Effects 0.000 description 13
- 238000009826 distribution Methods 0.000 description 8
- 238000004891 communication Methods 0.000 description 7
- 238000009877 rendering Methods 0.000 description 7
- 230000007704 transition Effects 0.000 description 5
- 238000003709 image segmentation Methods 0.000 description 4
- 238000004458 analytical method Methods 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008439 repair process Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000012876 topography Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/005—General purpose rendering architectures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/04—Texture mapping
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/32—Indexing scheme for image data processing or generation, in general involving image mosaicing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20021—Dividing image into blocks, subimages or windows
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Graphics (AREA)
- Processing Or Creating Images (AREA)
Abstract
本申请涉及一种图像处理方法、装置、计算机设备和存储介质。所述方法包括:对三维场景下的多个初始场景图块进行拼接,得到与所述三维场景对应的包括各所述初始场景图块的整体场景图;分别对所述整体场景图中的各所述初始场景图块进行扩充处理,得到场景扩充图块;各所述场景扩充图块中的相邻场景扩充图块之间具有交叠区域;对各所述交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到各所述交叠区域对应的目标像素值;基于各所述初始场景图块的像素值以及各所述交叠区域的目标像素值,对各所述场景扩充图块进行图块融合处理,生成所述三维场景对应的目标场景图。采用本方法能够生成高精度的三维场景下的场景图。
Description
技术领域
本申请涉及图像处理技术领域,特别是涉及一种图像处理方法、装置、计算机设备和存储介质。
背景技术
在计算机图形学中,可以通过场景图组织和管理三维虚拟场景中对象的场景数据,场景图可以包括高度图、颜色贴图、法线贴图等虚拟场景中所需的各种贴图。例如可以通过高度图的像素值存储三维场景中的高度值,通常高度图中亮度越大,高度则越高。在渲染三维场景前,可以通过美术工具预先生成所需的场景图。
在相关技术中,对于面积较大的三维场景,通常采用降低整体场景图的精度,来生成所需的场景图。然而这种方式会导致生成的场景图的精度较为低下。
发明内容
基于此,有必要针对上述技术问题,提供一种能够有效生成高精度的场景图的图像处理方法、装置、计算机设备和存储介质。
一种图像处理方法,所述方法包括:
对三维场景下的多个初始场景图块进行拼接,得到与所述三维场景对应的包括各所述初始场景图块的整体场景图;
分别对所述整体场景图中的各所述初始场景图块进行扩充处理,得到场景扩充图块;各所述场景扩充图块中的相邻场景扩充图块之间具有交叠区域;
对各所述交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到各所述交叠区域对应的目标像素值;
基于各所述初始场景图块的像素值以及各所述交叠区域的目标像素值,对各所述场景扩充图块进行图块融合处理,生成所述三维场景对应的目标场景图。
一种图像处理装置,所述装置包括:
图块拼接模块,用于对三维场景下的多个初始场景图块进行拼接,得到与所述三维场景对应的包括各所述初始场景图块的整体场景图;
图块扩充模块,用于分别对所述整体场景图中的各所述初始场景图块进行扩充处理,得到场景扩充图块;各所述场景扩充图块中的相邻场景扩充图块之间具有交叠区域;
像素融合模块,用于对各所述交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到各所述交叠区域对应的目标像素值;
图块融合模块,用于基于各所述初始场景图块的像素值以及各所述交叠区域的目标像素值,对各所述场景扩充图块进行图块融合处理,生成所述三维场景对应的目标场景图。
在一个实施例中,所述图块扩充模块还用于根据各所述初始场景图块在所述整体场景图中的位置,确定各所述初始场景图块对应的扩充方向;按照所述扩充方向分别对各所述初始场景图块进行扩充处理,得到与各所述初始场景图块对应的场景扩充图块。
在一个实施例中,所述图块扩充模块还用于根据所述整体场景图的中心点和各所述初始场景图块的中心点,确定各所述初始场景图块对应的偏移距离;按照各所述初始场景图块对应的扩充方向和偏移距离,分别对各所述初始场景图块进行扩充得到对应的扩充区域;根据各所述初始场景图块以及各所述初始场景图块对应的扩充区域,生成与各所述初始场景图块对应的场景扩充图块。
在一个实施例中,所述图块扩充模块还用于根据各所述初始场景图块对应的偏移距离,分别向各所述初始场景图块对应的扩充方向进行偏移,根据偏移后的初始场景图块确定与各所述初始场景图块对应的扩充区域;根据所述偏移后的初始场景图块的像素值,确定所述扩充区域的像素值;根据各所述初始场景图块的像素值,以及各所述初始场景图块的扩充区域的像素值,得到与各所述初始场景图块对应的场景扩充图块。
在一个实施例中,所述像素融合模块还用于根据各所述交叠区域中不同场景扩充图块对应的位置关系,确定各所述交叠区域中不同场景扩充图块所对应的像素融合比例;按照所述像素融合比例,对各所述交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到各所述交叠区域对应的目标像素值。
在一个实施例中,所述像素融合模块还用于将各所述交叠区域划分为多个子区域;针对每一个子区域,根据各所述交叠区域中不同场景扩充图块对应的位置关系,确定各所述交叠区域的子区域中不同场景扩充图块对应的像素融合比例;根据各所述子区域中属于不同场景扩充图块的像素融合比例和像素值,确定各所述子区域的目标像素值;根据各所述交叠区域中的各所述子区域对应的目标像素值,得到各所述交叠区域对应的目标像素值。
在一个实施例中,所述像素融合模块还用于根据各所述交叠区域中相邻场景扩充图块之间的位置关系,以及各所述子区域在所属交叠区域中的位置,确定各所述交叠区域中的子区域中不同场景扩充图块对应的像素融合比例。
在一个实施例中,所述像素融合模块还用于按照各所述交叠区域的位置方向,分别对各所述交叠区域中相邻的属于不同场景扩充图块的像素值进行分步像素融合处理,得到各所述交叠区域对应的目标像素值。
在一个实施例中,所述交叠区域的位置方向包括第一方向和第二方向;所述像素融合模块还用于针对第一方向的交叠区域,对各所述交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到所述第一方向的交叠区域的目标像素值;针对第二方向的交叠区域,对各所述交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到所述第二方向的交叠区域的目标像素值。
在一个实施例中,所述图块融合模块还用于根据所述第一方向的各所述初始场景图块的像素值,以及所述第一方向的交叠区域的目标像素值,对所述第一方向的各所述场景扩充图块进行图块融合处理,得到所述第一方向的场景融合图块;根据所述第二方向的各所述初始场景图块的像素值,以及所述第一方向和所述第二方向的交叠区域的目标像素值,对所述第二方向的各所述场景扩充图块进行图块融合处理,生成所述三维场景对应的目标场景图。
在一个实施例中,所述目标场景图应用于与所述三维场景对应的三维场景应用;上述三维场景下的图像处理装置还包括图像切分模块,用于确定与所述三维场景应用相匹配的场景图数量和场景图尺寸;根据所述场景图数量和所述场景图尺寸,将所述目标场景图划分为多个目标场景图子块,以使所述三维场景应用在运行时根据待展示的场景画面加载对应的目标场景图子块,基于所述目标场景图子块的场景数据渲染所述场景画面。
在一个实施例中,所述初始场景图块包括初始地形高度图;所述图块融合模块还用于根据各所述交叠区域的目标像素值,确定各所述交叠区域的目标高度值;根据各所述初始地形高度图的像素值,确定各所述初始地形高度图中除各所述交叠区域外的区域的目标高度值;基于各所述交叠区域的目标高度值,以及各所述初始地形高度图中除各所述交叠区域外的区域的目标高度值,对各所述场景扩充图块进行图块融合处理,生成所述三维场景对应的目标地形高度图。
一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
对三维场景下的多个初始场景图块进行拼接,得到与所述三维场景对应的包括各所述初始场景图块的整体场景图;
分别对所述整体场景图中的各所述初始场景图块进行扩充处理,得到场景扩充图块;各所述场景扩充图块中的相邻场景扩充图块之间具有交叠区域;
对各所述交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到各所述交叠区域对应的目标像素值;
基于各所述初始场景图块的像素值以及各所述交叠区域的目标像素值,对各所述场景扩充图块进行图块融合处理,生成所述三维场景对应的目标场景图。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:
对三维场景下的多个初始场景图块进行拼接,得到与所述三维场景对应的包括各所述初始场景图块的整体场景图;
分别对所述整体场景图中的各所述初始场景图块进行扩充处理,得到场景扩充图块;各所述场景扩充图块中的相邻场景扩充图块之间具有交叠区域;
对各所述交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到各所述交叠区域对应的目标像素值;
基于各所述初始场景图块的像素值以及各所述交叠区域的目标像素值,对各所述场景扩充图块进行图块融合处理,生成所述三维场景对应的目标场景图。
一种计算机程序产品或计算机程序,所述计算机程序产品或计算机程序包括计算机指令,所述计算机指令存储在计算机可读存储介质中;所述计算机设备的处理器从所述计算机可读存储介质读取所述计算机指令,所述处理器执行所述计算机指令时实现以下步骤:
对三维场景下的多个初始场景图块进行拼接,得到与所述三维场景对应的包括各所述初始场景图块的整体场景图;
分别对所述整体场景图中的各所述初始场景图块进行扩充处理,得到场景扩充图块;各所述场景扩充图块中的相邻场景扩充图块之间具有交叠区域;
对各所述交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到各所述交叠区域对应的目标像素值;
基于各所述初始场景图块的像素值以及各所述交叠区域的目标像素值,对各所述场景扩充图块进行图块融合处理,生成所述三维场景对应的目标场景图。
上述图像处理方法、装置、计算机设备和存储介质,通过对三维场景下的多个初始场景图块进行拼接,从而能够有效获得与三维场景对应的包括各初始场景图块的整体场景图。然后通过分别对整体场景图中的各初始场景图块进行扩充处理,得到的各场景扩充图块中的相邻场景扩充图块之间具有交叠区域。由此,通过对各交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,从而能够实现各相邻场景扩充图块之间的进行像素值过渡,从而得到各交叠区域对应的较为精准的目标像素值。进而基于各初始场景图块的像素值以及各交叠区域的目标像素值,对各场景扩充图块进行图块融合处理,以有效地对各场景扩充图块之间的接缝进行融合,有效避免了各初始场景图块之间的接缝处的像素差异缺陷,使得各初始场景图块之间的接缝处的目标像素值更加精准,从而能够有效提高目标场景图的精度。
附图说明
图1为一个实施例中图像处理方法的应用环境图;
图2为一个实施例中图像处理方法的流程示意图;
图3为一个实施例中对多个初始场景图块进行拼接的示意图;
图4为一个实施例中的整体场景图;
图5为另一个实施例中的整体场景图;
图6为一个实施例中对各初始场景图块进行扩充处理的示意图;
图7为一个实施例中对各初始场景图块进行扩充后的示意图;
图8为一个实施例中对交叠区域进行像素融合处理的示意图;
图9为另一个实施例中对各初始场景图块进行融合处理的示意图;
图10为一个实施例中对各初始场景图块进行处理的示意图;
图11为一个实施例中的地形高度图;
图12为一个实施例中对地形高度图处理的流程图;
图13为一个实施例中图像处理装置的结构框图;
图14为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的三维场景下的图像处理方法,可以应用于计算机设备中。计算机设备可以为终端或服务器。可以理解的是,本申请提供的三维场景下的图像处理方法可以应用于终端,也可以应用于服务器,还可以应用于包括终端和服务器的系统,并通过终端和服务器的交互实现。
本申请提供的图像处理方法,可以应用于如图1所示的应用环境中。其中,终端102通过网络与服务器104进行通信。具体地,终端102可以从服务器104中获取多个初始场景图块。终端102然后对三维场景下的多个初始场景图块进行拼接,得到与三维场景对应的包括各初始场景图块的整体场景图;分别对整体场景图中的各初始场景图块进行扩充处理,得到场景扩充图块;各场景扩充图块中的相邻场景扩充图块之间具有交叠区域;对各交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到各交叠区域对应的目标像素值;基于各初始场景图块的像素值以及各交叠区域的目标像素值,对各场景扩充图块进行图块融合处理,生成三维场景对应的目标场景图。
其中,终端102可以是智能手机、平板电脑、笔记本电脑、台式计算机、智能音箱、智能手表等,但并不局限于此。服务器104可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN、以及大数据和人工智能平台等基础云计算服务的云服务器。终端102以及服务器104可以通过有线或无线通信方式进行直接或间接地连接,本申请在此不做限制。
云技术(Cloud technology)是指在广域网或局域网内将硬件、软件、网络等系列资源统一起来,实现数据的计算、储存、处理和共享的一种托管技术。云技术基于云计算商业模式应用的网络技术、信息技术、整合技术、管理平台技术、应用技术等的总称,可以组成资源池,按需所用,灵活便利。云计算技术将变成重要支撑。技术网络系统的后台服务需要大量的计算、存储资源,如视频网站、图片类网站和更多的门户网站。伴随着互联网行业的高度发展和应用,将来每个物品都有可能存在自己的识别标志,都需要传输到后台系统进行逻辑处理,不同程度级别的数据将会分开处理,各类行业数据皆需要强大的系统后盾支撑,只能通过云计算来实现。
计算机视觉技术(Computer Vision,CV)计算机视觉是一门研究如何使机器“看”的科学,更进一步的说,就是指用摄影机和电脑代替人眼对目标进行识别、跟踪和测量等机器视觉,并进一步做图形处理,使电脑处理成为更适合人眼观察或传送给仪器检测的图像。作为一个科学学科,计算机视觉研究相关的理论和技术,试图建立能够从图像或者多维数据中获取信息的人工智能系统。计算机视觉技术通常包括图像处理、图像识别、图像语义理解、图像检索、OCR、视频处理、视频语义理解、视频内容/行为识别、三维物体重建、3D技术、虚拟现实、增强现实、同步定位与地图构建等技术,还包括常见的人脸识别、指纹识别等生物特征识别技术。可以理解,在本申请的三维场景下的图像处理方法,就是基于计算机视觉技术,对场景图进行图像处理,从而能够有效生成高精度的场景图。
在一个实施例中,如图2所示,提供了一种图像处理方法,以该方法应用于计算机设备为例进行说明,该计算机设备具体可以是图1中的终端或服务器,可以理解的是,该方法还可以应用于包括终端和服务器的系统,并通过终端和服务器的交互实现。本实施例中,包括以下步骤:
S202,对三维场景下的多个初始场景图块进行拼接,得到与三维场景对应的包括各初始场景图块的整体场景图。
可以理解,三维场景,可以是表示用虚拟化技术手段来真实模拟出现世界的各种物质形态、空间关系等信息。三维场景能够更加美观地展示物体对象的形态,同时也能更加直观地展示虚拟现实世界。例如,三维场景下的物体对象可以包括地形、房屋、树木、人物等中的至少一种。
通过计算机三维图形显示,可以在屏幕上展示三维的仿真环境,环境中的所有物体对象都可以通过三维场景数据描述。例如,可以把三维场景数据加载到三维场景中,以展示出三维的仿真环境。例如,三维场景数据包括场景图、矢量数据、地形数据、模型数据、栅格体数据等中的至少一种。
可以理解,场景图是指用于组织和管理三维虚拟场景中物体对象的场景数据,也是可以用图层的形式管理三维场景中的场景数据。例如,场景图可以包括虚拟场景中所需的高度图、颜色贴图、法线贴图等中的至少一种。
以高度图为例,可以通过高度图中的像素值存储三维场景中的高度值。高度图可以具体采用灰阶图的形式,通常高度图中亮度越大,高度则越高。例如,可以针对三维场景中的地形生成对应的高度图,单位尺寸内像素越多,黑白颜色程度变化越丰富,则表示地形变化越丰富。
可以理解的是,对于面积范围较大的三维场景,通常无法一次性完成超大规模的场景图,因此所需场景图的数量则较多。在渲染三维场景前,可以预先生成三维场景所需的多个场景图。例如,可以通过美术工具预先制作生成所需的场景图。
其中,三维场景下的多个初始场景图块,即为预先生成的三维场景所需的多个场景图。每个初始场景图块,是三维场景下的其中一部分区域所对应的场景图,多个初始场景图块则能够组合成三维场景对应的整体场景图。可以理解,整体场景图则表示覆盖了三维场景整体区域的场景图。其中,多个是指至少两个以上。
计算机设备获取三维场景下的多个初始场景图块后,则对三维场景下的多个初始场景图块进行拼接,以组合成与三维场景对应的整体场景图。其中,三维场景包括预设的整体中心点,各初始场景图块也分别包括对应的中心点。其中,三维场景的整体中心点,是三维场景中整体场景区域的中心点。初始场景图块的中心点,是初始场景图块中场景区域的中心点。
具体地,计算机设备可以按照三维场景的整体中心点以及各初始场景图块对应的中心点,确定各初始场景图块在三维场景中的位置。计算机设备进而按照各初始场景图块在三维场景中的位置,将多个初始场景图块进行拼接,从而能够精准地组合成三维场景对应的整体场景图。其中,拼接形成的整体场景图中仍包括了各初始场景图块。
例如,如图3所示,为一个实施例中对多个初始场景图块进行拼接的示意图。三维场景下的多个初始场景图块包括初始场景图块31、初始场景图块32、初始场景图块33和初始场景图块34。通过按照各初始场景图块在三维场景的中的位置,将多个初始场景图块进行拼接,从而能够组合成三维场景对应的整体场景图35。
S204,分别对整体场景图中的各初始场景图块进行扩充处理,得到场景扩充图块;各场景扩充图块中的相邻场景扩充图块之间具有交叠区域。
其中,扩充是指在原有基础上继续扩大和增加。对初始场景图块进行扩充处理,也就是对原始的初始场景图块的区域进行扩大,初始场景图块在扩充后,相较于原始的初始场景图块具有新增加的区域。
可以理解,交叠区域,是表示多张图像之间的公共区域。也就是若两张或两张以上图像有重叠的公共区域,则公共区域为相互交叠的交叠区域。
其中,对多个初始场景图块进行拼接,所得到的整体场景图中的各个初始场景图块是紧密贴合的,且整体场景图中的每个初始场景图块都具有相邻的初始场景图块。
计算机设备拼接得到整体场景图后,则分别对整体场景图中的各初始场景图块进行扩充处理。具体地,计算机设备可以按照预设的扩充比例,对各个初始场景图块在原有基础上向外扩充预设比例的区域,从而生成扩充后的与各初始场景图块对应的场景扩充图块。
其中,针对每个初始场景图块,计算机设备可以向具有相邻初始场景图块的方向进行扩充,对于各初始场景图块不具有相邻初始场景图块的方向,则不进行扩充。也就是对于整体场景图的外边缘不进行扩充,以保证对整体场景图中的各初始场景图块进行扩充后,各场景扩充图块的整体大小不会超出整体场景图的范围。
可以理解,由于扩充后的各场景扩充图块的区域,相较于扩充前的各初始场景图块增加了向外延伸的扩充区域,因此,各场景扩充图块中的相邻场景扩充图块之间则具有交叠区域。
S206,对各交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到各交叠区域对应的目标像素值。
其中,像素是计算机屏幕上所能显示的最小单位。像素值,也即颜色值,是表示图像中特定像素点的RGB(Red、Green、Blue,即红、绿、蓝三原色)三个分量具体的值,是图像被数字化时由计算机赋予的值,记录了图像中某一小方块的平均亮度信息或平均反射密度信息。像素值的取值范围通常为0~255。
对于灰度图而言,像素值即为灰度值,灰度图像中各像素点的RGB三个分量的取值相同。灰度图像是由纯黑色和纯白色过渡得到,纯黑色和纯白色按不同的比例来混合就得到不同的灰度值。
可以理解,初始场景图块中各像素点包括相应的像素值。对各初始场景图块进行扩充后,扩充区域也包括扩充的像素值,从而有效得到与各初始场景图块对应的场景扩充图块。
其中,交叠区域中包括多个不同场景扩充图块对应的局部区域,因此,各交叠区域中则包括属于多个不同场景扩充图块的像素值。计算机设备则进一步对交叠区域的像素值进行像素融合处理,以确定各交叠区域对应的最终的目标像素值。
具体地,计算机设备可以针对交叠区域中各不同场景扩充图块,分别分配对应的像素融合比例,进而按照各场景扩充图块对应的像素融合比例,对各交叠区域中属于不同场景扩充图块的像素值进行像素融合,进而根据融合后的像素值,得到各交叠区域对应的目标像素值。
S208,基于各初始场景图块的像素值以及各交叠区域的目标像素值,对各场景扩充图块进行图块融合处理,生成三维场景对应的目标场景图。
可以理解,图块融合处理,可以是指将多个图块融合成一张完整的图像。其中,对整体场景图中的各初始场景图块进行扩充,得到对应的场景扩充图块后,也即得到扩充后的整体场景图。扩充后的整体场景图则包括各交叠区域以及非交叠区域,非交叠区域则为原始的初始场景图块中除交叠区域以外的区域。
计算机设备通过对交叠区域属于不同场景扩充图块的像素值进行像素融合处理,得到各交叠区域对应的目标像素值后,则进一步根据各交叠区域的目标像素值,以及初始场景图块中除交叠区域以外区域的像素值,将各场景扩充图块进行图块融合处理。
具体地,计算机设备可以先计算出各交叠区域对应的目标像素值后,再分别将各场景扩充图块进行图块融合处理。
在其他的实施例中,计算机设备还可以分别针对两两相邻的场景扩充图块,同时进行像素融合处理和图块融合处理,以对各场景扩充图块进行分步融合。具体地,计算机设备可以分别针对两两相邻的场景扩充图块,确定相邻的场景扩充图块之间的交叠区域的目标像素值后,则将该相邻的场景扩充图块进行图块融合处理。然后计算机设备继续对该融合后的图块与其相邻的场景扩充图块继续进行像素融合处理和图块融合处理。直到融合成一张最终的完整的图像,进而利用这张完整的图像生成三维场景对应的目标场景图。
上述三维场景下的图像处理方法中,计算机设备首先对三维场景下的多个初始场景图块进行拼接,从而能够有效获得与三维场景对应的包括各初始场景图块的整体场景图。计算机设备通过分别对整体场景图中的各初始场景图块进行扩充处理,得到的各场景扩充图块中的相邻场景扩充图块之间具有交叠区域。由此,通过对各交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,从而能够实现各相邻场景扩充图块之间的进行像素值过渡,从而得到各交叠区域对应的较为精准的目标像素值。计算机设备进而基于各初始场景图块的像素值以及各交叠区域的目标像素值,对各场景扩充图块进行图块融合处理,以有效地对各场景扩充图块之间的接缝进行融合,从而能够有效地生成三维场景对应的高精准度的目标场景图。
在一个实施例中,分别对整体场景图中的各初始场景图块进行扩充处理,得到场景扩充图块,包括:根据各初始场景图块在整体场景图中的位置,确定各初始场景图块对应的扩充方向;按照扩充方向分别对各初始场景图块进行扩充处理,得到与各初始场景图块对应的场景扩充图块。
其中,扩充方向,可以是指对原始图像的边缘进行扩展增大的方向,以增大原始图像的尺寸。
可以理解,各初始场景图块是根据预设的三维场景中场景对象对应的整体场景模型生成的,整体场景模型可以是根据预先设定的整体场景大小生成的场景网格模型。例如,整体地形模型。具体地,各初始场景图块可以是按照整体地形模型的范围切分为多个图块范围,然后基于多个图块范围分别生成相应的多个初始场景图块。
具体地,计算机设备对三维场景下的多个初始场景图块进行拼接时,按照整体场景模型中设定的各初始场景图块对应的位置,将各初始场景图块进行拼接,组合成整体场景大小的整体场景图。
计算机设备进而根据整体场景图的中心点,以及各初始场景图块对应的中心点,确定各初始场景图块分别在整体场景图中的位置。进而根据各初始场景图块分别在整体场景图中的位置,确定各初始场景图块对应的扩充方向。例如,当初始场景图块的周围均有相邻初始场景图块时,则确定该初始场景图块的扩充方向则为具有相邻初始场景图块的方向。其中,每个初始场景图块的扩充方向包括至少一个。
如图4所示,为一个实施例中的整体场景图。参照图4,整体场景图42中包括四个初始场景图块,即初始场景图块①、初始场景图块②、初始场景图块③和初始场景图块④。其中,初始场景图块①、初始场景图块②、初始场景图块③和初始场景图块④的扩充方向,分别如各初始场景图块中的箭头所示。如图5所示,为另一个实施例中的整体场景图。参照图5,整体场景图52中包括十六个初始场景图块1-16。其中,初始场景图块1、初始场景图块3和初始场景图块6的扩充方向如箭头所示。
计算机设备然后按照扩充方向分别对各初始场景图块进行扩充处理,也就是在各初始场景图块的基础上,按照扩充方向对初始场景图块的边缘增加预设比例的区域,从而能够有效得到与各初始场景图块对应的场景扩充图块。
在一个实施例中,按照扩充方向分别对各初始场景图块进行扩充处理,得到与各初始场景图块对应的场景扩充图块,包括:根据整体场景图的中心点和各初始场景图块的中心点,确定各初始场景图块对应的偏移距离;按照各初始场景图块对应的扩充方向和偏移距离,分别对各初始场景图块进行扩充得到对应的扩充区域;根据各初始场景图块以及各初始场景图块对应的扩充区域,生成与各初始场景图块对应的场景扩充图块。
其中,整体场景图的中心点,可以是预先设定的整体场景模型对应的中心点,也就是整体场景模型的区域的中心点。各初始场景图块的中心点,则是各初始场景图块对应的区域的中心点。
可以理解,偏移可以是指各初始场景图块中的中心点的偏移。偏移距离可以是指各初始场景图块中的中心点,在图像上的水平移动距离。
计算机设备在对各初始场景图块进行扩充处理的过程中,首先确定各初始场景图块分别对应的扩充方向和偏移距离。具体地,计算机设备可以根据整体场景图的中心点和各初始场景图块的中心点,确定各初始场景图块在整体场景图中的位置,进而确定各初始场景图块在整体场景图中的扩充方向。计算机设备然后根据整体场景图的中心点和各初始场景图块的中心点,以及各初始场景图块的扩充方向,确定各初始场景图块对应的偏移距离。
计算机设备则按照各初始场景图块对应的扩充方向和偏移距离,分别对各初始场景图块进行扩充。具体地,计算机设备可以按照设定的预设像素比例,确定各初始场景图块对应的偏移距离。在另外的实施例中,计算机设备还可以按照各初始场景图块的区域大小,按照预设比例确定各初始场景图块对应的偏移距离。
计算机设备按照扩充方向和偏移距离,分别对各初始场景图块进行扩充后,得到各初始场景图块对应的扩充区域。可以理解,扩充区域,为对各初始场景图块进行扩充后的区域,相较于原始的初始场景图块所增加的区域。计算机设备进而根据各初始场景图块以及各初始场景图块对应的扩充区域,生成与各初始场景图块对应的场景扩充图块。
本实施例中,通过按照扩充方向和偏移距离,分别对各初始场景图块进行扩充,由此能够精准地对各初始场景图块的边缘进行扩充相应的区域,以进一步对各初始场景图块之间的接缝精准地进入融合。
在一个实施例中,按照各初始场景图块对应的扩充方向和偏移距离,分别对各初始场景图块进行扩充得到对应的扩充区域,包括:根据各初始场景图块对应的偏移距离,分别向各初始场景图块对应的扩充方向进行偏移,根据偏移后的初始场景图块确定与各初始场景图块对应的扩充区域。
根据各初始场景图块以及各初始场景图块对应的扩充区域,生成与各初始场景图块对应的场景扩充图块,包括:根据偏移后的初始场景图块的像素值,确定扩充区域的像素值;根据各初始场景图块的像素值,以及各初始场景图块的扩充区域的像素值,得到与各初始场景图块对应的场景扩充图块。
其中,各初始场景图块包括相应的像素值。对各初始场景图块进行扩充后,形成的扩充区域也具有相应的像素值。可以理解的是,扩充区域的像素值是基于原始的初始场景图块的像素值得到的。
计算机设备对各初始场景图块进行扩充时,按照各初始场景图块对应的扩充方向和偏移距离,对各初始场景图块进行扩充。具体地,计算机设备可以基于各初始场景图块的中心点和偏移距离,将中心点向各初始场景图块的扩充方向进行偏移,从而可以根据偏移后的中心点,得到偏移后的初始场景图块。其中,偏移后的初始场景图块,相较于原始的初始场景图块增加了与偏移距离相应的区域,这部分增加的区域则为扩充区域。
由于扩充区域是基于原始的初始场景图块进行偏移后形成的,扩充区域的像素值则也是基于原始的初始场景图块的像素值确定的。具体地,计算机设备将中心点向各初始场景图块的扩充方向进行偏移后,原始的各初始场景图块边缘的区域则会向扩充区域移动,计算机设备可以将原始初始场景图块边缘的偏移距离对应的区域的像素值,确定为扩充区域的像素值。计算机设备进而根据各初始场景图块的像素值和各初始场景图块的扩充区域的像素值,生成与各初始场景图块对应的场景扩充图块。
在另外的实施例中,计算机设备还可以针对各初始场景图块的扩充方向对应的边缘,按照预设像素比例确定各边缘对应的待扩充的像素值。
如图6所示,为一个实施例中对各初始场景图块进行扩充处理的示意图。参照图6,整体场景图62中包括各初始场景图块①-④。其中,整体场景图的中心点为O。预先设定的预设像素比例为X,例如预设像素比例X具体可以为50像素或100像素。以初始场景图块①为例,初始场景图块①原始的中心点为P,初始场景图块①对应的扩充方向则包括扩充方向F1和扩充方向F2。计算机设备则分别按照扩充方向F1向右扩充预设像素比例X的区域,以及按照扩充方向F2向下扩充预设像素比例X的区域,从而得到初始场景图块①对应的扩充区域。然后再将初始场景图块①的中心点P向扩充方向F1和扩充方向F2分别移动X/2距离,定位至更新的中心点P1。
如图7所示,为一个实施例中对各初始场景图块进行扩充后的示意图。参照图7,针对整体场景图72中的各初始场景图块①-④,分别按照预设像素比例X朝相应的扩充方向进行扩充相应的扩充区域后,分别得到对应的场景扩充图块。整体场景图72中的斜线区域,为各场景扩充图块中的相邻场景扩充图块之间的交叠区域72a。其中,交叠区域72a包括了属于不同场景扩充图块的像素值。
本实施例中,通过根据各初始场景图块对应的扩充方向偏移距离,对各初始场景图块对应的进行偏移,并将各初始场景图块中边缘的像素值作为对应扩充区域的像素值,从而能够有效地对各初始场景图块进行扩充,使得扩充区域的像素值仍属于对应初始场景图块中的像素值。
在一个实施例中,对各交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到各交叠区域对应的目标像素值,包括:根据各交叠区域中不同场景扩充图块对应的位置关系,确定各交叠区域中不同场景扩充图块所对应的像素融合比例;按照像素融合比例,对各交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到各交叠区域对应的目标像素值。
可以理解,位置关系,是指一个物体对于某参照物的相对位置,该物体和参照物的相对位置即存在着一种位置关系,例如前、后、上、下、左、右等。各场景扩充图块之间的位置关系,可以是指各场景扩充图块在整体场景图中的位置分布关系,例如左右关系。
计算机设备对整体场景图中的各初始场景图块进行扩充处理,得到对应的场景扩充图块后,则各场景扩充图块中的相邻场景扩充图块之间具有交叠区域。其中,各交叠区域中包括多个不同的场景扩充图块对应的区域。计算机设备可以根据交叠区域中不同场景扩充图块对应的位置分布关系和交叠区域的大小,确定各交叠区域中不同场景扩充图块所对应的像素融合比例。
具体地,计算机设备首先根据各场景扩充图块的中心点,确定交叠区域中不同场景扩充图块对应的位置分布关系,例如左右关系。然后按照位置分布关系依次确定交叠区域中不同场景扩充图块所对应的像素融合比例,例如,具体可以按照像素单位,依次确定交叠区域中每个像素单位区域中不同场景扩充图块所对应的像素融合比例。
计算机设备进而按照像素融合比例,将各交叠区域中属于不同场景扩充图块的像素值进行像素融合。具体地,可以将交叠区域中属于不同场景扩充图块的像素值乘以对应的像素融合比例,然后进行相加,以实现交叠区域的像素融合,由此能够精准地计算得到各交叠区域对应的目标像素值。
在一个实施例中,根据各交叠区域中不同场景扩充图块的位置关系,确定各交叠区域中不同场景扩充图块所对应的像素融合比例,包括:将各交叠区域划分为多个子区域;针对每一个子区域,根据各交叠区域中不同场景扩充图块对应的位置关系,确定各交叠区域中的子区域中不同场景扩充图块对应的像素融合比例。
按照像素融合比例,对各交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到各交叠区域对应的目标像素值,包括:根据各子区域中属于不同场景扩充图块的像素融合比例和像素值,确定各子区域的目标像素值;根据各交叠区域中的各子区域对应的目标像素值,得到各交叠区域对应的目标像素值。
其中,子区域是交叠区域中细分的局部区域,每个子区域均包括对应的像素融合比例。
计算机设备对各初始场景图块进行扩充得到对应的场景扩充图块后,首先对各交叠区域进行子区域划分,将各交叠区域划分为多个子区域。具体地,计算机设备可以按照预设的像素值比例将每个交叠区域划分为多个子区域。例如,可以按照像素单位将交叠区域划分为多个像素列,每个像素列即为一个子区域。
在另外的实施例中,计算机设备还可以按照预设数值,将每个交叠区域划分为对应数量的多个子区域。
然后计算机设备按照位置分布关系,依次确定交叠区域的每个子区域中不同场景扩充图块所对应的像素融合比例。例如具体可以按照像素单位,依次确定交叠区域中每个像素单位区域中不同场景扩充图块所对应的像素融合比例。
计算机设备进而根据各子区域中属于不同场景扩充图块的像素融合比例和像素值,计算出每个子区域对应的目标像素值。然后根据各交叠区域中的各子区域对应的目标像素值,生成各交叠区域对应的目标像素值。
例如,对于两个左右相邻的场景扩充图块,相邻的场景扩充图块中包括交叠区域。则可以从左至右,依次确定交叠区域的子区域中属于左边场景扩充图块的像素融合比例,各子区域的像素融合比例具体可以是从左至右依次递减。同理,交叠区域的子区域中属于右边场景扩充图块的像素融合比例,像素融合比例具体可以是从左至右依次递增。
本实施例中,通过将交叠区域划分多个子区域,根据不同分块的位置关系,按照排列顺序依次确定每个像素列中不同分块对应的比例值。由此能够有效地对交叠区域中不同场景扩充图块的像素进行过度融合,从而能够精准地对交叠区域中属于不同场景扩充图块的像素进行融合。
在一个实施例中,根据各交叠区域中不同场景扩充图块的位置关系,确定各交叠区域中的子区域中不同场景扩充图块对应的像素融合比例,包括:根据各交叠区域中相邻场景扩充图块之间的位置关系,以及各子区域在所属交叠区域中的位置,确定各交叠区域中的子区域中不同场景扩充图块对应的像素融合比例。
可以理解,将各场景扩充图块划分为多个子区域时,可以按照预设的像素值比例对每个交叠区域进行等份划分,将各交叠区域划分为等分的多个子区域。
具体地,计算机设备对交叠区域进行像素融合处理时,首先确定各交叠区域中不同场景扩充图块的位置关系,并确定所划分的各个子区域在该交叠区域中的位置。例如,具体可以为各子区域的排序列数与总列数的比值。
计算机设备进而根据各交叠区域中相邻场景扩充图块之间的位置关系,以及各子区域在所属交叠区域中的位置,计算出交叠区域中每个子区域中不同场景扩充图块对应的像素融合比例,从而进一步计算出每个子区域对应的目标像素值。
如图8所示,为一个实施例中对交叠区域进行像素融合处理的示意图。以图7中扩充后场景扩充图块①和场景扩充图块②为例进行说明。参照图8,针对场景扩充图块①和场景扩充图块②之间的交叠区域8a,将重叠区域中属于场景扩充图块①和场景扩充图块②分别对应的像素值,按照像素融合比例进行融合,以实现场景扩充图块①和场景扩充图块②两张图的融合。
具体地,交叠区域的像素值融合公式可以为:
Si=P1*(100-Qi)/100+P2*Qi/100;
其中,Si为交叠区域的第i个子区域;P1为交叠区域中的其中一个场景扩充图块,例如为场景扩充图块①;P2为交叠区域中的其中一个场景扩充图块,例如为场景扩充图块②;Qi为第i个子区域在交叠区域中的位置。
具体地,可以理解为交叠区域包括底层的场景扩充图块的像素值,以及叠加层的场景扩充图块的像素值。子区域具体可以为像素列,子区域在交叠区域中的位置,可以根据子区域对应的像素列确定。
也即,交叠区域的最终像素值=底层像素值x(100-叠加的像素列数)/100+叠加层像素值之x叠加像素列数/100。
参照图8中交叠区域8a的局部放大区域,例如,可以将交叠区域划分为100个像素列,即子区域。按照上述公式,在交叠区域8a起始处的第一列子区域,可以计算得到第一列子区域的目标像素值为:99%的场景扩充图块①像素值和1%的场景扩充图块②像素值,即此目标像素值表示为99%场景扩充图块①场景信息和1%的场景扩充图块②场景信息。
同理,在第二列子区域可以得到目标像素值为:98%的场景扩充图块①像素值和2%的场景扩充图块②像素值。依次类推,在最后的第100列子区域可以得到目标像素值为:100%的场景扩充图块②像素值,即从场景扩充图块①到场景扩充图块②的像素值过渡完成。由此,交叠区域中每一个子区域的目标像素都是融合了两张图的像素信息,且随着列数增长逐渐从场景扩充图块①过渡到场景扩充图块②,由此能够有效避免接缝的出现,从而实现精准地对交叠区域的像素景融合。
在一个实施例中,对各交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到各交叠区域对应的目标像素值,包括:按照各交叠区域的位置方向,分别对各交叠区域中相邻的属于不同场景扩充图块的像素值进行分步像素融合处理,得到各交叠区域对应的目标像素值。
其中,位置方向,可以表示整体场景中各场景扩充图块间的交叠区域的位置分布方向,例如位置方向可以包括横向、纵向等。分步像素融合处理,可以表示分多步对各场景扩充图块进行像素融合处理。例如,可以对各场景扩充图块分布进行两两融合处理。
具体地,计算机设备在对各交叠区域中属于不同场景扩充图块的像素值进行像素融合处理时,还可以根据各交叠区域对应的位置方向,按照不同的位置方向分别对各交叠区域进行分步像素融合处理。例如,计算机设备可以首先将位置方向相同的各交叠区域进行分步像素融合处理,然后再进一步对位置方向不同的各交叠区域进行分步像素融合处理,以得到各交叠区域对应的目标像素值。进而将各场景扩充图块融合为最终的目标场景图,从而实现高效精准地对场景扩充图块进行融合。
在一个实施例中,交叠区域的位置方向包括第一方向和第二方向;按照各交叠区域的位置方向,分别对各交叠区域中相邻的属于不同场景扩充图块的像素值进行分步像素融合处理,得到各交叠区域对应的目标像素值,包括:针对第一方向的交叠区域,对各交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到第一方向的交叠区域的目标像素值;针对第二方向的交叠区域,对各交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到第二方向的交叠区域的目标像素值。
可以理解,交叠区域的位置方向可以包括多个。例如,若交叠区域为矩形时,交叠区域的位置方向可以包括横向和纵向。交叠区域的位置方向具体可以包括第一方向和第二方向。其中,第一方向和第二方向,可以是指整体场景中各场景扩充图块之间的位置分布不同的两个方向。例如,第一方向可以为横向,第二方向可以为纵向。
当交叠区域的位置方向包括第一方向和第二方向时,计算机设备则按照第一方向和第二方向分别对各交叠区域进行分步像素融合处理。计算机设备可以首先将第一方向的各交叠区域进行分步像素融合处理,然后再进一步对第二方向的各交叠区域进行分步像素融合处理。
具体地,首先针对第一方向的交叠区域,计算机设备对各交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到第一方向的交叠区域的目标像素值。然后针对第二方向的交叠区域,计算机设备进一步对各交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到第二方向的交叠区域的目标像素值。
本实施例中,通过针对交叠区域的第一方向和第二方向,分别按照各位置方向的进行分步融合,由此能够更加精准地对各场景扩充图块中的交叠区域进行像素融合,以及对各场景扩充图块进行图块融合。
在一个实施例中,基于各初始场景图块的像素值以及各交叠区域的目标像素值,对各场景扩充图块进行图块融合处理,生成三维场景对应的目标场景图,包括:根据第一方向的各初始场景图块的像素值,以及第一方向的交叠区域的目标像素值,对第一方向的各场景扩充图块进行图块融合处理,得到第一方向的场景融合图块;根据第二方向的各初始场景图块的像素值,以及第一方向和第二方向的交叠区域的目标像素值,对第二方向的各场景扩充图块进行图块融合处理,生成三维场景对应的目标场景图。
其中,对于第一方向的各场景扩充图块,包括第一方向的各交叠区域以及与各场景扩充图块对应的各初始场景图块;同理,对于第二方向的各场景扩充图块,包括第二方向的各交叠区域以及与各场景扩充图块对应的各初始场景图块。
计算机设备按照第一方向和第二方向分别对各交叠区域进行分步像素融合处理,得到第一方向和第二方向对应的各交叠区域的目标像素值后,则进一步将第一方向和第二方向对应的各场景扩充图块的像素值进行融合,以进行图块融合处理。
具体地,计算机设备可以首先针对第一方向的各场景扩充图块,根据第一方向的各初始场景图块的像素值,以及第一方向的交叠区域的目标像素值,对第一方向的各场景扩充图块进行图块融合处理,从而融合得到第一方向的场景融合图块。其中,第一方向的多个交叠区域的目标像素值可以进行同步计算,第一方向的多个场景扩充图块也可以同步进行图块融合处理。
然后计算机设备针对第二方向的各场景扩充图块,根据第二方向的各初始场景图块的像素值,以及第一方向和第二方向的交叠区域的目标像素值,对第二方向的各场景扩充图块进行图块融合处理,生成三维场景对应的目标场景图。
在另一个实施例中,计算机设备还可以针对第一方向和第二方向的交叠区域,分步进行像素融合处理和图块融合处理,也就是先对第一方向的交叠区域和各场景扩充图块进行像素融合处理和图块融合处理后,再对第二方向的交叠区域和各场景扩充图块进行像素融合处理和图块融合处理,以将各场景扩充图块融合为最终的目标场景图。
如图9所示,为一个实施例中对各初始场景图块进行融合处理的示意图。其中,可以将初始场景图块①和初始场景图块②进行纵向融合,融合为融合后的场景图块⑤,将初始场景图块③和初始场景图块④进行纵向融合,融合为融合后的场景图块⑥,再继续将融合后的场景图块⑤和融合后的场景图块⑥进行横向融合。其中,各初始场景图块的纵向融合可以进行同步处理。由此能够更加精准有效地融合成整张目标地形图高度图9a。
在一个实施例中,目标场景图应用于与三维场景对应的三维场景应用;方法还包括:确定与三维场景应用相匹配的场景图数量和场景图尺寸;根据场景图数量和场景图尺寸,将目标场景图划分为多个目标场景图子块,以使三维场景应用在运行时根据待展示的场景画面加载对应的目标场景图子块,基于目标场景图子块的场景数据渲染场景画面。
其中,场景图尺寸,是指预设的整体场景图的尺寸大小,例如具体可以是根据项目需求确定的。场景图数量,也可以预先设定的。例如,具体可以是根据场景图尺寸确定的,还可以是根据计算机设备性能相适配的单块初始场景图块的最大面积范围确定的。
可以理解,目标场景图应用于与三维场景对应的三维场景应用,通过运行三维场景应用,可以让这些三维场景动起来,或从不同的角度和位置去观察,以显示出仿真的三维场景效果。
计算机设备生成与三维场景对应的整体的目标场景图后,还可以根据三维场景应用在运行时的实现需要,将目标场景图划分为多个目标场景图子块。
具体地,计算机设备可以根据三维场景应用在运行时的实现需要,确定与三维场景应用相匹配的场景图数量,以及每个目标场景图子块的场景图尺寸。
在另外的实施例中,计算机设备还可以根据预设的固定的场景图数量和场景图尺寸,确定与三维场景应用相匹配的场景图数量和场景图尺寸。
计算机设备进而根据场景图数量和场景图尺寸,将目标场景图划分为多个目标场景图子块。由此,三维场景应用在运行时,则只需加载所需要的部分目标场景图子块,以基于目标场景图子块的场景数据渲染场景画面。
具体地,计算机设备可以为终端,终端中运行有能够提供三维场景的三维场景应用。终端运行三维应用时,会根据运行过程中的状态,确定当前待展示的场景画面,进而根据待展示的场景画面加载对应的目标场景图子块,以进一步根据加载的目标场景图子块对应的场景数据渲染待展示的场景画面。
如图10所示,为一个实施例中对各初始场景图块进行处理的示意图。首先,将三维场景下的多个初始场景图块,即初始场景图块10a1-10a4进行拼接后,得到与三维场景对应的包括各初始场景图块的整体场景图10b。然后分别对整体场景图10b中的各初始场景图块进行扩充处理,得到场景扩充图块,并对各场景扩充图块之间的交叠区域进行像素融合处理,以及对各初始场景图块进行图块融合处理,生成三维场景对应的目标场景图10c。最后,计算机设备根据与三维场景应用相匹配的场景图数量和场景图尺寸,将目标场景图划分为多个目标场景图子块10d。由此能够在三维场景应用运行时高效地加载所需的目标场景图子块,以提高渲染处理效率。
在一个实施例中,初始场景图块包括初始地形高度图;基于各初始场景图块的像素值以及各交叠区域的目标像素值,对各场景扩充图块进行图块融合处理,生成三维场景对应的目标场景图,包括:根据各交叠区域的目标像素值,确定各交叠区域的目标高度值;根据各初始地形高度图的像素值,确定各初始地形高度图中除各交叠区域外的区域的目标高度值;基于各交叠区域的目标高度值,以及各初始地形高度图中除各交叠区域外的区域的目标高度值,对各场景扩充图块进行图块融合处理,生成三维场景对应的目标地形高度图。
其中,地形高度图,可以是指用于存储三维场景中地形的高度数据的图像,例如地形可以包括陆地、海洋、高原、山河、湖海等。地形高度图具体可以为灰阶图。在高度图中,可以预设像素值与高度值的比例,进而可以通过高度图的像素值存储三维场景中的高度值。
例如,地形高度图中像素的黑色程度代表三维场景中地形高度越低,反之白色则越高。每个像素都记录了当前像素所在位置代表的地表的高度比例值。单个像素可根据设定代表三维场景中地形的高度为1米、5米或10米等任意尺寸。单位尺寸内像素越多,黑白程度变化越丰富,则表示地形变化越丰富,例如,可以用0-225数值范围的像素值记录地形的高度值。通常像素值为0则高度图中的像素为纯黑色,也就是地形高度的最小值。通常像素值为0则高度图中的像素为纯白色,也就是地形高度的最大值。如图11所示,为一个实施例中的地形高度图,其中包括海洋区域11a、陆地区域11b和高原区域11c。从图11中可以看到各海洋区域11a的像素值最暗,则对应位置的地形高度最低。各陆地区域11b的像素值相较于海洋区域11a的像素值更亮,则对应地形位置的高度更高。而高原区域11c的像素值最亮,接近于白色,表示对应位置的地形高度最高。
可以理解,本实施例中的初始场景图块包括初始地形高度图。初始地形高度图可以是预先根据三维场景中的地形模型生成的。
具体地,计算机设备首先对三维场景下的多个初始地形高度图进行拼接,得到与三维场景中的地形模型对应的整体地形高度图,整体地形高度图中包括了各初始地形高度图。计算机设备则分别对整体地形高度图中的各初始地形高度图进行扩充处理,得到对应的高度图扩充图块;各高度图扩充图块中的相邻高度图扩充图块之间具有交叠区域。计算机设备则对交叠区域中属于不同场高度图扩充图块的像素值进行像素融合处理,得到各交叠区域对应的目标像素值。
计算机设备进而根据各初始地形高度图中的像素值以及各交叠区域的目标像素值,对各高度图扩充图块进行图块融合处理,以得到完整的目标地形高度图。具体地,计算机设备得到各交叠区域的目标像素值后,则可以根据预设的高度比例值确定交叠区域对应的目标高度值。同时计算机设备还根据各初始地形高度图中的像素值,根据预设的高度比例值确定初始地形高度图中除各交叠区域外的区域的目标高度值。进而根据各交叠区域的目标高度值,以及各初始地形高度图中除各交叠区域外的区域的目标高度值,对各高度图扩充图块进行图块融合,从而生成与三维场景对应的高精度的目标地形高度图。
本实施例中,通过基于三维场景中的整体地形生成多个局部的初始地形高度图,然后再将各初始地形高度图整合为整体地形高度图,进而继续对各初始地形高度图之间的接缝进行像素融合,从而能够有效地生成三维场景对应的高精准度的目标地形高度图。
在一个具体的实施例中,如图12所示,为一个实施例中对三维场景下的地形高度图处理的流程图。计算机设备可以按照分-总-分的处理流程,生成所需的高度图。首先按照预设方式生成三维场景下的地形模型对应的多个初始地形高度图。也就是预先生成地形模型下局部的多个大分块高度图。然后将多个初始地形高度图合成为一整张整体地形高度图,并进一步处理各初始地形高度图之间的接缝,以融合得到三维场景对应的目标地形高度图。计算机设备进一步根据三维场景应用在运行时的实现需要,按照所需的高度图数量,将目标场景图划分为多个目标场景图子块。
可以理解,对于面积范围较大的三维场景,所需场景图的数量则较多。如果直接使用图像处理工具,例如Houdini,烘焙出实际项目所需大小的高度图,会因为数量过多而效率十分低下。其中,烘焙,可以是指将三维模型中的一些信息记录到二维平面图上的过程。高度图的烘培,则表示将地形模型的高度信息记录到高度图中。
由于图像处理工具限制等不可抗因素,如果直接对整块地形高度图进行切分,可能会导致最终的切块相互之间无法很好衔接,最终在三维场景模型上的接缝之间可能会出现瑕疵。
本实施例中,可以预先在图像处理工具中,根据地形大小确定切分数量,例如可以根据计算机所能承受的单块地形块的最大面积确定切分数量。如果数量过多会导致出图的时间过长;数量过少则会导致分块图数据量仍较大,会受到计算机性能限制出图效率较低。在一个具体的实施例中,将切分数量确定为2x2,根据反复测试可以使得高度图的烘焙状态较佳。
具体地,可以预先设定好整体地形范围的大小,然后根据所需的各个地形分块的大小,即各初始地形高度图的大小。然后在每个地形分块上生成对应的地形模型,以在各地形分块上按照地形模型的生成规则,烘焙出对应的初始地形高度图。这几张初始地形高度图仍能拼合成最开始的整体地形范围的大小,以进一步融合成完整的地形高度图。
其中,整体地形范围的中心点以及对应的位置不会发生变化,各地形分块也具有对应的中心点,则可以基于各地形分块的中心点在这个范围上生成地形模型,进而烘焙为高度图。由于地形模型的生成规则不发生变化,所以整体地形模型在各个分块生成时不会再发生变化,即每个地形分块拼合后还是能组成原始的完整地形范围。
进一步地,根据地形分块的中心点来确定各地形分块的位置,以对三维场景下的多个初始地形高度图进行拼接,得到与三维场景对应的包括各初始地形高度图的整体高度图。然后对整体高度图中的每个初始地形高度图进行扩充处理,进而分别烘焙出个扩充后的地形分块对应的高度图,得到与各初始地形高度图对应的高度图扩充图块。
具体地,可以将各初始地形高度图的中心点,向整体高度图的中心点横轴和竖轴各移动X/2距离,最终形成一个相互交叠的高度图扩充图块。各高度图扩充图块中的相邻高度图扩充图块之间则具有交叠区域。例如,每个初始地形高度图分别向外扩展预设距离X,其中,预设距离X可以为不少于各初始地形高度图的边缘上的后50个像素距离。
其中,各高度图扩充图块之间的交叠区域,覆盖了各初始地形高度图之间的接缝。进一步对各高度图扩充图块之间的交叠区域进行像素融合处理,以修复各初始地形高度图之间的接缝。具体地,针对各交叠区域,以交叠区域中包括底层和叠加层对应的高度图扩充图块为例,以像素为单位将各交叠区域划分为多个像素列。交叠区域中各像素列的目标像素值=底层像素值*(100-叠加的像素列数)/100+叠加层像素值之*叠加像素列数/100。
即,从底层的高度图扩充图块至叠加层的高度图扩充图块的像素值进行过渡。由此,交叠区域中每一个像素列的目标像素都是融合了两张高度图扩充图块的像素信息,且随着列数增长逐渐从底层的高度图扩充图块过渡到叠加层的高度图扩充图块,由此能够有效避免接缝的出现,从而实现精准地对交叠区域的像素景融合。
然后,按照各高度图扩充图块的位置方向,对各高度图扩充图块进行分步融合处理,以将各场景扩充图块融合为最终的目标高度图。其中,最终的目标高度图可以以图像格式进行存储、读取等操作。
最后,根据三维场景所需的高度图数量和高度图尺寸切分高度图,将目标高度图划分为多个目标高度图子块。具体可以根据三维场景应用对应的引擎程序侧的需求确定高度图数量和高度图尺寸。例如,当三维场景中的整体地形范围超过40000x36000像素时,可以将整体地形范围转换为地形面积约为40km2x40km2,最后可以将高度图切分为大约1500张小的高度图。
由于在三维场景应用中无法一次性加载如此巨大的地形,由此通过将整块地形对应的目标高度图,切分成小块来实现分块加载,从而能够有效提高三维场景应用的处理效率。
相较于传统的高度图制作方法,本实施例中,通过将三维场景中的预先生成的局部的多个初始地形高度图整合为整体地形高度图,然后对各初始地形高度图之间的接缝进行像素融合,从而能够有效地生成高精度的目标地形高度图。由此在提高地图高度图精度的同时又能快速高效地生成所需的高度图,并且最后的合并与再切分步骤可以在几十秒内完成,总过程比之前的烘焙过程缩减了60%以上的时间,有效提高了三维场景中地形高度图的迭代效率。
本申请还提供一种应用场景,该应用场景为三维环境演示场景,例如旅游环境演示场景、建筑物演示场景等,该三维环境演示场景应用上述的三维场景下的图像处理方法。针对各种环境下的三维环境演示场景,可以预先生成三维场景下的多个初始场景图块。
计算机设备首先获取三维场景下的多个初始场景图块,然后将三维场景下的多个初始场景图块进行拼接后,得到与三维场景对应的包括各初始场景图块的整体场景图。然后分别对整体场景图中的各初始场景图块进行扩充处理,得到场景扩充图块,并对各场景扩充图块之间的交叠区域进行像素融合处理,以及对各初始场景图块进行图块融合处理,生成三维场景对应的高精度的目标场景图。最后,计算机设备根据与三维场景应用相匹配的场景图数量和场景图尺寸,将目标场景图划分为多个目标场景图子块。
三维环境演示场景对应的应用可以部署在终端上,终端在运行三维环境演示场景对应的应用时,根据待展示的场景画面获取相匹配的目标场景图子块。然后从相匹配的目标场景图子块获取对应的场景数据,终端进而基于读取的场景数据渲染待展示的场景画面。由此能够实现高效地加载所需的高精度的目标场景图子块,进而能够有效提高渲染处理效率。
本申请还另外提供一种应用场景,该应用场景为开放世界类型的三维游戏场景,该游戏场景应用上述的图像处理方法。具体地,开放世界类型的三维游戏场景中包括开放世界地形,其中开放世界地形是开放世界式的任务空间,通常包括与开放世界地形对应的超大范围的世界地图。其中,可以预先生成三维场景下的多个初始场景图块。初始场景图块具体为三维游戏场景下的开放世界地形对应的初始地形高度图,初始地形高度图具体可以是根据开放世界地形模型预先制作生成的。
计算机设备获取三维游戏场景下的开放世界地形对应的多个初始地形高度图后,首先对三维场景下的多个初始地形高度图进行拼接,得到与三维场景中的地形模型对应的整体地形高度图。然后分别对整体地形高度图中的各初始地形高度图进行扩充处理,扩充后的各高度图扩充图块中的相邻高度图扩充图块之间具有交叠区域。进而对交叠区域中属于不同场高度图扩充图块的像素值进行像素融合处理,得到各交叠区域对应的目标像素值。
计算机设备进而根据预设的高度比例值,确定交叠区域对应的目标高度值,以及初始地形高度图中除各交叠区域外的区域的目标高度值。进而根据对应的目标高度值对各高度图扩充图块进行图块融合,从而生成与三维场景对应的高精度的目标地形高度图。
进一步地,终端中部署有与三维游戏场景对应的游戏应用。当终端中的游戏应用在运行时,根据待展示的游戏场景画面以及在游戏场景中的位置,获取相匹配的目标高度图子块。然后从相匹配的目标高度图子块获取对应的地形高度数据,终端进而基于读取的地形高度数据以及所需的其他场景数据渲染待展示的场景画面。由此能够实现在游戏场景中高效地加载所需的高精度的目标高度图子块,进而能够有效提高游戏应用的处理效率和渲染效率。
应该理解的是,虽然图2的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图13所示,提供了一种图像处理装置1300,该装置可以采用软件模块或硬件模块,或者是二者的结合成为计算机设备的一部分,该装置具体包括:图块拼接模块1302、图块扩充模块1304、像素融合模块1306和图块融合模块1308,其中:
图块拼接模块1302,用于对三维场景下的多个初始场景图块进行拼接,得到与三维场景对应的包括各初始场景图块的整体场景图。
图块扩充模块1304,用于分别对整体场景图中的各初始场景图块进行扩充处理,得到场景扩充图块;各场景扩充图块中的相邻场景扩充图块之间具有交叠区域。
像素融合模块1306,用于对各交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到各交叠区域对应的目标像素值。
图块融合模块1308,用于基于各初始场景图块的像素值以及各交叠区域的目标像素值,对各场景扩充图块进行图块融合处理,生成三维场景对应的目标场景图。
在一个实施例中,图块扩充模块1304还用于根据各初始场景图块在整体场景图中的位置,确定各初始场景图块对应的扩充方向;按照扩充方向分别对各初始场景图块进行扩充处理,得到与各初始场景图块对应的场景扩充图块。
在一个实施例中,图块扩充模块1304还用于根据整体场景图的中心点和各初始场景图块的中心点,确定各初始场景图块对应的偏移距离;按照各初始场景图块对应的扩充方向和偏移距离,分别对各初始场景图块进行扩充得到对应的扩充区域;根据各初始场景图块以及各初始场景图块对应的扩充区域,生成与各初始场景图块对应的场景扩充图块。
在一个实施例中,图块扩充模块1304还用于根据各初始场景图块对应的偏移距离,分别向各初始场景图块对应的扩充方向进行偏移,根据偏移后的初始场景图块确定与各初始场景图块对应的扩充区域;根据偏移后的初始场景图块的像素值,确定扩充区域的像素值;根据各初始场景图块的像素值,以及各初始场景图块的扩充区域的像素值,得到与各初始场景图块对应的场景扩充图块。
在一个实施例中,像素融合模块1306还用于根据各交叠区域中不同场景扩充图块对应的位置关系,确定各交叠区域中不同场景扩充图块所对应的像素融合比例;按照像素融合比例,对各交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到各交叠区域对应的目标像素值。
在一个实施例中,像素融合模块1306还用于将各交叠区域划分为多个子区域;针对每一个子区域,根据各交叠区域中不同场景扩充图块对应的位置关系,确定各交叠区域的子区域中不同场景扩充图块对应的像素融合比例;根据各子区域中属于不同场景扩充图块的像素融合比例和像素值,确定各子区域的目标像素值;根据各交叠区域中的各子区域对应的目标像素值,得到各交叠区域对应的目标像素值。
在一个实施例中,像素融合模块1306还用于根据各交叠区域中相邻场景扩充图块之间的位置关系,以及各子区域在所属交叠区域中的位置,确定各交叠区域中的子区域中不同场景扩充图块对应的像素融合比例。
在一个实施例中,像素融合模块1306还用于按照各交叠区域的位置方向,分别对各交叠区域中相邻的属于不同场景扩充图块的像素值进行分步像素融合处理,得到各交叠区域对应的目标像素值。
在一个实施例中,交叠区域的位置方向包括第一方向和第二方向;像素融合模块1306还用于针对第一方向的交叠区域,对各交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到第一方向的交叠区域的目标像素值;针对第二方向的交叠区域,对各交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到第二方向的交叠区域的目标像素值。
在一个实施例中,图块融合模块1308还用于根据第一方向的各初始场景图块的像素值,以及第一方向的交叠区域的目标像素值,对第一方向的各场景扩充图块进行图块融合处理,得到第一方向的场景融合图块;根据第二方向的各初始场景图块的像素值,以及第一方向和第二方向的交叠区域的目标像素值,对第二方向的各场景扩充图块进行图块融合处理,生成三维场景对应的目标场景图。
在一个实施例中,目标场景图应用于与三维场景对应的三维场景应用;上述三维场景下的图像处理装置还包括图像切分模块,用于确定与三维场景应用相匹配的场景图数量和场景图尺寸;根据场景图数量和场景图尺寸,将目标场景图划分为多个目标场景图子块,以使三维场景应用在运行时根据待展示的场景画面加载对应的目标场景图子块,基于目标场景图子块的场景数据渲染场景画面。
在一个实施例中,初始场景图块包括初始地形高度图;图块融合模块1308还用于根据各交叠区域的目标像素值,确定各交叠区域的目标高度值;根据各初始地形高度图的像素值,确定各初始地形高度图中除各交叠区域外的区域的目标高度值;基于各交叠区域的目标高度值,以及各初始地形高度图中除各交叠区域外的区域的目标高度值,对各场景扩充图块进行图块融合处理,生成三维场景对应的目标地形高度图。
关于三维场景下的图像处理装置的具体限定可以参见上文中对于三维场景下的图像处理方法的限定,在此不再赘述。上述三维场景下的图像处理装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是终端,其内部结构图可以如图14所示。该计算机设备包括通过系统总线连接的处理器、存储器、通信接口、显示屏和输入装置。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的通信接口用于与外部的终端进行有线或无线方式的通信,无线方式可通过WIFI、运营商网络、NFC(近场通信)或其他技术实现。该计算机程序被处理器执行时以实现一种三维场景下的图像处理方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏,该计算机设备的输入装置可以是显示屏上覆盖的触摸层,也可以是计算机设备外壳上设置的按键、轨迹球或触控板,还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解,图14中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,还提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现上述各方法实施例中的步骤。
在一个实施例中,提供了一种计算机可读存储介质,存储有计算机程序,该计算机程序被处理器执行时实现上述各方法实施例中的步骤。
在一个实施例中,提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行上述各方法实施例中的步骤。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-Only Memory,ROM)、磁带、软盘、闪存或光存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic Random Access Memory,DRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (15)
1.一种图像处理方法,其特征在于,所述方法包括:
对三维场景下的多个初始场景图块进行拼接,得到与所述三维场景对应的包括各所述初始场景图块的整体场景图;
分别对所述整体场景图中的各所述初始场景图块进行扩充处理,得到场景扩充图块;各所述场景扩充图块中的相邻场景扩充图块之间具有交叠区域;
对各所述交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到各所述交叠区域对应的目标像素值;
基于各所述初始场景图块的像素值以及各所述交叠区域的目标像素值,对各所述场景扩充图块进行图块融合处理,生成所述三维场景对应的目标场景图。
2.根据权利要求1所述的方法,其特征在于,所述分别对所述整体场景图中的各所述初始场景图块进行扩充处理,得到场景扩充图块,包括:
根据各所述初始场景图块在所述整体场景图中的位置,确定各所述初始场景图块对应的扩充方向;
按照所述扩充方向分别对各所述初始场景图块进行扩充处理,得到与各所述初始场景图块对应的场景扩充图块。
3.根据权利要求2所述的方法,其特征在于,所述按照所述扩充方向分别对各所述初始场景图块进行扩充处理,得到与各所述初始场景图块对应的场景扩充图块,包括:
根据所述整体场景图的中心点和各所述初始场景图块的中心点,确定各所述初始场景图块对应的偏移距离;
按照各所述初始场景图块对应的扩充方向和偏移距离,分别对各所述初始场景图块进行扩充得到对应的扩充区域;
根据各所述初始场景图块以及各所述初始场景图块对应的扩充区域,生成与各所述初始场景图块对应的场景扩充图块。
4.根据权利要求3所述的方法,其特征在于,所述按照各所述初始场景图块对应的扩充方向和偏移距离,分别对各所述初始场景图块进行扩充得到对应的扩充区域,包括:
根据各所述初始场景图块对应的偏移距离,分别向各所述初始场景图块对应的扩充方向进行偏移,根据偏移后的初始场景图块确定与各所述初始场景图块对应的扩充区域;
所述根据各所述初始场景图块以及各所述初始场景图块对应的扩充区域,生成与各所述初始场景图块对应的场景扩充图块,包括:
根据所述偏移后的初始场景图块的像素值,确定所述扩充区域的像素值;
根据各所述初始场景图块的像素值,以及各所述初始场景图块的扩充区域的像素值,得到与各所述初始场景图块对应的场景扩充图块。
5.根据权利要求1所述的方法,其特征在于,所述对各所述交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到各所述交叠区域对应的目标像素值,包括:
根据各所述交叠区域中不同场景扩充图块对应的位置关系,确定各所述交叠区域中不同场景扩充图块所对应的像素融合比例;
按照所述像素融合比例,对各所述交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到各所述交叠区域对应的目标像素值。
6.根据权利要求5所述的方法,其特征在于,所述根据各所述交叠区域中不同场景扩充图块对应的位置关系,确定各所述交叠区域中不同场景扩充图块所对应的像素融合比例,包括:
将各所述交叠区域划分为多个子区域;
针对每一个子区域,根据各所述交叠区域中不同场景扩充图块对应的位置关系,确定各所述交叠区域的子区域中不同场景扩充图块对应的像素融合比例;
所述按照所述像素融合比例,对各所述交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到各所述交叠区域对应的目标像素值,包括:
根据各所述子区域中属于不同场景扩充图块的像素融合比例和像素值,确定各所述子区域的目标像素值;
根据各所述交叠区域中的各所述子区域对应的目标像素值,得到各所述交叠区域对应的目标像素值。
7.根据权利要求6所述的方法,其特征在于,所述根据各所述交叠区域中不同场景扩充图块的位置关系,确定各所述交叠区域中的子区域中不同场景扩充图块对应的像素融合比例,包括:
根据各所述交叠区域中相邻场景扩充图块之间的位置关系,以及各所述子区域在所属交叠区域中的位置,确定各所述交叠区域中的子区域中不同场景扩充图块对应的像素融合比例。
8.根据权利要求1所述的方法,其特征在于,所述对各所述交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到各所述交叠区域对应的目标像素值,包括:
按照各所述交叠区域的位置方向,分别对各所述交叠区域中相邻的属于不同场景扩充图块的像素值进行分步像素融合处理,得到各所述交叠区域对应的目标像素值。
9.根据权利要求8所述的方法,其特征在于,所述交叠区域的位置方向包括第一方向和第二方向;所述按照各所述交叠区域的位置方向,分别对各所述交叠区域中相邻的属于不同场景扩充图块的像素值进行分步像素融合处理,得到各所述交叠区域对应的目标像素值,包括:
针对第一方向的交叠区域,对各所述交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到所述第一方向的交叠区域的目标像素值;
针对第二方向的交叠区域,对各所述交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到所述第二方向的交叠区域的目标像素值。
10.根据权利要求9所述的方法,其特征在于,所述基于各所述初始场景图块的像素值以及各所述交叠区域的目标像素值,对各所述场景扩充图块进行图块融合处理,生成所述三维场景对应的目标场景图,包括:
根据所述第一方向的各所述初始场景图块的像素值,以及所述第一方向的交叠区域的目标像素值,对所述第一方向的各所述场景扩充图块进行图块融合处理,得到所述第一方向的场景融合图块;
根据所述第二方向的各所述初始场景图块的像素值,以及所述第一方向和所述第二方向的交叠区域的目标像素值,对所述第二方向的各所述场景扩充图块进行图块融合处理,生成所述三维场景对应的目标场景图。
11.根据权利要求1至10任意一项所述的方法,其特征在于,所述目标场景图应用于与所述三维场景对应的三维场景应用;所述方法还包括:
确定与所述三维场景应用相匹配的场景图数量和场景图尺寸;
根据所述场景图数量和所述场景图尺寸,将所述目标场景图划分为多个目标场景图子块,以使所述三维场景应用在运行时根据待展示的场景画面加载对应的目标场景图子块,基于所述目标场景图子块的场景数据渲染所述场景画面。
12.根据权利要求1至10任意一项所述的方法,其特征在于,所述初始场景图块包括初始地形高度图;所述基于各所述初始场景图块的像素值以及各所述交叠区域的目标像素值,对各所述场景扩充图块进行图块融合处理,生成所述三维场景对应的目标场景图,包括:
根据各所述交叠区域的目标像素值,确定各所述交叠区域的目标高度值;
根据各所述初始地形高度图的像素值,确定各所述初始地形高度图中除各所述交叠区域外的区域的目标高度值;
基于各所述交叠区域的目标高度值,以及各所述初始地形高度图中除各所述交叠区域外的区域的目标高度值,对各所述场景扩充图块进行图块融合处理,生成所述三维场景对应的目标地形高度图。
13.一种图像处理装置,其特征在于,所述装置包括:
图块拼接模块,用于对三维场景下的多个初始场景图块进行拼接,得到与所述三维场景对应的包括各所述初始场景图块的整体场景图;
图块扩充模块,用于分别对所述整体场景图中的各所述初始场景图块进行扩充处理,得到场景扩充图块;各所述场景扩充图块中的相邻场景扩充图块之间具有交叠区域;
像素融合模块,用于对各所述交叠区域中属于不同场景扩充图块的像素值进行像素融合处理,得到各所述交叠区域对应的目标像素值;
图块融合模块,用于基于各所述初始场景图块的像素值以及各所述交叠区域的目标像素值,对各所述场景扩充图块进行图块融合处理,生成所述三维场景对应的目标场景图。
14.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至12中任一项所述的方法的步骤。
15.一种计算机可读存储介质,存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至12中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110326419.6A CN112907451A (zh) | 2021-03-26 | 2021-03-26 | 图像处理方法、装置、计算机设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110326419.6A CN112907451A (zh) | 2021-03-26 | 2021-03-26 | 图像处理方法、装置、计算机设备和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112907451A true CN112907451A (zh) | 2021-06-04 |
Family
ID=76108831
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110326419.6A Pending CN112907451A (zh) | 2021-03-26 | 2021-03-26 | 图像处理方法、装置、计算机设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112907451A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113744399A (zh) * | 2021-09-09 | 2021-12-03 | 网易(杭州)网络有限公司 | 地形分层数据处理方法、装置、设备及机器可读储存介质 |
CN113744401A (zh) * | 2021-09-09 | 2021-12-03 | 网易(杭州)网络有限公司 | 一种地形拼接方法、装置、电子设备和存储介质 |
CN117710202A (zh) * | 2023-08-22 | 2024-03-15 | 荣耀终端有限公司 | 图像融合方法、电子设备及存储介质 |
CN117710202B (zh) * | 2023-08-22 | 2024-09-24 | 荣耀终端有限公司 | 图像融合方法、电子设备及存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110050864A1 (en) * | 2009-09-01 | 2011-03-03 | Prime Focus Vfx Services Ii Inc. | System and process for transforming two-dimensional images into three-dimensional images |
CN104851131A (zh) * | 2015-05-20 | 2015-08-19 | 北京控制工程研究所 | 一种局部精度约束的三维地形生成方法 |
CN107527335A (zh) * | 2017-09-11 | 2017-12-29 | 广东欧珀移动通信有限公司 | 图像处理方法和装置、电子装置和计算机可读存储介质 |
CN107993276A (zh) * | 2016-10-25 | 2018-05-04 | 杭州海康威视数字技术股份有限公司 | 一种全景图像的生成方法及装置 |
CN111494946A (zh) * | 2020-04-23 | 2020-08-07 | 腾讯科技(深圳)有限公司 | 图像处理方法、装置、设备及计算机可读存储介质 |
CN111566438A (zh) * | 2018-12-19 | 2020-08-21 | 合刃科技(深圳)有限公司 | 图像获取方法及系统 |
-
2021
- 2021-03-26 CN CN202110326419.6A patent/CN112907451A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110050864A1 (en) * | 2009-09-01 | 2011-03-03 | Prime Focus Vfx Services Ii Inc. | System and process for transforming two-dimensional images into three-dimensional images |
CN104851131A (zh) * | 2015-05-20 | 2015-08-19 | 北京控制工程研究所 | 一种局部精度约束的三维地形生成方法 |
CN107993276A (zh) * | 2016-10-25 | 2018-05-04 | 杭州海康威视数字技术股份有限公司 | 一种全景图像的生成方法及装置 |
CN107527335A (zh) * | 2017-09-11 | 2017-12-29 | 广东欧珀移动通信有限公司 | 图像处理方法和装置、电子装置和计算机可读存储介质 |
CN111566438A (zh) * | 2018-12-19 | 2020-08-21 | 合刃科技(深圳)有限公司 | 图像获取方法及系统 |
CN111494946A (zh) * | 2020-04-23 | 2020-08-07 | 腾讯科技(深圳)有限公司 | 图像处理方法、装置、设备及计算机可读存储介质 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113744399A (zh) * | 2021-09-09 | 2021-12-03 | 网易(杭州)网络有限公司 | 地形分层数据处理方法、装置、设备及机器可读储存介质 |
CN113744401A (zh) * | 2021-09-09 | 2021-12-03 | 网易(杭州)网络有限公司 | 一种地形拼接方法、装置、电子设备和存储介质 |
CN113744399B (zh) * | 2021-09-09 | 2023-08-22 | 网易(杭州)网络有限公司 | 地形分层数据处理方法、装置、设备及机器可读储存介质 |
CN117710202A (zh) * | 2023-08-22 | 2024-03-15 | 荣耀终端有限公司 | 图像融合方法、电子设备及存储介质 |
CN117710202B (zh) * | 2023-08-22 | 2024-09-24 | 荣耀终端有限公司 | 图像融合方法、电子设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108062784B (zh) | 三维模型纹理贴图转换方法与装置 | |
CN107358649B (zh) | 地形文件的处理方法和装置 | |
CN110458112B (zh) | 车辆检测方法、装置、计算机设备和可读存储介质 | |
KR100738500B1 (ko) | 영상 기반 돌출 변위 매핑 방법과, 이를 이용한 이중 변위매핑 방법 | |
US20230074265A1 (en) | Virtual scenario generation method and apparatus, computer device and storage medium | |
US10733777B2 (en) | Annotation generation for an image network | |
CN106326334A (zh) | 一种电子地图的显示、生成方法和装置 | |
CN112907451A (zh) | 图像处理方法、装置、计算机设备和存储介质 | |
CN111583381A (zh) | 游戏资源图的渲染方法、装置及电子设备 | |
KR20150124112A (ko) | 3차원 지형 영상 가시화에서의 적응형 렌더링 방법 | |
CN115409957A (zh) | 基于虚幻引擎的地图构建方法、电子设备和存储介质 | |
CN114663324A (zh) | 一种bim模型与gis信息的融合显示方法及相关组件 | |
CN113144613A (zh) | 基于模型的体积云生成的方法 | |
CN111773710A (zh) | 一种纹理图像处理的方法、装置、电子设备和存储介质 | |
CN114066715A (zh) | 图像风格迁移方法、装置、电子设备以及存储介质 | |
CN115409962B (zh) | 虚幻引擎内构建坐标系统的方法、电子设备和存储介质 | |
CN113935891B (zh) | 像素风格的场景渲染方法、设备及存储介质 | |
CN115409958A (zh) | 基于虚幻引擎的平面构建方法、电子设备和存储介质 | |
CN113012302B (zh) | 三维全景图生成方法、装置、计算机设备和存储介质 | |
CN115409960A (zh) | 基于虚幻引擎的模型构建方法、电子设备和存储介质 | |
CN111028323B (zh) | 地图中水波纹的模拟方法、装置、设备和可读存储介质 | |
CN113989680A (zh) | 建筑三维场景自动构建方法及系统 | |
CN109410302B (zh) | 纹理映射方法、装置、计算机设备和存储介质 | |
KR102056985B1 (ko) | 가상 현실 인터랙션 방법 및 그 장치 | |
CN117115382B (zh) | 地图道路绘制方法、装置、计算机设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
REG | Reference to a national code |
Ref country code: HK Ref legal event code: DE Ref document number: 40045897 Country of ref document: HK |