CN110363733B - 一种混合图像生成方法及装置 - Google Patents

一种混合图像生成方法及装置 Download PDF

Info

Publication number
CN110363733B
CN110363733B CN201910487835.7A CN201910487835A CN110363733B CN 110363733 B CN110363733 B CN 110363733B CN 201910487835 A CN201910487835 A CN 201910487835A CN 110363733 B CN110363733 B CN 110363733B
Authority
CN
China
Prior art keywords
offset
sampling point
color
parameter
shifted
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910487835.7A
Other languages
English (en)
Other versions
CN110363733A (zh
Inventor
倪朝浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Advanced New Technologies Co Ltd
Advantageous New Technologies Co Ltd
Original Assignee
Advanced New Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Advanced New Technologies Co Ltd filed Critical Advanced New Technologies Co Ltd
Priority to CN201910487835.7A priority Critical patent/CN110363733B/zh
Publication of CN110363733A publication Critical patent/CN110363733A/zh
Application granted granted Critical
Publication of CN110363733B publication Critical patent/CN110363733B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Image Processing (AREA)

Abstract

本申请提供一种混合图像生成方法及装置，其中所述方法包括：创建后处理材质，根据后处理材质对应的屏幕空间确定核半径；在所述屏幕空间内确定当前的采样点坐标，根据当前的采样点坐标、核半径以及偏移参数，得到对应的偏移后的采样点坐标；根据偏移后的采样点坐标在屏幕空间内对原始背景图像进行采样，得到对应的偏移后的颜色样本；根据多个偏移后的颜色样本得到当前的采样点对应的最终混合颜色，并根据每个采样点对应的最终混合颜色在屏幕空间内生成混合图像。由于每个采样点对应的最终混合颜色为通过多个偏移后的颜色样本融合生成，所以最终生成的混合图像中的混合颜色具有连续性，可以消除明显的边界。

Description

一种混合图像生成方法及装置
技术领域
本申请涉及图像处理技术领域，特别涉及一种混合图像生成方法及装置、计算设备和计算机可读存储介质。
背景技术
在图像处理领域中，经常会使用到图像混合。在某大屏项目中，3d的背景渲染层为青山绿水的城市。2d层在UI(User Interface，用户界面)区域和图标确认后与3d层进行混合，此时需要对UI区域的背景进行模糊化，以呈现毛玻璃的质感。
现有技术中，一般会采用以下方法：
透明通道混合，即直接将3d背景层和2d的UI层根据透明度混合，此种方法的缺点是缺少毛玻璃质感，满足不了设计需求。
基于模板的高斯模糊混合，即直接使用二值模板进行高斯模糊混合，此种方法的缺点是模糊混合缺乏连续性，有明显的边界。
如何使混合后的区域保持模糊混合连续性，消除明显的边界，是需要解决的技术问题。
发明内容
有鉴于此，本说明书实施例提供了一种混合图像生成方法及装置、计算设备和计算机可读存储介质，以解决现有技术中存在的技术缺陷。
本说明书实施例提供了一种混合图像生成方法，包括：
创建后处理材质，根据后处理材质对应的屏幕空间确定核半径；
在所述屏幕空间内确定当前的采样点坐标，根据当前的采样点坐标、所述核半径以及偏移参数，得到对应的偏移后的采样点坐标；
根据偏移后的采样点坐标在所述屏幕空间内对原始背景图像进行采样，得到对应的偏移后的颜色样本；
根据多个偏移后的颜色样本得到当前的采样点对应的最终混合颜色，并根据每个采样点对应的最终混合颜色在所述屏幕空间内生成混合图像。
可选地，根据后处理材质对应的屏幕空间确定核半径，包括：
确定所述后处理材质对应的屏幕空间的横坐标值和纵坐标值；
根据预设的第一调节参数以及所述屏幕空间的横坐标值和纵坐标值，确定所述核半径。
可选地，本说明书实施例提供的混合图像生成方法还包括：根据所述原始背景图像的屏幕视窗参数以及预设的偏移系数组，得到所述偏移参数。
可选地，根据所述原始背景图像的屏幕视窗参数以及预设的偏移系数组，得到所述偏移参数，包括：
根据所述原始背景图像的视窗尺寸确定所述屏幕视窗参数；
在预设的偏移系数组内选择偏移系数；
根据所述偏移系数、所述屏幕视窗参数以及预设的第二调节参数，得到所述偏移参数。
可选地，根据所述原始背景图像的视窗尺寸确定所述屏幕视窗参数，包括：根据所述原始背景图像的视窗尺寸确定横向屏幕视窗参数和纵向屏幕视窗参数；
在预设的偏移系数组内选择偏移系数，包括：
在预设的偏移系数组内选择横向偏移系数和纵向偏移系数；
根据所述偏移系数、所述屏幕视窗参数以及预设的第二调节参数，得到所述偏移参数，包括：
根据所述横向偏移系数、所述横向屏幕视窗参数以及预设的第二横向调节参数，得到所述横向偏移参数；
根据所述纵向偏移系数、所述纵向屏幕视窗参数以及预设的第二纵向调节参数，得到所述纵向偏移参数。
可选地，所述偏移系数组内包括n个按顺序排列的偏移系数；
在预设的偏移系数组内选择横向偏移系数和纵向偏移系数，包括：
S2、依次按顺序选择第i个偏移系数作为横向偏移系数；
S4、依次按顺序选择第j个偏移系数作为纵向偏移系数；
S6、判断j是否小于n，若是，执行步骤S8，若否，执行步骤S10；
S8、将j自增1，执行步骤S4；
S10、判断i是否小于n，若是，执行步骤S12，若否，结束；
S12、将i自增1，执行步骤S2。
可选地，根据当前的采样点坐标、所述核半径以及偏移参数，得到对应的偏移后的采样点坐标，包括：
根据当前的采样点横坐标、所述核半径以及所述横向偏移参数，得到对应的偏移后的采样点横坐标；
根据当前的采样点纵坐标、所述核半径以及所述纵向偏移参数，得到对应的偏移后的采样点纵坐标。
可选地，根据偏移后的采样点坐标在所述屏幕空间内对原始背景图像进行采样，得到对应的偏移后的颜色样本，包括：
根据偏移后的采样点横坐标和采样点纵坐标在所述屏幕空间内对原始背景图像进行采样，将采样得到的颜色值作为对应的偏移后的颜色样本。
可选地，根据多个偏移后的颜色样本得到当前的采样点对应的最终混合颜色，包括：
根据多个所述偏移后的颜色样本进行加权求和计算，得到最终颜色；
将每个偏移后的颜色样本对应的权重进行累加，得到最终累加后的权重值；
根据最终颜色和最终累加的权重值，得到当前的采样点对应的最终混合颜色。
可选地，根据多个所述偏移后的颜色样本进行加权求和计算，得到最终颜色，包括：在预设的权重数组内，确定每个所述偏移后的颜色样本对应的权重值；根据多个所述偏移后的颜色样本以及每个所述偏移后的颜色样本对应的权重值进行加权求和计算，得到所述最终颜色。
可选地，根据最终颜色和最终累加的权重值，得到当前的采样点对应的最终混合颜色，包括：根据最终颜色和最终累加的权重值的比值得到当前的采样点对应的最终混合颜色。
本说明书实施例提供了一种混合图像生成装置，包括：
核半径确定模块，被配置为创建后处理材质，根据后处理材质对应的屏幕空间确定核半径；
偏移坐标获取模块，被配置为在所述屏幕空间内确定当前的采样点坐标，根据当前的采样点坐标、所述核半径以及偏移参数，得到对应的偏移后的采样点坐标；
颜色样本生成模块，被配置为根据偏移后的采样点坐标在所述屏幕空间内对原始背景图像进行采样，得到对应的偏移后的颜色样本；
混合图像生成模块，被配置为根据多个偏移后的颜色样本得到当前的采样点对应的最终混合颜色，并根据每个采样点对应的最终混合颜色在所述屏幕空间内生成混合图像。
本说明书实施例提供了一种计算设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机指令，所述处理器执行所述指令时实现如上所述混合图像生成方法的步骤。
本说明书实施例提供了一种计算机可读存储介质，其存储有计算机指令，该指令被处理器执行时实现如上所述混合图像生成方法的步骤。
本说明书提供的混合图像生成方法及装置，通过创建后处理材质，根据后处理材质对应的屏幕空间确定核半径，并基于核半径确定当前的采样点坐标对应的偏移后的采样点坐标，并根据偏移后的采样点坐标在屏幕空间内对原始背景图像进行采样，得到对应的偏移后的颜色样本，根据多个偏移后的颜色样本得到当前的采样点对应的最终混合颜色。由于每个采样点对应的最终混合颜色为通过多个偏移后的颜色样本融合生成，所以最终生成的混合图像中的混合颜色具有连续性，可以消除明显的边界。
附图说明
图1是本说明书一实施例的计算设备的结构示意图；
图2是本说明书一实施例的混合图像生成方法的流程示意图；
图3是本说明书一实施例的偏移参数的生成方法的流程示意图；
图4是本说明书一实施例的横向偏移系数和纵向偏移系数的生成方法的流程示意图；
图5是本说明书一实施例的最终混合颜色的生成方法的流程示意图；
图6是本说明书另一实施例的混合图像生成方法的流程示意图；
图7是本说明书又一实施例的混合图像生成装置的结构示意图。
具体实施方式
在下面的描述中阐述了很多具体细节以便于充分理解本申请。但是本申请能够以很多不同于在此描述的其它方式来实施，本领域技术人员可以在不违背本申请内涵的情况下做类似推广，因此本申请不受下面公开的具体实施的限制。
在本说明书一个或多个实施例中使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本说明书一个或多个实施例。在本说明书一个或多个实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。还应当理解，本说明书一个或多个实施例中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解，尽管在本说明书一个或多个实施例中可能采用术语第一、第二等来描述各种信息，但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如，在不脱离本说明书一个或多个实施例范围的情况下，第一也可以被称为第二，类似地，第二也可以被称为第一。取决于语境，如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
首先，对本说明书一个或多个实施例涉及的名词术语进行解释。
虚幻引擎(Unreal Engine)：一种开源的游戏引擎，提供了游戏开发者需要的大量的核心技术、数据生成工具和基础支持。
边角模糊：指画面中在边角部分进行模糊。
高斯模糊：使用高斯函数作为权重，进行线性加权进行的模糊。
后处理：渲染中，在完成3维到2维的场景渲染后，通常有基于纯2维图像空间的操作，这一操作常被成为后处理。
在本说明书中，提供了一种混合图像生成方法及装置、计算设备和计算机可读存储介质，在下面的实施例中逐一进行详细说明。
图1是示出了根据本说明书一实施例的计算设备100的结构框图。该计算设备100的部件包括但不限于存储器110和处理器120。处理器120与存储器110通过总线130相连接，数据库150用于保存数据。
计算设备100还包括接入设备140，接入设备140使得计算设备100能够经由一个或多个网络160通信。这些网络的示例包括公用交换电话网(PSTN)、局域网(LAN)、广域网(WAN)、个域网(PAN)或诸如因特网的通信网络的组合。接入设备140可以包括有线或无线的任何类型的网络接口(例如，网络接口卡(NIC))中的一个或多个，诸如IEEE802.11无线局域网(WLAN)无线接口、全球微波互联接入(Wi-MAX)接口、以太网接口、通用串行总线(USB)接口、蜂窝网络接口、蓝牙接口、近场通信(NFC)接口，等等。
在本说明书的一个实施例中，计算设备100的上述部件以及图1中未示出的其他部件也可以彼此相连接，例如通过总线。应当理解，图1所示的计算设备结构框图仅仅是出于示例的目的，而不是对本说明书范围的限制。本领域技术人员可以根据需要，增添或替换其他部件。
计算设备100可以是任何类型的静止或移动计算设备，包括移动计算机或移动计算设备(例如，平板计算机、个人数字助理、膝上型计算机、笔记本计算机、上网本等)、移动电话(例如，智能手机)、可佩戴的计算设备(例如，智能手表、智能眼镜等)或其他类型的移动设备，或者诸如台式计算机或PC的静止计算设备。计算设备100还可以是移动式或静止式的服务器。
其中，处理器120可以执行图2所示方法中的步骤。图2是示出了根据本说明书一实施例的混合图像生成方法的示意性流程图，包括步骤202至步骤208。
202、创建后处理材质，根据后处理材质对应的屏幕空间确定核半径。
后处理材质，是指在场景渲染之后，使用一些图形技术对场景进行处理，例如把整个场景转换为grayscale(灰度)样式或使场景中明亮的区域发光。
其中，步骤202中根据后处理材质对应的屏幕空间确定核半径，包括下述步骤S2012～S2014：
S2012、确定所述后处理材质对应的屏幕空间的横坐标值和纵坐标值。
需要说明的是，后处理材质对应的屏幕空间，可以为原始背景图像对应的全部屏幕空间，也可以为原始背景图像对应的屏幕空间中的一小部分。例如原始背景图像对应的屏幕空间为1920*1080，后处理材质对应的屏幕空间为640*480。
S2014、根据预设的第一调节参数以及所述屏幕空间的横坐标值和纵坐标值，确定所述核半径。
可选地，核半径可以根据下述公式(1)计算：
kernel Radius＝alpha*(SPuv.x–0.5)2+beta*(SPuv.y–0.5)2 (1)
其中，kernel Radius为核半径；
SPuv.x、SPuv.y分别为屏幕空间的横坐标值和纵坐标值；
alpha、beta为预设的第一调节参数，可以为用户手动调节，用来控制最终的模糊程度。
204、在所述屏幕空间内确定当前的采样点坐标，根据当前的采样点坐标、所述核半径以及偏移参数，得到对应的偏移后的采样点坐标。
其中，所述偏移参数根据以下方法生成：根据所述原始背景图像的屏幕视窗参数以及预设的偏移数组，得到所述偏移参数。
具体地，参见图3，根据所述原始背景图像的屏幕视窗参数以及预设的偏移数组，得到所述偏移参数，包括下述步骤302～306：
302、根据所述原始背景图像的视窗尺寸确定所述屏幕视窗参数。
其中，步骤302包括：根据原始背景图像的横向视窗尺寸确定横向屏幕视窗参数，根据原始背景图像的纵向视窗尺寸确定纵向屏幕视窗参数。
具体地，可以对原始背景图像的横向视窗尺寸取倒数，得到对应的横向屏幕视窗参数；对原始背景图像的纵向视窗尺寸取倒数，得到对应的纵向屏幕视窗参数。
304、在预设的偏移系数组内选择偏移系数。
其中，步骤304包括：在预设的偏移系数组内选择横向偏移系数和纵向偏移系数。
例如，偏移系数组可以设置为五维数组{-2，-1，0，1，2}，横向偏移系数和纵向偏移系数可以在偏移系数组内选择。
更为详尽地，所述偏移系数组内包括n个按顺序排列的偏移系数，参见图4，在预设的偏移系数组内选择横向偏移系数和纵向偏移系数，包括：
402、依次按顺序选择第i个偏移系数作为横向偏移系数。
404、依次按顺序选择第j个偏移系数作为纵向偏移系数。
406、判断j是否小于n，若是，执行步骤408，若否，执行步骤410。
408、将j自增1，执行步骤404。
410、判断i是否小于n，若是，执行步骤412，若否，结束。
412、将i自增1，执行步骤402。
通过上述步骤402～412，可以得到n个横向偏移系数和n个纵向偏移系数，从而得到对应的偏移系数矩阵。
306、根据所述偏移系数、所述屏幕视窗参数以及预设的第二调节参数，得到所述偏移参数。
具体地，步骤306包括下述步骤S3062～S3064：
S3062、根据所述横向偏移系数、所述横向屏幕视窗参数以及预设的第二横向调节参数，得到所述横向偏移参数。
S3064、根据所述纵向偏移系数、所述纵向屏幕视窗参数以及预设的第二纵向调节参数，得到所述纵向偏移参数。
通过上述步骤302～306，可以分别得到横向偏移参数和纵向偏移参数，以供后续步骤计算偏移后的采样点坐标。需要注意的是，由于得到的横向偏移参数和纵向偏移参数可以分别为n个，那么对应的，一个当前采样点坐标对应的偏移后的采样点坐标会有n*n个。
可选地，步骤204中根据当前的采样点坐标、所述核半径以及偏移参数，得到对应的偏移后的采样点坐标，包括：
S2042、根据当前的采样点横坐标、所述核半径以及所述横向偏移参数，得到对应的偏移后的采样点横坐标。
S2044、根据当前的采样点纵坐标、所述核半径以及所述纵向偏移参数，得到对应的偏移后的采样点纵坐标。
具体地，偏移后的采样点横坐标和纵坐标可以分别由下述公式(2)计算：
newU＝u+a*KernelRadius*offsets(i)*invSize.x；
newV＝v+b*KernelRadius*offset(j)*invSize.y (2)
其中，u、v分别为当前采样点横坐标和当前采样点纵坐标；
newU、newV分别为偏移后的采样点横坐标和纵坐标；
a、b为第二横向调节参数和第二纵向调节参数，默认皆为1.0；
KernelRadius为所述核半径；
offsets为偏移系数组，offsets(i)和offset(j)分别为横向偏移系数和纵向偏移系数；
invSize为屏幕视窗参数，invSize.x和invSize.y分别为横向屏幕视窗参数和纵向屏幕视窗参数。
206、根据偏移后的采样点坐标在所述屏幕空间内对原始背景图像进行采样，得到对应的偏移后的颜色样本。
具体地，步骤206包括：根据偏移后的采样点横坐标和采样点纵坐标在所述屏幕空间内对原始背景图像进行采样，将采样得到的颜色值作为对应的偏移后的颜色样本。
需要注意的是，由于偏移后的采样点可能为n*n个，那么得到的偏移后的颜色样本为n*n个颜色值。
208、根据多个偏移后的颜色样本得到当前的采样点对应的最终混合颜色，并根据每个采样点对应的最终混合颜色在所述屏幕空间内生成混合图像。
可选地，参见图5，步骤208包括下述步骤502～506：
502、根据多个所述偏移后的颜色样本进行加权求和计算，得到最终颜色。
具体地，步骤502具体包括：
S5022、在预设的权重数组内，确定每个偏移后的颜色样本对应的权重值。
需要说明的是，该预设的权重数组的维度可以与颜色样本的维度数相同，例如颜色样本的维度数为5*5，那么权重数组的维度也可以为5*5。
S5024、根据多个所述偏移后的颜色样本以及每个所述偏移后的颜色样本对应的权重值进行加权求和计算，得到最终颜色。
具体地，最终颜色可以由下述公式(3)计算：
finalColor＝W(i,j)*Color(i,j) (3)
其中，finalColor为最终颜色；
Color(i,j)为偏移后的颜色样本；
W(i,j)为偏移后的颜色样本对应的权重值。
504、将每个偏移后的颜色样本对应的权重进行累加，得到最终累加后的权重值。
506、根据最终颜色和最终累加的权重值，得到当前的采样点对应的最终混合颜色。
具体地，步骤506可以为：根据最终颜色和最终累加的权重值的比值得到当前的采样点对应的最终混合颜色。
在得到每个采样点对应的最终混合颜色的情况下，在所述屏幕空间内执行混合处理，生成混合图像。
本实施例提供的混合图像生成方法，通过创建后处理材质，根据后处理材质对应的屏幕空间确定核半径，并基于核半径确定当前的采样点坐标对应的偏移后的采样点坐标，并根据偏移后的采样点坐标在屏幕空间内对原始背景图像进行采样，得到对应的偏移后的颜色样本，根据多个偏移后的颜色样本得到当前的采样点对应的最终混合颜色，由于每个采样点对应的最终混合颜色为通过多个偏移后的颜色样本融合生成，所以最终生成的混合图像中的混合颜色具有连续性，可以消除明显的边界。
另外，与透明通道混合方法相比，本实施例的混合图像生成方法可以生成毛玻璃质感的混合图像，更加美观。另外，与基于图像模板的高斯模糊方法相比，本实施例的方法只需要一次采样点的采样，减少了一次实时渲染中的纹理采样，计算效率提高。
为了对本说明书中的混合图像生成方法进行更为详尽的说明，本说明书另一实施例以在虚幻引擎中进行处理为例进行示意性的说明。
具体地，参见图6，本说明书另一实施例公开的混合图像生成方法包括：
1)在虚幻引擎中创建后处理材质。
2)通过虚幻引擎中的ScreenPosition节点得到当前的屏幕空间横坐标值SPuv.x和纵坐标值SPuv.y，并根据预设的第一调节参数以及所述屏幕空间的横坐标值和纵坐标值，确定所述核半径。
具体地，可以根据上述公式(1)计算得到核半径。
3)通过虚幻材质节点SceneTexture.PostProcessing0获取原始背景图像，根据所述原始背景图像的视窗尺寸确定横向屏幕视窗参数和纵向屏幕视窗参数。
具体地，计算方式可以为：
横向屏幕视窗参数＝1/横向视窗尺寸，纵向屏幕视窗参数＝1/纵向视窗尺寸。
其中，横向视窗尺寸为视窗分辨率宽度，纵向视窗尺寸为视窗分辨率高度。
4)在预设的偏移系数组内选择横向偏移系数和纵向偏移系数。
其中，偏移系数组为offsets:{-2，-1，0，1，2}。
横向偏移系数offsets(i)和纵向偏移系数offsets(j)可以遵循以下循环进行取值：
for(i＝1；i≤5++i)；
for(j＝1；j≤5++j)；
5)根据横向偏移系数offsets(i)、横向屏幕视窗参数以及预设的第二横向调节参数，得到横向偏移参数；根据纵向偏移系数offsets(j)、纵向屏幕视窗参数以及预设的第二纵向调节参数，得到纵向偏移参数。
6)通过TexCoord[0]节点获取当前的采样点横坐标和纵坐标，根据当前的采样点横坐标、核半径以及横向偏移参数，得到对应的偏移后的采样点横坐标；根据当前的采样点纵坐标、核半径以及纵向偏移参数，得到对应的偏移后的采样点纵坐标。
具体地，可以根据前述公式(2)计算得到偏移后的采样点横坐标和纵坐标，在此便不再赘述。
由于得到的横向偏移参数和纵向偏移参数可以分别为5个，那么对应的，一个当前采样点坐标对应的偏移后的采样点坐标会有5*5个。
7)根据偏移后的采样点横坐标和采样点纵坐标在屏幕空间内对原始背景图像进行采样，将采样得到的颜色值作为对应的偏移后的颜色样本Color(i,j)。
具体地，使用custom节点对原始背景图像进行采样，custom节点需要增加三个输入参量，分别为uv，sceneTexture和scale。其中，uv用于获取当前的采样点横坐标和纵坐标，sceneTexture用于进行采样获取颜色样本Color(i,j)，scale用于获取核半径KernelRadius。
具体地，custom节点根据偏移后的采样点横坐标和采样点纵坐标(newU，newV)，采用SceneTextureLoopup函数进行采样。
8)初始化最终颜色finalcolor＝(0,0,0)，根据Color(i,j)在初始权重数组内选择对应的权重值W(i,j)，根据多个偏移后的颜色样本Color(i,j)进行加权求和计算，得到最终颜色finalcolor。
其中，初始权重数组可以为5*5的矩阵，例如：
{0.36787944,0.53526143,0.60653066,0.53526143,0.36787944,
0.53526143,0.77880078,0.8824969,0.77880078,0.53526143,
0.60653066,0.8824969,1.0,0.8824969,0.60653066,
0.53526143,0.77880078,0.8824969,0.77880078,0.53526143,
0.36787944,0.53526143,0.60653066,0.53526143,0.36787944}。
最终颜色finalcolor可以由公式(3)计算，在此便不再赘述。
9)将每个偏移后的颜色样本对应的权重W(i,j)进行累加，得到最终累加后的权重值W_sum。
10)根据最终颜色finalcolor和最终累加的权重值W_sum，得到当前的采样点对应的最终混合颜色f inalColor/W_sum。
11)进行后处理，将custom节点的输出与Result Node of Material的EmissiveColor进行相连，从而根据每个custom节点对应的最终混合颜色在屏幕空间内生成混合图像。
本申请一实施例还提供一种混合图像生成装置，参见图7，包括：
核半径确定模块702，被配置为创建后处理材质，根据后处理材质对应的屏幕空间确定核半径；
偏移坐标获取模块704，被配置为在所述屏幕空间内确定当前的采样点坐标，根据当前的采样点坐标、所述核半径以及偏移参数，得到对应的偏移后的采样点坐标；
颜色样本生成模块706，被配置为根据偏移后的采样点坐标在所述屏幕空间内对原始背景图像进行采样，得到对应的偏移后的颜色样本；
混合图像生成模块708，被配置为根据多个偏移后的颜色样本得到当前的采样点对应的最终混合颜色，并根据每个采样点对应的最终混合颜色在所述屏幕空间内生成混合图像。
可选地，核半径确定模块702具体被配置为：
确定所述后处理材质对应的屏幕空间的横坐标值和纵坐标值；
根据预设的第一调节参数以及所述屏幕空间的横坐标值和纵坐标值，确定所述核半径。
可选地，所述装置还包括：偏移参数生成模块，被配置为根据所述原始背景图像的屏幕视窗参数以及预设的偏移系数组，得到所述偏移参数。
可选地，所述偏移参数生成模块包括：
屏幕视窗参数生成模块，被配置为根据所述原始背景图像的视窗尺寸确定所述屏幕视窗参数；
偏移系数选择模块，被配置为在预设的偏移系数组内选择偏移系数；
偏移参数计算模块，被配置为根据所述偏移系数、所述屏幕视窗参数以及预设的第二调节参数，得到所述偏移参数。
可选地，屏幕视窗参数生成模块具体被配置为：根据所述原始背景图像的视窗尺寸确定横向屏幕视窗参数和纵向屏幕视窗参数；
偏移系数选择模块具体被配置为：在预设的偏移系数组内选择横向偏移系数和纵向偏移系数；
偏移参数计算模块具体被配置为：根据所述横向偏移系数、所述横向屏幕视窗参数以及预设的第二横向调节参数，得到所述横向偏移参数；根据所述纵向偏移系数、所述纵向屏幕视窗参数以及预设的第二纵向调节参数，得到所述纵向偏移参数。
可选地，偏移系数组内包括n个按顺序排列的偏移系数，偏移系数选择模块包括：
第一系数选择子模块，被配置为依次按顺序选择第i个偏移系数作为横向偏移系数；
第二系数选择子模块，被配置为依次按顺序选择第j个偏移系数作为纵向偏移系数；
第一判断子模块，被配置为判断j是否小于n，若是，执行第一自增子模块，若否，执行第二判断子模块；
第一自增子模块，被配置为将j自增1，执行第二系数选择子模块；
第二判断子模块，被配置为判断i是否小于n，若是，执行第二自增子模块，若否，结束；
第二自增子模块，被配置为将i自增1，执行第一系数选择子模块。
可选地，偏移坐标获取模块704具体被配置为：
根据当前的采样点横坐标、所述核半径以及所述横向偏移参数，得到对应的偏移后的采样点横坐标；
根据当前的采样点纵坐标、所述核半径以及所述纵向偏移参数，得到对应的偏移后的采样点纵坐标。
可选地，颜色样本生成模块706具体被配置为：根据偏移后的采样点横坐标和采样点纵坐标在所述屏幕空间内对原始背景图像进行采样，将采样得到的颜色值作为对应的偏移后的颜色样本。
可选地，混合图像生成模块708具体被配置为：
根据多个所述偏移后的颜色样本进行加权求和计算，得到最终颜色；
将每个偏移后的颜色样本对应的权重进行累加，得到最终累加后的权重值；
根据最终颜色和最终累加的权重值，得到当前的采样点对应的最终混合颜色。
可选地，混合图像生成模块708具体被配置为：在预设的权重数组内，确定每个所述偏移后的颜色样本对应的权重值；
根据多个所述偏移后的颜色样本以及每个所述偏移后的颜色样本对应的权重值进行加权求和计算，得到所述最终颜色。
可选地，混合图像生成模块708具体被配置为：根据最终颜色和最终累加的权重值的比值得到当前的采样点对应的最终混合颜色。
本说明书一实施例提供的混合图像生成装置，通过创建后处理材质，根据后处理材质对应的屏幕空间确定核半径，并基于核半径确定当前的采样点坐标对应的偏移后的采样点坐标，并根据偏移后的采样点坐标在屏幕空间内对原始背景图像进行采样，得到对应的偏移后的颜色样本，根据多个偏移后的颜色样本得到当前的采样点对应的最终混合颜色，通过本方法可以保持混合颜色的连续性，消除明显的边界。
本说明书一实施例还提供一种计算机可读存储介质，其存储有计算机指令，该指令被处理器执行时实现如前所述混合图像生成方法的步骤。
上述为本实施例的一种计算机可读存储介质的示意性方案。需要说明的是，该存储介质的技术方案与上述的混合图像生成方法的技术方案属于同一构思，存储介质的技术方案未详细描述的细节内容，均可以参见上述混合图像生成方法的技术方案的描述。
所述计算机指令包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括：能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是，所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减，例如在某些司法管辖区，根据立法和专利实践，计算机可读介质不包括电载波信号和电信信号。
需要说明的是，对于前述的各方法实施例，为了简便描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本说明书并不受所描述的动作顺序的限制，因为依据本说明书一个或多个实施例，某些步骤可以采用其它顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定都是本申请所必须的。
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其它实施例的相关描述。
以上公开的本说明书优选实施例只是用于帮助阐述本说明书。可选实施例并没有详尽叙述所有的细节，也不限制该说明书仅为所述的具体实施方式。显然，根据本说明书的内容，可作很多的修改和变化。本说明书选取并具体描述这些实施例，是为了更好地解释本申请的原理和实际应用，从而使所属技术领域技术人员能很好地理解和利用本申请。本说明书仅受权利要求书及其全部范围和等效物的限制。

Claims (14)

1.一种混合图像生成方法，其特征在于，包括：
创建后处理材质，根据后处理材质对应的屏幕空间确定核半径；
在所述屏幕空间内确定当前的采样点坐标，根据当前的采样点坐标、所述核半径以及偏移参数，得到对应的偏移后的采样点坐标；
根据偏移后的采样点坐标在所述屏幕空间内对原始背景图像进行采样，得到对应的偏移后的颜色样本；
根据多个偏移后的颜色样本得到当前的采样点对应的最终混合颜色，并根据每个采样点对应的最终混合颜色在所述屏幕空间内生成混合图像。
2.如权利要求1所述的方法，其特征在于，根据后处理材质对应的屏幕空间确定核半径，包括：
确定所述后处理材质对应的屏幕空间的横坐标值和纵坐标值；
根据预设的第一调节参数以及所述屏幕空间的横坐标值和纵坐标值，确定所述核半径。
3.如权利要求1所述的方法，其特征在于，还包括：根据所述原始背景图像的屏幕视窗参数以及预设的偏移系数组，得到所述偏移参数。
4.如权利要求3所述的方法，其特征在于，根据所述原始背景图像的屏幕视窗参数以及预设的偏移系数组，得到所述偏移参数，包括：
根据所述原始背景图像的视窗尺寸确定所述屏幕视窗参数；
在预设的偏移系数组内选择偏移系数；
根据所述偏移系数、所述屏幕视窗参数以及预设的第二调节参数，得到所述偏移参数。
5.如权利要求4所述的方法，其特征在于，根据所述原始背景图像的视窗尺寸确定所述屏幕视窗参数，包括：根据所述原始背景图像的视窗尺寸确定横向屏幕视窗参数和纵向屏幕视窗参数；
在预设的偏移系数组内选择偏移系数，包括：
在预设的偏移系数组内选择横向偏移系数和纵向偏移系数；
根据所述偏移系数、所述屏幕视窗参数以及预设的第二调节参数，得到所述偏移参数，包括：
根据所述横向偏移系数、所述横向屏幕视窗参数以及预设的第二横向调节参数，得到横向偏移参数；
根据所述纵向偏移系数、所述纵向屏幕视窗参数以及预设的第二纵向调节参数，得到纵向偏移参数。
6.如权利要求5所述的方法，其特征在于，所述偏移系数组内包括n个按顺序排列的偏移系数；
在预设的偏移系数组内选择横向偏移系数和纵向偏移系数，包括：
S2、依次按顺序选择第i个偏移系数作为横向偏移系数；
S4、依次按顺序选择第j个偏移系数作为纵向偏移系数；
S6、判断j是否小于n，若是，执行步骤S8，若否，执行步骤S10；
S8、将j自增1，执行步骤S4；
S10、判断i是否小于n，若是，执行步骤S12，若否，结束；
S12、将i自增1，执行步骤S2。
7.如权利要求5所述的方法，其特征在于，根据当前的采样点坐标、所述核半径以及偏移参数，得到对应的偏移后的采样点坐标，包括：
根据当前的采样点横坐标、所述核半径以及所述横向偏移参数，得到对应的偏移后的采样点横坐标；
根据当前的采样点纵坐标、所述核半径以及所述纵向偏移参数，得到对应的偏移后的采样点纵坐标。
8.如权利要求7所述的方法，其特征在于，根据偏移后的采样点坐标在所述屏幕空间内对原始背景图像进行采样，得到对应的偏移后的颜色样本，包括：
根据偏移后的采样点横坐标和采样点纵坐标在所述屏幕空间内对原始背景图像进行采样，将采样得到的颜色值作为对应的偏移后的颜色样本。
9.如权利要求1所述的方法，其特征在于，根据多个偏移后的颜色样本得到当前的采样点对应的最终混合颜色，包括：
根据多个所述偏移后的颜色样本进行加权求和计算，得到最终颜色；
将每个偏移后的颜色样本对应的权重进行累加，得到最终累加后的权重值；
根据最终颜色和最终累加的权重值，得到当前的采样点对应的最终混合颜色。
10.如权利要求9所述的方法，其特征在于，根据多个所述偏移后的颜色样本进行加权求和计算，得到最终颜色，包括：
在预设的权重数组内，确定每个所述偏移后的颜色样本对应的权重值；
根据多个所述偏移后的颜色样本以及每个所述偏移后的颜色样本对应的权重值进行加权求和计算，得到所述最终颜色。
11.如权利要求9所述的方法，其特征在于，根据最终颜色和最终累加的权重值，得到当前的采样点对应的最终混合颜色，包括：
根据最终颜色和最终累加的权重值的比值得到当前的采样点对应的最终混合颜色。
12.一种混合图像生成装置，其特征在于，包括：
核半径确定模块，被配置为创建后处理材质，根据后处理材质对应的屏幕空间确定核半径；
偏移坐标获取模块，被配置为在所述屏幕空间内确定当前的采样点坐标，根据当前的采样点坐标、所述核半径以及偏移参数，得到对应的偏移后的采样点坐标；
颜色样本生成模块，被配置为根据偏移后的采样点坐标在所述屏幕空间内对原始背景图像进行采样，得到对应的偏移后的颜色样本；
混合图像生成模块，被配置为根据多个偏移后的颜色样本得到当前的采样点对应的最终混合颜色，并根据每个采样点对应的最终混合颜色在所述屏幕空间内生成混合图像。
13.一种计算设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机指令，其特征在于，所述处理器执行所述指令时实现权利要求1-11任意一项所述方法的步骤。
14.一种计算机可读存储介质，其存储有计算机指令，其特征在于，该指令被处理器执行时实现权利要求1-11任意一项所述方法的步骤。
CN201910487835.7A 2019-06-05 2019-06-05 一种混合图像生成方法及装置 Active CN110363733B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910487835.7A CN110363733B (zh) 2019-06-05 2019-06-05 一种混合图像生成方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910487835.7A CN110363733B (zh) 2019-06-05 2019-06-05 一种混合图像生成方法及装置

Publications (2)

Publication Number Publication Date
CN110363733A CN110363733A (zh) 2019-10-22
CN110363733B true CN110363733B (zh) 2022-11-29

Family

ID=68215777

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910487835.7A Active CN110363733B (zh) 2019-06-05 2019-06-05 一种混合图像生成方法及装置

Country Status (1)

Country Link
CN (1) CN110363733B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113296721A (zh) * 2020-12-16 2021-08-24 阿里巴巴（中国）有限公司 显示方法、显示装置和多屏幕联动系统
CN113181642B (zh) * 2021-04-29 2024-01-26 网易（杭州）网络有限公司 一种具有混合材质的墙体模型的生成方法及装置

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018021388A1 (ja) * 2016-07-29 2018-02-01 大日本印刷株式会社 文字ぼけ評価方法、光学部材、および表示装置
CN108470369A (zh) * 2018-03-26 2018-08-31 城市生活（北京）资讯有限公司 一种水面渲染方法及装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018021388A1 (ja) * 2016-07-29 2018-02-01 大日本印刷株式会社 文字ぼけ評価方法、光学部材、および表示装置
CN108470369A (zh) * 2018-03-26 2018-08-31 城市生活（北京）资讯有限公司 一种水面渲染方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
一种快速颜色传输算法;钱小燕等;《中国图象图形学报》;20110416(第04期);全文 *

Also Published As

Publication number Publication date
CN110363733A (zh) 2019-10-22

Similar Documents

Publication Publication Date Title
CN114549731B (zh) 视角图像的生成方法、装置、电子设备及存储介质
JP7090113B2 (ja) 線画の生成
CN112308763A (zh) 利用具有双流编码器架构的神经网络来生成合成数字图像
CN111669514B (zh) 高动态范围成像方法和装置
CN109949693B (zh) 一种地图绘制方法、装置、计算设备及存储介质
US9098534B2 (en) Image display system, image display method, social network service system, and computer-readable medium
CN114049420B (zh) 一种模型训练方法、图像渲染方法、装置和电子设备
CN112529776B (zh) 图像处理模型的训练方法、图像处理方法及装置
CN110363733B (zh) 一种混合图像生成方法及装置
CN110570506A (zh) 一种地图资源管理方法、装置、计算设备及存储介质
CN113658085B (zh) 图像处理方法及装置
CN111144491A (zh) 图像处理方法、装置及电子系统
CN115424088A (zh) 图像处理模型训练方法以及装置
CN115423923A (zh) 模型渲染方法及装置
EP3937120B1 (en) Computer-implemented method, computer program product and system for processing images
CN111617480A (zh) 一种点云渲染方法及装置
CN114820374A (zh) 模糊处理方法及装置
Sajjad et al. Image magnification using adaptive interpolation by pixel level data-dependent geometrical shapes
CN116452715A (zh) 动态人手渲染方法、装置及存储介质
CN115487495A (zh) 数据渲染方法以及装置
EP4024336A1 (en) Neural network training method and apparatus, defect inspection method and apparatus, and non-transitory computer-readable medium
CN114627293A (zh) 基于多任务学习的人像抠图方法
Liu et al. Bokeh rendering based on adaptive depth calibration network
CN109816755A (zh) 一种水墨图像的制作方法、装置、计算设备及存储介质
CN110298903A (zh) 一种曲线编辑方法及装置、计算设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20201009

Address after: Cayman Enterprise Centre, 27 Hospital Road, George Town, Grand Cayman Islands

Applicant after: Advanced innovation technology Co.,Ltd.

Address before: A four-storey 847 mailbox in Grand Cayman Capital Building, British Cayman Islands

Applicant before: Alibaba Group Holding Ltd.

Effective date of registration: 20201009

Address after: Cayman Enterprise Centre, 27 Hospital Road, George Town, Grand Cayman Islands

Applicant after: Innovative advanced technology Co.,Ltd.

Address before: Cayman Enterprise Centre, 27 Hospital Road, George Town, Grand Cayman Islands

Applicant before: Advanced innovation technology Co.,Ltd.

GR01 Patent grant
GR01 Patent grant