CN107517348A - 图像的渲染方法和装置 - Google Patents

Abstract

本发明公开了一种图像的渲染方法和装置，其中，图像的渲染方法包括：获取单帧预览图像；将单帧预览图像切分为多个区域图像；对每个区域图像分别采用与其对应的滤镜效果进行渲染，以生成区域渲染图像；将区域渲染图像合并为单帧图像，并输出单帧图像。本发明实施例的图像的渲染方法和装置，通过获取单帧预览图像，并将单帧预览图像切分为多个区域图像，以及对每个区域图像分别采用与其对应的滤镜效果进行渲染，以生成区域渲染图像，最后将区域渲染图像合并为单帧图像，并输出单帧图像，从而实现在拍摄预览时，即可在预览图像中显示多种滤镜效果结合的特殊滤镜效果，提升用户拍摄体验。

Description

图像的渲染方法和装置

技术领域

本发明涉及信息处理技术领域，尤其涉及一种图像的渲染方法和装置。

背景技术

随着科技的高速发展，人们可以通过手机随时随地的进行拍照，且手机的拍照功能也越来越强大，例如可以实现延时摄影、全景拍摄、背景虚化等功能。相关技术中，通过拍照APP进行拍照时，可以通过软件滤镜实现很多的特殊效果，如黑白、复古、小清新等等。然而，上述特殊效果不够丰富，无法满足用户的拍摄需求。

发明内容

本发明提供一种图像的渲染方法和装置，以解决现有技术中，滤镜效果不够丰富的问题。

本发明实施例提供一种图像的渲染方法，包括：获取单帧预览图像；将所述单帧预览图像切分为多个区域图像；对每个区域图像分别采用与其对应的滤镜效果进行渲染，以生成区域渲染图像；将所述区域渲染图像合并为单帧图像，并输出所述单帧图像。

本发明另一实施例提供一种图像的渲染装置，包括：获取模块，用于获取单帧预览图像；切分模块，用于将所述单帧预览图像切分为多个区域图像；生成模块，用于对每个区域图像分别采用与其对应的滤镜效果进行渲染，以生成区域渲染图像；输出模块，用于将所述区域渲染图像合并为单帧图像，并输出所述单帧图像。

本发明还一实施例提供一种非临时性计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如本发明第一方面实施例所述的图像的渲染方法。

本发明又一实施例提供一种终端设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，本发明第一方面实施例所述的图像的渲染方法。

本发明实施例提供的技术方案可以包括以下有益效果：通过获取单帧预览图像，并将所述单帧预览图像切分为多个区域图像，以及对每个区域图像分别采用与其对应的滤镜效果进行渲染，以生成区域渲染图像，最后将所述区域渲染图像合并为单帧图像，并输出所述单帧图像，从而实现在拍摄预览时，即可在预览图像中显示多种滤镜效果结合的特殊滤镜效果，提升用户拍摄体验。

本发明附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。

附图说明

本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：

图1是根据本发明一个实施例的图像的渲染方法的流程图；

图2是根据本发明一个实施例的多滤镜效果的效果示意图；

图3是根据本发明一个实施例的图像的渲染装置的结构框图；

图4是根据本发明另一个实施例的图像的渲染装置的结构框图；

图5是根据本发明一个实施例的终端设备的结构示意图；

图6是根据本发明一个实施例中图像处理电路的示意图。

具体实施方式

下面详细描述本发明的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，旨在用于解释本发明，而不能理解为对本发明的限制。

下面参考附图描述本发明实施例的图像的渲染方法和装置。

图1是根据本发明一个实施例的图像的渲染方法的流程图。

如图1所示，该图像的渲染方法包括：

S101，获取单帧预览图像。

针对人们在拍照过程中，滤镜的特殊效果不够丰富的技术问题，本发明提出了一种图像的渲染方法，其中，该方法主要应用于图像拍摄的场景中，为了便于描述，本发明集中在应用于图像拍摄预览场景中进行说明。

在本发明的一个实施例中，可先获取单帧预览图像。该单帧预览图像为通过摄像头中的图像传感器捕获得到的。

S102，将单帧预览图像切分为多个区域图像。

其中，区域图像的形状包括规则形状和不规则形状。

具体地，可将单帧预览图像切分为多个规则形状的区域图像，也可以切分为多个不规则形状的区域图像，当然还可以切分为多个规则形状的区域图像与多个不规则形状的区域图像。其中，规则形状为能够直接通过求面积公式获得面积的形状，如长方形、平行四边形、梯形、圆形等；不规则形状为无法直接通过求面积公式获得面积的形状。通常情况下，单帧预览图像为长方形，因此最简便的方式就是将单帧预览图像切分为多个长方形。根据不同用户的需求，可以将单帧预览图像切分为任意用户所需的形状。

S103，对每个区域图像分别采用与其对应的滤镜效果进行渲染，以生成区域渲染图像。

具体地，可将区域图像转换为支持着色器shader处理的纹理数据格式，然后利用着色器确定纹理数据格式中像素所对应的滤镜效果，并对像素进行渲染。例如：单帧预览图像被切分为四个长方形区域图像，可为上述四个长方形区域图像分配四种不同的滤镜效果。再利用着色器计算出每个区域中的像素需要被渲染为何种滤镜效果，从而渲染出每个区域对应的区域渲染图像。

其中，为了保证渲染的效果，可以设定相邻的两个区域图像采用的滤镜效果不相同。

S104，将区域渲染图像合并为单帧图像，并输出单帧图像。

在生成区域渲染图像之后，可将区域渲染图像合并为单帧图像，并进行输出。也就是说，通过不同滤镜对相应的区域进行渲染后，最终得到的单帧图像，可通过显示屏幕进行输出，以供用户在拍摄时进行预览。

此外，可依据上述步骤，连续输出多张单帧图像，最终实现显示屏幕实时显示，用户可进行实时地图像预览。

为了使得本领域的技术人员，对本发明实施例的图像的渲染方法更加清楚，下面结合具体的应用场景进行举例。

如图2所示，用户使用手机拍摄一名女子从对面牵着马走过来时，可通过手机屏幕进行预览。用户可以选择多滤镜效果。即可将预览画面切分为13个区域，每个区域均对应一种滤镜效果，最终实现在同一预览画面中，显示出多种滤镜的效果，效果更加炫酷。

具体地，手机的分辨率一般为1920*1080，因此预览画面的宽和高已知，可用width和height表示。而每个区域的宽和高均可以是预先设置的，也是已知的，即区域1的宽和高可用w1和h1表示，区域2的宽和高可用w2和h2表示…。假设预览画面的左上角坐标为(0,0)，右下角坐标为(width，height)，以此可以计算出每个区域的左上角的坐标和右下角的坐标。区域1的左上角坐标(0,0)，右下角坐标(w1,h1)；区域2的左上角坐标(w1,0)，右下角坐标(w1+w2,h2)；区域3的左上角坐标(w1+w2,0)，右下角坐标(w1+w2+w3,h3)；区域4的左上角坐标(0,h1)，右下角坐标(w4,h1+h4)。以此类推，可以计算出每个区域的左上角的坐标和右下角的坐标。利用着色器shader可以计算出每个像素所对应的滤镜效果，最终对每个区域中的像素使用对应的颜色算法，从而形成13个区域对应13种滤镜的特殊效果。

应当理解的是，上述方案仅为示例，实际应用中可根据用户的需求，设置切分区域的数量，每个区域对应的形状，以及每个区域对应的滤镜效果，从而满足用户的需求。

综上，本发明实施例的图像的渲染方法，通过获取单帧预览图像，并将单帧预览图像切分为多个区域图像，以及对每个区域图像分别采用与其对应的滤镜效果进行渲染，以生成区域渲染图像，最后将区域渲染图像合并为单帧图像，并输出单帧图像，从而实现在拍摄预览时，即可在预览图像中显示多种滤镜效果结合的特殊滤镜效果，提升用户拍摄体验。

为了实现上述实施例，本发明还提出了一种图像的渲染装置，图3是根据本发明一个实施例的图像的渲染装置的结构框图，如图3所示，该装置包括获取模块100、切分模块200、生成模块300和输出模块400。

其中，获取模块100，用于获取单帧预览图像。

切分模块200，用于将单帧预览图像切分为多个区域图像。

生成模块300，用于对每个区域图像分别采用与其对应的滤镜效果进行渲染，以生成区域渲染图像。

输出模块400，用于将区域渲染图像合并为单帧图像，并输出单帧图像。

在本发明的一个实施例中，如图4是根据本发明另一个实施例的图像的渲染装置的结构框图，如图4所示，在如图3所示的基础上，该装置还包括显示模块500。

其中，显示模块500，用于连续输出多张单帧图像，并通过显示屏幕实时显示。

需要说明的是，前述对图像的渲染方法的解释说明，也适用于本发明实施例的图像的渲染装置，本发明实施例中未公布的细节，在此不再赘述。

综上，本发明实施例的图像的渲染装置，通过获取单帧预览图像，并将单帧预览图像切分为多个区域图像，以及对每个区域图像分别采用与其对应的滤镜效果进行渲染，以生成区域渲染图像，最后将区域渲染图像合并为单帧图像，并输出单帧图像，从而实现在拍摄预览时，即可在预览图像中显示多种滤镜效果结合的特殊滤镜效果，提升用户拍摄体验。

为了实现上述实施例，本发明还提出一种非临时性计算机可读存储介质，其上存储有计算机程序，当该计算机程序被处理器执行时能够实现如前述实施例的图像的渲染方法。

为了实现上述实施例，本发明还提出了一种终端设备。

如图5所示，该终端设备包括：处理器51、存储器52、及图像处理电路53。

其中，存储器52用于存储可执行程序代码；处理器51通过读取存储器52中存储的可执行程序代码，及图像处理电路53对图像进行处理，来实现如前述实施例中的图像的渲染方法。

具体的，图像处理电路53可以利用硬件和/或软件组件实现，可包括定义ISP(Image Signal Processing，图像信号处理)管线的各种处理单元。图6为一个实施例中图像处理电路的示意图。如图6所示，为便于说明，仅示出与本发明实施例相关的图像处理技术的各个方面。

如图6所示，图像处理电路包括ISP处理器640和控制逻辑器650。成像设备610捕捉的图像数据首先由ISP处理器640处理，ISP处理器640对图像数据进行分析以捕捉可用于确定和/或成像设备610的一个或多个控制参数的图像统计信息。成像设备610可包括具有一个或多个透镜612和图像传感器614的照相机。图像传感器614可包括色彩滤镜阵列(如Bayer滤镜)，图像传感器614可获取用图像传感器614的每个成像像素捕捉的光强度和波长信息，并提供可由ISP处理器640处理的一组原始图像数据。传感器620可基于传感器620接口类型把原始图像数据提供给ISP处理器640。传感器620接口可以利用SMIA(StandardMobile Imaging Architecture，标准移动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。

ISP处理器640按多种格式逐个像素地处理原始图像数据。例如，每个图像像素可具有8、10、12或14比特的位深度，ISP处理器640可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中，图像处理操作可按相同或不同的位深度精度进行。

ISP处理器640还可从图像存储器630接收像素数据。例如，从传感器620接口将原始像素数据发送给图像存储器630，图像存储器630中的原始像素数据再提供给ISP处理器640以供处理。图像存储器630可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器，并可包括DMA(Direct Memory Access，直接直接存储器存取)特征。

当接收到来自传感器620接口或来自图像存储器630的原始图像数据时，ISP处理器640可进行一个或多个图像处理操作，如时域滤波。处理后的图像数据可发送给图像存储器630，以便在被显示之前进行另外的处理。ISP处理器640从图像存储器630接收处理数据，并对处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。处理后的图像数据可输出给显示器670，以供用户观看和/或由图形引擎或GPU(Graphics ProcessingUnit，图形处理器)进一步处理。此外，ISP处理器640的输出还可发送给图像存储器630，且显示器670可从图像存储器630读取图像数据。在一个实施例中，图像存储器630可被配置为实现一个或多个帧缓冲器。此外，ISP处理器640的输出可发送给编码器/解码器660，以便编码/解码图像数据。编码的图像数据可被保存，并在显示于显示器670设备上之前解压缩。编码器/解码器660可由CPU或GPU或协处理器实现。

ISP处理器640确定的统计数据可发送给控制逻辑器650单元。例如，统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜612阴影校正等图像传感器614统计信息。控制逻辑器650可包括执行一个或多个例程(如固件)的处理器和/或微控制器，一个或多个例程可根据接收的统计数据，确定成像设备610的控制参数以及的控制参数。例如，控制参数可包括传感器620控制参数(例如增益、曝光控制的积分时间)、照相机闪光控制参数、透镜612控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如，在RGB处理期间)的增益水平和色彩校正矩阵，以及透镜612阴影校正参数。

以下为运用图6中图像处理技术实现图像的渲染方法包括以下步骤：

S101’，获取单帧预览图像。

针对人们在拍照过程中，滤镜的特殊效果不够丰富的技术问题，本发明提出了一种图像的渲染方法，其中，该方法主要应用于图像拍摄的场景中，为了便于描述，本发明集中在应用于图像拍摄预览场景中进行说明。

在本发明的一个实施例中，可先获取单帧预览图像。该单帧预览图像为通过摄像头中的图像传感器捕获得到的。

S102’，将单帧预览图像切分为多个区域图像。

其中，区域图像的形状包括规则形状和不规则形状。

具体地，可将单帧预览图像切分为多个规则形状的区域图像，也可以切分为多个不规则形状的区域图像，当然还可以切分为多个规则形状的区域图像与多个不规则形状的区域图像。其中，规则形状为能够直接通过求面积公式获得面积的形状，如长方形、平行四边形、梯形、圆形等；不规则形状为无法直接通过求面积公式获得面积的形状。通常情况下，单帧预览图像为长方形，因此最简便的方式就是将单帧预览图像切分为多个长方形。根据不同用户的需求，可以将单帧预览图像切分为任意用户所需的形状。

S103’，对每个区域图像分别采用与其对应的滤镜效果进行渲染，以生成区域渲染图像。

具体地，可将区域图像转换为支持着色器shader处理的纹理数据格式，然后利用着色器确定纹理数据格式中像素所对应的滤镜效果，并对像素进行渲染。例如：单帧预览图像被切分为四个长方形区域图像，可为上述四个长方形区域图像分配四种不同的滤镜效果。再利用着色器计算出每个区域中的像素需要被渲染为何种滤镜效果，从而渲染出每个区域对应的区域渲染图像。

其中，为了保证渲染的效果，可以设定相邻的两个区域图像采用的滤镜效果不相同。

S104’，将区域渲染图像合并为单帧图像，并输出单帧图像。

在生成区域渲染图像之后，可将区域渲染图像合并为单帧图像，并进行输出。也就是说，通过不同滤镜对相应的区域进行渲染后，最终得到的单帧图像，可通过显示屏幕进行输出，以供用户在拍摄时进行预览。

此外，可依据上述步骤，连续输出多张单帧图像，最终实现显示屏幕实时显示，用户可进行实时地图像预览。

在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。

尽管上面已经示出和描述了本发明的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本发明的限制，本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (12)

1.一种图像的渲染方法，其特征在于，包括：

获取单帧预览图像；

将所述单帧预览图像切分为多个区域图像；

对每个区域图像分别采用与其对应的滤镜效果进行渲染，以生成区域渲染图像；

将所述区域渲染图像合并为单帧图像，并输出所述单帧图像。

2.如权利要求1所述的方法，其特征在于，区域图像的形状包括规则形状和不规则形状。

3.如权利要求1所述的方法，其特征在于，相邻的两个区域图像采用的滤镜效果不相同。

4.如权利要求1所述的方法，其特征在于，对每个区域图像分别采用与其对应的滤镜效果进行渲染，以生成区域渲染图像，包括：

将区域图像转换为纹理数据格式；

利用着色器确定所述纹理数据格式中像素所对应的滤镜效果，并对像素进行渲染。

5.如权利要求1所述的方法，其特征在于，还包括：

连续输出多张单帧图像，并通过显示屏幕实时显示。

6.一种图像的渲染装置，其特征在于，包括：

获取模块，用于获取单帧预览图像；

切分模块，用于将所述单帧预览图像切分为多个区域图像；

生成模块，用于对每个区域图像分别采用与其对应的滤镜效果进行渲染，以生成区域渲染图像；

输出模块，用于将所述区域渲染图像合并为单帧图像，并输出所述单帧图像。

7.如权利要求6所述的装置，其特征在于，区域图像的形状包括规则形状和不规则形状。

8.如权利要求6所述的装置，其特征在于，相邻的两个区域图像采用的滤镜效果不相同。

9.如权利要求6所述的装置，其特征在于，所述生成模块，用于：

将区域图像转换为纹理数据格式；

利用着色器确定所述纹理数据格式中像素所对应的滤镜效果，并对像素进行渲染。

10.如权利要求6所述的装置，其特征在于，还包括：

显示模块，用于连续输出多张单帧图像，并通过显示屏幕实时显示。

11.一种非临时性计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-5任一项所述的图像的渲染方法。

12.一种终端设备，其特征在于，包括存储器及处理器，所述存储器中储存有计算机可读指令，所述指令被所述处理器执行时，使得所述处理器执行如权利要求1至5中任一项所述的图像的渲染方法。