CN109741465B - 图像处理方法及装置、显示装置 - Google Patents

Abstract

本发明公开了一种图像处理方法及装置、显示装置，属于显示技术领域。该方法包括：获取待处理图像；对待处理图像中的目标像素点进行渲染，该目标像素点的个数小于待处理图像所包括的像素点的总数；对渲染后的待处理图像进行反畸变处理，得到待显示图像，该待显示图像用于在显示设备的显示屏中显示，且待显示图像中除目标像素点之外的像素点未在显示屏中显示。本发明提供的图像处理方法仅对最终在显示屏上显示的目标像素点进行了渲染，因此可以在确保图像显示效果的同时，提高渲染效率，节省了图像处理装置的处理资源。

Description

图像处理方法及装置、显示装置

技术领域

本发明涉及显示技术领域，特别涉及一种图像处理方法及装置、显示装置。

背景技术

虚拟现实(virtual reality，VR)技术是一种利用计算机图形系统和各种接口设备生成可交互的三维环境(即虚拟场景)，并通过该三维环境为用户提供沉浸感的技术。其中，沉浸感是指当用户把虚拟现实中的场景当做真实场景来感知时，在空间意义上置身于该虚拟现实场景中的感觉。

相关技术中，VR设备在获取到待显示的图像后，可以对获取到的图像中的每个像素点进行渲染。并且，由于VR设备中设置有透镜，人眼通过透镜观看到的图像会发生畸变。因此为了确保图像的显示效果，需要对渲染后的图像进行反畸变处理，然后再将反畸变处理后的图像显示在VR设备的显示屏上。

但是，在对获取到的图像进行渲染的过程中，由于需要对图像中的所有像素点进行渲染，渲染效率较低。

发明内容

本发明实施例提供了一种图像处理方法及装置、显示装置，可以解决相关技术中VR设备对获取到的图像进行渲染效率较低的问题。所述技术方案如下：

一方面，提供了一种图像处理方法，所述方法包括：

获取待处理图像；

对所述待处理图像中的目标像素点进行渲染，所述目标像素点的个数小于所述待处理图像所包括的像素点的总数；

对渲染后的所述待处理图像进行反畸变处理，得到待显示图像，所述待显示图像用于在显示设备的显示屏中显示，且所述待显示图像中除所述目标像素点之外的像素点未在所述显示屏中显示。

可选的，在所述对所述待处理图像中的目标像素点进行渲染之前，所述方法还包括：

获取所述待处理图像的渲染模板，所述渲染模板中记录有待渲染的像素点的位置信息；

根据所述渲染模板中记录的位置信息，确定所述待处理图像中的目标像素点。

可选的，在获取所述待处理图像的渲染模板之前，所述方法还包括：

获取所述待处理图像中像素点与所述显示屏中像素点之间的对应关系；

若所述显示屏中的第一像素点与所述待处理图像中的一个像素点对应，则获取所述待处理图像中与所述第一像素点对应的像素点的位置信息；

若所述显示屏中的第二像素点与所述待处理图像中的至少两个像素点对应，则获取所述至少两个像素点中参考像素点的位置信息，其中，所述参考像素点为在所述第二像素点上显示的像素点；

根据获取到的像素点的位置信息，生成所述渲染模板。

可选的，所述对渲染后的所述待处理图像进行反畸变处理，得到待显示图像，包括：

根据所述待处理图像中像素点与所述显示屏中像素点之间的对应关系，调整渲染后的所述待处理图像中每个像素点的位置，得到待显示图像。

可选的，在所述调整渲染后的所述待处理图像中每个像素点的位置之前，所述方法还包括：

对渲染后的所述待处理图像进行网格划分，得到多个网格，每个所述网格包括多个像素点；

所述根据所述待处理图像中像素点与所述显示屏中像素点之间的对应关系，调整渲染后的所述待处理图像中每个像素点的位置，包括：

根据所述待处理图像中像素点与所述显示屏中像素点之间的对应关系，调整每个所述网格的位置。

另一方面，提供了一种图像处理装置，所述装置包括：

第一获取模块，用于获取待处理图像；

渲染模块，用于对所述待处理图像中的目标像素点进行渲染，所述目标像素点的个数小于所述待处理图像所包括的像素点的总数；

处理模块，用于对渲染后的所述待处理图像进行反畸变处理，得到待显示图像，所述待显示图像用于在显示设备的显示屏中显示，且所述待显示图像中除所述目标像素点之外的像素点未在所述显示屏中显示。

可选的，所述装置还包括：

第二获取模块，用于获取所述待处理图像的渲染模板，所述渲染模板中记录有待渲染的像素点的位置信息；

确定模块，用于根据所述渲染模板中记录的位置信息，确定所述待处理图像中的目标像素点。

可选的，所述装置还包括：

第三获取模块，用于获取所述待处理图像中像素点与所述显示屏中像素点之间的对应关系；

第四获取模块，用于若所述显示屏中的第一像素点与所述待处理图像中的一个像素点对应，则获取所述待处理图像中与所述第一像素点对应的像素点的位置信息；

第五获取模块，用于若所述显示屏中的第二像素点与所述待处理图像中的至少两个像素点对应，则获取所述至少两个像素点中参考像素点的位置信息，其中，所述参考像素点为在所述第二像素点上显示的像素点；

模板生成模块，用于根据获取到的像素点的位置信息，生成所述渲染模板。

可选的，所述处理模块，包括：

调整子模块，用于根据所述待处理图像中像素点与所述显示屏中像素点之间的对应关系，调整渲染后的所述待处理图像中每个像素点的位置，得到待显示图像。

可选的，所述处理模块还包括：

划分子模块，用于对渲染后的所述待处理图像进行网格划分，得到多个网格，每个所述网格包括多个像素点；

所述调整子模块，用于：

根据所述待处理图像中像素点与所述显示屏中像素点之间的对应关系，调整每个所述网格的位置。

又一方面，提供了一种图像处理装置，包括：存储器，处理器及存储在所述存储器上的计算机程序，所述处理器执行所述计算机程序时实现如上述方面所述的图像处理方法。

再一方面，提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有指令，当所述计算机可读存储介质在计算机上运行时，使得计算机执行如上述方面所述的图像处理方法。

又一方面，提供了一种显示装置，所述显示装置包括如上述方面所述的图像处理装置。

本发明实施例提供的技术方案带来的有益效果至少包括：

本发明实施例提供了一种图像处理方法及装置、显示装置，该该方法可以对待处理图像中的目标像素进行渲染，并对渲染后的待处理图像进行反畸变处理，得到待显示图像，该待显示图像中除目标像素点之外的像素点未在显示屏中显示。由于该图像处理方法仅对最终在显示屏上显示的目标像素点进行了渲染，因此可以在确保图像显示效果的同时，提高渲染效率，节省了图像处理装置的处理资源。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例提供的一种图像处理方法所涉及的实施环境的示意图；

图2是本发明实施例提供的一种图像处理方法的流程图；

图3是本发明实施例提供的另一种图像处理方法的流程图；

图4是本发明实施例提供的待处理图像中像素点与显示屏中像素点的对应关系的示意图；

图5是本发明实施例提供的待处理图像中各个像素点的位置的示意图；

图6是与图5对应的每个像素点在显示屏上的坐标的示意图；

图7是本发明实施例提供的一种渲染模板的示意图；

图8是本发明实施例提供的将渲染后的待处理图像划分成多个网格的示意图；

图9是图8所示的待处理图像反畸变处理后得到的待显示图像的示意图；

图10是本发明实施例提供的一种图像处理装置的框图；

图11是本发明实施例提供的另一种图像处理装置的框图；

图12是本发明实施例提供的又一种图像处理装置的框图；

图13是本发明实施例提供的一种处理模块的框图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明实施方式作进一步地详细描述。

相关技术中，在对渲染后的图像进行反畸变处理后，反畸变后的图像会被压缩，使得反畸变后的图像中的部分像素重合，因此只有部分像素在VR显示屏上显示。由于渲染后的图像中部分像素点并未显示在VR设备的显示屏上，导致对VR设备的处理资源造成一定浪费。

图1是本发明实施例提供的一种图像处理方法所涉及的实施环境的示意图。如图1所示，该实施环境可以包括：显示设备110和终端120。该显示设备110可以为VR显示设备或增强现实(augmented reality，AR)显示设备等设置有透镜的显示设备。该终端120可以为智能手机、电脑、多媒体播放器、电子阅读器或可穿戴设备等具备图像处理功能的设备。该显示设备110和终端120之间可以通过有线网络或无线网络建立连接。在本发明实施例中，终端120可以对待处理图像进行处理，并将处理后得到的待显示图像，发送至显示设备110进行显示。

在本发明实施例中，该实施环境中也可以仅包括图1所示的显示设备110。该显示设备110可以对待处理图像进行处理，并将处理后得到的待显示图像显示在其显示屏上。

本发明实施例提供了一种图像处理方法。该方法可以应用于图像处理装置，该图像处理装置可以配置于图1所示的显示设备110中或者终端120中。如图2所示，该方法可以包括：

步骤201、获取待处理图像。

该待处理图像可以为图像处理装置中预先存储的固定分辨率的图像模板，该图像模板中的每个像素的颜色可以均为默认颜色，例如可以均为黑色或者白色等。

步骤202、对待处理图像中的目标像素点进行渲染。

其中，该目标像素点的个数可以小于该待处理图像所包括的像素点的总数。图像处理装置可以基于用户当前的姿态位置信息以及用户的视场角获取到待渲染的场景数据，并可以根据获取到的场景数据对待处理图像中的目标像素点进行渲染，从而得到双眼图像。或者也可以先渲染得到两个单眼图像，再对两个单眼图像进行处理得到双眼图像。其中，用户的姿态位置信息可以为用户的头部转动的角度，用户的视场角指的是用户的眼睛与透镜的主光轴之间的夹角。可选的，渲染后的待处理图像的分辨率可以为1400×1400。

步骤203、对渲染后的待处理图像进行反畸变处理，得到待显示图像。

该待显示图像用于在显示设备的显示屏中显示，且该待显示图像中除目标像素点之外的像素点未在显示屏中显示。也即是，该待显示图像中，仅渲染后的目标像素点显示在显示屏中。

综上所述，本发明实施例提供了一种图像处理方法，该方法可以对待处理图像中的目标像素进行渲染，并对渲染后的待处理图像进行反畸变处理，得到待显示图像，该待显示图像中除目标像素点之外的像素点未在显示屏中显示。由于该图像处理方法仅对最终在显示屏上显示的目标像素点进行了渲染，因此可以在确保图像显示效果的同时，提高渲染效率，节省了图像处理装置的处理资源。

本发明实施例提供了另一种图像处理方法。该方法可以应用于图像处理装置，该图像处理装置可以配置于图1所示的显示设备110中或者终端120中。如图3所示，该方法可以包括：

步骤301、获取待处理图像中像素点与显示屏中像素点之间的对应关系。

在本发明实施例中，图像处理装置中可以预先存储待处理图像中像素点与显示屏中像素点之间的对应关系。该对应关系可以为待处理图像中每个像素点的位置信息与显示屏中像素点的位置信息之间的对应关系。该待处理图像中的每个像素点均对应一个反畸变系数，每个像素点采用对应的反畸变系数进行反畸变处理后的位置即为该像素点在显示屏中显示的位置，即该每个像素点经过反畸变处理后可以映射至显示屏中一个像素点所在的位置。该对应关系中记录的待处理图像中第一像素点所对应的显示屏中的像素点，即为该第一像素点经过反畸变处理后映射至显示屏中的像素点。也即是，该对应关系即为待处理图像的反畸变模型，图像处理装置可以根据待处理图像中像素点与显示屏中像素点之间的对应关系对渲染后的图像进行反畸变处理。

在本发明实施例中，图像处理装置可以根据透镜的焦距、透镜的厚度和显示设备的显示尺寸等参数确定待处理图像中的像素点与显示屏中的像素点的对应关系。

参考图4，图4中所示的θ为用户的最大视场角，α为用户当前的视场角，O为透镜的中心点，O1为显示屏的中心点。当用户的视场角为α时，若用户未通过透镜观察，则待处理图像中的像素点A0与显示屏中的像素点A对应。若用户通过透镜观察，待处理图像中的像素点A1经过反畸变映射至显示屏中的像素点A。

示例的，假设待处理图像中各个像素点的位置如图5所示。参考图5可以看出，待处理图像中每个像素点的位置信息可以为该像素点在图像坐标系中的坐标。图6为与图5对应的每个像素点在显示屏上的坐标。参考图6可以看出，显示屏中每个像素点的位置信息可以为该像素点在显示屏坐标系中的坐标。

对比图5和图6可以看出，由于显示屏中显示的图像为反畸变处理后的图像，该反畸变处理后的图像中的像素点会被压缩，使得部分像素点会重合。因此该显示屏中的一个像素点可以与待处理图像中的一个或多个像素点对应。

步骤302、若显示屏中的第一像素点与待处理图像中的一个像素点对应，则获取待处理图像中与第一像素点对应的像素点的位置信息。

在本发明实施例中，若显示屏中的某个像素点仅与待处理图像中的一个像素点对应，则可以将显示屏中的该像素点称为第一像素点。图像处理装置可以根据待处理图像中像素点与显示屏中像素点之间的对应关系，确定显示屏中每个像素点对应的待处理图像中的像素点的个数，从而确定出待处理图像中的至少一个第一像素点。并且，可以获取待处理图像中与每个第一像素点对应的像素点的位置信息，得到待处理图像中至少一个像素的位置信息。

步骤303、若显示屏中的第二像素点与待处理图像中的至少两个像素点对应，则获取待处理图像中与至少两个像素点中参考像素点的位置信息。

其中，该参考像素点可以为该至少两个像素点中最终在第二像素点上显示的像素点。

在本发明实施例中，若显示屏中的某个像素点与待处理图像中的多个像素点对应，则可以将显示屏中的该像素点称为第二像素点。图像处理装置可以根据待处理图像中像素点与显示屏中像素点之间的对应关系，确定显示屏中每个像素点对应的待处理图像中的像素点的个数，从而确定出待处理图像中的至少一个第二像素点。并且，可以获取待处理图像中与该每个第二像素点对应的至少两个像素点。

对于待处理图像中与任一个第二像素点对应的至少两个像素点，图像处理装置可以从该至少两个像素点中随机获取一个像素点，将该像素点作为参考像素点。或者，也可以根据显示屏在显示反畸变处理后的图像时的筛选算法从至少两个像素点中确定一个参考像素点。其中，该筛选算法可以是指从与第二像素点对应的至少两个像素点中选取显示至显示屏上的像素点的算法。本发明实施例对于从至少两个像素点中确定参考像素点的方式不做限定。

步骤304、根据获取到的像素点的位置信息，生成渲染模板。

图像处理装置可以根据上述步骤302和步骤303获取到的像素点的位置信息生成渲染模板。

作为一种可选的实现方式，该渲染模板中可以直接记录图像处理装置获取到的像素点的位置信息，例如可以记录获取到的每个像素点在待处理图像中的坐标。

作为另一种可选的实现方式，该渲染模板可以为一个矩阵或者表格，且该渲染模板中的行数可以与待处理图像中的像素的行数一致，该渲染模板中的列数可以与待处理图像中像素的列数一致。即该渲染模板中的每个元素可以与待处理图像中的一个像素点对应。该每个元素的取值可以不同。在生成该渲染模板时，图像处理装置可以根据获取到的各个像素点的位置信息，将渲染模板中与每个像素点对应的元素置为目标值(例如可以置为1)，并将其余的元素均置为默认值(例如可以置为0)。因此，若渲染模板中的某个元素取值为目标值，则表明需要对待处理图像中与该元素对应的像素点进行渲染。若渲染模板中的元素取值为默认值，则表明无需对待处理图像中与该元素对应的像素点进行渲染。

作为又一种可选的实现方式，该渲染模板也可以是一个图像，该图像可以包括多个阵列排布的图像块，该图像中图像块的行数可以与待处理图像中的像素的行数一致，该图像中图像块的列数可以与待处理图像中像素的列数一致。即该待处理图像中的每个图像块可以与待处理图像中的一个像素点对应。该每个图像块可以用不同的颜色填充。在生成渲染模板时，图像处理装置可以根据获取到的各个像素点的位置信息，将渲染模板中与每个像素点对应的图像块用目标颜色填充，并将其余的图像块用默认颜色填充。因此，若渲染模板中某个图像块用目标颜色填充，则表明需要对待处理图像中与该图像块对应的像素点进行渲染。若渲染模板中某个图像块用默认颜色填充，则表明无需对待处理图像中与该图像块对应的像素点进行渲染。

示例的，图7示出了一种渲染模板的示意图。如图7所示，该渲染模板中的目标颜色为黑色，默认颜色为白色。该渲染模板中用目标填充的图像块为与待处理图像中需要渲染的像素点相对应的图像块，用默认颜色填充的图像块为与待处理图像中无需进行渲染的像素点相对应的图像块。

在本发明实施例中，图像处理装置可以将该渲染模板存储在图像处理装置的内存中，以便于后续对图像进行渲染时可以直接从图像处理装置的内存中获取该渲染模板，进而提高图像显示的效率。

需要说明的是，图像处理装置中所有图像模板的分辨率均可以相同，因此该渲染模板对于所有的图像模板均适用。

步骤305、获取待处理图像。

该待处理图像可以为图像处理装置中预先存储的固定分辨率的图像模板，该图像模板中的每个像素的颜色可以均为默认颜色，例如可以均为黑色或者白色等。

步骤306、获取待处理图像的渲染模板。

图像处理装置可以直接从图像处理装置的内存中直接获取该渲染模板，该渲染模板中可以记录有待渲染的像素点的位置信息。

可选的，该渲染模板中可以记录有待渲染的像素点在待处理图像中的坐标。或者，该渲染模板可以为矩阵或者表格，该矩阵或者表格中各元素的取值可以不同，且取值为目标值的元素所在的位置可以用于指示待处理图像中待渲染的像素点的位置信息。或者，该渲染模板可以为图像，该图像中各图像块的填充颜色可以不同，且填充颜色为目标颜色的图像块所在的位置可以用于指示待处理图像中待渲染的像素点的位置信息。

步骤307、根据渲染模板中记录的位置信息，确定待处理图像中的目标像素点。

在本发明实施例中，图像处理装置可以将渲染模板中记录的位置信息对应的像素点确定为目标像素点。

若渲染模板中直接记录图像处理装置获取到的像素点的位置信息，则图像处理装置可以直接从渲染模板中获取该像素点的坐标。

若渲染模板为表格或矩阵，且该渲染模板中每个元素的取值为目标值或默认值，则图像处理装置可以确定渲染模板中取值为目标值的目标元素在渲染模板中的位置，进而确定与该目标元素对应的目标像素点在待处理图像中的位置信息。

若渲染模板为图像，且该渲染模板中每个图像块用不同的颜色填充，则图像处理装置可以确定渲染模板中填充颜色为目标颜色在渲染模板中的位置，进而确定与该目标元素对应的目标像素点在待处理图像中的位置信息。参考图7，图像处理装置可以确定图7中用目标颜色(例如，图7所示的黑色)填充的目标图像块在渲染模板中的位置，进而确定与该目标图像块对应的目标像素点在待处理图像中的位置信息。

步骤308、对待处理图像中的目标像素点进行渲染。

其中，该目标像素点的个数小于该待处理图像所包括的像素点的总数。

图像处理装置图像处理装置可以根据用户当前的姿态位置信息以及用户的视场角获取到待渲染的场景数据，并可以根据获取到的场景数据对待处理图像中的目标像素点进行渲染。

步骤309、对渲染后的待处理图像进行反畸变处理，得到待显示图像。

其中，该待显示图像用于在显示设备的显示屏中显示。

在本发明实施例中，图像处理装置在对渲染后的待处理图像进行反畸变处理时，在一种可选的实现方式中，图像处理装置可以根据待处理图像中像素点与显示屏中像素点之间的对应关系，调整每个像素点的位置，以将渲染后的待处理图像中的每个像素点的位置调整为该每个像素点在显示屏上的位置。也即是，可以根据待处理图像中像素点与显示屏中像素点之间的对应关系，对待处理图像中的每个像素点进行纹理映射，从而得到待显示图像。

在另一种可选的实现方式中，图像处理装置可以采用网格顶点法对渲染后的待处理图像进行反畸变处理。可选的，图像处理装置可以对渲染后的待处理图像进行网格划分，得到多个网格，每个网格可以包括多个像素点。之后，可以先确定每个网格的网格顶点，该网格顶点可以为该网格中所包括的多个像素点中的一个像素点。例如，该网格顶点可以为该网格左上角的像素点。之后，图像处理装置可以根据待处理图像中像素点与显示屏中像素点之间的对应关系，调整每个网格顶点的位置，并根据每个网格中网格顶点调整后的位置将该每个网格中的其他像素点线性变换至其在显示屏上的位置，从而得到待显示图像。

示例的，图像处理装置可以将渲染后的待处理图像划分成64×64个网格，该每个网格可以包括多个像素点。图8示出了将渲染后的待处理图像划分成多个网格的示意图。如图8所示，图像处理装置将该渲染后的待处理图像划分为4×4个网格。图9是将图8所示的渲染后的待处理图像反畸变处理后得到的待显示图像。

需要说明的是，为了确保待显示图像在显示设备的显示效果，渲染得到的待处理图像的分辨率一般比反畸变处理后得到的待显示图像的分辨率高。

步骤310、显示该待显示图像。

图像处理装置在显示待显示图像的过程中，将待显示图像中的目标像素点在显示屏中显示，除目标像素点之外的像素点未在显示屏中显示。也即是，该待显示图像中，仅将渲染后的目标像素点显示在显示屏中。示例的，该显示屏上显示的目标像素点大约占待显示图像中总像素点的70％。

由于反畸变处理后的待显示图像中像素点会被压缩，使得部分像素点会重合，因此图像处理装置在显示待显示图像的过程中，若一个像素点未与其他像素点重合，图像处理装置可以直接将该像素点在显示屏显示。若一个像素点与其他像素点重合，则可以采用筛选算法从该重合的像素点中选取一个像素点，并将该像素点在显示屏中显示。或者，若图像处理装置在上述步骤303中从至少两个像素点中随机选取一个作为参考像素点，则图像处理装置在选取该参考像素点后，还可以记录参考像素点的位置信息。相应的，在显示待显示图像中，对于该重合的像素点，可以根据预先记录的参考像素点的位置信息确定需要在显示屏中显示的像素点，也即是将该参考像素点作为需要在显示屏中显示的像素点。

需要说明的是，本发明实施例提供的图像处理方法步骤的先后顺序可以进行适当调整，步骤也可以根据情况进行相应增减。例如，由于该渲染模板适用于所有的待处理图像，因此图像处理装置在生成渲染模板之后，对于后续获取的待处理图像，步骤301至步骤304可以不执行。且步骤301至步骤309可以由终端执行，步骤310可以由显示设备执行。任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化的方法，都应涵盖在本发明的保护范围之内，因此不再赘述。

综上所述，本发明实施例提供了一种图像处理方法，该方法可以对待处理图像中的目标像素进行渲染，并对渲染后的待处理图像进行反畸变处理，得到待显示图像，该待显示图像中除目标像素点之外的像素点未在显示屏中显示。由于该图像处理方法仅对最终在显示屏上显示的目标像素点进行了渲染，因此可以在确保图像显示效果的同时，提高渲染效率，节省了图像处理装置的处理资源。

本发明实施例提供了一种图像处理装置10。如图10所示，该装置包括：第一获取模块1001、渲染模块1002和处理模块1003。

第一获取模块1001，用于获取待处理图像。

渲染模块1002，用于对待处理图像中的目标像素点进行渲染，该目标像素点的个数小于待处理图像所包括的像素点的总数。

处理模块1003，用于对渲染后的待处理图像进行反畸变处理，得到待显示图像，该待显示图像用于在显示设备的显示屏中显示，且待显示图像中除目标像素点之外的像素点未在显示屏中显示。

综上所述，本发明实施例提供了一种图像处理装置，该装置可以对待处理图像中的目标像素进行渲染，并对渲染后的待处理图像进行反畸变处理，得到待显示图像，该待显示图像中除目标像素点之外的像素点未在显示屏中显示。由于该图像处理方法仅对最终在显示屏上显示的目标像素点进行了渲染，因此可以在确保图像显示效果的同时，提高渲染效率，节省了图像处理装置的处理资源。

本发明实施例提供了另一种图像处理装置11。如图11所示，该装置包括：第一获取模块1101、渲染模块1102、处理模块1103、第二获取模块1104和确定模块1105。

第一获取模块1101，用于获取待处理图像。

渲染模块1102，用于对待处理图像中的目标像素点进行渲染，该目标像素点的个数小于待处理图像所包括的像素点的总数。

处理模块1103，用于对渲染后的待处理图像进行反畸变处理，得到待显示图像，该待显示图像用于在显示设备的显示屏中显示，且待显示图像中除目标像素点之外的像素点未在显示屏中显示。

第二获取模块1104，用于获取待处理图像的渲染模板，该渲染模板中记录有待渲染的像素点的位置信息。

确定模块1105，用于根据渲染模板中记录的位置信息，确定待处理图像中的目标像素点。

综上所述，本发明实施例提供了一种图像处理装置，该装置可以对待处理图像中的目标像素进行渲染，并对渲染后的待处理图像进行反畸变处理，得到待显示图像，该待显示图像中除目标像素点之外的像素点未在显示屏中显示。由于该图像处理方法仅对最终在显示屏上显示的目标像素点进行了渲染，因此可以在确保图像显示效果的同时，提高渲染效率，节省了图像处理装置的处理资源。

本发明实施例提供了又一种图像处理装置12。如图12所示，该装置包括：第一获取模块1201、渲染模块1202、处理模块1203、第三获取模块1206、第四获取模块1207、第五获取模块1208和模板生成模块1209。

第一获取模块1201，用于获取待处理图像。

渲染模块1202，用于对待处理图像中的目标像素点进行渲染，该目标像素点的个数小于待处理图像所包括的像素点的总数。

处理模块1203，用于对渲染后的待处理图像进行反畸变处理，得到待显示图像，该待显示图像用于在显示设备的显示屏中显示，且待显示图像中除目标像素点之外的像素点未在显示屏中显示。

第三获取模块1206，用于获取待处理图像中像素点与显示屏中像素点之间的对应关系。

第四获取模块1207，用于若显示屏中的第一像素点与待处理图像中的一个像素点对应，则获取待处理图像中与第一像素点对应的像素点的位置信息。

第五获取模块1208，用于若显示屏中的第二像素点与待处理图像中的至少两个像素点对应，则获取至少两个像素点中参考像素点的位置信息，其中，参考像素点为在第二像素点上显示的像素点。

模板生成模块1209，用于根据获取到的像素点的位置信息，生成渲染模板。

可选的，处理模块1203，包括：

调整子模块12031，用于根据待处理图像中像素点与显示屏中像素点之间的对应关系，调整渲染后的待处理图像中每个像素点的位置，得到待显示图像。

可选的，如图13所示，处理模块1203包括：

划分子模块12032，用于对渲染后的待处理图像进行网格划分，得到多个网格，每个网格包括多个像素点。

调整子模块12031，用于根据待处理图像中像素点与显示屏中像素点之间的对应关系，调整每个网格的位置。

综上所述，本发明实施例提供了一种图像处理装置，该装置可以对待处理图像中的目标像素进行渲染，并对渲染后的待处理图像进行反畸变处理，得到待显示图像，该待显示图像中除目标像素点之外的像素点未在显示屏中显示。由于该图像处理方法仅对最终在显示屏上显示的目标像素点进行了渲染，因此可以在确保图像显示效果的同时，提高渲染效率，节省了图像处理装置的处理资源。

本发明实施例提供了又一种图像处理装置，包括：存储器，处理器及存储在存储器上的计算机程序，该处理器执行计算机程序时实现如图2或图3所示的图像处理方法。

本发明实施例提供了一种计算机可读存储介质，该计算机可读存储介质中存储有指令，当计算机可读存储介质在计算机上运行时，使得计算机执行如如图2或图3所示的图像处理方法。

本发明实施例提供了一种显示装置，该显示装置可以包括图10、图11或图12任一所示的图像处理装置。该显示装置可以为VR显示设备或者AR显示设备。

以上所述仅为本发明的可选实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (7)

1.一种图像处理方法，其特征在于，所述方法包括：

获取待处理图像；

获取所述待处理图像中像素点与显示屏中像素点之间的对应关系，所述对应关系预先存储在图像处理装置中；

若所述显示屏中的第一像素点与所述待处理图像中的一个像素点对应，则获取所述待处理图像中与所述第一像素点对应的像素点的位置信息；

若所述显示屏中的第二像素点与所述待处理图像中的至少两个像素点对应，从所述至少两个像素点中随机获取一个像素点，将所述像素点作为参考像素点，或者，根据显示屏在显示反畸变处理后的图像时的筛选算法从所述至少两个像素点中确定一个参考像素点，其中，所述参考像素点为在所述第二像素点上显示的像素点；

根据获取到的像素点的位置信息，生成渲染模板；

获取所述待处理图像的渲染模板，所述渲染模板中记录有待渲染的像素点的位置信息；

根据所述渲染模板中记录的位置信息，确定所述待处理图像中的目标像素点；

对所述待处理图像中的目标像素点进行渲染，所述目标像素点的个数小于所述待处理图像所包括的像素点的总数；

对渲染后的所述待处理图像进行反畸变处理，得到待显示图像，所述待显示图像用于在显示设备的显示屏中显示，且所述待显示图像中除所述目标像素点之外的像素点未在所述显示屏中显示。

2.根据权利要求1所述的方法，其特征在于，所述对渲染后的所述待处理图像进行反畸变处理，得到待显示图像，包括：

根据所述待处理图像中像素点与所述显示屏中像素点之间的对应关系，调整渲染后的所述待处理图像中每个像素点的位置，得到待显示图像。

3.根据权利要求2所述的方法，其特征在于，在所述调整渲染后的所述待处理图像中每个像素点的位置之前，所述方法还包括：

对渲染后的所述待处理图像进行网格划分，得到多个网格，每个所述网格包括多个像素点；

所述根据所述待处理图像中像素点与所述显示屏中像素点之间的对应关系，调整渲染后的所述待处理图像中每个像素点的位置，包括：

根据所述待处理图像中像素点与所述显示屏中像素点之间的对应关系，调整每个所述网格的位置。

4.一种图像处理装置，其特征在于，所述装置包括：

第一获取模块，用于获取待处理图像；

渲染模块，用于对所述待处理图像中的目标像素点进行渲染，所述目标像素点的个数小于所述待处理图像所包括的像素点的总数；

处理模块，用于对渲染后的所述待处理图像进行反畸变处理，得到待显示图像，所述待显示图像用于在显示设备的显示屏中显示，且所述待显示图像中除所述目标像素点之外的像素点未在所述显示屏中显示；

第二获取模块，用于获取所述待处理图像中像素点与所述显示屏中像素点之间的对应关系，所述对应关系预先存储在图像处理装置中；

若所述显示屏中的第一像素点与所述待处理图像中的一个像素点对应，则获取所述待处理图像中与所述第一像素点对应的像素点的位置信息；

若所述显示屏中的第二像素点与所述待处理图像中的至少两个像素点对应，从所述至少两个像素点中随机获取一个像素点，将所述像素点作为参考像素点，或者，根据显示屏在显示反畸变处理后的图像时的筛选算法从所述至少两个像素点中确定一个参考像素点，其中，所述参考像素点为在所述第二像素点上显示的像素点；

根据获取到的像素点的位置信息，生成渲染模板；

获取所述待处理图像的渲染模板，所述渲染模板中记录有待渲染的像素点的位置信息；

确定模块，用于根据所述渲染模板中记录的位置信息，确定所述待处理图像中的目标像素点。

5.一种图像处理装置，其特征在于，包括：存储器，处理器及存储在所述存储器上的计算机程序，所述处理器执行所述计算机程序时实现如权利要求1至3任一所述的图像处理方法。

6.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有指令，当所述计算机可读存储介质在计算机上运行时，使得计算机执行如权利要求1至3任一所述的图像处理方法。

7.一种显示装置，其特征在于，所述显示装置包括如权利要求4所述的图像处理装置。