CN112104855B - 一种图像处理方法及装置 - Google Patents

Abstract

本申请提供一种图像处理方法及装置，在第一次响应垂直同步信号过程中获取待渲染图像，将待渲染图像分成多个子图像，在图像处理周期中，每间隔第一预设时间响应一次垂直同步信号；在第一次响应垂直同步信号后经过第二预设时间，获取每个子图像对应的用户位姿，并根据每个子图像对应的用户位姿对每个子图像进行偏移处理，得到每个子图像对应的目标子图像，第一预设时间和第二预设时间之间的关系为：T/2≤t<T，t为第二预设时间，T为第一预设时间；在至少完成对第一子图像的偏移处理且在第二次响应垂直同步信号时，依次输出每个子图像对应的目标子图像，以缩短从处理子图像至输出目标子图像的预测时间。

Description

一种图像处理方法及装置

技术领域

本申请属于图像处理技术领域，尤其涉及一种图像处理方法及装置。

背景技术

目前AR和VR等技术在显示图像过程中会出现用户位姿变化速度过快导致图像无法跟随位姿变化，针对这一问题可预测显示时刻的用户位姿，根据渲染时刻的用户位姿和显示时刻的用户位姿，对待渲染图像进行偏移处理，以达到对待渲染图像的位移补偿。

发明内容

一方面，本申请提供一种图像处理方法，包括：

在第一次响应垂直同步信号过程中获取待渲染图像，将所述待渲染图像分成多个子图像，所述第一次响应垂直同步信号是指在一个图像处理周期中第一次响应垂直同步信号，所述图像处理周期为从获取所述待渲染图像至输出子图像对应的内容；

在所述图像处理周期中，每间隔第一预设时间响应一次垂直同步信号；

在第一次响应所述垂直同步信号之后经过第二预设时间，获取所述多个子图像中每个子图像对应的用户位姿，并根据每个子图像对应的用户位姿对每个子图像进行偏移处理，得到每个子图像对应的目标子图像，所述第二预设时间与所述第一预设时间的关系是：T/2≤t<T，t为所述第二预设时间，T为所述第一预设时间；

在至少完成对所述多个子图像中的第一个子图像的偏移处理且在第二次响应所述垂直同步信号时，依次输出每个子图像对应的目标子图像。

可选的，所述在第一次响应所述垂直同步信号之后经过第二预设时间，获取所述多个子图像中每个子图像对应的用户位姿，并根据每个子图像对应的用户位姿对每个子图像进行偏移处理，得到每个子图像对应的目标子图像包括：

在第一次响应所述垂直同步信号之后经过第二预设时间，确定所述子图像对应的处理时刻；

如果当前时刻与所述子图像对应的处理时刻匹配，获取当前时刻下的用户位姿，并根据所述用户位姿对所述子图像进行偏移处理，得到所述子图像对应的目标子图像。

可选的，所述在第一次响应所述垂直同步信号之后经过第二预设时间，获取所述多个子图像中每个子图像对应的用户位姿，并根据每个子图像对应的用户位姿对每个子图像进行偏移处理，得到每个子图像对应的目标子图像包括：

确定所有子图像之间的处理顺序；

在第一次响应所述垂直同步信号之后经过第二预设时间，根据所述处理顺序依次获取每个子图像对应的用户位姿，并根据每个子图像对应的用户位姿对每个子图像进行偏移处理，得到每个子图像对应的目标子图像。

可选的，所述将所述待渲染图像分成多子图像包括：按照预设图像划分方式将所述待渲染图像分成预设数量的子图像，所述预设图像划分方式指示以预设方向对所述待渲染图像进行顺序分割。

可选的，如果T-2T/N≥T/2，则第二预设时间为T-2T/N；如果T-2T/N＜T/2，则第二预设时间为T/2，N为所述待渲染图像分成的子图像的总数量。

另一方面，本申请提供一种图像处理装置，包括：

获取单元，用于在第一次响应垂直同步信号过程中获取待渲染图像，将所述待渲染图像分成多个子图像，所述第一次响应垂直同步信号是指在一个图像处理周期中第一次响应垂直同步信号，所述图像处理周期为从获取所述待渲染图像至输出子图像对应的内容；

信号响应单元，用于在所述图像处理周期中，每间隔第一预设时间响应一次垂直同步信号；

处理单元，用于在第一次响应所述垂直同步信号之后经过第二预设时间，获取所述多个子图像中每个子图像对应的用户位姿，并根据每个子图像对应的用户位姿对每个子图像进行偏移处理，得到每个子图像对应的目标子图像，所述第二预设时间与所述第一预设时间的关系是：T/2≤t<T，t为所述第二预设时间，T为所述第一预设时间；

输出单元，用于在至少完成对所述多个子图像中的第一个子图像的偏移处理且在第二次响应所述垂直同步信号时，依次输出每个子图像对应的目标子图像。

可选的，所述处理单元，用于在第一次响应所述垂直同步信号之后经过第二预设时间，确定所述子图像对应的处理时刻；如果当前时刻与所述子图像对应的处理时刻匹配，获取当前时刻下的用户位姿，并根据所述用户位姿对所述子图像进行偏移处理，得到所述子图像对应的目标子图像；

或者

所述处理单元，用于确定所有子图像之间的处理顺序；在第一次响应所述垂直同步信号之后经过第二预设时间，根据所述处理顺序依次获取每个子图像对应的用户位姿，并根据每个子图像对应的用户位姿对每个子图像进行偏移处理，得到每个子图像对应的目标子图像。

可选的，所述获取单元，用于按照预设图像划分方式将所述待渲染图像分成预设数量的子图像，所述预设图像划分方式指示以预设方向对所述待渲染图像进行顺序分割。

可选的，如果T-2T/N≥T/2，则第二预设时间为T-2T/N；如果T-2T/N＜T/2，则第二预设时间为T/2，N为所述待渲染图像分成的子图像的总数量。

再一方面，本申请提供一种电子设备，包括：处理器和显示屏；

所述处理器，用于在第一次响应垂直同步信号过程中获取待渲染图像，将所述待渲染图像分成多个子图像；在所述图像处理周期中，每间隔第一预设时间响应一次垂直同步信号；在第一次响应所述垂直同步信号之后经过第二预设时间，获取所述多个子图像中每个子图像对应的用户位姿，并根据每个子图像对应的用户位姿对每个子图像进行偏移处理，得到每个子图像对应的目标子图像，所述第一次响应垂直同步信号是指在一个图像处理周期中第一次响应垂直同步信号，所述图像处理周期为从获取所述待渲染图像至输出子图像对应的内容，所述第二预设时间与所述第一预设时间的关系是：T/2≤t<T，t为所述第二预设时间，T为所述第一预设时间；在至少完成对所述多个子图像中的第一个子图像的偏移处理且在第二次响应所述垂直同步信号时，依次向所述显示屏输出每个子图像对应的目标子图像。

再一方面，本申请提供一种存储介质，存储介质中存储有计算机程序代码，计算机程序代码执行时实现上述图像处理方法。

上述图像处理方法及装置，在第一次响应垂直同步信号过程中获取待渲染图像，将待渲染图像分成多个子图像，在图像处理周期中，每间隔第一预设时间响应一次垂直同步信号；在第一次响应垂直同步信号之后经过第二预设时间，获取多个子图像中每个子图像对应的用户位姿，并根据每个子图像对应的用户位姿对每个子图像进行偏移处理，得到每个子图像对应的目标子图像，在至少完成对多个子图像中的第一子图像的偏移处理且在第二次响应垂直同步信号时，依次输出每个子图像对应的目标子图像。因为在对待渲染图像进行偏移处理过程中，可根据待渲染图像中的每个子图像对应的用户位姿对子图像进行偏移处理，使得渲染过程可以每个子图像对应的用户位姿为参照，从而使得目标子图像的画面贴近真实值，在至少完成第一个子图像的偏移处理后输出目标子图像，加快目标子图像的输出显示，从而减少显示时延，缩短从处理子图像至输出目标子图像的预测时间。

第一预设时间和第二预设时间之间的关系为：T/2≤t<T，t为第二预设时间，T为第一预设时间，第一预设时间是响应垂直同步信号的间隔时间，通过限定第一预设时间和第二预设时间之间的关系使得子图像处理与响应垂直同步信号之间间隔的时间缩短，加快对子图像的处理，使得得到第一个子图像对应的目标子图像的时间提前，从而可以加快目标子图像的输出显示。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本申请实施例提供的一种图像处理方法的流程图；

图2是目前图像处理方法对应的偏移处理周期的示意图；

图3是本申请实施例提供的图像处理方法对应的偏移处理周期的示意图；

图4是本申请实施例提供的一种图像处理装置的结构示意图。

具体实施方式

为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

请参见图1，其示出了本申请实施例提供的一种图像处理方法的流程图，可以包括以下步骤：

101：在第一次响应垂直同步信号过程中获取待渲染图像，将待渲染图像分成多个子图像。

目前AR和VR等技术在显示图像过程中会出现用户位姿变化速度过快导致图像无法跟随位姿变化，针对这一问题在用户位姿变化过程中可以生成并显示一个中间图像，以在用户位姿变化过程中输出一个中间图像来减少画面抖动，生成并显示中间图像的过程则是得到待渲染图像显示的过程。相对应得到待渲染图像的时机可以是在第一次响应垂直同步信号过程中。其中第一次响应垂直同步信号是指在一个图像处理周期中第一次响应垂直同步信号，图像处理周期为从获取待渲染图像至输出子图像对应的内容。

在第一次响应垂直同步信号过程中可以生成一个待渲染图像，以输出显示与待渲染图像匹配的内容，相对于目前在AR和VR等技术显示图像的不同之处在于：本实施例在获取待渲染图像之后，将待渲染图像分割成多个子图像，以每个子图像为单位，对每个子图像进行处理。

其中，将待渲染图像分割成多个子图像的一种方式可以是：将待渲染图像随机进行分割，得到待渲染图像对应的多个子图像，在随机分割过程中，多个子图像的尺寸可以相同也可以不同。

将待渲染图像分割成多个子图像的另一种方式可以是：按照预设图像划分方式将待渲染图像分成预设数量的子图像，预设图像划分方式指示以预设方向对待渲染图像进行顺序分割。

预设方向可以根据待渲染图像显示过程中的显示方向匹配，显示方向用于指示待渲染图像从第一方向向第二方向延伸，以将待渲染图像中的内容全部显示，例如从上至下延伸显示或者从左至右延伸显示，则预设方向可以与显示方向相同，例如显示方向为从上至下延伸显示，则预设方向时从上至下对待渲染图像进行分割，以得到待渲染图像对应的多个子图像。之所以采用与显示方向相同的预设方向进行分割的原因是：

在得到待渲染图像对应的多个子图像之后，以每个子图像为单位对每个子图像进行偏移处理，在进行偏移处理过程中会依次得到每个子图像对应的目标子图像，输出目标子图像进行显示，因为子图像是对待渲染图像以显示方向进行分割，能够按照显示方向依次处理组成待渲染图像的各个子图像，从而能够依次获取到待渲染图像按照显示方向逐渐显示的各部分内容，这样输出目标子图像来显示的过程符合待渲染图像在显示区域中的显示过程。

例如显示方向为从左至右延伸显示，则按照从左至右分割待渲染图像，在进行偏移处理过程中可最先得到待渲染图像开始显示的最左侧内容进行显示，实现依据显示方向来显示内容。上述预设数量的取值可根据实际应用而定，本实施例不进行限定。

102：在图像处理周期中，每间隔第一预设时间响应一次垂直同步信号。垂直同步信号是为了使得内容显示同步，在获取到待渲染图像之后可以响应一次垂直同步信号，以保证内容同步显示，第一预设时间是两次垂直同步信号的间隔时间，对于第一预设时间的取值本实施例不进行限定，在一个图像处理周期中可以响应两次垂直同步信号。

103：在第一次响应垂直同步信号之后经过第二预设时间，获取多个子图像中每个子图像对应的用户位姿，并根据每个子图像对应的用户位姿对每个子图像进行偏移处理，得到每个子图像对应的目标子图像。

也就是说，在得到待渲染图像对应的多个子图像后，以每个子图像为单位对每个子图像进行偏移处理。在对每个子图像进行偏移处理过程中，参照的用户位姿是偏移处理所处当前时刻的用户位姿，从而可以以偏移处理过程中实际的用户位姿为参照，从而使得目标子图像贴近真实值。

在本实施例中，获取每个子图像对应的用户位姿以对每个子图像进行偏移处理的过程包括但不限于如下方式：

一种方式是，在第一次响应垂直同步信号之后经过第二预设时间，确定子图像对应的处理时刻；如果当前时刻与子图像对应的处理时刻匹配，获取当前时刻下的用户位姿，并根据用户位姿对子图像进行偏移处理，得到子图像对应的目标子图像。

对于所有子图像中的每个子图像来说，每个子图像都具有各自进行偏移处理的时间，以依次对子图像进行偏移处理，例如每个子图像都具有处理时刻，处理时刻用于指示对子图像进行偏移处理的开始时刻，随着时间推移，如果当前时刻为一个子图像的处理时刻，获取当前时刻下的用户位姿(即当前时刻实际的用户位姿)，根据当前时刻下的用户位姿对处理时刻为当前时刻的子图像进行偏移处理，从而能够以子图像所在处理时刻实际的用户位姿对其进行偏移处理，提高目标子图像的真实性。

另一种方式是，确定所有子图像之间的处理顺序；在第一次响应垂直同步信号之后经过第二预设时间，根据处理顺序依次获取每个子图像对应的用户位姿，并根据每个子图像对应的用户位姿对每个子图像进行偏移处理，得到每个子图像对应的目标子图像。

同样的，在对每个子图像进行偏移处理过程中，可以以每个子图像处理时实际的用户位姿为参照，根据处理顺序依次对每个子图像进行偏移处理。相对于上一种方式来说，根据处理顺序进行偏移处理过程中，以响应垂直同步信号的时刻开始计算，经过第二预设时间开始对子图像进行处理，每完成处理一个子图像，根据处理顺序选取下一个要处理的子图像进行偏移处理，而上一种方式以处理时刻决定是否对子图像进行处理，若一个子图像完成处理但没有达到其他子图像的处理时刻，则会进行等待直至当前时刻为一个子图像的处理时刻，由此这种以处理时刻对子图像进行处理的方式可能会延长子图像的处理时间，降低处理效率。

104：在至少完成对多个子图像中的第一个子图像的偏移处理且在第二次响应垂直同步信号时，依次输出每个子图像对应的目标子图像，实现在下一次响应垂直同步信号前输出目标子图像。

在本实施例中，第二预设时间的取值范围可以是但不限于是[T/2，T)，则T/2表示在第一次响应垂直同步信号的时间之后的半个周期，T表示在第一次响应垂直同步信号的时间之后的一个周期，且在T第二次响应垂直同步信号，即第一预设时间为T，第二预设时间和第一预设时间的关系为T/2≤t<T，t为第二预设时间。

在待渲染图像分成不同数量的子图像情况下，第二预设时间可能会有所不同，待渲染图像分成的子图像的总数量为N，相对应的如果T-2T/N≥T/2，则第二预设时间为T-2T/N；如果T-2T/N＜T/2，则第二预设时间为T/2。

例如如果N＝2，T-2T/N＝0，满足T-2T/N＜T/2，则第二预设时间为T/2，即在第一次响应垂直同步信号后经过半个周期T/2对子图像进行偏移处理，目标子图像的输出是在T时输出，那么在待渲染图像分成2个子图像时，从开始进行偏移处理到输出目标子图像之间间隔的预测时间为T/2。虽然将待渲染图像分成2个子图像可以减少处理的子图像的数量，但是从开始偏移处理到输出目标子图像之间间隔T/2，使得在进行偏移处理过程中利用的用户位姿与输出目标子图像时的用户位姿之间的差异较大，导致准确度降低且2个子图像之间的图像间隔也会增大，影响输出的连续性。

如果N>2，例如N＝4、6、8……等大于2的偶数(对于待渲染图像来说，分割过程中通常会进行偶数分割)，T-2T/N≥T/2，则第二预设时间为T-2T/N，在第一次响应垂直同步信号后经过半个周期T-2T/N对子图像进行偏移处理，也可以视为是在第二次响应垂直同步信号前2T/N对子图像进行偏移处理，同样目标子图像的输出是在T时输出，那么在待渲染图像分成的子图像数量大于2时，从开始进行偏移处理到输出目标子图像之间间隔的预测时间为2T/N。虽然待渲染图像分成的子图像数量大于2时会增大处理的子图像的数量，但是从开始偏移处理到输出目标子图像之间间隔2T/N，使得在进行偏移处理过程中利用的用户位姿与输出目标子图像时的用户位姿之间的差异缩小，提高准确度，且多个子图像之间的图像间隔也会增大，降低对输出连续性的影响。需要注意一点是，N的取值不能无限增大，因为会出现子图像还没有完成偏移处理得到目标子图像就已经达到目标子图像的输出时刻，所以N的取值要保证在输出目标子图像之前能够完成对应的子图像的偏移处理过程。

上述图像处理方法，在第一次响应垂直同步信号过程中获取待渲染图像，将待渲染图像分成多个子图像，在图像处理周期中，每间隔第一预设时间响应一次垂直同步信号；在第一次响应垂直同步信号之后经过第二预设时间，获取多个子图像中每个子图像对应的用户位姿，并根据每个子图像对应的用户位姿对每个子图像进行偏移处理，得到每个子图像对应的目标子图像，在至少完成对多个子图像中的第一子图像的偏移处理且在第二次响应垂直同步信号时，依次输出每个子图像对应的目标子图像。因为在对待渲染图像进行偏移处理过程中，可根据待渲染图像中的每个子图像对应的用户位姿对子图像进行偏移处理，使得渲染过程可以每个子图像对应的用户位姿为参照，从而使得目标子图像的画面贴近真实值，在至少完成第一个子图像的偏移处理后输出目标子图像，加快目标子图像的输出显示，从而减少显示时延，缩短从处理子图像至输出目标子图像的预测时间。

第一预设时间和第二预设时间之间的关系为：T/2≤t<T，t为第二预设时间，T为第一预设时间，第一预设时间是响应垂直同步信号的间隔时间，通过限定第一预设时间和第二预设时间之间的关系使得子图像处理与响应垂直同步信号之间间隔的时间缩短，加快对子图像的处理，使得得到第一个子图像对应的目标子图像的时间提前，从而可以加快目标子图像的输出显示。

下面以对待渲染图像的一个图像处理周期为例进行说明，其中目前待渲染图像的一个图像处理周期对应的处理过程如图2所示，图2从渲染位姿得到待渲染图像至输出偏移处理后的目标图像为例进行说明，一个图像处理周期包括：获取待渲染图像阶段(rendering)、偏移处理阶段(time warp)和输出显示阶段(display)，其中获取待渲染图像阶段为图像处理周期的第一阶段，在图像处理周期的开始时刻获取到待渲染图像；在从获取到待渲染图像之后经过T/2响应一次垂直同步信号(vsync)，从获取到待渲染图像间隔一个周期T(也是响应一次垂直同步信号后经过半T/2)开始对待渲染图像进行偏移处理，然后从偏移处理间隔T/2响应一次垂直同步信号并输出显示待渲染图像偏移处理后得到的目标图像，由此从获取到待渲染图像到输出显示需要经过3T/2，并且从偏移处理到输出显示需要经过T/2，一个图像处理周期为5T/2。

图3示出了本实施例提供的待渲染图像的一个图像处理周期，同样包括：获取待渲染图像阶段(rendering)、偏移处理阶段(time warp)和输出显示阶段(display)，其中获取待渲染图像阶段为图像处理周期的第一阶段，在图像处理周期的开始时刻第一次响应垂直同步信号，在第一次响应垂直同步信号过程中获取到待渲染图像；从第一次响应垂直同步信号后经过第二预设时间，如图3所示经过大概(T/2+3T/5)开始对待渲染图像对应的每个子图像进行偏移处理，其中对待渲染图像的分割可以在获取待渲染图像阶段和偏移处理阶段中的任一阶段，如果在偏移处理阶段则可以在响应垂直同步信号之后开始进行分割以及对分割后得到的每个子图像进行偏移处理。

在至少完成第一个子图像和第二个子图像的偏移处理后，将第一个子图像和第二个子图像对应的目标子图像输出显示，如在第二次响应垂直同步信号时(如图3中在第一次响应垂直同步信号后经过T)输出显示目标子图像，由此从获取到待渲染图像到输出显示需要经过T，并且从偏移处理到输出显示(即预测时间)大概为2T/5，小于图2中的T/2，一个图像处理周期为2T，相对于目前对待渲染图像的偏移处理来说极大缩短时间且缩短预测时间。

并且本实施例将待渲染图像分割成不同数量的子图像，然后对每种分割进行试验发现在刷新率为60hz(赫兹)的电子设备中，子图像的数量为10时效果最佳，因此本实施例可基于电子设备的刷新率确定子图像的数量，当然还可以基于电子设备的其他参数确定子图像的数量，本实施例不再一一阐述。

与上述方法实施例相对应，本申请实施例还提供一种图像处理装置，其结构如图4所示，可以包括：获取单元10、信号响应单元20、处理单元30和输出单元40。

获取单元10，用于在第一次响应垂直同步信号过程中获取待渲染图像，将待渲染图像分成多个子图像，第一次响应垂直同步信号是指在一个图像处理周期中第一次响应垂直同步信号，图像处理周期为从获取待渲染图像至输出子图像对应的内容。

其中，将待渲染图像分割成多个子图像的一种方式可以是：将待渲染图像随机进行分割，得到待渲染图像对应的多个子图像，在随机分割过程中，多个子图像的尺寸可以相同也可以不同；将待渲染图像分割成多个子图像的另一种方式可以是：按照预设图像划分方式将待渲染图像分成预设数量的子图像，预设图像划分方式指示以预设方向对待渲染图像进行顺序分割，具体请参见上述方法实施例中的相关说明，对此本实施例不再阐述。

信号响应单元20，用于在图像处理周期中，每间隔第一预设时间响应一次垂直同步信号。垂直同步信号是为了使得内容显示同步，在获取到待渲染图像之后可以响应一次垂直同步信号，以保证内容同步显示，第一预设时间是两次垂直同步信号的间隔时间，对于第一预设时间的取值本实施例不进行限定。

处理单元30，用于在第一次响应垂直同步信号之后经过第二预设时间，获取多个子图像中每个子图像对应的用户位姿，并根据每个子图像对应的用户位姿对每个子图像进行偏移处理，得到每个子图像对应的目标子图像。

也就是说，在得到待渲染图像对应的多个子图像后，以每个子图像为单位对每个子图像进行偏移处理。在对每个子图像进行偏移处理过程中，参照的用户位姿是偏移处理所处当前时刻的用户位姿，从而可以以偏移处理过程中实际的用户位姿为参照，从而使得目标子图像贴近真实值。

在本实施例中，获取每个子图像对应的用户位姿以对每个子图像进行偏移处理的过程包括但不限于如下方式：

一种方式是，在第一次响应垂直同步信号之后经过第二预设时间，确定子图像对应的处理时刻；如果当前时刻与子图像对应的处理时刻匹配，获取当前时刻下的用户位姿，并根据用户位姿对子图像进行偏移处理，得到子图像对应的目标子图像。

对于所有子图像中的每个子图像来说，每个子图像都具有各自进行偏移处理的时间，以依次对子图像进行偏移处理，例如每个子图像都具有处理时刻，处理时刻用于指示对子图像进行偏移处理的开始时刻，随着时间推移，如果当前时刻为一个子图像的处理时刻，获取当前时刻下的用户位姿(即当前时刻实际的用户位姿)，根据当前时刻下的用户位姿对处理时刻为当前时刻的子图像进行偏移处理，从而能够以子图像所在处理时刻实际的用户位姿对其进行偏移处理，提高目标子图像的真实性。

另一种方式是，确定所有子图像之间的处理顺序；在第一次响应垂直同步信号之后经过第二预设时间，根据处理顺序依次获取每个子图像对应的用户位姿，并根据每个子图像对应的用户位姿对每个子图像进行偏移处理，得到每个子图像对应的目标子图像。

同样的，在对每个子图像进行偏移处理过程中，可以以每个子图像处理时实际的用户位姿为参照，根据处理顺序依次对每个子图像进行偏移处理。相对于上一种方式来说，根据处理顺序进行偏移处理过程中，以响应垂直同步信号的时刻开始计算，经过第二预设时间开始对子图像进行处理，每完成处理一个子图像，根据处理顺序选取下一个要处理的子图像进行偏移处理，而上一种方式以处理时刻决定是否对子图像进行处理，若一个子图像完成处理但没有达到其他子图像的处理时刻，则会进行等待直至当前时刻为一个子图像的处理时刻，由此这种以处理时刻对子图像进行处理的方式可能会延长子图像的处理时间，降低处理效率。

在本实施例中，第二预设时间的取值范围可以是但不限于是[T/2，T)，则T/2表示在第一次响应垂直同步信号的时间之后的半个周期，T表示在第一次响应垂直同步信号的时间之后的一个周期，且在T第二次响应垂直同步信号，即第一预设时间为T，第二预设时间和第一预设时间的关系为T/2≤t<T，t为第二预设时间。

在待渲染图像分成不同数量的子图像情况下，第二预设时间可能会有所不同，待渲染图像分成的子图像的总数量为N，相对应的如果T-2T/N≥T/2，则第二预设时间为T-2T/N；如果T-2T/N＜T/2，则第二预设时间为T/2，具体请参见上述实施例中的描述。

输出单元40，用于在至少完成对多个子图像中的第一个子图像的偏移处理且在第二次响应垂直同步信号时，依次输出每个子图像对应的目标子图像。

上述图像处理装置，在第一次响应垂直同步信号过程中获取待渲染图像，将待渲染图像分成多个子图像，在图像处理周期中，每间隔第一预设时间响应一次垂直同步信号；在第一次响应垂直同步信号之后经过第二预设时间，获取多个子图像中每个子图像对应的用户位姿，并根据每个子图像对应的用户位姿对每个子图像进行偏移处理，得到每个子图像对应的目标子图像，在至少完成对多个子图像中的第一子图像的偏移处理且在第二次响应垂直同步信号时，依次输出每个子图像对应的目标子图像。因为在对待渲染图像进行偏移处理过程中，可根据待渲染图像中的每个子图像对应的用户位姿对子图像进行偏移处理，使得渲染过程可以每个子图像对应的用户位姿为参照，从而使得目标子图像的画面贴近真实值，在至少完成第一个子图像的偏移处理后输出目标子图像，加快目标子图像的输出显示，从而减少显示时延，缩短从处理子图像至输出目标子图像的预测时间。

第一预设时间和第二预设时间之间的关系为：T/2≤t<T，t为第二预设时间，T为第一预设时间，第一预设时间是响应垂直同步信号的间隔时间，通过限定第一预设时间和第二预设时间之间的关系使得子图像处理与响应垂直同步信号之间间隔的时间缩短，加快对子图像的处理，使得得到第一个子图像对应的目标子图像的时间提前，从而可以加快目标子图像的输出显示。

本申请实施例还提供一种电子设备，包括：处理器和显示屏。

处理器，用于在第一次响应垂直同步信号过程中获取待渲染图像，将待渲染图像分成多个子图像；在图像处理周期中，每间隔第一预设时间响应一次垂直同步信号；在第一次响应垂直同步信号之后经过第二预设时间，获取多个子图像中每个子图像对应的用户位姿，并根据每个子图像对应的用户位姿对每个子图像进行偏移处理，得到每个子图像对应的目标子图像，第一次响应垂直同步信号是指在一个图像处理周期中第一次响应垂直同步信号，图像处理周期为从获取待渲染图像至输出子图像对应的内容，第二预设时间与第一预设时间的关系是：T/2≤t<T，t为第二预设时间，T为第一预设时间；在至少完成对多个子图像中的第一个子图像的偏移处理且在第二次响应垂直同步信号时，依次向显示屏输出每个子图像对应的目标子图像，以在显示屏中显示每个目标子图像，对于处理器的执行过程请参见上述方法实施例，此处不再赘述。

本申请实施例还提供一种存储介质，存储介质中存储有计算机程序代码，计算机程序代码执行时实现上述图像处理方法。

需要说明的是，本说明书中的各个实施例可以采用递进的方式描述、本说明书中各实施例中记载的特征可以相互替换或者组合，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。对于装置类实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。

最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

对所公开的实施例的上述说明，使本领域技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下，在其它实施例中实现。因此，本申请将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

以上所述仅是本申请的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本申请的保护范围。

Claims (7)

1.一种图像处理方法，包括：

在第一次响应垂直同步信号过程中获取待渲染图像，将所述待渲染图像分成多个子图像，所述第一次响应垂直同步信号是指在一个图像处理周期中第一次响应垂直同步信号，所述图像处理周期为从获取所述待渲染图像至输出子图像对应的内容；

在所述图像处理周期中，每间隔第一预设时间响应一次垂直同步信号；

在第一次响应所述垂直同步信号之后经过第二预设时间，获取所述多个子图像中每个子图像对应的用户位姿，并根据每个子图像对应的用户位姿对每个子图像进行偏移处理，得到每个子图像对应的目标子图像，所述第二预设时间与所述第一预设时间的关系是：T/2

t<T，t为所述第二预设时间，T为所述第一预设时间；

在至少完成对所述多个子图像中的第一个子图像的偏移处理且在第二次响应所述垂直同步信号时，依次输出每个子图像对应的目标子图像；

其中，所述在第一次响应所述垂直同步信号之后经过第二预设时间，获取所述多个子图像中每个子图像对应的用户位姿，并根据每个子图像对应的用户位姿对每个子图像进行偏移处理，得到每个子图像对应的目标子图像包括：

在第一次响应所述垂直同步信号之后经过第二预设时间，确定所述子图像对应的处理时刻；

如果当前时刻与所述子图像对应的处理时刻匹配，获取当前时刻下的用户位姿，并根据所述用户位姿对所述子图像进行偏移处理，得到所述子图像对应的目标子图像；

所述将所述待渲染图像分成多个子图像包括：按照预设图像划分方式将所述待渲染图像分成预设数量的子图像，所述预设图像划分方式指示以预设方向对所述待渲染图像进行顺序分割，所述预设方向与所述待渲染图像显示过程中的显示方向匹配，所述显示方向用于指示所述待渲染图像从第一方向向第二方向延伸，以将所述待渲染图像中的内容全部显示。

2.根据权利要求1所述的方法，所述在第一次响应所述垂直同步信号之后经过第二预设时间，获取所述多个子图像中每个子图像对应的用户位姿，并根据每个子图像对应的用户位姿对每个子图像进行偏移处理，得到每个子图像对应的目标子图像包括：

确定所有子图像之间的处理顺序；

在第一次响应所述垂直同步信号之后经过第二预设时间，根据所述处理顺序依次获取每个子图像对应的用户位姿，并根据每个子图像对应的用户位姿对每个子图像进行偏移处理，得到每个子图像对应的目标子图像。

3.根据权利要求1至2中任意一项所述的方法，如果

，则第二预设时间为

；如果

，则第二预设时间为

，N为所述待渲染图像分成的子图像的总数量。

4.一种图像处理装置，包括：

获取单元，用于在第一次响应垂直同步信号过程中获取待渲染图像，将所述待渲染图像分成多个子图像，所述第一次响应垂直同步信号是指在一个图像处理周期中第一次响应垂直同步信号，所述图像处理周期为从获取所述待渲染图像至输出子图像对应的内容；

信号响应单元，用于在所述图像处理周期中，每间隔第一预设时间响应一次垂直同步信号；

处理单元，用于在第一次响应所述垂直同步信号之后经过第二预设时间，获取所述多个子图像中每个子图像对应的用户位姿，并根据每个子图像对应的用户位姿对每个子图像进行偏移处理，得到每个子图像对应的目标子图像，所述第二预设时间与所述第一预设时间的关系是：T/2

t<T，t为所述第二预设时间，T为所述第一预设时间；

输出单元，用于在至少完成对所述多个子图像中的第一个子图像的偏移处理且在第二次响应所述垂直同步信号时，依次输出每个子图像对应的目标子图像；

其中，所述处理单元，具体用于在第一次响应所述垂直同步信号之后经过第二预设时间，确定所述子图像对应的处理时刻；如果当前时刻与所述子图像对应的处理时刻匹配，获取当前时刻下的用户位姿，并根据所述用户位姿对所述子图像进行偏移处理，得到所述子图像对应的目标子图像；

所述获取单元，具体用于按照预设图像划分方式将所述待渲染图像分成预设数量的子图像，所述预设图像划分方式指示以预设方向对所述待渲染图像进行顺序分割，所述预设方向与所述待渲染图像显示过程中的显示方向匹配，所述显示方向用于指示所述待渲染图像从第一方向向第二方向延伸，以将所述待渲染图像中的内容全部显示。

5.根据权利要求4所述的装置，所述处理单元，还用于确定所有子图像之间的处理顺序；在第一次响应所述垂直同步信号之后经过第二预设时间，根据所述处理顺序依次获取每个子图像对应的用户位姿，并根据每个子图像对应的用户位姿对每个子图像进行偏移处理，得到每个子图像对应的目标子图像。

6.根据权利要求4或5所述的装置，如果

，则第二预设时间为

；如果

，则第二预设时间为

，N为所述待渲染图像分成的子图像的总数量。

7.一种电子设备，包括：处理器和显示屏；

所述处理器，用于在第一次响应垂直同步信号过程中获取待渲染图像，将所述待渲染图像分成多个子图像；所述第一次响应垂直同步信号是指在一个图像处理周期中第一次响应垂直同步信号，所述图像处理周期为从获取所述待渲染图像至输出子图像对应的内容，在所述图像处理周期中，每间隔第一预设时间响应一次垂直同步信号；在第一次响应所述垂直同步信号之后经过第二预设时间，获取所述多个子图像中每个子图像对应的用户位姿，并根据每个子图像对应的用户位姿对每个子图像进行偏移处理，得到每个子图像对应的目标子图像，所述第二预设时间与所述第一预设时间的关系是：T/2

t<T，t为所述第二预设时间，T为所述第一预设时间；在至少完成对所述多个子图像中的第一个子图像的偏移处理且在第二次响应所述垂直同步信号时，依次向所述显示屏输出每个子图像对应的目标子图像；

其中，所述在第一次响应所述垂直同步信号之后经过第二预设时间，获取所述多个子图像中每个子图像对应的用户位姿，并根据每个子图像对应的用户位姿对每个子图像进行偏移处理，得到每个子图像对应的目标子图像包括：

在第一次响应所述垂直同步信号之后经过第二预设时间，确定所述子图像对应的处理时刻；如果当前时刻与所述子图像对应的处理时刻匹配，获取当前时刻下的用户位姿，并根据所述用户位姿对所述子图像进行偏移处理，得到所述子图像对应的目标子图像；

所述将所述待渲染图像分成多个子图像包括：按照预设图像划分方式将所述待渲染图像分成预设数量的子图像，所述预设图像划分方式指示以预设方向对所述待渲染图像进行顺序分割，所述预设方向与所述待渲染图像显示过程中的显示方向匹配，所述显示方向用于指示所述待渲染图像从第一方向向第二方向延伸，以将所述待渲染图像中的内容全部显示。

Images