CN112995504A - 图像的显示方法及装置、存储介质 - Google Patents

Abstract

本公开是关于一种图像的显示方法及装置、存储介质。该方法包括：获取图像传感器传感预览形成第一图像帧；将所述第一图像帧转换形成第二图像帧，并传输到缓存队列；根据所述缓存队列接收到所述第二图像帧的接收时间，确定所述第二图像帧的送显时间；基于所述送显时间，确定所述第二图像帧的显示时间。通过本公开实施例，能够基于第二图像帧的接收时间，重新确定第二图像帧的送显时间，能够减少因在接收到第二图像帧后直接送显导致的图像预览不流畅的情况，能够提高图像预览的流畅度。

Description

图像的显示方法及装置、存储介质

技术领域

本公开涉及图像显示技术领域，尤其涉及一种图像的显示方法及装置、存储介质。

背景技术

取景器是进行拍照动作前执行预览操作的窗口。在拍照过程中，经常需要使用取景器的预览操作的窗口来预览图像，因此预览图像的流畅度对用户体验的改善至关重要。为了满足用户“所见即所得”的需求，除了要在图像处理过程集成图像处理算法以实现图像处理外，还需要在预览图像过程经过各种预览算法处理，以满足预览图像中用户的人工智能(AI)、美颜、塑形、滤镜等功能。

在预览图像时，由于预览图像受预览算法的执行时间、系统CPU等处理资源、内存状态和图像内容等多方面因素影响，因此容易导致各预览算法的执行时长不同，存在一定波动。尤其在多级预览算法处理之后，波动依次累加，会使得预览图像上报送显的送显时机波动增大，存在图像预览流畅度低的问题。

发明内容

本公开提供一种图像的显示方法及装置、存储介质。

根据本公开实施例的第一方面，提供一种图像的显示方法，包括：

获取图像传感器传感预览形成第一图像帧；

将所述第一图像帧转换形成第二图像帧，并传输到缓存队列；

根据所述缓存队列接收到所述第二图像帧的接收时间，确定所述第二图像帧的送显时间；

基于所述送显时间，确定所述第二图像帧的显示时间。

在一些实施例中，所述缓存队列中缓冲有M个待送显图像帧；所述第二图像帧为所述缓存队列中位于队尾的一个待送显图像帧；

所述根据所述缓存队列接收到所述第二图像帧的接收时间，确定所述第二图像帧的送显时间，包括：

确定所述缓存队列中M个所述待送显图像帧的M个所述接收时间和M个曝光采集时间，其中，M为大于等于2的正整数；

基于所述M个接收时间、所述M个曝光采集时间和预设帧率，确定所述第二图像帧的送显时间。

在一些实施例中，所述缓存队列为先进先出队列；所述第二图像帧位于所述缓存队列的队首；

所述方法还包括：

在所述第二图像帧被送显后，从所述缓存队列中删除位于队首的一个待送显图像帧，并将所述缓存队列中剩余M-1个待送显的图像帧向所述缓存队列的队首移动。

在一些实施例中，所述基于所述M个接收时间、所述M个曝光采集时间和预设帧率，确定所述第二图像帧的送显时间，包括：

基于所述M个曝光采集时间和所述M个接收时间，确定不同图像处理的M个差值；

从所述M个差值中，确定所述第二图像帧对应的差值；

基于所述第二图像帧对应的差值、所述预设帧率和所述M个曝光采集时间中所述第二图像帧的曝光采集时间，确定所述第二图像帧的送显时间。

在一些实施例中，所述从所述M个差值中，确定所述第二图像帧对应的差值，包括：

对所述M个差值进行排序，得到排序后的M个差值；

从所述排序后的M个差值中，按照预设规则选取位于排序中间位置的差值；

将所述位于排序中间位置的差值，作为所述第二图像帧对应的差值。

在一些实施例中，所述基于所述第二图像帧对应的差值、所述预设帧率和所述M个曝光采集时间中所述第二图像帧的曝光采集时间，确定所述第二图像帧的送显时间，包括：

基于所述预设帧率，获取相邻帧的间隔时间；

对所述第二图像帧对应的差值、所述间隔时间和所述第二图像帧的曝光采集时间进行求和，将求和值作为所述第二图像帧的送显时间。

在一些实施例中，所述基于所述送显时间，确定所述第二图像帧的显示时间，包括：

当所述送显时间，比预设显示时间晚时，将所述预设显示时间作为所述第二图像帧的显示时间；

当所述送显时间，早于或者等于所述预设显示时间时，将所述送显时间作为所述第二图像帧的显示时间。

根据本公开实施例的第二方面，提供一种调整亮度的装置，所述装置包括：

获取模块，配置为获取图像传感器传感预览形成第一图像帧；

形成模块，配置为将所述第一图像帧转换形成第二图像帧，并传输到缓存队列；

第一送显确定模块，配置为根据所述缓存队列接收到所述第二图像帧的接收时间，确定所述第二图像帧的送显时间；

显示时间确定模块，配置为基于所述送显时间，确定所述第二图像帧的显示时间。

在一些实施例中，所述缓存队列中缓冲有M个待送显图像帧；所述第二图像帧为所述缓存队列中位于队尾的一个待送显图像帧；

所述第一送显确定模块，包括：

队列时间确定模块，配置为确定所述缓存队列中M个所述待送显图像帧的M个所述接收时间和M个曝光采集时间，其中，M为大于等于2的正整数；

第二送显确定模块，配置为基于所述M个接收时间、所述M个曝光采集时间和预设帧率，确定所述第二图像帧的送显时间。

在一些实施例中，所述缓存队列为先进先出队列；

所述装置还包括：

移动模块，配置为在所述第二图像帧被送显后，从所述缓存队列中删除位于队首的一个待送显图像帧，并将所述缓存队列中剩余M-1个待送显的图像帧向所述缓存队列的队首移动。

在一些实施例中，所述第二送显确定模块，包括：

第一差值确定模块，配置为基于所述M个曝光采集时间和所述M个接收时间，确定不同图像处理的M个差值；

第二差值确定模块，配置为从所述M个差值中，确定所述第二图像帧对应的差值；

第三送显确定模块，配置为基于所述第二图像帧对应的差值、所述预设帧率和所述M个曝光采集时间中所述第二图像帧的曝光采集时间，确定所述第二图像帧的送显时间。

在一些实施例中，所述第二差值确定模块，还配置为对所述M个差值进行排序，得到排序后的M个差值；从所述排序后的M个差值中，按照预设规则选取位于排序中间位置的差值；将所述位于排序中间位置的差值，作为所述第二图像帧对应的差值。

在一些实施例中，所述第三送显确定模块，还配置为基于所述预设帧率，获取相邻帧的间隔时间；对所述第二图像帧对应的差值、所述间隔时间和所述第二图像帧的曝光采集时间进行求和，将求和值作为所述第二图像帧的送显时间。

在一些实施例中，所述基于所述送显时间，确定所述第二图像帧的显示时间，包括：

当所述送显时间，比预设显示时间晚时，将所述预设显示时间作为所述第二图像帧的显示时间；

当所述送显时间，早于或者等于所述预设显示时间时，将所述送显时间作为所述第二图像帧的显示时间。

根据本公开实施例的第三方面，提供一种图像的显示装置，所述装置至少包括：处理器和用于存储能够在所述处理器上运行的可执行指令的存储器，其中：

处理器用于运行所述可执行指令时，所述可执行指令执行上述第一方面中提供的图像的显示方法中的步骤。

根据本公开实施例的第四方面，提供一种非临时性计算机可读存储介质，所述计算机可读存储介质中存储有计算机可执行指令，该计算机可执行指令被处理器执行时实现如上述第一方面中提供的图像的显示方法。

本公开的实施例提供的技术方案可以包括以下有益效果：

本公开实施例提出在第一图像形成第二图像帧后，根据缓存队列接收到第二图像帧的接收时间，确定第二图像帧的送显时间，并基于送显时间，确定第二图像帧的显示时间。也就是说，本公开实施例不是在接收到第二图像帧时立即送显，而是会基于第二图像帧的接收时间重新确定第二图像帧的送显时间，能够减少因接收到第二图像帧时间不同且直接送显导致的图像预览不流畅的情况，能够提高图像预览的流畅度；

同时，相对于因形成第二图像帧的影响因数多导致的第二图像帧接收时间不容易稳定控制的情况，本公开实施例能够直接基于第二图像帧的接收时间重新确定送显时间，使得送显时间的确定影响因数小，能够更好的确定送显时间。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本发明的实施例，并与说明书一起用于解释本发明的原理。

图1是本公开实施例示出的一种图像的显示方法流程图一。

图2是本公开实施例示出的现有图像帧预览显示的位置示意图。

图3是本公开实施例示出的一种图像的显示方法流程图二。

图4是本公开实施例示出的一种图像的显示装置图一。

图5是本公开实施例示出的一种图像的显示装置图二。

具体实施方式

这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。

图1是本公开实施例示出的一种图像的显示方法流程图，如图1所示，该图像的显示方法适用于取景器中图像预览场景，例如，通过取景器能够预览在不同拍摄环境下的不同图像。该图像的显示方法包括以下步骤：

S101、获取图像传感器传感预览形成第一图像帧；

S102、将所述第一图像帧转换形成第二图像帧，并传输到缓存队列；

S103、根据所述缓存队列接收到所述第二图像帧的接收时间，确定所述第二图像帧的送显时间；

S104、基于所述送显时间，确定所述第二图像帧的显示时间。

本公开实施例中，可通过具有图像传感器的终端设备执行该图像的显示方法，实现在显示预览图像前重新确定送显时间，使得预览图像能够按照固定的频率进行显示，提升图像预览的流畅度。其中，该终端设备包括可穿戴式电子设备或者移动终端。移动终端包括手机、笔记本或者平板电脑，该可穿戴电子设备包括智能手表或者智能手环，本公开实施例不作限制。

在步骤S101中，在需要拍照时会启动图像传感器。该图像传感器能够基于环境光形成第一图像帧。该图像传感器形成不同的第一图像帧之间的时间间隔是固定。例如，图像传感器以30fps的速率形成第一图像帧。

本公开实施例中，该第一图像帧可为：图像传感器传感成像的原始图像，还未经过图像处理算法进行图像美化或者优化处理的图像。此处的图像美化处理包括：对原始图像中成像的图像内容按照预设标准改变处理；图像优化处理包括：对图像质量指标进行优化处理。典型的图像美化处理包括但不限于：美颜处理、美体处理和/或加滤镜处理。

典型的图像优化处理包括但不限于：去抖动处理和/或去模糊处理。

在步骤S102中，该第一图像帧可经过预览算法处理后形成第二图像帧。该预览算法包括但不限于：图像美化算法和/或图像优化算法。

该预览算法可为一种执行单一功能的单一功能的算法，还可为：同时执行多种功能的多功能算法，(例如，多种功能级联的算法)。该预览算法包括但不限于：美颜算法、AI算法、塑形算法或者滤镜算法。

例如，可基于美颜算法处理第一图像帧后，形成第二图像帧；又例如，可基于滤镜算法和美颜算法级联处理第一图像帧后，形成第二图像帧。

本公开实施例中，在形成第二图像帧后，可将第二图像帧传输至缓存队列，并在第二图像帧的送显时间到来时，从该缓存队列中取出第二图像帧进行送显显示。其中，缓存队列可用于缓冲M个待送显图像帧，该第二图像帧可为待送显的M个图像帧中位于队尾的第M个图像帧，也可以为待送显的M个图像帧中位于队首的第一个图像帧，本公开实施例不作限制。

在步骤S103中，基于不同预览算法形成的第二图像帧所需的时间不同，对应的缓存队列接收到的第二图像帧的接收时间也跟随着不同。

例如，基于美颜算法形成的第二图像帧所需的时间长于，基于滤镜算法形成的第二图像帧所需要的时间；对应的，缓存队列接收到基于美颜算法形成的第二图像帧晚于，缓存队列接收到基于滤波算法形成的第二图像帧所需要的时间。

为了降低因第二图像帧接收时间不同导致的第二图像帧的显示时间不同的情况，因此本公开实施例不是直接在接收到第二图像帧后就直接送显，而是基于第二图像帧的接收时间确定送显时间，再基于送显时间确定第二图像帧的显示时间。如此，能够重新计算第二图像帧的送显时间和显示时间，减少因接收时间不同导致的显示时间出现差异大的情况，能够降低图像预览的波动，提高图像预览的流畅度。

本公开实施例中，根据第二图像帧的接收时间，确定第二图像帧的送显时间，可包括：基于第二图像帧的接收时间是否大于预设接收时间，确定第二图像帧的送显时间；还可包括：基于缓存队列中M个待送显图像帧的M个接收时间，确定第二图像帧的送显时间，本公开实施例不作限制。

在步骤S104中，送显时间不同，对应的第二图像帧的显示不同。该基于送显时间确定第二图像帧的显示时间可包括：基于送显时间和预设送显时间比较，确定第二图像帧的显示时间；还可包括基于送显时间和显示间隔，确定第二图像帧的显示时间，本公开实施例不作限制。

如图2所示，编号1的图像帧和编号2的图像帧处理时长不同，导致编号1的图像帧和编号2的图像帧落在不同的周期内，编号1的图像帧显示了3个周期，而编号2的图像帧显示了2个周期。因此，可以看出编号1的图像帧和编号2的图像帧的曝光采集时长一样，但显示时长不同，进而会使得图像预览发生卡顿或者不流畅的情况，体现为预览画面的忽快忽慢，拖拽感强的现象。

基于此，本公开实施例提出在第一图像形成第二图像帧后，根据缓存队列接收到第二图像帧的接收时间，确定第二图像帧的送显时间，并基于送显时间，确定第二图像帧的显示时间。也就是说，本公开实施例不是在接收到第二图像帧时立即送显，而是会基于第二图像帧的接收时间，重新确定第二图像帧的送显时间，能够减少因接收到第二图像帧时间不同且直接送显导致的图像预览不流畅的情况，能够提高图像预览的流畅度；

同时，相对于因形成第二图像帧的影响因数多导致的第二图像帧接收时间不容易稳定控制的情况，本公开实施例能够直接基于第二图像帧的接收时间重新确定送显时间，使得送显时间的确定影响因数小，能够更好的确定送显时间。

在一些实施例中，所述缓存队列中缓冲有M个待送显图像帧；所述第二图像帧为所述缓存队列中位于队尾的一个待送显图像帧；

所述根据所述缓存队列接收到所述第二图像帧的接收时间，确定所述第二图像帧的送显时间，包括：

确定所述缓存队列中M个所述待送显图像帧的M个所述接收时间和M个曝光采集时间，其中，M为大于等于2的正整数；

基于所述M个接收时间、所述M个曝光采集时间和预设帧率，确定所述第二图像帧的送显时间。

上述缓存队列中缓冲有M个待送显图像帧，该M的取值可依据缓存队列的容量确定。例如，缓存队列的容量越大，对应缓存队列能够缓冲越多的待送显图像帧，进而计算得到送显时间越精确。其中，M可根据实际需求进行设置，该M可取值为6或者7，本公开实施例不作限制。

上述第二图像帧中为M个待送显图像帧中的一个待送显图像帧，且为缓存队列中位于队尾的一个待送显图像帧。

本公开实施例中，在缓存队列接收到第二图像帧后，可以前面依次缓存M-1个待送显图像帧。此时，可以得到缓存队列中M个待送显图像帧的M个接收时间和M个曝光采集时间。

其中，接收时间为缓存队列接收到第二图像帧的时间，曝光采集时间是终端设备上电启动到图像传感器生成图像之间的时间。

本公开实施例中，预设帧率为终端设备的图像传感器每秒输出第一图像帧的频率。例如，预设帧率可为30fps或者60fps，本公开实施例不作限制。

在确定M个接收时间和M个曝光采集时间之后，可以基于M个接收时间、M个曝光采集时间和预设帧率，确定第二图像帧的送显时间。

本公开实施例中，可以基于M个接收时间和M个曝光采集时间确定缓存队列的M个差值，并基于M个差值、间隔时间和第二图像帧的曝光采集时间确定第二图像帧的送显时间；还可以基于M个接收时间和M个曝光采集时间确定缓存队列中第二图像帧的平均处理时间，进而基于第二图像帧的平均处理时间和预设帧率之和能够确定第二图像帧的送显时间。

如此，一方面取缓存队列中的M待送显图像帧的平均处理时间，能够使得送显时间的确定更加精确；另一方面，基于第二图像帧的平均处理时间和预设帧率之和确定第二图像帧的送显时间，能够在屏幕刷新显示之前，使得第二图像帧的送显时间均能够提前准备，有效避免待送显图像帧来得晚的情况，能够提高M个待送显图像帧等间隔送显的可能，进而提高了图像预览的流畅度。

在一些实施例中，所述缓存队列为先进先出队列；

所述方法还包括：

在所述第二图像帧被送显后，从所述缓存队列中删除位于队首的一个待送显图像帧，并将所述缓存队列中剩余M-1个待送显图像帧向所述缓存队列的队首移动。

上述缓存队列为先进先出队列。在先进先出队列中，位于队首的一个待送显图像帧会最先出队列。

本公开实施例中，在第二图像帧被送显后，从缓存队列中删除位于队首的一个待送显图像帧，并将缓存队列中剩余M-1待送显的个图像帧向缓存队列的队首移动。此时，M-1个待送显图像帧中位于缓存队列中第二位置的待送显图像帧移动到队首。

在缓存队列中，当缓存队列中第二位置的待送显图像帧移动到队首后，缓存队列会再接收一个待送显图像帧，并缓存在缓存队列中的队尾的位置，构成一个更新后的缓存队列。该更新的缓存队列同样也缓存了M个待送显图像帧。

在构成一个更新后的缓存队列后，本公开实施例可以基于更新后的缓存队列的M个待送显图像帧的M个接收时间、M个曝光采集时间以及预设帧率，确定更新后的缓存队列中位于队尾的待送显图像帧的送显时间，即位于更新后缓存队列中第M个待送显图像帧的送显时间。依次类推，每送显一个图像帧后，会重新更新缓存队列，并重新确定更新后缓存队列中位于队尾的待送显图像帧的送显时间，直到将图像传感器产生的所有第一图像帧均送显为止。

本公开实施例中，在第二图像帧被送显后，从缓存队列中删除位于队首的一个图像帧，并将缓存队列中剩余M-1待送显的个图像帧向缓存队列的队首移动。如此能够实现对缓存队列中位于队尾的一个待送显图像帧进行依次送显。

在一些实施例中，所述基于所述M个接收时间、所述M个曝光采集时间和预设帧率，确定所述第二图像帧的送显时间，包括：

基于所述M个曝光采集时间和所述M个接收时间，确定不同图像处理的M个差值；

从所述M个差值中，确定所述第二图像帧对应的差值；

基于所述第二图像帧对应的差值、所述预设帧率和所述M个曝光采集时间中所述第二图像帧的曝光采集时间，确定所述第二图像帧的送显时间。

本公开实施例中，每一个待送显图像帧具有一个曝光采集时间和一个接收时间，对应的，基于一个接收时间和一个曝光采集时间之差会得到一个差值，进而基于M个曝光采集时间和M个接收时间能够确定M个差值。

在确定M个差值之后，从M个差值中确定第二图像帧对应的差值。该第二图像帧对应的差值可为M个差值的平均值，还可为M个差值中的一个差值，本公开实施例不作限制。

在确定第二图像帧对应的差值之后，基于第二图像帧对应的差值、预设帧率和M个曝光采集时间中第二图像帧的曝光采集时间，确定第二图像帧的送显时间。

也就是说，本公开实施例确定的第二图像帧的送显时间考虑到了整个缓存队列中M个差值，能够通过比较M个差值确定出最大的差值或者最小的差值，进而在确定第二图像帧的送显时间时，可以通过滤除该最大的差值和最小的差值，来使得最终基于差值确定的送显时间更加精确。

在一些实施例中，所述从所述M个差值中，确定所述第二图像帧对应的差值，包括：

对所述M个差值进行排序，得到排序后的M个差值；

从所述排序后的M个差值中，按照预设规则选取位于排序中间位置的差值；

将所述位于排序中间位置的差值，作为所述第二图像帧对应的差值。

本公开实施例中，对M个差值进行排序，包括：对M个差值进行升序排列；或者，对M个差值进行降序排列。

在得到排序后的M个差值之后，按照预设规则选取位于排序中间位置的差值。其中，可依据M为奇数或者偶数来按照不同的预设规则，选取位于排序中间位置的差值。

在M为奇数时，可采用第一预设规则来选取位于排序中间位置的差值。该第一预设规则可为公式(1)。其中，M为差值的个数，N为排序位置。

N＝(M+1)/2 (1)

例如，当M为7时，可选择排序在位置4对应的差值为第二图像帧对应的差值。

在M为偶数时，可采用第二预设规则来选取位于排序中间位置的差值。该第二预设规则可为公式(2)或者(3)。其中，M为差值的个数，N为排序位置，Floor()为向下取整；Ceil()为向上取整。

例如，当M为8时，采用向下取整可得到选择排序在位置4对应的差值为第二图像帧对应的差值；采用向上取整可得到选择排序在位置5对应的差值为第二图像帧对应的差值。具体选择向上取整或者向下取整，可以根据实际需求进行设置，本公开实施例不作限制。

本公开实施例中，通过将位于排序中间位置的差值，作为第二图像帧对应的差值，能够从M个差值中滤除最大的差值和最小的差值，来使得最终基于差值确定的送显时间更加精确。

在一些实施例中，所述基于所述第二图像帧对应的差值、所述预设帧率和所述M个曝光采集时间中所述第二图像帧的曝光采集时间，确定所述第二图像帧的送显时间，包括：

基于所述预设帧率，获取相邻帧的间隔时间；

对所述第二图像帧对应的差值、所述间隔时间和所述第二图像帧的曝光采集时间进行求和，将求和值作为所述第二图像帧的送显时间。

本公开实施例中，基于预设帧率确定间隔时间，包括：取预设帧率的倒数为间隔时间。

在确定间隔时间之后，可通过公式(4)确定第二图像帧的送显时间T_ret。其中，t_x为第二图像帧的曝光采集时间，Δ_mid为第二图像帧对应的差值，T_diff为时间间隔。

T_ret＝t_x+Δ_mid+T_diff (4)

本公开实施例中，将第二图像帧的送显时间、第二图像帧对应的差值和间隔时间的求和值作为第二图像帧的送显时间，使得第二图像的送显时间能够在屏幕刷新显示前准备好第二图像帧，进而使得第二图像帧能够等间隔的送显，提高了图像预览的流畅性和平滑性。

在一些实施例中，所述基于所述送显时间，确定所述第二图像帧的显示时间，包括：

当所述送显时间，比预设显示时间晚时，将所述预设显示时间作为所述第二图像帧的显示时间；

当所述送显时间，早于或者等于所述预设显示时间时，将所述送显时间作为所述第二图像帧的显示时间。

上述预设显示时间为终端设备上电启动到屏幕刷新显示第二图像帧之间的时间。

本公开实施例中，在送显时间晚于预设显示时间时，直接将预设显示时间为第二图像帧的显示时间，能够使得第二图像帧及时显示，减少了预览图像显示的抖动情况，提高了图像预览的流畅性。

在送显时间早于或者等于预设显示时间时，将送显时间作为第二图像帧的显示时间，能够使得第二图像帧均能够按照计算的送显时间进行显示，使得预览图像之间的间隔时间固定，减少了因第二图像帧接收时间不同对应的显示时间不同导致的预览图像流畅性差的情况，提高了预览流畅性。

为了便于理解本公开实施例，示例如下：

本公开实施例的终端设备具有图像传感器，该图像传感器在终端设备的相机功能打开时被触发，并基于环境光形成第一帧图像。在终端设备的相机功能打开时，可启动异步管理线程来管理帧队列。当图像传感器传感预览形成第一图像帧时，会将第一图像帧经过各种预览算法处理后生成第二图像帧，并发送消息通知管理线程。管理线程在接收到消息通知后，将第二图像帧送入滤波模块(缓存队列)，并进行送显控制。

其中，如图3所示，以M为7为例，滤波模块处理第二图像帧实现送显控制的过程包括以下步骤：

S201、获取7个待送显图像帧的7个接收时间和7个曝光采集时间；

S202、基于接收时间与曝光采集时间之差，计算7个待送显图像帧的每一个待送显图像帧的差值；

S203、从7个待送显图像帧的差值中，确定第二图像帧对应的差值；

S204、基于第二图像帧对应的差值、时间间隔和第二图像帧的曝光采集时间，确定第二图像帧的送显时间；

S205、在第二图像帧被送显后，从缓存队列中删除位于队首的一个待送显图像帧，并将缓存队列中剩余M-1个待送显图像帧向缓存队列的队首移动，构成一个更新的缓存队列；

S206、基于更新的缓存队列，计算更新后的缓存队列中位于队尾的一个待送显图像帧的送显时间，依次类推，直到将图像传感器生成的第一图像帧全部送显为止。

本公开实施例中，在图像的显示过程中，在第一图像帧转换形成第二图像帧后，增加了滤波模块来对待送显图像帧的送显时间进行从新的计算处理，使得待送显图像帧输出到预览显示时相邻显示图像之间的间距是固定的，如此能够减少预览图像的抖动，使得预览图像平滑和顺畅。

图4是根据一示例性实施例示出的一种图像的显示装置图。参照图4，该图像的显示装置包括获取模块1001，形成模块1002、第一送显确定模块1003和显示时间确定模块1004，其中，

获取模块1001，配置为获取图像传感器传感预览形成第一图像帧；

形成模块1002，配置为将所述第一图像帧转换形成第二图像帧，并传输到缓存队列；

第一送显确定模块1003，配置为根据所述缓存队列接收到所述第二图像帧的接收时间，确定所述第二图像帧的送显时间；

显示时间确定模块1004，配置为基于所述送显时间，确定所述第二图像帧的显示时间。

在一些实施例中，所述缓存队列中缓冲有M个待送显图像帧；所述第二图像帧为所述缓存队列中位于队尾的一个待送显图像帧；

所述第一送显确定模块1003，包括：

队列时间确定模块，配置为确定所述缓存队列中M个所述待送显图像帧的M个所述接收时间和M个曝光采集时间，其中，M为大于等于2的正整数；

第二送显确定模块，配置为基于所述M个接收时间、所述M个曝光采集时间和预设帧率，确定所述第二图像帧的送显时间。

在一些实施例中，所述缓存队列为先进先出队列；

所述装置还包括：

移动模块，配置为在所述第二图像帧被送显后，从所述缓存队列中删除位于队首的一个待送显图像帧，并将所述缓存队列中剩余M-1个待送显的图像帧向所述缓存队列的队首移动。

在一些实施例中，所述第二送显确定模块，包括：

第一差值确定模块，配置为基于所述M个曝光采集时间和所述M个接收时间，确定不同图像处理的M个差值；

第二差值确定模块，配置为从所述M个差值中，确定所述第二图像帧对应的差值；

第三送显确定模块，配置为基于所述第二图像帧对应的差值、所述预设帧率和所述M个曝光采集时间中所述第二图像帧的曝光采集时间，确定所述第二图像帧的送显时间。

在一些实施例中，所述第二差值确定模块，还配置为对所述M个差值进行排序，得到排序后的M个差值；从所述排序后的M个差值中，按照预设规则选取位于排序中间位置的差值；将所述位于排序中间位置的差值，作为所述第二图像帧对应的差值。

在一些实施例中，所述第三送显确定模块，还配置为基于所述预设帧率，获取相邻帧的间隔时间；对所述第二图像帧对应的差值、所述间隔时间和所述第二图像帧的曝光采集时间进行求和，将求和值作为所述第二图像帧的送显时间。

在一些实施例中，所述基于所述送显时间，确定所述第二图像帧的显示时间，包括：

当所述送显时间，比预设显示时间晚时，将所述预设显示时间作为所述第二图像帧的显示时间；

当所述送显时间，早于或者等于所述预设显示时间时，将所述送显时间作为所述第二图像帧的显示时间。

关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。

图5是根据一示例性实施例示出的一种图像的显示装置。例如，装置可以是移动电话，移动电脑等。

参照图5，装置可以包括以下一个或多个组件：处理组件802，存储器804，电源组件806，多媒体组件808，音频组件810，输入/输出(I/O)的接口812，传感器组件814，以及通信组件816。

处理组件802通常控制装置的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理组件802可以包括一个或多个处理器820来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件802可以包括一个或多个模块，便于处理组件802和其他组件之间的交互。例如，处理组件802可以包括多媒体模块，以方便多媒体组件808和处理组件802之间的交互。

存储器804被配置为存储各种类型的数据以支持在设备的操作。这些数据的示例包括用于在装置上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器804可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。

电力组件806为装置的各种组件提供电力。电力组件806可以包括电源管理系统，一个或多个电源，及其他与为装置生成、管理和分配电力相关联的组件。

多媒体组件808包括在所述装置和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件808包括一个前置摄像头和/或后置摄像头。当设备处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。

音频组件810被配置为输出和/或输入音频信号。例如，音频组件810包括一个麦克风(MIC)，当装置处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器804或经由通信组件816发送。在一些实施例中，音频组件810还包括一个扬声器，用于输出音频信号。

I/O接口812为处理组件802和外围接口模块之间提供接口，上述外围接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。

传感器组件814包括一个或多个传感器，用于为装置提供各个方面的状态评估。例如，传感器组件814可以检测到设备的打开/关闭状态，组件的相对定位，例如所述组件为装置的显示器和小键盘，传感器组件814还可以检测装置或装置一个组件的位置改变，用户与装置接触的存在或不存在，装置方位或加速/减速和装置的温度变化。传感器组件814可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件814还可以包括光传感器，如CMOS或CCD图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件814还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。

通信组件816被配置为便于装置和其他设备之间有线或无线方式的通信。装置可以接入基于通信标准的无线网络，如Wi-Fi，2G或3G，或它们的组合。在一个示例性实施例中，通信组件816经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，所述通信组件816还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。

在示例性实施例中，装置可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。

在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器804，上述指令可由装置的处理器820执行以完成上述方法。例如，所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。

一种非临时性计算机可读存储介质，当所述存储介质中的指令由终端设备的处理器执行时，使得终端设备能够执行图像的显示方法，所述方法包括：

获取图像传感器传感预览形成第一图像帧；

将所述第一图像帧转换形成第二图像帧，并传输到缓存队列；

根据所述缓存队列接收到所述第二图像帧的接收时间，确定所述第二图像帧的送显时间；

基于所述送显时间，确定所述第二图像帧的显示时间。

本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本发明的真正范围和精神由下面的权利要求指出。

应当理解的是，本发明并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

Claims (16)

1.一种图像的显示方法，其特征在于，所述方法包括：

获取图像传感器传感预览形成第一图像帧；

将所述第一图像帧转换形成第二图像帧，并传输到缓存队列；

根据所述缓存队列接收到所述第二图像帧的接收时间，确定所述第二图像帧的送显时间；

基于所述送显时间，确定所述第二图像帧的显示时间。

2.根据权利要求1所述的方法，其特征在于，所述缓存队列中缓存有M个待送显图像帧；所述第二图像帧为所述缓存队列中位于队尾的一个待送显图像帧；

所述根据所述缓存队列接收到所述第二图像帧的接收时间，确定所述第二图像帧的送显时间，包括：

确定所述缓存队列中M个所述待送显图像帧的M个所述接收时间和M个曝光采集时间，其中，M为大于等于2的正整数；

基于所述M个接收时间、所述M个曝光采集时间和预设帧率，确定所述第二图像帧的送显时间。

3.根据权利要求2所述的方法，其特征在于，所述缓存队列为先进先出队列；

所述方法还包括：

在所述第二图像帧被送显后，从所述缓存队列中删除位于队首的一个待送显图像帧，并将所述缓存队列中剩余M-1个待送显的图像帧向所述缓存队列的队首移动。

4.根据权利要求2所述的方法，其特征在于，所述基于所述M个接收时间、所述M个曝光采集时间和预设帧率，确定所述第二图像帧的送显时间，包括：

基于所述M个曝光采集时间和所述M个接收时间，确定不同图像处理的M个差值；

从所述M个差值中，确定所述第二图像帧对应的差值；

基于所述第二图像帧对应的差值、所述预设帧率和所述M个曝光采集时间中所述第二图像帧的曝光采集时间，确定所述第二图像帧的送显时间。

5.根据权利要求4所述的方法，其特征在于，所述从所述M个差值中，确定所述第二图像帧对应的差值，包括：

对所述M个差值进行排序，得到排序后的M个差值；

从所述排序后的M个差值中，按照预设规则选取位于排序中间位置的差值；

将所述位于排序中间位置的差值，作为所述第二图像帧对应的差值。

6.根据权利要求4所述的方法，其特征在于，所述基于所述第二图像帧对应的差值、所述预设帧率和所述M个曝光采集时间中所述第二图像帧的曝光采集时间，确定所述第二图像帧的送显时间，包括：

基于所述预设帧率，获取相邻帧的间隔时间；

对所述第二图像帧对应的差值、所述间隔时间和所述第二图像帧的曝光采集时间进行求和，将求和值作为所述第二图像帧的送显时间。

7.根据权利要求1至6任一项所述的方法，其特征在于，所述基于所述送显时间，确定所述第二图像帧的显示时间，包括：

当所述送显时间，比预设显示时间晚时，将所述预设显示时间作为所述第二图像帧的显示时间；

当所述送显时间，早于或者等于所述预设显示时间时，将所述送显时间作为所述第二图像帧的显示时间。

8.一种图像的显示装置，其特征在于，所述装置包括：

获取模块，配置为获取图像传感器传感预览形成第一图像帧；

形成模块，配置为将所述第一图像帧转换形成第二图像帧，并传输到缓存队列；

第一送显确定模块，配置为根据所述缓存队列接收到所述第二图像帧的接收时间，确定所述第二图像帧的送显时间；

显示时间确定模块，配置为基于所述送显时间，确定所述第二图像帧的显示时间。

9.根据权利要求8所述的装置，其特征在于，所述缓存队列中缓冲有M个待送显图像帧；所述第二图像帧为所述缓存队列中位于队尾的一个待送显图像帧；

所述第一送显确定模块，包括：

队列时间确定模块，配置为确定所述缓存队列中M个所述待送显图像帧的M个所述接收时间和M个曝光采集时间，其中，M为大于等于2的正整数；

第二送显确定模块，配置为基于所述M个接收时间、所述M个曝光采集时间和预设帧率，确定所述第二图像帧的送显时间。

10.根据权利要求9所述的装置，其特征在于，所述缓存队列为先进先出队列；

所述装置还包括：

移动模块，配置为在所述第二图像帧被送显后，从所述缓存队列中删除位于队首的一个待送显图像帧，并将所述缓存队列中剩余M-1个待送显的图像帧向所述缓存队列的队首移动。

11.根据权利要求9所述的装置，其特征在于，所述第二送显确定模块，包括：

第一差值确定模块，配置为基于所述M个曝光采集时间和所述M个接收时间，确定不同图像处理的M个差值；

第二差值确定模块，配置为从所述M个差值中，确定所述第二图像帧对应的差值；

第三送显确定模块，配置为基于所述第二图像帧对应的差值、所述预设帧率和所述M个曝光采集时间中所述第二图像帧的曝光采集时间，确定所述第二图像帧的送显时间。

12.根据权利要求11所述的装置，其特征在于，所述第二差值确定模块，还配置为对所述M个差值进行排序，得到排序后的M个差值；从所述排序后的M个差值中，按照预设规则选取位于排序中间位置的差值；将所述位于排序中间位置的差值，作为所述第二图像帧对应的差值。

13.根据权利要求11所述的装置，其特征在于，所述第三送显确定模块，还配置为基于所述预设帧率，获取相邻帧的间隔时间；对所述第二图像帧对应的差值、所述间隔时间和所述第二图像帧的曝光采集时间进行求和，将求和值作为所述第二图像帧的送显时间。

14.根据权利要求8至13任一项所述的装置，其特征在于，所述基于所述送显时间，确定所述第二图像帧的显示时间，包括：

当所述送显时间，比预设显示时间晚时，将所述预设显示时间作为所述第二图像帧的显示时间；

当所述送显时间，早于或者等于所述预设显示时间时，将所述送显时间作为所述第二图像帧的显示时间。

15.一种图像的显示装置，其特征在于，所述装置至少包括：处理器和用于存储能够在所述处理器上运行的可执行指令的存储器，其中：

处理器用于运行所述可执行指令时，所述可执行指令执行上述权利要求1至7中任一项提供的图像的显示中的步骤。

16.一种非临时性计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机可执行指令，该计算机可执行指令被处理器执行时实现上述权利要求1至7中任一项提供的图像的显示方法。

Images