CN110290320B - 视频预览图生成方法和装置、电子设备、计算机可读存储介质 - Google Patents

Abstract

本申请涉及一种视频预览图生成方法、装置、电子设备、计算机可读存储介质，包括：获取待处理视频中预设图像帧的抖动补偿信息，根据预设图像帧的抖动补偿信息，从预设图像帧中筛选出抖动补偿信息在预设范围内的目标图像帧。从待处理视频中提取目标图像帧，根据目标图像帧生成待处理视频的预览图。因为抖动补偿信息体现了拍摄图像帧时电子设备的抖动或拍摄物的移动幅度情况，因此，筛选出抖动补偿信息在预设范围内的图像帧，并最终生成待处理视频的预览图，此时的预览图的清晰度就会得到提高。

Description

视频预览图生成方法和装置、电子设备、计算机可读存储介质

技术领域

本申请涉及计算机技术领域，特别是涉及一种视频预览图生成方法和装置、电子设备、计算机可读存储介质。

背景技术

随着智能终端和拍照技术的不断发展，智能终端上关于拍摄相关的功能也越来越丰富，例如，视频拍摄及播放功能已经成为用户在使用智能终端的过程中常用的功能之一。当用户进行视频拍摄及播放操作时经常涉及到视频预览图，所以如何提高视频预览图的质量也是一个亟待解决的问题。

发明内容

本申请实施例提供一种视频预览图生成方法、装置、电子设备、计算机可读存储介质，可以提高视频预览图的质量、满足更高的视频预览需求。

一种视频预览图生成方法，包括：

获取待处理视频中预设图像帧的抖动补偿信息；

根据所述预设图像帧的抖动补偿信息，从所述预设图像帧中筛选出抖动补偿信息在预设范围内的目标图像帧；

从待处理视频中提取所述目标图像帧，根据所述目标图像帧生成所述待处理视频的预览图。

一种视频预览图生成装置，包括：

图像帧的抖动补偿信息提取模块，用于获取待处理视频中预设图像帧的抖动补偿信息；

目标图像帧筛选模块，用于根据所述预设图像帧的抖动补偿信息，从所述预设图像帧中筛选出抖动补偿信息在预设范围内的目标图像帧；

预览图生成模块，用于从待处理视频中提取所述目标图像帧，根据所述目标图像帧生成所述待处理视频的预览图。

一种电子设备，包括存储器及处理器，所述存储器中储存有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行如上方法的步骤。一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现如上方法的步骤。

上述视频预览图生成方法、装置、电子设备、计算机可读存储介质，获取待处理视频中预设图像帧的抖动补偿信息，根据预设图像帧的抖动补偿信息，从预设图像帧中筛选出抖动补偿信息在预设范围内的目标图像帧。从待处理视频中提取目标图像帧，根据目标图像帧生成待处理视频的预览图。

传统方法中视频的预览图存在因拍摄时的电子设备的抖动或拍摄物的移动导致该预览图不清晰的问题，采用本申请中的方法，从待处理视频中获取预设图像帧的抖动补偿信息，根据预设图像帧的抖动补偿信息，从预设图像帧中筛选出抖动补偿信息在预设范围内的图像帧作为目标图像帧，进而从待处理视频中提取出目标图像帧，根据所提取出的目标图像帧生成待处理视频的的预览图。因为抖动补偿信息体现了拍摄图像帧时电子设备的抖动或拍摄物的移动幅度情况，因此，筛选出抖动补偿信息在预设范围内的图像帧，并最终生成待处理视频的预览图，此时的预览图的清晰度就会得到提高。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为一个实施例中视频预览图生成方法的应用环境图；

图2为一个实施例中摄像头防抖系统的结构示意图；

图3为一个实施例中视频预览图生成方法的流程图；

图4为图3中根据所述预设图像帧的抖动补偿信息，从所述预设图像帧中筛选出抖动补偿信息在预设范围内的目标图像帧方法的流程图；

图5为图3中根据所述预设图像帧的抖动补偿信息，从所述预设图像帧中筛选出抖动补偿信息在预设范围内的目标图像帧方法的流程图；

图6为图3中根据所述预设图像帧的抖动补偿信息，从所述预设图像帧中筛选出抖动补偿信息在预设范围内的目标图像帧方法的流程图；

图7为一个实施例中视频预览图生成装置的结构框图；

图8为一个实施例中电子设备的内部结构示意图；

图9为一个实施例中图像处理电路的示意图。

具体实施方式

为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。

图1为一个实施例中视频预览图生成方法的应用环境示意图。如图1所示，该应用环境包括电子设备100。电子设备100包含有至少一个摄像头110。电子设备100可以获取待处理视频中预设图像帧的抖动补偿信息，根据预设图像帧的抖动补偿信息，从预设图像帧中筛选出抖动补偿信息在预设范围内的目标图像帧。从待处理视频中提取目标图像帧，根据目标图像帧生成待处理视频的预览图。可以理解的是，上述电子设备100可以不限于是各种手机、电脑、可携带设备等。

本申请中的待处理视频为经过摄像头防抖系统所拍摄出的视频。图2为一个实施例中摄像头防抖系统的示意图。如图2所示，在一个实施例中，摄像头防抖系统中包含的主控芯片212和陀螺仪214设于摄像头防抖系统的主板210上，防抖驱动芯片222、马达224和镜头226设于摄像头防抖系统的摄像头模组220中。其中，陀螺仪214与主控芯片212之间可以通过SPI(Serial Peripheral Interface，串行外设接口)连接；主控芯片212与防抖驱动芯片222之间可以通过IIC(Inter-Integrated Circuit，集成电路总线)连接。陀螺仪214可以采集镜头226的角速度信息，并将角速度信息发送给主控芯片212，主控芯片212可以根据角速度信息计算镜头226的抖动补偿信息，并将该抖动补偿信息发送给防抖驱动芯片222，防抖驱动芯片222可以根据该抖动补偿信息控制马达224上电，以使马达224驱动镜头226的移动。

进一步，摄像头模组220中还设有图像传感器228，图像传感器228可以通过CCI(Connection Control Interface，连接控制接口)与主控芯片212连接。主控芯片212可以在接收到图像采集指令，通过CCI接口控制图像传感器228上电，以使图像传感器228基于移动后的镜头226采集图像。

通过主控芯片根据陀螺仪采集的角速度信息计算镜头的抖动补偿信息，防抖驱动芯片根据抖动补偿信息控制马达上电驱动镜头的移动，不需要防抖驱动芯片做抖动补偿信息的计算，可以减小防抖驱动芯片的体积，即减少摄像头模组的体积，可以提高摄像头模组的可靠性。

图3为一个实施例中视频预览图生成方法的流程图，如图3所示，视频预览图生成方法包括步骤320至步骤360。

步骤320，获取待处理视频中预设图像帧的抖动补偿信息。

其中，待处理视频为经过上述图2中的摄像头防抖系统所拍摄出的视频，当然还可以是基于其他类型的摄像头防抖系统所拍摄出的视频。其中，视频是指连续的图像变化每秒超过24帧(frame)画面以上时，根据视觉暂留原理，人眼无法辨别单幅的静态画面，因此通过人眼看上去便呈现出平滑连续的视觉效果，这样连续的画面叫做视频。图像帧是指一帧一帧单幅的静态画面或图像。

其中，在拍摄每一帧图像时，主控芯片212可以根据此时陀螺仪所采集的镜头的角速度信息，计算出镜头226的抖动补偿信息，并将该抖动补偿信息存储在CPU中。具体的，电子设备对每次拍摄的图像帧都记录抖动补偿信息，并形成抖动补偿信息数据表，并将该补偿信息数据表存储在CPU中。抖动补偿信息数据表中一一对应的存储了图像帧的编号及与之对应的抖动补偿信息。于是电子设备就可以直接从该抖动补偿信息数据表中对应获取到图像帧的抖动补偿信息。抖动补偿信息主要包括OIS防抖的方向和幅值。根据抖动补偿信息可以确定镜头防抖时的偏移量，偏移量即为镜头为了减少抖动引起的偏差而需要反向移动的距离。因此，当抖动补偿信息中的在该防抖方向上的幅值较小时，显然，此时镜头需要移动的偏移量较小，则根据抖动补偿信息控制马达上电驱动镜头的移动，镜头能够在较短的时间内移动到指定位置，然后进行拍摄，此时所拍摄出的图像帧就比较清晰，避免了抖动所造成的图像模糊。

当抖动补偿信息中的在该防抖方向上的幅值较大时，显然，此时镜头需要移动的偏移量较大，则根据抖动补偿信息控制马达上电驱动镜头的移动，镜头需要较长的时间来移动到指定位置，可能在镜头还未移动至指定位置就开始了拍摄，所以此时所拍摄出的图像帧就比较模糊。

其中，假设视频拍摄帧率为m(如60fps)，即每秒钟拍摄照片m帧图像，视频录制时长为n秒，所以在该段视频中总共拍摄的图像帧数为p＝m*n帧。

具体的，电子设备从待处理视频中获取预设图像帧的抖动补偿信息。首先，待处理视频中获取预设图像帧的编号，例如，可以根据图像帧的生成顺序对图像帧进行编号i＝1,2,3,…,n*m。当待处理视频的拍摄时长小于预设阈值时，则从待处理视频中获取所有图像帧的编号。当待处理视频的拍摄时长大于或等于预设阈值时，则获取预设图像帧的编号的方式，可以是随机从编号后的图像帧中选择预设图像帧的编号，也可以是采用等差、等比等方式从编号后的图像帧中选择预设图像帧的编号，还可以是从编号后的图像帧中选择出拍摄主体正面出现时的图像帧的编号，当然，还可以有其他从待处理视频中获取预设图像帧的编号的方法，在此处不做限定。

然后，因为抖动补偿信息数据表中一一对应的存储了图像帧的编号及与之对应的抖动补偿信息，所以遍历待处理视频的抖动补偿信息数据表，就可以根据预设图像帧的编号获取到预设图像帧的抖动补偿信息。

步骤340，根据预设图像帧的抖动补偿信息，从预设图像帧中筛选出抖动补偿信息在预设范围内的目标图像帧。

电子设备从抖动补偿信息数据表中对应获取到该视频的预设图像帧的抖动补偿信息之后。根据预设图像帧的抖动补偿信息，从预设图像帧中筛选出抖动补偿信息在预设范围内的图像帧作为目标图像帧。目标图像帧的数目在此不做限定。该预设范围可以是根据从待处理视频中所获取的预设图像帧的抖动补偿信息的范围来确定，一般取抖动补偿信息较小的预设图像帧作为目标图像帧，可以是从预设图像帧中取处于较小的五分之一抖动补偿信息的范围内的图像帧，作为目标图像帧，当然，此处也可以是其他比例。例如，当从待处理视频中一共选择了5帧预设图像帧，则取处于较小的五分之一抖动补偿信息的范围内的预设图像帧，作为目标图像帧。即取最小的抖动补偿信息所对应的预设图像帧作为目标图像帧。而当从待处理视频中一共选择了50帧预设图像帧，则取处于较小的五分之一抖动补偿信息的范围内的预设图像帧，作为目标图像帧。即取抖动补偿信息处于较小的10帧预设图像帧作为目标图像帧。

步骤360，从待处理视频中提取目标图像帧，根据目标图像帧生成待处理视频的预览图。

视频预览图是由视频中的一帧或多帧图像构成的，展示视频大致内容的图像。一般情况下，在视频拍摄完成之后会自动将视频中所拍摄的第一帧图像作为该视频的预览图像，而往往所拍摄的第一帧图像可能因为拍摄者还未捕捉好拍摄画面而抖动较大，这将会使得第一帧图像不清晰，显然，如果还将第一帧图像作为该视频的预览图像，则不清晰的预览图像不能满足用户的使用需求。

本方法中在从预设图像帧中选择出目标图像帧之后，就可以从待处理视频中国提取出目标图像帧，并根据所提取出的目标图像帧直接生成待处理视频的预览图，亦可以经过处理后作为待处理视频的预览图。当目标图像帧的数目为一帧时，则将所提取出的目标图像帧直接作为待处理视频的预览图，当用户浏览相册时，直接呈现在屏幕上的就是静态的目标图像帧。而当目标图像帧的数目为一帧以上时，则将所提取出的目标图像帧进行处理生成动图，将动图作为待处理视频的预览图，当用户浏览相册时，直接呈现在屏幕上的就是目标图像帧所构成的动图。

本申请实施例中，电子设备获取待处理视频中预设图像帧的抖动补偿信息，根据预设图像帧的抖动补偿信息，从预设图像帧中筛选出抖动补偿信息在预设范围内的目标图像帧。最后，从待处理视频中提取目标图像帧，根据目标图像帧生成待处理视频的预览图。

传统方法中视频的预览图存在因拍摄时的电子设备的抖动或拍摄物的移动导致该预览图不清晰的问题，采用本申请中的方法，从待处理视频中获取预设图像帧的抖动补偿信息，根据预设图像帧的抖动补偿信息，从预设图像帧中筛选出抖动补偿信息在预设范围内的图像帧作为目标图像帧，进而从待处理视频中提取出目标图像帧，根据所提取出的目标图像帧生成待处理视频的的预览图。因为抖动补偿信息体现了拍摄图像帧时电子设备的抖动或拍摄物的移动幅度情况，因此，筛选出抖动补偿信息在预设范围内的图像帧，并最终生成待处理视频的预览图，此时的预览图的清晰度就会得到提高。

在一个实施例中，如图4所示，步骤340，根据预设图像帧的抖动补偿信息，从预设图像帧中筛选出抖动补偿信息在预设范围内的目标图像帧，包括：

步骤342，将预设图像帧按照预设图像帧的抖动补偿信息的大小依次进行排列，得到图像帧序列。

步骤344，从图像帧序列中筛选出抖动补偿信息在预设范围内的目标图像帧。

具体的，在从抖动补偿信息数据表中，获取了从待处理视频中所提取出的预设图像帧的抖动补偿信息之后，将预设图像帧按照预设图像帧的抖动补偿信息的大小(主要是对抖动补偿信息中防抖的幅值)依次进行排列，得到图像帧序列。此处可以是按照从大到小的顺序进行排列，也可以是从小到大的顺序进行排列，在此不做限定。在进行排列之后，就得到了图像帧序列。图像帧序列记录了按照抖动补偿信息的大小依次排列的预设图像帧，那么就可以根据需求从图像帧序列中进行筛选出抖动补偿信息在预设范围内的目标图像帧。例如，可以筛选出抖动补偿信息处于图像帧序列中的较小的范围内的图像帧，作为目标图像帧。此处的较小范围可以是具体的数值限定，如抖动补偿信息中的防抖幅值在0-1mm范围内，当然，也可以根据需求取设定其他合理的数值。当然，在筛选出抖动补偿信息中的防抖幅值在0-1mm范围内的图像帧之后，可以进一步判断这些图像帧所呈现出的拍摄主体是否与该待处理视频中的拍摄主体一致，从中选取拍摄主体一致的图像帧作为目标图像帧。还可以再进一步从这些拍摄主体一致的图像帧中，选取呈现出拍摄主体正面的图像帧作为目标图像帧。

本申请实施例中，在从待处理视频中获取了预设图像帧的抖动补偿信息，且从防抖补偿信息数据表中获取了该预设图像帧所对应的防抖补偿信息之后，将预设图像帧按照抖动补偿信息的大小依次进行排列，得到图像帧序列。图像帧序列中清晰地记录了预设图像帧的防抖补偿信息，因此，便于根据设定的规则从中筛选出抖动补偿信息在预设范围内的图像帧，作为目标图像帧。

在一个实施例中，待处理视频的预览图的数量至少为一张。

具体的，所筛选出的待处理视频的预览图的数量为一张或一张以上的任意一张，且小于待处理视频中的图像帧的总数。多数情况下，待处理视频的预览图的数量为一张。

本申请实施例中，传统方法中的待处理视频的预览图的数量为一帧静态图像，而在本申请实施例中，待处理视频的预览图的数量可以为一张或一张以上。相比较于仅仅一帧静态图像来作为视频的预览图，显然，大大增加了预览图中所能够呈现出的信息量。当用户点击视频的预览图时候，一张或一张以上预览图为用户提供了视频中更多的简要信息。

接前一个实施例，如图5所示，当待处理视频的预览图的数量为一张时；

根据预设图像帧的抖动补偿信息，从预设图像帧中筛选出抖动补偿信息在预设范围内的目标图像帧，包括：

步骤520，将预设图像帧按照预设图像帧的抖动补偿信息的大小依次进行排列，得到图像帧序列；

步骤540，从图像帧序列中筛选出抖动补偿信息最小的目标图像帧。

具体的，对于待处理视频中抖动补偿信息最小的图像帧，显然在拍摄该抖动补偿信息最小的图像帧时拍摄设置由于外界所带来的抖动幅度较小，则根据抖动补偿信息控制马达上电驱动镜头的移动，镜头能够在最短的时间内移动到指定位置，然后进行拍摄，此时所拍摄出的图像帧在该视频中就会最清晰，避免了抖动所造成的图像模糊。因此，将该抖动补偿信息最小的图像帧作为目标图像帧，进而根据目标图像帧生成待处理视频的预览图，就大大提高了视频的预览图的画质。

一个实施例中，如图6所示，当待处理视频的预览图的数量为两张或两张以上时；

根据预设图像帧的抖动补偿信息，从预设图像帧中筛选出抖动补偿信息在预设范围内的目标图像帧，包括：

步骤620，将预设图像帧按照预设图像帧的抖动补偿信息的大小依次进行排列，得到图像帧序列；

步骤640，从图像帧序列中筛选出抖动补偿信息最小的图像帧及与抖动补偿信息最小的图像帧相邻的一帧或一帧以上图像帧，作为目标图像帧。

具体的，当待处理视频的预览图的数量为两张或两张以上时，且小于待处理视频中的图像帧的总数时。首先也是将预设图像帧按照每个图像帧的抖动补偿信息的大小依次进行排列，得到图像帧序列；其次，从图像帧序列中筛选出抖动补偿信息最小的图像帧；再次，进一步从图像帧序列中筛选出与抖动补偿信息最小的图像帧相邻的一帧或一帧以上图像帧；最后，将所筛选出的抖动补偿信息最小的图像帧、所筛选出的与抖动补偿信息最小的图像帧相邻的一帧或一帧以上图像帧，作为目标图像帧。

此处，与抖动补偿信息最小的图像帧相邻的一帧或一帧以上图像帧，可以是视频中与抖动补偿信息最小的图像帧在生成时间上直接相邻的一帧或一帧以上图像帧，也可以是与抖动补偿信息最小的图像帧在生成时间上间接相邻的一帧或一帧以上图像帧。例如，假设抖动补偿信息最小的图像帧的生成时间为5s，则可以筛选出与5s左右间隔2s的图像帧，即筛选出3s和7s时所生成的图像帧。将筛选出的3s、5s及7s时所生成的图像帧作为目标图像帧。

本申请实施例中，不仅筛选出了抖动补偿信息最小的图像帧，还筛选出了与抖动补偿信息最小的图像帧相邻的一帧或一帧以上图像帧。这样由抖动补偿信息最小的图像帧及与抖动补偿信息最小的图像帧相邻的一帧或一帧以上图像帧共同作为目标图像帧，进而由目标图像帧再生成预览图。如此，预览图不仅能够满足图像清晰度的要求，且能够为用户呈现出抖动补偿信息最小的图像帧前后的画面，这样就为用户提供了更多的预览信息。

在一个实施例中，从待处理视频中提取目标图像帧，根据目标图像帧生成待处理视频的预览图，包括：

从待处理视频中提取目标图像帧，根据目标图像帧生成动图，将动图作为待处理视频的预览图。

具体的，此处，动图是相对于静态图像而言的，即为一张动态的图像，一般由两帧以上图像得到的动态图像，例如，live图像，Live Photo其实是由一张高清的JPG图片以及一个多帧特定格式(如45帧MOV视频格式)的视频文件所组成。

当动图为live图像时，可以将抖动补偿信息最小的图像帧作为高清的JPG图片，而将抖动补偿信息最小的图像帧及与抖动补偿信息最小的图像帧相邻的一帧或一帧以上图像帧作为多帧特定格式的视频文件。如此，共同构成了live图像。当用户从相册中浏览到该视频时，若不对屏幕做任何操作则展示高清的JPG图片，即抖动补偿信息最小的图像帧。而当用户从相册中浏览到该视频时，对该屏幕作出特定操作时，例如，按压屏幕(并非按压到播放视频的按钮)则展示该视频的live图像。此处的特定操作还包括其他类型的操作，下此处不做限定。

本申请实施例中，将多张目标图像帧进行处理生成动态图。如此，则一个动态的画面过程，让用户能够获取到连续的画面变化，提高用户的使用兴趣，且同时获取到更多的视频信息。

在一个实施例中，获取待处理视频中预设图像帧的抖动补偿信息，包括：

当待处理视频的拍摄时长小于预设阈值时，则从待处理视频中获取所有图像帧的抖动补偿信息；

当待处理视频的拍摄时长大于或等于预设阈值时，则从待处理视频中获取部分图像帧的抖动补偿信息。

具体的，当待处理视频的拍摄时长小于预设阈值时，此时待处理视频中所包含的图像帧数量较少，因此，可以从抖动补偿信息数据表中，获取了从待处理视频中所有图像帧的抖动补偿信息。预设阈值可以根据根据用户需求进行定义。例如，可以设定预设阈值为5s，10s等。例如，当待处理视频的拍摄时长n为5s时，假设视频拍摄帧率m为60fps，那么该视频中一共包含300帧图像。从待处理视频的抖动补偿信息数据表中选取所有的图像帧进行遍历，获取每一帧图像所对应的OIS防抖时移动的幅值Ai(其中i＝1,2,3,…,n*m)，其中i为图像编号。

当待处理视频的拍摄时长大于或等于预设阈值时，此时待处理视频中所包含的图像帧数量较多，若获取待处理视频中全部图像帧的抖动补偿信息，并从中筛选出目标图像帧，这个过程涉及到的数据量较大，处理过程较为复杂。所以为了简化处理过程、降低处理难度，则从待处理视频中获取部分图像帧的抖动补偿信息即可，并从中筛选出目标图像帧。

例如，当待处理视频的拍摄时长n为20s，大于或等于预设阈值5s且小于30s时，假设视频拍摄帧率m为60fps，那么该视频中一共包含1200帧图像。从待处理视频的抖动补偿信息数据表中选取前n/4s的时间内拍摄的图像帧进行遍历，获取每一帧图像所对应的OIS防抖时移动的幅值Ai(其中i＝1,2,3,…,n*m)，其中i为图像编号。

当待处理视频的拍摄时长n为30s，大于或等于30s时，假设视频拍摄帧率m为60fps，那么该视频中一共包含1800帧图像。从待处理视频的抖动补偿信息数据表中选取中间时间段内拍摄的图像帧进行遍历，获取每一帧图像所对应的OIS防抖时移动的幅值Ai(其中i＝1,2,3,…,n*m)，其中i为图像编号。此处，中间时间段可以是5-6s、15-16s、25-26s这三个中间时间段，当然，还可以是从中选取的其他时间段内的图像帧进行遍历，但是加起来的总时间最好不要超过5s。这些部分时间段的获取规则，可以是按照等间隔地方式进行获取，也可以是随机进行获取等其他方式。

本申请实施例中，对待处理视频的拍摄时长小于或大于等于预设阈值的情况进行划分，当待处理视频的拍摄时长小于预设阈值时，则因为视频中的图像帧较少，则可以获取全部的图像帧并获取这些图像帧所对应的抖动补偿信息。而当待处理视频的拍摄时长大于等于预设阈值时，则从待处理视频中选取部分图像帧来获取所对应的抖动补偿信息即可。视待处理视频的拍摄时长情况来确定如何选取图像帧，这样可以减少数据量，提高数据处理速度。

在一个实施例中，当待处理视频的拍摄时长大于或等于预设阈值时，则从待处理视频中获取部分时间段内的图像帧的抖动补偿信息；

根据预设图像帧的抖动补偿信息，从预设图像帧中筛选出抖动补偿信息在预设范围内的目标图像帧，包括：

将部分时间段内的图像帧按照图像帧的抖动补偿信息的大小依次进行排列，得到图像帧序列；

根据图像帧序列，从每一部分时间段内的图像帧中筛选出抖动补偿信息最小的图像帧，作为目标图像帧。

具体的，当待处理视频的拍摄时长大于或等于预设阈值时，此时待处理视频中所包含的图像帧数量较多，若获取待处理视频中全部图像帧的抖动补偿信息，并从中筛选出目标图像帧，这个过程涉及到的数据量较大，处理过程较为复杂。所以为了简化处理过程、降低处理难度，则从待处理视频中获取部分图像帧的抖动补偿信息即可，并从中筛选出目标图像帧。

当待处理视频的拍摄时长n为30s，大于或等于30s时，假设视频拍摄帧率m为60fps，那么该视频中一共包含1800帧图像。从待处理视频的抖动补偿信息数据表中选取中间时间段内拍摄的图像帧进行遍历，获取每一帧图像所对应的OIS防抖时移动的幅值Ai(其中i＝1,2,3,…,n*m)，其中i为图像编号。此处，中间时间段可以是5-6s、15-16s、25-26s这三个中间时间段，当然，还可以是从中选取的其他时间段内的图像帧进行遍历，但是加起来的总时间最好不要超过5s。

然后从5-6s、15-16s、25-26s这三个中间时间段中，分别筛选出抖动补偿信息最小的图像帧，作为目标图像帧。即从5-6s这个时间段中筛选出抖动补偿信息最小的图像帧，从15-16s这个时间段中筛选出抖动补偿信息最小的图像帧，从25-26s这个时间段中筛选出抖动补偿信息最小的图像帧。这三帧图像帧就构成了目标图像帧。

再由目标图像帧来生成视频的预览图像，可以是由这三帧图像生成动图，将动图作为视频的预览图像。

本申请实施例中，当待处理视频的拍摄时长大于或等于预设阈值时，则从待处理视频中获取部分时间段内的图像帧的抖动补偿信息。从这部分时间段内的图像帧中分别筛选出每个时间段内的抖动补偿信息最小的图像帧，将所有筛选出的图像帧作为目标图像帧。并最终由这些目标图像帧生成动图，作为视频的预览图像。那么所得到的视频的预览图能够在保证图像清晰度的同时，呈现出不同时间段所拍摄出的图像帧，因此能够呈现出不同的拍摄信息，以便用户能够仅从预览图中就可以捕捉到更多的图像信息。

应该理解的是，虽然上述流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，上述流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些子步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。

在一个实施例中，如图7所示，提供了一种视频预览图生成装置700，包括：

图像帧的抖动补偿信息提取模块720，用于获取待处理视频中预设图像帧的抖动补偿信息；

目标图像帧筛选模块740，用于根据预设图像帧的抖动补偿信息，从预设图像帧中筛选出抖动补偿信息在预设范围内的目标图像帧；

预览图生成模块760，用于从待处理视频中提取目标图像帧，根据目标图像帧生成待处理视频的预览图。

在一个实施例中，目标图像帧筛选模块740，还用于将预设图像帧按照预设图像帧的抖动补偿信息的大小依次进行排列，得到图像帧序列；从图像帧序列中筛选出抖动补偿信息在预设范围内的目标图像帧。

在一个实施例中，待处理视频的预览图的数量至少为一张。

在一个实施例中，当待处理视频的预览图的数量为一张时；目标图像帧筛选模块740，还用于将预设图像帧按照预设图像帧的抖动补偿信息的大小依次进行排列，得到图像帧序列；从图像帧序列中筛选出抖动补偿信息最小的目标图像帧。

在一个实施例中，当待处理视频的预览图的数量为两张或两张以上时；目标图像帧筛选模块740，还用于将预设图像帧按照预设图像帧的抖动补偿信息的大小依次进行排列，得到图像帧序列；从图像帧序列中筛选出抖动补偿信息最小的图像帧及与抖动补偿信息最小的图像帧的拍摄时间相邻的一帧或一帧以上图像帧，作为目标图像帧。

在一个实施例中，预览图生成模块760，还用于从待处理视频中提取目标图像帧，根据目标图像帧生成动图，将动图作为待处理视频的预览图。

在一个实施例中，图像帧的抖动补偿信息提取模块720，还用于当待处理视频的拍摄时长小于预设阈值时，则从待处理视频中获取所有图像帧的抖动补偿信息；当待处理视频的拍摄时长大于或等于预设阈值时，则从待处理视频中获取部分时间段内的图像帧的抖动补偿信息。

在一个实施例中，当待处理视频的拍摄时长大于或等于预设阈值时，则从待处理视频中获取部分时间段内的图像帧的抖动补偿信息；目标图像帧筛选模块740，还用于将部分时间段内的图像帧按照图像帧的抖动补偿信息的大小依次进行排列，得到图像帧序列；根据图像帧序列，从每一部分时间段内的图像帧中筛选出抖动补偿信息最小的图像帧，作为目标图像帧。

上述视频预览图生成装置中各个模块的划分仅用于举例说明，在其他实施例中，可将视频预览图生成装置按照需要划分为不同的模块，以完成上述视频预览图生成装置的全部或部分功能。

图8为一个实施例中电子设备的内部结构示意图。如图8所示，该电子设备包括通过系统总线连接的处理器和存储器。其中，该处理器用于提供计算和控制能力，支撑整个电子设备的运行。存储器可包括非易失性存储介质及内存储器。非易失性存储介质存储有操作系统和计算机程序。该计算机程序可被处理器所执行，以用于实现以上各个实施例所提供的一种视频预览图生成方法。内存储器为非易失性存储介质中的操作系统计算机程序提供高速缓存的运行环境。该电子设备可以是手机、平板电脑或者个人数字助理或穿戴式设备等。

本申请实施例中提供的视频预览图生成装置中的各个模块的实现可为计算机程序的形式。该计算机程序可在终端或服务器上运行。该计算机程序构成的程序模块可存储在终端或服务器的存储器上。该计算机程序被处理器执行时，实现本申请实施例中所描述方法的步骤。

本申请实施例还提供一种电子设备。上述电子设备中包括图像处理电路，图像处理电路可以利用硬件和/或软件组件实现，可包括定义ISP(Image Signal Processing，图像信号处理)管线的各种处理单元。图9为一个实施例中图像处理电路的示意图。如图9所示，为便于说明，仅示出与本申请实施例相关的图像处理技术的各个方面。

如图9所示，图像处理电路包括第一ISP处理器930、第二ISP处理器940和控制逻辑器950。第一摄像头910包括一个或多个第一透镜912和第一图像传感器914。第一图像传感器914可包括色彩滤镜阵列(如Bayer滤镜)，第一图像传感器914可获取用第一图像传感器914的每个成像像素捕捉的光强度和波长信息，并提供可由第一ISP处理器930处理的一组图像数据。第二摄像头920包括一个或多个第二透镜922和第二图像传感器924。第二图像传感器924可包括色彩滤镜阵列(如Bayer滤镜)，第二图像传感器924可获取用第二图像传感器924的每个成像像素捕捉的光强度和波长信息，并提供可由第二ISP处理器940处理的一组图像数据。

第一摄像头910采集的第一图像传输给第一ISP处理器930进行处理，第一ISP处理器930处理第一图像后，可将第一图像的统计数据(如图像的亮度、图像的反差值、图像的颜色等)发送给控制逻辑器950，控制逻辑器950可根据统计数据确定第一摄像头910的控制参数，从而第一摄像头910可根据控制参数进行自动对焦、自动曝光等操作。第一图像经过第一ISP处理器930进行处理后可存储至图像存储器960中，第一ISP处理器930也可以读取图像存储器960中存储的图像以对进行处理。另外，第一图像经过ISP处理器930进行处理后可直接发送至显示器970进行显示，显示器970也可以读取图像存储器960中的图像以进行显示。

其中，第一ISP处理器930按多种格式逐个像素地处理图像数据。例如，每个图像像素可具有8、10、12或14比特的位深度，第一ISP处理器930可对图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中，图像处理操作可按相同或不同的位深度精度进行。

图像存储器960可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器，并可包括DMA(Direct Memory Access，直接直接存储器存取)特征。

当接收到来自第一图像传感器914接口时，第一ISP处理器930可进行一个或多个图像处理操作，如时域滤波。处理后的图像数据可发送给图像存储器960，以便在被显示之前进行另外的处理。第一ISP处理器930从图像存储器960接收处理数据，并对处理数据进行RGB和YCbCr颜色空间中的图像数据处理。第一ISP处理器930处理后的图像数据可输出给显示器970，以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit，图形处理器)进一步处理。此外，第一ISP处理器930的输出还可发送给图像存储器960，且显示器970可从图像存储器960读取图像数据。在一个实施例中，图像存储器960可被配置为实现一个或多个帧缓冲器。

第一ISP处理器930确定的统计数据可发送给控制逻辑器950。例如，统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、第一透镜912阴影校正等第一图像传感器914统计信息。控制逻辑器950可包括执行一个或多个例程(如固件)的处理器和/或微控制器，一个或多个例程可根据接收的统计数据，确定第一摄像头910的控制参数及第一ISP处理器930的控制参数。例如，第一摄像头910的控制参数可包括增益、曝光控制的积分时间、防抖参数、闪光控制参数、第一透镜912控制参数(例如聚焦或变焦用焦距)、或这些参数的组合等。ISP控制参数可包括用于自动白平衡和颜色调整(例如，在RGB处理期间)的增益水平和色彩校正矩阵，以及第一透镜912阴影校正参数。

同样地，第二摄像头920采集的第二图像传输给第二ISP处理器940进行处理，第二ISP处理器940处理第一图像后，可将第二图像的统计数据(如图像的亮度、图像的反差值、图像的颜色等)发送给控制逻辑器950，控制逻辑器950可根据统计数据确定第二摄像头920的控制参数，从而第二摄像头920可根据控制参数进行自动对焦、自动曝光等操作。第二图像经过第二ISP处理器940进行处理后可存储至图像存储器960中，第二ISP处理器940也可以读取图像存储器960中存储的图像以对进行处理。另外，第二图像经过ISP处理器940进行处理后可直接发送至显示器970进行显示，显示器970也可以读取图像存储器960中的图像以进行显示。第二摄像头920和第二ISP处理器940也可以实现如第一摄像头910和第一ISP处理器930所描述的处理过程。

根据本申请实施例提供的图像处理电路可以实现上述视频预览图生成方法。其中，电子设备可以多个摄像头，摄像头包括镜头及与镜头对应设置的图像传感器，多个摄像头中的图像传感器采用矩形对角线的方式排列。电子设备实现该视频预览图生成方法的过程如上述实施例，在此不再赘述。

本申请实施例还提供了一种计算机可读存储介质。一个或多个包含计算机可执行指令的非易失性计算机可读存储介质，当计算机可执行指令被一个或多个处理器执行时，使得处理器执行视频预览图生成方法的步骤。

一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行视频预览图生成方法。

本申请实施例所使用的对存储器、存储、数据库或其它介质的任何引用可包括非易失性和/或易失性存储器。合适的非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)，它用作外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDR SDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)。

以上实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (11)

1.一种视频预览图生成方法，其特征在于，包括：

获取待处理视频中预设图像帧的抖动补偿信息；所述预设图像帧为根据所述待处理视频的拍摄时长确定的预设数量的图像帧；

将所述预设图像帧按照所述预设图像帧的抖动补偿信息的大小依次进行排列，得到图像帧序列；

从所述图像帧序列中筛选出抖动补偿信息最小的目标图像帧；

从待处理视频中提取所述目标图像帧，根据所述目标图像帧生成所述待处理视频的预览图。

2.根据权利要求1所述的方法，其特征在于，所述待处理视频的预览图的数量至少为一张。

3.根据权利要求2所述的方法，其特征在于，当所述待处理视频的预览图的数量为一张时；

根据所述预设图像帧的抖动补偿信息，从所述预设图像帧中筛选出抖动补偿信息在预设范围内的目标图像帧，包括：

将所述预设图像帧按照所述预设图像帧的抖动补偿信息的大小依次进行排列，得到图像帧序列；

从所述图像帧序列中筛选出抖动补偿信息最小的目标图像帧。

4.根据权利要求2所述的方法，其特征在于，当所述待处理视频的预览图的数量为两张或两张以上时；

根据所述预设图像帧的抖动补偿信息，从所述预设图像帧中筛选出抖动补偿信息在预设范围内的目标图像帧，包括：

将所述预设图像帧按照所述预设图像帧的抖动补偿信息的大小依次进行排列，得到图像帧序列；

从所述图像帧序列中筛选出抖动补偿信息最小的图像帧及与所述抖动补偿信息最小的图像帧的拍摄时间相邻的一帧或一帧以上图像帧，作为目标图像帧。

5.根据权利要求4所述的方法，其特征在于，所述从待处理视频中提取所述目标图像帧，根据所述目标图像帧生成所述待处理视频的预览图，包括：

从待处理视频中提取所述目标图像帧，根据所述目标图像帧生成动图，将所述动图作为所述待处理视频的预览图。

6.根据权利要求1所述的方法，其特征在于，所述获取待处理视频中预设图像帧的抖动补偿信息，包括：

当待处理视频的拍摄时长小于预设阈值时，则从待处理视频中获取所有图像帧的抖动补偿信息；

当待处理视频的拍摄时长大于或等于预设阈值时，则从待处理视频中获取部分时间段内的图像帧的抖动补偿信息。

7.根据权利要求6所述的方法，其特征在于，当待处理视频的拍摄时长大于或等于预设阈值时，则从待处理视频中获取部分时间段内的图像帧的抖动补偿信息；

所述根据所述预设图像帧的抖动补偿信息，从所述预设图像帧中筛选出抖动补偿信息在预设范围内的目标图像帧，包括：

将所述部分时间段内的图像帧按照所述图像帧的抖动补偿信息的大小依次进行排列，得到图像帧序列；

根据所述图像帧序列，从各部分时间段内的图像帧中分别筛选出一个抖动补偿信息最小的图像帧，将所有所述部分时间段内对应的抖动补偿信息最小的图像帧作为目标图像帧。

8.一种视频预览图生成装置，其特征在于，包括：

图像帧的抖动补偿信息提取模块，用于获取待处理视频中预设图像帧的抖动补偿信息；所述预设图像帧为根据所述待处理视频的拍摄时长确定的预设数量的图像帧；

目标图像帧筛选模块，用于将所述预设图像帧按照所述预设图像帧的抖动补偿信息的大小依次进行排列，得到图像帧序列；从所述图像帧序列中筛选出抖动补偿信息最小的目标图像帧；

预览图生成模块，用于从待处理视频中提取所述目标图像帧，根据所述目标图像帧生成所述待处理视频的预览图。

9.一种电子设备，包括存储器及处理器，所述存储器中储存有计算机程序，其特征在于，所述计算机程序被所述处理器执行时，使得所述处理器执行如权利要求1至7中任一项所述的视频预览图生成方法的步骤。

10.根据权利要求9所述的电子设备，其特征在于，所述电子设备包括图像处理电路；所述图像处理电路包括第一ISP处理器、第二ISP处理器和控制逻辑器；

所述第一ISP处理器，用于接收第一摄像头传输的第一图像，对所述第一图像进行处理，得到所述第一图像的第一统计数据，并将所述第一统计数据发送至所述控制逻辑器中；

所述第一ISP处理器，用于接收第二摄像头传输的第二图像，对所述第二图像进行处理，得到所述第二图像的第二统计数据，并将所述第二统计数据发送至所述控制逻辑器中；

所述控制逻辑器，用于根据所述第一统计数据，确定所述第一摄像头的第一控制参数，以使所述第一摄像头根据所述第一控制参数进行相应的操作；还用于根据所述第二统计数据，确定所述第二摄像头的第二控制参数，以使所述第二摄像头根据所述第二控制参数进行相应的操作。

11.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的方法的步骤。

Images