CN115242981A - 视频播放方法、视频播放装置和电子设备 - Google Patents

Abstract

本申请公开了一种视频播放方法、视频播放装置和电子设备，属于图像处理技术领域。所述视频播放方法，包括：接收第一输入；响应于所述第一输入，确定目标防抖强度，并基于待播放视频中各视频帧对应的第一姿态数据和所述目标防抖强度，对所述各所述视频帧进行处理；播放处理后的各所述视频帧；其中，所述第一姿态数据为拍摄所述待播放视频时由陀螺仪采集的姿态数据，所述待播放视频中各视频帧为由图像传感器采集的视频帧，且所述待播放视频中各视频帧为未进行电子防抖处理的视频帧。

Description

视频播放方法、视频播放装置和电子设备

技术领域

本申请属于图像处理技术领域，具体涉及一种视频播放方法、视频播放装置和电子设备。

背景技术

具有拍摄功能的电子设备一般具有防抖功能。相关技术中，主要通过在拍摄过程中基于抖动信息对图像信息进行裁剪以生成具有一定尺寸大小的图像，从而得到清晰的图像以实现电子防抖处理。然而，以上方法一方面使得在进行视频采集的过程中会涉及较多的计算，从而造成较大的功耗，另一方面，基于该方法生成的视频，在播放过程中无法调整视频的防抖参数，从而使得在视频播放过程中的使用灵活性也相对较差。

发明内容

本申请实施例的目的是提供一种视频播放方法、视频播放装置和电子设备，能够解决视频播放过程中的灵活性较差的问题。

第一方面，本申请实施例提供了一种视频播放方法，该方法包括：

接收第一输入；

响应于所述第一输入，确定目标防抖强度，并基于待播放视频中各视频帧对应的第一姿态数据和所述目标防抖强度，对所述各所述视频帧进行处理；

播放处理后的各所述视频帧；

其中，所述第一姿态数据为拍摄所述待播放视频时由陀螺仪采集的姿态数据，所述待播放视频中各视频帧为由图像传感器采集的视频帧，且所述待播放视频中各视频帧为未进行电子防抖处理的视频帧。

第二方面，本申请实施例提供了一种视频播放装置，该装置包括：

第一接收模块，用于接收第一输入；

第一处理模块，用于响应于所述第一输入，确定目标防抖强度，并基于待播放视频中各视频帧对应的第一姿态数据和所述目标防抖强度，对所述各所述视频帧进行处理；

第一显示模块，用于播放处理后的各所述视频帧；

其中，所述第一姿态数据为拍摄所述待播放视频时由陀螺仪采集的姿态数据，所述待播放视频中各视频帧为由图像传感器采集的视频帧，且所述待播放视频中各视频帧为未进行电子防抖处理的视频帧。

第三方面，本申请实施例提供了一种电子设备，该电子设备包括处理器和存储器，所述存储器存储可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如第一方面所述的方法。

第四方面，本申请实施例提供了一种可读存储介质，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如第一方面所述的方法。

第五方面，本申请实施例提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现如第一方面所述的方法。

第六方面，本申请实施例提供一种计算机程序产品，该程序产品被存储在存储介质中，该程序产品被至少一个处理器执行以实现如第一方面所述的方法。

在本申请实施例中，用户通过第一输入确定目标防抖强度，并基于陀螺仪采集的与视频帧对应的第一姿态数据以及目标防抖强度，在视频播放前对视频帧进行电子抖动补偿，在增强视频防抖效果，降低视频采集的功耗的同时，还具有较高的使用灵活性。

附图说明

图1是本申请实施例提供的视频播放方法的流程示意图之一；

图2是本申请实施例提供的视频播放方法的流程示意图之二；

图3是本申请实施例提供的视频播放装置的结构示意图；

图4是本申请实施例提供的电子设备的结构示意图；

图5是本申请实施例提供的电子设备的硬件示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员获得的所有其他实施例，都属于本申请保护的范围。

本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象，而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施，且“第一”、“第二”等所区分的对象通常为一类，并不限定对象的个数，例如第一对象可以是一个，也可以是多个。此外，说明书以及权利要求中“和/或”表示所连接对象的至少其中之一，字符“/”，一般表示前后关联对象是一种“或”的关系。

下面结合附图，通过具体的实施例及其应用场景对本申请实施例提供的视频播放方法、视频播放装置、电子设备和可读存储介质进行详细地说明。

其中，视频播放方法可应用于终端，具体可由，终端中的硬件或软件执行。

该终端包括但不限于具有触摸敏感表面(例如，触摸屏显示器和/或触摸板)的移动电话或平板电脑等其它便携式通信设备。还应当理解的是，在某些实施例中，该终端可以不是便携式通信设备，而是具有触摸敏感表面(例如，触摸屏显示器和/或触摸板)的台式计算机。

以下各个实施例中，描述了包括显示器和触摸敏感表面的终端。然而，应当理解的是，终端可以包括诸如物理键盘、鼠标和控制杆的一个或多个其它物理用户接口设备。

本申请实施例提供的视频播放方法，该视频播放方法的执行主体可以为电子设备或者电子设备中能够实现该视频播放方法的功能模块或功能实体，本申请实施例提及的电子设备包括但不限于手机、平板电脑、电脑、相机、可穿戴设备等，下面以电子设备作为执行主体为例对本申请实施例提供的视频播放方法进行说明。

如图1所示，该视频播放方法包括：步骤110、步骤120和步骤130。

步骤110、接收第一输入；

在该步骤中，第一输入用于确定目标防抖强度。

目标防抖强度为电子防抖(Electric Image Stabilization，EIS)所对应的防抖强度，基于目标防抖强度，可以确定EIS margin(EIS裕度)。

可以理解的是，防抖强度越大，则防抖效果越好。

其中，第一输入可以为如下至少一种方式：

其一，第一输入可以为触控操作，包括但不限于点击操作、滑动操作和按压操作等。

在该实施方式中，接收第一输入，可以为，接收用户在终端显示屏的显示区域的触控操作。

为了降低用户误操作率，可以将第一输入的作用区域限定在特定的区域内，比如拍摄界面的上部中间区域；或者在显示拍摄界面的状态下，在当前界面显示目标控件，触摸或拖动目标控件，即可实现第一输入；或者将第一输入设置为在目标时间间隔内对显示区域的连续多次敲击操作。

例如，在相册显示界面显示用于调整防抖强度的进度条的目标控件，用户通过拖动目标控件以对应调整防抖强度，并将目标控件最终停留的位置所对应的防抖强度确定为目标防抖强度。

其二，第一输入可以为实体按键输入。

在该实施方式中，终端的机身上设有对应的实体按键(如音量键或开关机键等)，接收第一输入，可以为，接收用户按压对应的实体按键的第一输入；第一输入还可以为同时按压多个实体按键的组合操作。

其三，第一输入可以为语音输入。

在该实施方式中，终端可以在接收到语音时，对语音进行语义识别以转化为控制指令。

当然，在其他实施例中，第一输入也可以为其他形式，包括但不限于字符输入等，具体可根据实际需要决定，本申请实施例对此不作限定。

步骤120、响应于第一输入，确定目标防抖强度，并基于待播放视频中各视频帧对应的第一姿态数据和目标防抖强度，对各视频帧进行处理；

在该步骤中，待播放视频包括多帧视频帧。

其中，待播放视频中各视频帧为由图像传感器采集的视频帧，且待播放视频中各视频帧为未进行电子防抖处理的视频帧。

图像传感器可以为设置于电子设备上的摄像头模组等。

待播放视频可以为由电子设备采集的，并存储于数据库中的任意视频。

需要说明的是，待播放视频中各视频帧可能为已经进行光学防抖处理的视频帧，或者也可能为未进行光学防抖处理的视频帧。

第一姿态数据为拍摄待播放视频时由陀螺仪采集的姿态数据。

待播放视频中每一帧视频帧，均对应有第一姿态数据。

其中，陀螺仪为测量电子设备三轴的角速度大小的仪器，用于测量图像传感器的抖动信息。

可以理解的是，在实际执行过程中，陀螺仪对应有第一采集频率。

例如，第一采集频率可以为512MHZ。

陀螺仪基于第一采集频率，不间断采集每个采集时刻下的姿态数据，该姿态数据即为第一姿态数据；即每一个第一姿态数据对应一个陀螺仪采集时间，并将采集到的姿态数据进行存储。

可选地，在实际的视频采集过程中，陀螺仪采集姿态信息仅用于进行存储，而不用于电子防抖补偿。

其中，陀螺仪采集姿态信息可以存储于数据库中，也可以存储于视频数据中，通过存储于视频数据中，便于后期在播放待播放视频时能够直接从视频数据中获取该姿态数据，提高数据采集效率。

可选地，待播放视频中的每一个视频帧，均对应有一个第一时间信息，该第一时间信息用于表征生成该视频帧所对应的相关时间信息。

图像传感器在采集图像信息的同时，陀螺仪也对应采集有姿态信息。

需要说明的是，在实际执行过程中，陀螺仪的第一采集频率可能与图像传感器的第二采集频率相同，或者也可能高于图像传感器的第二采集频率，第一采集频率具体基于陀螺仪的硬件性能确定。

在实际执行过程中，可以将图像传感器采集的视频帧以及陀螺仪采集的姿态数据存储于数据库中，在后续使用时，直接从数据库中获取即可。

在一些实施例中，在步骤110之前，该方法还可以包括：

接收第二输入；

响应于第二输入，从多个视频中确定待播放视频。

其中，第二输入用于确定待播放视频。

第二输入可以为与第一输入相同的触控输入、实体按键输入、语音输入以及字符输入等，在此不作赘述。

在确定待播放视频后，电子设备接收用户的第一输入，响应于第一输入，确定待播放视频所对应的目标防抖强度，并基于目标防抖强度对待播放视频中的每一帧视频帧进行电子防抖处理。

具体地，从数据库中获取所存储的待播放视频中每一帧视频帧对应的第一姿态数据，然后基于当前视频帧对应的第一姿态数据和目标防抖强度，对当前视频帧进行处理，以实现电子防抖处理。

其中，对当前视频帧进行处理，包括对当前视频帧进行裁剪。

通过将当前视频帧裁剪至一定尺寸，以消除部分抖动从而实现电子防抖。

在一些实施例中，步骤120可以包括：

基于待播放视频中各视频帧对应的第一姿态数据和目标防抖强度，确定各视频帧对应的目标裁剪系数；

基于各视频帧对应的目标裁剪系数，裁剪各视频帧。

在该实施例中，目标裁剪系数包括透视变换(warp)的栅格数据(grid)。

在实际执行过程中，可以通过对第一姿态数据和目标防抖强度进行计算来得到目标裁剪系数。

在得到目标裁剪系数后，基于目标裁剪系数对待播放视频中各视频帧进行warp和裁切，即可得到裁剪后的各视频帧。

然后基于时间顺序，将裁剪后的各视频帧进行播放显示，用户看到的裁剪后的各视频帧则具有防抖效果。

根据本申请实施例提供的视频播放方法，通过待播放视频中各视频帧对应的第一姿态数据和目标防抖强度，确定待播放视频中各视频帧对应的目标裁剪系数，并基于目标裁剪系数，裁剪各视频帧，用户可以自定义防抖强度，从而使得用户可以基于实际需求对视频进行不同的防抖强度的调节，具有较高的使用灵活性，有助于提高用户的使用体验。

步骤130、播放裁剪后的各视频帧。

在该步骤中，在基于目标防抖强度对待播放视频中各视频帧进行裁剪后，即可将裁剪后的各视频帧发送至屏幕进行显示。

具体地，可以基于各视频帧对应的第一时间信息，顺次显示剪裁后的各视频帧。

此时，用户即可以看到抖动程度较低的视频。

例如，在拍摄过程中，图像传感器正常采集图像信息，如采集得到视频帧A1、视频帧A2和视频帧A3，陀螺仪正常采集第一姿态数据，如采集得到第一姿态数据G1、第一姿态数据G2和第一姿态数据G3；

其中，第一姿态数据G1、第一姿态数据G2和第一姿态数据G3分别与视频帧A1、视频帧A2和视频帧A3一一对应。

电子设备将采集到的以上数据发送至数据库进行存储。

需要说明的是，此时存储的视频帧为未进行电子防抖处理的视频帧。

在需要进行视频播放的情况下，用户选中视频帧A1、视频帧A2和视频帧A3所属的视频，并通过第一输入确定目标防抖强度。

电子设备从数据库中获取视频帧A1对应的第一姿态数据G1，视频帧A2对应的第一姿态数据G2以及视频帧A3对应的第一姿态数据G3；然后基于第一姿态数据G1和目标防抖强度对视频帧A1进行裁剪，得到裁剪后的视频帧A1；基于第一姿态数据G2和目标防抖强度对视频帧A2进行裁剪，得到裁剪后的视频帧A2；基于第一姿态数据G3和目标防抖强度对视频帧A3进行裁剪，得到裁剪后的视频帧A3。

最后顺序播放裁剪后的视频帧A1、裁剪后的视频帧A2和裁剪后的视频帧A3，此时用户即可看到具有防抖效果的视频。

在本申请中，一方面，在视频采集过程中不对采集的图像信息进行电子抖动补偿，而是在视频播放过程中，基于陀螺仪采集的与视频帧对应的第一姿态数据对视频帧进行电子抖动补偿，在增强视频防抖效果以提升视频显示效果的同时，还能有效减少视频采集过程中所涉及的数据量以及计算量，降低视频采集的功耗，显著延长电子设备在采集视频的过程中的持续工作时长。

另一方面，通过第一输入确定目标防抖强度，并基于目标防抖强度对待播放视频中各视频帧进行裁剪，以得到满足用户防抖效果需求的视频，使得用户可以自定义防抖强度，从而视频进行不同的防抖强度的调节，具有较高的使用灵活性和普适性。

根据本申请实施例提供的视频播放方法，用户通过第一输入确定目标防抖强度，并基于陀螺仪采集的与视频帧对应的第一姿态数据以及目标防抖强度，在视频播放前对视频帧进行电子抖动补偿，在增强视频防抖效果，降低视频采集的功耗的同时，还具有较高的使用灵活性。

在一些实施例中，待播放视频包括相邻的第一视频帧和第二视频帧；在步骤130之前，该方法还可以包括：

对第一视频帧和第二视频帧进行插帧处理，生成目标中间帧；

基于第一视频帧和第二视频帧，确定目标中间帧对应的目标姿态数据；

基于目标姿态数据和目标防抖强度，处理目标中间帧；

步骤130可以包括：

在播放处理后的第一视频帧之后，且在播放处理后的第二视频帧之前，播放处理后的目标中间帧。

在该实施例中，第一视频帧与第二视频帧为由图像传感器采集的相邻的视频帧。

第一视频帧与第二视频帧可以为存储于数据库中的任意视频中的相邻两帧。

该待播放视频的帧数可以为任意不小于2的整数值。

其中，存储于数据库中的待播放视频中各视频帧为未进行电子抖动补偿的视频帧。

目标中间帧为对第一视频帧和第二视频帧进行插帧处理所生成的中间帧。

目标中间帧位于第一视频帧之后，且位于第二视频帧之前。

第一视频帧和第二视频帧之间的目标中间帧的帧数，可以为1帧或者多帧；在实际执行过程中，可以基于视频播放的流畅度，确定目标中间帧的帧数。

可以理解的是，目标中间帧的帧数越多，其对应的视频播放的流畅度越高。

目标姿态数据为目标中间帧对应的姿态数据。

需要说明的是，目标姿态数据可以为由陀螺仪实际采集的第一姿态数据，或者也可以为通过算法计算得到的预测数据。

在确定目标姿态数据后，则可以基于目标姿态数据和目标防抖强度，裁剪目标中间帧；具体处理过程与上述实施例类似，在此不作赘述。

在得到裁剪后的目标中间帧后，即可基于时间顺序顺次播放裁剪后的第一视频帧、裁剪后的目标中间帧以及裁剪后的第二视频帧。

例如，在实际拍摄过程中，图像传感器正常采集图像信息，得到视频帧A1、视频帧A2和视频帧A3，陀螺仪正常采集第一姿态数据，得到第一姿态数据G1、第一姿态数据G2和第一姿态数据G3；

其中，第一姿态数据G1、第一姿态数据G2和第一姿态数据G3分别与视频帧A1、视频帧A2和视频帧A3一一对应。

电子设备将采集到的以上数据发送至数据库进行存储。

在视频播放的情景下，对视频帧A1、视频帧A2和视频帧A3进行插帧处理。

可以理解的是，对于视频帧A1和视频帧A2，则第一视频帧为视频帧A1，第二视频帧为视频帧A2；对于视频帧A2和视频帧A3，则第一视频帧为视频帧A2，第二视频帧为视频帧A3。

用户通过第一输入确定目标防抖强度。

电子设备响应于第一输入，从数据库中获取视频帧A1对应的第一姿态数据G1，视频帧A2对应的第一姿态数据G2以及视频帧A3对应的第一姿态数据G3；

除此之外，电子设备还对视频帧A1和视频帧A2进行插帧处理，生成中间帧A’1；对视频帧A2和视频帧A3进行插帧处理，生成中间帧A’2；并确定中间帧A’1对应的目标姿态数据和中间帧A’2对应的目标姿态数据。

电子设备基于第一姿态数据G1和目标防抖强度对视频帧A1进行裁剪，得到裁剪后的视频帧A1；基于A’1对应的目标姿态数据和目标防抖强度对中间帧A’1进行裁剪，得到裁剪后的中间帧A’1；基于第一姿态数据G2和目标防抖强度对视频帧A2进行裁剪，得到裁剪后的视频帧A2；基于A’2对应的目标姿态数据和目标防抖强度对中间帧A’2进行裁剪，得到裁剪后的中间帧A’2；基于第一姿态数据G3和目标防抖强度对视频帧A3进行裁剪，得到裁剪后的视频帧A3。

最后顺序播放裁剪后的视频帧A1、裁剪后的中间帧A’1、裁剪后的视频帧A2、裁剪后的中间帧A’2和裁剪后的视频帧A3，此时用户即可看到具有防抖效果的视频，且该视频具有较高的流畅度。

根据本申请实施例提供的视频播放方法，通过对相邻视频帧进行插帧处理，并基于目标防抖强度和中间帧对应的目标姿态数据对中间帧进行电子防抖处理，在提高视频的防抖效果的同时，还能显著提高视频的显示帧率，以提高视频的流畅度，从而进一步提高视频的显示效果。

下面分别从两种不同的实现角度，对目标姿态数据的确定方式进行具体说明。

一、目标姿态数据为由陀螺仪实际采集的第一姿态数据

该情况适用于图像采集的硬件条件较好的情景。

在一些实施例中，基于第一视频帧和第二视频帧，确定目标中间帧对应的目标姿态数据，可以包括：

基于第一视频帧对应的第一时间信息和第二视频帧对应的第一时间信息，确定第二时间信息；

基于第二时间信息，从陀螺仪采集的姿态数据中筛选得到目标姿态数据。

在该实施例中，第一姿态数据、第二姿态数据和目标姿态数据均为由陀螺仪实际采集的数据。

可以理解的是，陀螺仪的第一采集频率高于图像传感器的第二采集频率，相同时间段内，陀螺仪采集的姿态数据的数量多于图像传感器采集的视频帧的帧数。

第一时间信息为与第一视频帧相关的时间信息。

第二时间信息为与姿态数据相关的时间信息。

其中，第二时间信息可以为时间段或者为时刻值；

在第二时间信息为时间段的情况下，第二时间信息的范围内可能包括一个或多个陀螺仪采集时间，第二时间信息的范围内所包括的陀螺仪采集时间对应的姿态数据，与第一时间信息对应的视频帧具有对应关系；

在第二时间信息为时刻值的情况下，第二时间信息即为陀螺仪采集时间。

在实际执行过程中，可以基于第一视频帧和第二视频帧对应的第一时间信息，确定在第一视频帧和第二视频帧对应的第一时间信息附近的时间段，并将该时间段确定为第二时间信息。

在确定第二时间信息后，从陀螺仪采集的姿态数据中筛选得到对应的陀螺仪采集时间在第二时间信息范围内的第一姿态数据，该第一姿态数据即为目标姿态数据。

其中，在第二时间信息范围内的第一姿态数据的数量可能为1个，或者也可能为多个。

在第一姿态数据的数量为多个的情况下，可以基于帧率确定目标姿态数据的数量，并从多个第一姿态数据中选择相应数量的第一姿态数据作为目标姿态数据。

例如，在对30帧的视频进行插帧处理以得到60帧的视频情况下，则需在每相邻的视频帧之间插入一个中间帧，即目标中间帧的帧数为1帧。

根据本申请实施例提供的视频播放方法，通过从陀螺仪采集的姿态数据中筛选得到目标姿态数据，可以得到较为真实的目标中间帧所对应的姿态数据，从而提高后续剪裁结果的准确性，以提高视频防抖效果。

在一些实施例中，第一时间信息可以包括：视频帧对应的时间戳、视频帧对应的曝光时间和视频帧对应的卷帘快门时间中的至少两种。

在该实施例中，时间戳用于表征待播放视频中各视频帧的生成时间。

曝光时间用于表征在采集各视频帧对应的图像信息时，图像传感器的曝光时间。

卷帘快门(rolling shutter)时间为在采用卷帘快门拍摄模式进行拍摄时所花费的快门时间，其中，卷帘快门拍摄模式下，不同行对应的曝光时间不同。

在实际执行过程中，可以基于第一视频帧和第二视频帧对应的时间戳、第一视频帧对应的曝光时间和第一视频帧对应的卷帘快门时间，共同确定目标姿态数据对应的第二时间信息；或者可以基于第一视频帧和第二视频帧对应的时间戳和第一视频帧对应的曝光时间确定目标姿态数据对应的第二时间信息；或者可以基于第一视频帧和第二视频帧对应的曝光时间和第一视频帧对应的卷帘快门时间确定目标姿态数据对应的第二时间信息。

例如，图像传感器采集得到视频帧A1、视频帧A2和视频帧A3，其中，视频帧A1对应的时间戳为T1，视频帧A1对应的曝光时间为E1，视频帧A1对应的卷帘快门时间为RS；视频帧A2对应的时间戳为T2，视频帧A2对应的曝光时间为E2，视频帧A2对应的卷帘快门时间为RS；视频帧A3对应的时间戳为T3，视频帧A3对应的曝光时间为E3，视频帧A3对应的卷帘快门时间为RS。

陀螺仪采集得到多个第一姿态数据，其中第一姿态数据G1、第一姿态数据G2和第一姿态数据G3分别与视频帧A1、视频帧A2和视频帧A3一一对应，以上数据均存储于电子设备的数据库中。

其中，第一姿态数据G1对应的第二时间信息t1可以通过公式：t1＝(T1-E1,T1+RS)确定；第一姿态数据G2对应的第二时间信息t2可以通过公式：t2＝(T2-E2,T2+RS)确定；第一姿态数据G3对应的第二时间信息t3可以通过公式：t3＝(T3-E3,T3+RS)确定。

在得到t1、t2和t3后，从存储的第一姿态数据中，筛选陀螺仪采集时间在t1范围内的第一姿态数据，确定为第一姿态数据G1；筛选陀螺仪采集时间在t2范围内的第一姿态数据，确定为第一姿态数据G2；筛选陀螺仪采集时间在t3范围内的第一姿态数据，确定为第一姿态数据G3。

基于第一姿态数据G1和目标防抖强度对视频帧A1进行裁剪，得到裁剪后的视频帧A1；基于第一姿态数据G2和目标防抖强度对视频帧A2进行裁剪，得到裁剪后的视频帧A2；基于第一姿态数据G3和目标防抖强度对视频帧A3进行裁剪，得到裁剪后的视频帧A3。

除此之外，还可以采用插帧技术，在A1和A2之间插入中间帧A’1，在A2和A3之间插入中间帧A’2，以提高视频播放的流畅度。

其中，中间帧A’1对应的目标姿态数据为G’1，目标姿态数据G’1对应的第二时间信息为t’1；中间帧A’2对应的目标姿态数据为G’1，目标姿态数据G’2对应的第二时间信息为t’2。

t’1和t’2的确定方式为：

利用公式：t’1＝((T1+T2)/2-E1,((T1+T2)/2+RS)，确定目标姿态数据G’1对应的第二时间信息t’1；利用公式：t’2＝((T2+T3)/2-E2,((T2+T3)/2+RS)，确定姿态数据G’2对应的第二时间信息t’2。

G’1和G’2的确定方式为：

在得到t’1和t’2后，从存储的姿态数据中，筛选陀螺仪采集时间在t’1范围内的第一姿态数据，将其确定为中间帧A’1对应的目标姿态数据G’1；筛选陀螺仪采集时间在t’2范围内的第一姿态数据，将其确定为中间帧A’2对应的目标姿态数据G’2。

在得到G’1和G’2后，基于G’1和目标防抖强度对中间帧A’1进行裁剪，得到裁剪后的中间帧A’1；基于G’2和目标防抖强度对中间帧A’2进行裁剪，得到裁剪后的中间帧A’2；

然后将裁剪后的中间帧A’1插入中间帧的视频帧A1和裁剪后的视频帧A2之间，将裁剪后的中间帧A’2插入裁剪后的视频帧A2和裁剪后的视频帧A3之间。

最后顺次显示裁剪后的视频帧A1、裁剪后的中间帧A’1、裁剪后的视频帧A2、裁剪后的中间帧A’2和裁剪后的视频帧A3。

根据本申请实施例提供的视频播放方法，通过视频帧对应的时间戳、视频帧对应的曝光时间和视频帧对应的卷帘快门时间中的至少两种确定目标中间帧对应的第二时间信息，可以建立较为准确地目标中间帧与第一姿态数据之间的对应关系，从而提高后续剪裁结果的准确性，以提高视频防抖效果。

二、目标姿态数据为计算得到的预测数据

该情况适用于图像采集的硬件条件一般的情景。

在一些实施例中，基于第一视频帧和第二视频帧，确定目标中间帧对应的目标姿态数据，可以包括：对第一视频帧对应的第一姿态数据和第二视频帧对应的第一姿态数据进行均值计算，生成目标姿态数据。

在该实施例中，可以基于姿态数据和第二姿态数据，预测得到目标姿态数据。

例如，在图像采集过程中，图像传感器采集得到视频帧A1、A2和A3，其中，A1对应的时间戳为T1，A2对应的时间戳为T2，A3对应的时间戳为T3。

陀螺仪采集得到多个姿态数据，其中T1时刻对应的姿态数据为D1，T2时刻对应的姿态数据为D2，T3时刻对应的姿态数据为D3，以上数据均存储于电子设备的数据库中。

在视频播放过程中，采用插帧技术，在A1和A2之间插入中间帧A’1，在A2和A3之间插入中间帧A’2，以提高视频流畅度。

其中，中间帧A’1对应的目标姿态数据为D’1，目标姿态数据D’1对应的第二时间信息为t’1；中间帧A’2对应的目标姿态数据为D’2，目标姿态数据D’2对应的第二时间信息为t’2。

t’1和t’2的确定方式为：

利用公式：t’1＝(T1+T2)/2；t’2＝(T2+T3)/2确定；

D’1和D’2的确定方式为：

利用公式D’1＝(D1+D2)/2确定姿态数据D’1，利用公式：D’2＝(D2+D3)/2确定姿态数据D’2。

在得到D’1和D’2后，基于D’1和目标防抖强度对中间帧A’1进行裁剪，得到裁剪后的中间帧A’1；基于D’2和目标防抖强度对中间帧A’2进行裁剪，得到裁剪后的中间帧A’2；

将裁剪后的中间帧A’1插入裁剪后的视频帧A1和裁剪后的视频帧A2之间，将裁剪后的中间帧A’2插入裁剪后的视频帧A2和裁剪后的视频帧A3之间；

最后顺次显示裁剪后的视频帧A1、裁剪后的中间帧A’1、裁剪后的视频帧A2、裁剪后的中间帧A’2和裁剪后的视频帧A3。

根据本申请实施例提供的视频播放方法，通过第一视频帧对应的第一姿态数据和第二视频帧对应的第一姿态数据，预测得到目标中间帧对应的目标姿态数据，可以实现在硬件条件的限制下(如陀螺仪或OIS(Optical Image Stabilizer)加入采样频率不够等情况)对姿态数据的补充，为后续对中间帧进行电子防抖处理提供数据基础，降低了对采集设备的硬件要求，且易于实现。

如图2所示，在一些实施例中，在步骤110之前，该方法还可以包括：

获取光学防抖数据；

基于光学防抖数据调整图像传感器。

在该实施例中，光学防抖数据(OIS数据)为由光学防抖控制器(Optical ImageStabilizer，OIS)生成的，用于调整图像传感器的镜头角度以实现光学防抖的数据。

光学防抖控制器用于获取陀螺仪采集的第一姿态数据，并基于第一姿态数据进行光学防抖处理以对采集的每一帧视频帧进行光学抖动补偿，通过光学防抖算法计算目标位置，并控制图像传感器调整至目标位置。

在视频采集过程中，陀螺仪采集第一姿态数据，光学防抖控制器采集OIS数据，电子设备基于OIS数据调整图像传感器，以进行光学防抖处理。

此时图像传感器所采集的视频帧为经过光学防抖处理但未经过电子防抖处理的视频帧。

在采集得到视频帧后，分别将视频帧、第一姿态数据以及OIS数据进行存储。

在实际执行过程中，可以通过设置采集模块和播放模块，分别进行数据采集以及视频帧的处理及播放等处理，其中，通过采集模块采集视频帧、第一姿态数据以及OIS数据等；通过播放模块基于第一姿态数据对视频帧进行剪裁，并显示剪裁后的视频帧。

例如，继续参考图2，在拍摄过程中，用户打开相机APP应用程序，点击进入摄像功能，进行第三输入以确定开启防抖拍摄功能。

电子设备响应于第三输入，进入防抖拍摄情景，APP将防抖拍摄情景下的相关参数下发给Camera HAL模块。

其中，第三输入可以为与第一输入相同的触控输入、实体按键输入、语音输入以及字符输入等，在此不作赘述。

图像传感器采集图像信息，并将采集的图像信息发送至数据库，数据库基于时间顺序对图像信息进行存储，生成视频文件。

同时，陀螺仪采集第一姿态数据，光学图像稳定器采集OIS数据。

Camera HAL根据APP下发的相关参数，将第一姿态数据和OIS数据写入动态metadata中，随着每一帧返回给APP应用程序。

APP应用程序将返回的视频帧、第一姿态数据和OIS数据保存至视频文件中。

在拍摄完成后，用户进入相册，通过第二输入选中目标视频，并通过第一输入以输入所需的目标防抖强度。

电子设备响应于第一输入，确定目标防抖强度，并基于目标防抖强度动态设置margin，然后基于陀螺仪采集的第一姿态数据和OIS数据计算出每一个视频帧对应的warp的grid数据，并将grid数据送入GPU进行变换裁切，然后将剪裁后的视频帧输入至显示屏进行顺次显示。

此时，用户即可看到具有目标防抖强度的视频。

播放结束后，用户退出相册，则结束本次视频播放。

根据本申请实施例提供的视频播放方法，通过在拍摄过程中进行光学防抖处理，在播放过程中基于目标防抖强度对视频帧进行电子防抖处理，以对光学抖动补偿进行优化，可以进一步提高视频的防抖效果，同时降低视频采集的功耗，提高防抖调节的灵活性。

本申请实施例提供的视频播放方法，执行主体可以为视频播放装置。本申请实施例中以视频播放装置执行视频播放方法为例，说明本申请实施例提供的视频播放装置。

本申请实施例还提供一种视频播放装置。

如图3所示，该视频播放装置包括：第一接收模块310、第一处理模块320和第一显示模块330。

第一接收模块310，用于接收第一输入；

第一处理模块320，用于响应于第一输入，确定目标防抖强度，并基于待播放视频中各视频帧对应的第一姿态数据和目标防抖强度，对各视频帧进行处理；

第一显示模块330，用于播放处理后的各视频帧；

其中，第一姿态数据为拍摄待播放视频时由陀螺仪采集的姿态数据，待播放视频中各视频帧为由图像传感器采集的视频帧，且待播放视频中各视频帧为未进行电子防抖处理的视频帧。

根据本申请实施例提供的视频播放装置，用户通过第一输入确定目标防抖强度，并基于陀螺仪采集的与视频帧对应的第一姿态数据以及目标防抖强度，在视频播放前对视频帧进行电子抖动补偿，在增强视频防抖效果，降低视频采集的功耗的同时，还具有较高的使用灵活性。

在一些实施例中，待播放视频包括相邻的第一视频帧和第二视频帧；该装置还可以包括：

第二处理模块，用于在播放处理后的各视频帧之前，对第一视频帧和第二视频帧进行插帧处理，生成目标中间帧；

第三处理模块，用于基于第一视频帧和第二视频帧，确定目标中间帧对应的目标姿态数据；

第四处理模块，用于基于目标姿态数据和目标防抖强度，裁剪目标中间帧；

第一显示模块330，还可以用于：

在播放处理后的第一视频帧之后，且在播放处理后的第二视频帧之前，播放处理后的目标中间帧。

在一些实施例中，第三处理模块，还可以用于：

对第一视频帧对应的第一姿态数据和第二视频帧对应的第一姿态数据进行均值计算，生成目标姿态数据。

在一些实施例中，第三处理模块，还可以用于：基于第一视频帧对应的第一时间信息和第二视频帧对应的第一时间信息，确定第二时间信息；

基于第二时间信息，从陀螺仪采集的姿态数据中筛选得到目标姿态数据。

在一些实施例中，第一处理模块320，还可以用于：

基于待播放视频中各视频帧对应的第一姿态数据和目标防抖强度，确定各视频帧对应的目标裁剪系数；

基于各视频帧对应的目标裁剪系数，裁剪各视频帧。

本申请实施例中的视频播放装置可以是电子设备，也可以是电子设备中的部件，例如集成电路或芯片。该电子设备可以是终端，也可以为除终端之外的其他设备。示例性的，电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、移动上网装置(Mobile Internet Device，MID)、增强现实(augmented reality，AR)/虚拟现实(virtualreality，VR)设备、机器人、可穿戴设备、超级移动个人计算机(ultra-mobile personalcomputer，UMPC)、上网本或者个人数字助理(personal digital assistant，PDA)等，还可以为个人计算机(personal computer，PC)、电视机(television，TV)、柜员机或者自助机等，本申请实施例不作具体限定。

本申请实施例中的视频播放装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统，可以为IOS操作系统，还可以为其他可能的操作系统，本申请实施例不作具体限定。

本申请实施例提供的视频播放装置能够实现图1至图2的方法实施例实现的各个过程，为避免重复，这里不再赘述。

可选地，如图4所示，本申请实施例还提供一种电子设备400，包括处理器401，存储器402，存储在存储器402上并可在所述处理器401上运行的程序或指令，该程序或指令被处理器401执行时实现上述视频播放方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

需要说明的是，本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。

图5为实现本申请实施例的一种电子设备的硬件结构示意图。

该电子设备500包括但不限于：射频单元501、网络模块502、音频输出单元503、输入单元504、传感器505、显示单元506、用户输入单元507、接口单元508、存储器509以及处理器510等部件。

本领域技术人员可以理解，电子设备500还可以包括给各个部件供电的电源(比如电池)，电源可以通过电源管理系统与处理器510逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图5中示出的电子设备结构并不构成对电子设备的限定，电子设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置，在此不再赘述。

其中，用户输入单元507，用于接收第一输入；

处理器510用于响应于第一输入，确定目标防抖强度，并基于待播放视频中各视频帧对应的第一姿态数据和目标防抖强度，对各视频帧进行处理；

显示单元506用于播放处理后的各视频帧；

其中，第一姿态数据为拍摄待播放视频时由陀螺仪采集的姿态数据，待播放视频中各视频帧为由图像传感器采集的视频帧，且待播放视频中各视频帧为未进行电子防抖处理的视频帧。

根据本申请实施例提供的电子设备，用户通过第一输入确定目标防抖强度，并基于陀螺仪采集的与视频帧对应的第一姿态数据以及目标防抖强度，在视频播放前对视频帧进行电子抖动补偿，在增强视频防抖效果，降低视频采集的功耗的同时，还具有较高的使用灵活性。

可选地，待播放视频包括相邻的第一视频帧和第二视频帧；

处理器510，还可以用于在播放裁剪后的各视频帧之前，对第一视频帧和第二视频帧进行插帧处理，生成目标中间帧；

基于第一视频帧和第二视频帧，确定目标中间帧对应的目标姿态数据；

基于目标姿态数据和目标防抖强度，处理目标中间帧；

显示单元506，还可以用于在播放处理后的第一视频帧之后，且在播放处理后的第二视频帧之前，播放处理后的目标中间帧。

可选地，处理器510，还可以用于：对第一视频帧对应的第一姿态数据和第二视频帧对应的第一姿态数据进行均值计算，生成目标姿态数据。

可选地，处理器510，还可以用于：

基于第一视频帧对应的第一时间信息和第二视频帧对应的第一时间信息，确定第二时间信息；

基于第二时间信息，从陀螺仪采集的姿态数据中筛选得到目标姿态数据。

可选地，处理器510，还可以用于：

基于待播放视频中各视频帧对应的第一姿态数据和目标防抖强度，确定各视频帧对应的目标裁剪系数；

基于各视频帧对应的目标裁剪系数，裁剪各视频帧。

应理解的是，本申请实施例中，输入单元504可以包括图形处理器(GraphicsProcessing Unit，GPU)5041和麦克风5042，图形处理器5041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元506可包括显示面板5061，可以采用液晶显示器、有机发光二极管等形式来配置显示面板5061。用户输入单元507包括触控面板5071以及其他输入设备5072中的至少一种。触控面板5071，也称为触摸屏。触控面板5071可包括触摸检测装置和触摸控制器两个部分。其他输入设备5072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。

存储器509可用于存储软件程序以及各种数据。存储器509可主要包括存储程序或指令的第一存储区和存储数据的第二存储区，其中，第一存储区可存储操作系统、至少一个功能所需的应用程序或指令(比如声音播放功能、图像播放功能等)等。此外，存储器509可以包括易失性存储器或非易失性存储器，或者，存储器509可以包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器(Read-Only Memory，ROM)、可编程只读存储器(Programmable ROM，PROM)、可擦除可编程只读存储器(Erasable PROM，EPROM)、电可擦除可编程只读存储器(Electrically EPROM，EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory，RAM)，静态随机存取存储器(Static RAM，SRAM)、动态随机存取存储器(Dynamic RAM，DRAM)、同步动态随机存取存储器(Synchronous DRAM，SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data Rate SDRAM，DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM，ESDRAM)、同步连接动态随机存取存储器(Synch link DRAM，SLDRAM)和直接内存总线随机存取存储器(Direct Rambus RAM，DRRAM)。本申请实施例中的存储器509包括但不限于这些和任意其它适合类型的存储器。

处理器510可包括一个或多个处理单元；可选地，处理器510集成应用处理器和调制解调处理器，其中，应用处理器主要处理涉及操作系统、用户界面和应用程序等的操作，调制解调处理器主要处理无线通信信号，如基带处理器。可以理解的是，上述调制解调处理器也可以不集成到处理器510中。

本申请实施例还提供一种可读存储介质，所述可读存储介质上存储有程序或指令，该程序或指令被处理器执行时实现上述视频播放方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

其中，所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质，包括计算机可读存储介质，如计算机只读存储器ROM、随机存取存储器RAM、磁碟或者光盘等。

本申请实施例另提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现上述视频播放方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

应理解，本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外，需要指出的是，本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能，还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能，例如，可以按不同于所描述的次序来执行所描述的方法，并且还可以添加、省去、或组合各种步骤。另外，参照某些示例所描述的特征可在其他示例中被组合。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，或者网络设备等)执行本申请各个实施例所述的方法。

上面结合附图对本申请的实施例进行了描述，但是本申请并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本申请的启示下，在不脱离本申请宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本申请的保护之内。

Claims (10)

1.一种视频播放方法，其特征在于，包括：

接收第一输入；

响应于所述第一输入，确定目标防抖强度，并基于待播放视频中各视频帧对应的第一姿态数据和所述目标防抖强度，对所述各所述视频帧进行处理；

播放处理后的各所述视频帧；

其中，所述第一姿态数据为拍摄所述待播放视频时由陀螺仪采集的姿态数据，所述待播放视频中各视频帧为由图像传感器采集的视频帧，且所述待播放视频中各视频帧为未进行电子防抖处理的视频帧。

2.根据权利要求1所述的视频播放方法，其特征在于，所述待播放视频包括相邻的第一视频帧和第二视频帧；在所述播放处理后的各所述视频帧之前，所述方法包括：

对所述第一视频帧和所述第二视频帧进行插帧处理，生成目标中间帧；

基于所述第一视频帧和所述第二视频帧，确定所述目标中间帧对应的目标姿态数据；

基于所述目标姿态数据和所述目标防抖强度，处理所述目标中间帧；

所述播放处理后的各所述视频帧，包括：

在播放处理后的所述第一视频帧之后，且在播放处理后的所述第二视频帧之前，播放处理后的所述目标中间帧。

3.根据权利要求2所述的视频播放方法，其特征在于，所述基于所述第一视频帧和所述第二视频帧，确定所述目标中间帧对应的目标姿态数据，包括：

对所述第一视频帧对应的第一姿态数据和所述第二视频帧对应的第一姿态数据进行均值计算，生成所述目标姿态数据；

或者，

基于所述第一视频帧对应的第一时间信息和所述第二视频帧对应的第一时间信息，确定第二时间信息；

基于所述第二时间信息，从所述陀螺仪采集的姿态数据中筛选得到所述目标姿态数据。

4.根据权利要求3所述的视频播放方法，其特征在于，所述第一时间信息包括：所述视频帧对应的时间戳、所述视频帧对应的曝光时间和所述视频帧对应的卷帘快门时间中的至少两种。

5.根据权利要求1-4任一项所述的视频播放方法，其特征在于，所述基于待播放视频中各视频帧对应的第一姿态数据和所述目标防抖强度，对所述各所述视频帧进行处理，包括：

基于所述待播放视频中各视频帧对应的第一姿态数据和所述目标防抖强度，确定各所述视频帧对应的目标裁剪系数；

基于各所述视频帧对应的目标裁剪系数，裁剪各所述视频帧。

6.一种视频播放装置，其特征在于，包括：

第一接收模块，用于接收第一输入；

第一处理模块，用于响应于所述第一输入，确定目标防抖强度，并基于待播放视频中各视频帧对应的第一姿态数据和所述目标防抖强度，对所述各所述视频帧进行处理；

第一显示模块，用于播放处理后的各所述视频帧；

其中，所述第一姿态数据为拍摄所述待播放视频时由陀螺仪采集的姿态数据，所述待播放视频中各视频帧为由图像传感器采集的视频帧，且所述待播放视频中各视频帧为未进行电子防抖处理的视频帧。

7.根据权利要求6所述的视频播放装置，其特征在于，所述待播放视频包括相邻的第一视频帧和第二视频帧；所述装置还包括：

第二处理模块，用于在所述播放裁剪后的各所述视频帧之前，对所述第一视频帧和所述第二视频帧进行插帧处理，生成目标中间帧；

第三处理模块，用于基于所述第一视频帧和所述第二视频帧，确定所述目标中间帧对应的目标姿态数据；

第四处理模块，用于基于所述目标姿态数据和所述目标防抖强度，处理所述目标中间帧；

所述第一显示模块，用于：

在播放处理后的所述第一视频帧之后，且在播放处理后的所述第二视频帧之前，播放处理后的所述目标中间帧。

8.根据权利要求7所述的视频播放装置，其特征在于，所述第三处理模块，用于：

对所述第一视频帧对应的第一姿态数据和所述第二视频帧对应的第一姿态数据进行均值计算，生成所述目标姿态数据；

或者，

基于所述第一视频帧对应的第一时间信息和所述第二视频帧对应的第一时间信息，确定第二时间信息；

基于所述第二时间信息，从所述陀螺仪采集的姿态数据中筛选得到所述目标姿态数据。

9.一种电子设备，其特征在于，包括处理器和存储器，所述存储器存储可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如权利要求1-5任一项所述的视频播放方法。

10.一种可读存储介质，其特征在于，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如权利要求1-5任一项所述的视频播放方法。

Images