CN111918099A - 视频处理方法、装置、电子设备及存储介质 - Google Patents

Abstract

本申请公开了一种视频处理方法、装置、电子设备及存储介质，该视频处理方法包括：在播放视频的过程中，对播放的视频进行插帧处理；检测视频播放界面的视频播放区域中每个预设检测点的运动矢量；在所述每个预设检测点的运动矢量相互匹配时，暂停对所述视频播放区域中播放的视频进行插帧处理。本方法可以避免视频插帧时的显示异常，提升视频播放效果。

Description

视频处理方法、装置、电子设备及存储介质

技术领域

本申请涉及视频处理技术领域，更具体地，涉及一种视频处理方法、装置、电子设备及存储介质。

背景技术

随着科技水平和生活水平的快速进步，电子设备(例如智能手机、平板电脑等)已经成为人们生活中常用的电子产品之一。人们通常会在电子设备上安装视频播放应用以进行视频播放，一些视频播放应用为提升视频播放流畅度，会对播放的视频进行插帧处理。但是在传统的技术中，在视频播放时由于存在用户对界面进行操作的情况，在进行操作的时候，由于界面发生变化，此时进行插帧处理会产生界面显示异常，例如卡顿、边缘撕裂、拖影等，影响了用户的观看体验。

发明内容

鉴于上述问题，本申请提出了一种视频处理方法、装置、电子设备及存储介质。

第一方面，本申请实施例提供了一种视频处理方法，所述方法包括：在播放视频的过程中，对播放的视频进行插帧处理；检测视频播放界面的视频播放区域中每个预设检测点的运动矢量；在所述每个预设检测点的运动矢量相互匹配时，暂停对所述视频播放区域中播放的视频进行插帧处理。

第二方面，本申请实施例提供了一种视频处理装置，所述装置包括：插帧处理模块、矢量获取模块以及插帧暂停模块，其中，所述插帧处理模块用于在播放视频的过程中，对播放的视频进行插帧处理；所述矢量获取模块用于检测视频播放界面的视频播放区域中每个预设检测点的运动矢量；所述插帧暂停模块用于在所述每个预设检测点的运动矢量相互匹配时，暂停对所述视频播放区域中播放的视频进行插帧处理。

第三方面，本申请实施例提供了一种电子设备，包括：一个或多个处理器；存储器；一个或多个应用程序，其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行，所述一个或多个程序配置用于执行上述第一方面提供的视频处理方法。

第四方面，本申请实施例提供了一种计算机可读取存储介质，所述计算机可读取存储介质中存储有程序代码，所述程序代码可被处理器调用执行上述第一方面提供的视频处理方法。

本申请提供的方案，通过在播放视频的过程中，对播放的视频进行插帧处理，检测视频播放界面的视频播放区域中每个预设检测点的运动矢量，在每个预设检测点的运动矢量相互匹配时，暂停对视频播放区域中播放的视频进行插帧处理，从而可以在视频播放时进行插帧的过程中，有效检测出视频播放区域切换时的状态，并且暂停插帧处理，避免视频播放时出现界面显示异常，提升视频的播放效果。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1示出了根据本申请一个实施例的视频处理方法流程图。

图2示出了根据本申请另一个实施例的视频处理方法流程图。

图3示出了本申请另一个实施例提供的视频处理方法中步骤S230的流程图。

图4示出了本申请另一个实施例提供的第一种预设检测点的位置示意图。

图5示出了本申请另一个实施例提供的第二种预设检测点的位置示意图。

图6示出了本申请另一个实施例提供的第三种预设检测点的位置示意图。

图7示出了本申请另一个实施例提供的第四种预设检测点的位置示意图。

图8示出了本申请另一个实施例提供的第五种预设检测点的位置示意图。

图9示出了本申请另一个实施例提供的第六种预设检测点的位置示意图。

图10示出了本申请另一个实施例提供的第七种预设检测点的位置示意图。

图11示出了本申请另一个实施例提供的第八种预设检测点的位置示意图。

图12示出了根据本申请又一个实施例的视频处理方法流程图。

图13示出了根据本申请一个实施例的视频处理装置的一种框图。

图14是本申请实施例的用于执行根据本申请实施例的视频处理方法的电子设备的框图。

图15是本申请实施例的用于保存或者携带实现根据本申请实施例的视频处理方法的程序代码的存储单元。

具体实施方式

为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述。

随着电子设备的发展，电子设备的配置和功能越来越强大，电子设备在视频播放时的播放效果也越来越好。在相关的视频播放方案中，电子设备可以对视频进行插帧处理，以提升视频播放的流畅性。

但是，发明人在经过长时间研究视频的插帧方案后，发现通常视频播放时，会持续的对视频进行插帧。然而电子设备在运行视频播放应用进行视频播放时，可能会存在用户对应用界面进行操作，使界面发生变化的情况，这些情况下，由于应用界面变化时效果的帧率与视频帧率通常不一致，因此可能产生界面变化区域出现边缘撕裂、拖影或卡顿等现象，严重影响了用户体验。例如，短视频应用进行视频播放时，通常会存在划离当前播放的短视频的情况，在此过程中，短视频播放应用会同时显示界面划离时的效果以及视频播放区域中的视频，但是由于界面划离时的效果与插帧后的视频的帧率不一致，因此会导致界面中出现边缘撕裂、拖影或卡顿等现象。

针对上述问题，发明人提出了本申请实施例提供的视频处理方法、装置、电子设备以及存储介质，在视频播放时进行插帧的过程中，有效检测出视频播放区域切换时的状态，并且暂停插帧处理，避免视频播放时出现界面显示异常，提升视频的播放效果。其中，具体的视频处理方法在后续的实施例中进行详细的说明。

请参阅图1，图1示出了本申请一个实施例提供的视频处理方法的流程示意图。在具体的实施例中，所述视频处理方法应用于如图13所示的视频处理装置400以及配置有所述视频处理装置400的电子设备100(图14)。下面将以电子设备为例，说明本实施例的具体流程，当然，可以理解的，本实施例所应用的电子设备可以为智能手机、平板电脑、智能手表、笔记本电脑等，在此不做限定。下面将针对图1所示的流程进行详细的阐述，所述视频处理方法具体可以包括以下步骤：

步骤S110：在播放视频的过程中，对播放的视频进行插帧处理。

在本申请实施例中，电子设备可以通过安装的视频播放应用来播放视频，其中，视频播放应用可以为系统应用，也可以是第三方应用，在此不做限定。视频播放应用可以在进行视频播放时，响应用户对应用界面的操作，显示界面的动态变化，且有视频播放区域进行显示。

在一些实施方式中，用于播放视频的视频播放应用可以是通过触控操作，进行播放视频的切换的应用，在进行播放视频的切换时，还可以响应该触控操作，显示播放视频的切换时的界面变化效果。例如，视频播放应用可以为短视频应用，在短视频应用中，由于视频播放时间较短，并且视频播放区域通常只是作为显示界面的部分区域进行显示，因此通常会存在触控切换播放视频的情况。其中，触控操作可以为滑动操作、长按操作等。

可选的，视频播放应用在播放视频时，播放视频与待播放视频之间可以通过滑动操作用户交互界面来直接进行切换，如在播放视频时可以根据检测到的划动操作来选择播放下一个视频或者上一个视频，在进行视频的切换时也会产生上述视频播放应用的界面划离的效果。

在另一些实施方式中，用于播放视频的应用也可以是可以自动进行播放视频切换的应用，并且进行播放视频的切换时，可以输出显示播放视频的切换时的界面变化效果。同样的，例如，视频播放应用可以为短视频应用，短视频应用在播放完成当前的视频之后，可以以划离变化的方式，划离至下一视频，从而使得用户可以查看到播放视频的切换的动态效果。

可选的，以上两种实施方式的播放视频的切换时的界面变化效果可以包括：整个界面往同一方向移动，具体地，当前视频的视频播放区域往一侧移动而逐渐隐藏，而下一视频的播放区域逐渐从另一侧逐渐露出，该两个播放区域往同一方向移动，直至全部露出，并且除视频播放区域的其他区域由于界面整体移动也会发生变化，并显示动态变化的效果，例如，视频信息对应的区域也会随着视频播放区域进行移动等。也可以理解为，随着视频播放界面的位移，当前视频的视频播放区域在上述视频播放界面的占比逐渐减小，下一视频的视频播放区域在视频播放界面的占比逐渐增大。

在通过滑动操作的方式触发视频切换时，可以使得滑动操作与视频播放区域的划离方向相同，从而可以使得用户在滑动视频播放区域时，感受到视频播放区域与滑动方向一致，提升用户体验。

当然，具体的视频播放应用可以不作为限定。

在本申请实施例中，电子设备在播放视频时，可以对播放的视频进行插帧处理，也就是说，电子设备在通过上述的视频播放应用进行视频播放时，可以对视频播放区域中播放的视频进行插帧处理。

在一些实施方式中，电子设备可以包括处理器及插帧芯片。其中，插帧芯片可以与处理器连接，插帧芯片可以从处理器获取待播放的视频数据，并对视频数据进行插帧处理后，输出至显示屏。

其中，插帧芯片用于在原有画面显示的每两帧画面中增加一帧或多帧，缩短每帧之间的显示时间，提高电子设备的屏幕显示的帧率,解决电子设备存在的闪烁、拖尾问题，消除快速运动画面的图像边缘模糊现象，修正人眼视觉暂留形成的“错觉”，从而有效提高画面稳定性。

在以上实施方式中，对应视频的插帧由设置的插帧芯片执行，可以有效减轻处理器的负担，在无需提升处理器的配置的情况下，即可实现电子设备对视频进行插帧处理，提升视频画面的播放效果。

在另一些实施方式中，电子设备也可以由图形处理器(Graphics ProcessingUnit，GPU)来完成视频数据的插帧，其中，GPU可以与电子设备的中央处理器(CentralProcessing Unit，CPU)连接，在播放视频时，CPU获得播放的视频数据后，可以将视频数据传输至CPU，由CPU完成插帧处理后返回给CPU，再输出至显示屏进行播放。

步骤S120：检测视频播放界面的视频播放区域中每个预设检测点的运动矢量。

由于上述视频播放应用在播放视频时，可能涉及到用户对界面进行操作，对播放视频进行切换时，视频播放应用的界面中同时进行界面变化效果的显示以及视频播放，而界面变化效果对应的帧率，与视频本身的帧率通常相同，也就是说，视频播放应用在运行时，其视频和界面变化的显示帧率通常是相同的，如果此时对视频进行插帧处理，则会使得播放的视频的帧率得到提升，使得视频播放区域中播放的视频的帧率与界面变化效果的帧率不同，从而导致应用界面中出现边缘撕裂、拖影、卡顿等问题。

因此，在本申请实施例中，电子设备可以检测视频播放应用的界面中视频播放区域的移动，视频播放区域往同一方向移动时，暂停对视频的插帧处理，进而避免显示异常。

在本申请实施例中，电子设备可以检测视频播放界面的视频播放区域中每个预设检测点的运动矢量。其中，预设检测点可以为待检测运动矢量的像素点，预设检测点的运动矢量表示像素点的位移，运动矢量的方向和大小可以反映像素点的位移的方向和快慢。

在一些实施方式中，预设检测点可以为视频播放区域的边缘上的像素点，其具体位置可以不作为限定。可以理解地，以上视频播放应用在进行视频切换时，视频区域会发生移动，从而界面中其他区域也发生变化，直到下一视频对应的视频播放区域全部露出，并展示至界面中的相应位置。而视频区域移动时，边缘具有代表性，即视频播放区域发生移动，其边界肯定往同一方向移动，因此可以通过将视频播放区域中边缘上的像素点作为预设检测点。其中，预设检测点的数量可以不作为限定，可以为至少两个，例如，可以为2个，也可以为3个等。

在一些实施方式中，电子设备可以上述实时检测预设检测点的运动矢量，也可以自由设定其检测的精度，如每两帧就检测一次或者每隔5帧检测一次，在此不做具体限定。

示例性的，在检测预设检测点的运动矢量时，可以根据预设检测点对应的像素在前一帧图像中的第一坐标位置，以及该像素在后一帧图像中的第二坐标位置，确定运动矢量。其中，可以根据第一坐标位置对应的横坐标以及第二坐标位置对应的横坐标确定该像素在横轴上的位移作为第一位移，以及根据第一坐标位置对应的纵坐标以及第二坐标位置对应的纵坐标确定该像素在纵轴上的位移作为第二位移，第一位移以及第二位移即可构成预设检测点的运动矢量。

在一些实施方式中，以上对视频的插帧处理可以基于运动补偿的方式进行，其中，运动补偿是一种描述相邻帧差别的方法，基于运动补偿确定一帧运动补偿帧插入到两帧图像之间，从而实现插帧处理。在该实施方式中，可以通过分块运动补偿的方式进行插帧处理，其中，每帧图像可以被分为多个像素块(例如，16*16的像素块)，对于分块运动补偿的方式而言，运动矢量是运动补偿的必要参数，可以对每个像素块的运动矢量进行计算，以进行运动补偿。在通过分块运动补偿的方式对视频进行插帧处理的情况下，可以直接基于插帧处理中获得的各个块的运动矢量，获取每个预设检测点的运动矢量，具体而言，可以将每个预设检测点所在块的运动矢量作为该预设检测点的运动矢量。

步骤S130：在所述每个预设检测点的运动矢量相互匹配时，暂停对所述视频播放区域中播放的视频进行插帧处理。

在本申请实施例中，在每次检测到视频播放界面的视频播放区域中每个预设检测点的运动矢量之后，电子设备可以确定每个预设检测点的运动矢量是否相互匹配，其中，每个预设检测点的运动矢量相互匹配可以指任意两个预设检测点的运动矢量之间的差异小于预设差异。具体地，电子设备可以计算预设检测点的运动矢量之间的方向之间的夹角，以及运动矢量的大小之间的差值，在夹角不超过预设角度，且差值不超过设定阈值时，确定预设检测点的运动矢量之间的差异小于预设差异；在夹角超过预设角度，或者差值超过设定阈值时，确定预设检测点的运动矢量之间的差异不小于预设差异。

如果每个预设检测点的运动矢量相互匹配，则表示视频播放区域往同一方向移动，即出现视频切换时的界面变化效果的显示的情况；如果多个预设检测点的运动矢量存在任意两个预设检测点的运动矢量不相互匹配，则表示视频播放区域未往同一方向移动，即未出现视频切换时的界面变换效果的显示情况。

电子设备在确定预设检测点的运动矢量是否相同之后，可以根据确定结果，如果每个预设检测点的运动矢量相同时，则可以暂停对视频播放区域中播放的视频进行插帧处理，以避免界面变化效果的帧率与视频播放区域中播放视频的帧率不同，而导致显示异常；当存在任意两个预设检测点的运动矢量不同时，电子设备则可以继续对视频播放区域播放的视频进行插帧处理，以提升视频播放的显示效果。

在一些实施方式中，由于电子设备可能是利用插帧芯片对视频进行插帧处理，因此电子设备可以利用插帧芯片来执行本申请实施例提供的视频处理方法。具体执行时，应用程序处理器(Application Processor，AP)可以将视频数据通过移动产业处理器接口(Mobile Industry Processor Interface，MIPI)写入到插帧芯片，插帧芯片中与插帧相关的模块为运动补偿(Motion Compensation，MEMC)模块以及MEMC controller(控制)模块，当插帧芯片识别出视频播放界面的视频播放区域中每个预设检测点的运动矢量相同时，则判定划离当前视频区域，即会出现同时播放界面变化效果以及视频播放的情况，此时MEMCcontroller模块给出停止插帧命令，AP端输入的视频数据将不经过MEMC模块处理，直接输出至显示屏端，也就是说，直接插帧芯片直接将AP端输入的视频数据输出至显示屏进行显示。

本申请实施例提供的视频处理方法，通过在播放视频的过程中，对播放的视频进行插帧处理，检测视频播放界面的视频播放区域中每个预设检测点的运动矢量，在每个预设检测点的运动矢量相互匹配时，暂停对视频播放区域中播放的视频进行插帧处理，从而可以在视频播放时进行插帧的过程中，有效检测出视频播放区域切换时的状态，并且暂停插帧处理，避免视频播放时出现界面显示异常，提升视频的播放效果。

请参阅图2，图2示出了本申请另一个实施例提供的视频处理方法的流程示意图。该视频处理方法应用于上述电子设备，下面将针对图2所示的流程进行详细的阐述，所述视频处理方法具体可以包括以下步骤：

步骤S210：在播放视频的过程中，对播放的视频进行插帧处理。

在本申请实施例中，步骤S210可以参阅前述实施例的内容，在此不再赘述、

步骤S220：确定视频播放界面的视频播放区域。

在本申请实施例中，电子设备在检测视频播放界面的视频播放区域中每个预设检测点的运动矢量时，由于不同视频播放应用的视频播放区域的形状和位置不同，且视频播放应用在进行视频切换时，在不同的状态下视频播放区域的大小、位置、形状等均可能变化，因此预设检测点的坐标位置可以不固定，电子设备可以根据实际的视频播放界面而确定。首先，电子设备可以确定视频播放界面的视频播放区域，以便后续根据确定的视频播放区域中的预设检测点。

在一些实施方式中，电子设备可以识别视频播放界面中播放器对应的区域，从而确定出视频播放界面中的视频播放区域。作为一种可能的方式，电子设备可以根据对视频播放界面的渲染操作，根据渲染内容的相应名称，确定出播放器对应的区域；作为另一种可能的方式，电子设备可以检测渲染的视频进行显示的区域，也就是说，视频播放时视频内容所处的区域，并将其作为视频播放区域。当然，具体检测视频播放区域的方式可以不作为限定。

步骤S230：根据所述视频播放区域，获取多个边界检测点作为预设检测点。

在本申请实施例中，电子设备在确定出视频播放界面的视频播放区域之后，则可以根据视频播放区域，确定多个边界检测点作为预设检测点。可以理解地，以上视频播放应用在进行视频切换时，视频区域会发生移动，从而界面中其他区域也发生变化，直到下一视频对应的视频播放区域全部露出，并展示至界面中的相应位置，而视频区域移动时，边缘具有代表性，即视频播放区域发生移动，其边界肯定往同一方向移动，因此可以确定视频播放区域的多个边界检测点作为预设检测点。

在一些实施方式中，请参阅图3，电子设备根据所述视频播放区域，获取多个边界检测点作为预设检测点，可以包括：

S231：确定所述视频播放区域的每条边界所在边界区域。

在该实施方式中，电子设备可以确定视频播放区域的每条边界所在边界区域。作为一种方式，电子设备确定视频播放区域的每条边界所在边界区域时，可以以视频播放区域的边缘的一行或者一列像素作为边界区域；电子设备确定视频播放区域的每条边界时，也可以以视频播放区域的边缘的多行或者多列像素作为边界区域，例如，以边缘的三行或者三列像素作为边界；电子设备也可以确定与最边缘的一行或一列像素相邻的至少一行(或者列)像素作为边界区域；电子设备也可以将处于边缘的多行或者多列像素所构成的区域中取部分区域作为边界区域。当然，具体的边界区域可以不做限定。

S232：从所述边界区域上获取至少一个边界检测点作为预设检测点。

在该实施方式中，电子设备在确定出视频播放区域的每条边界之后，则可以从每条边界上获取至少一个边界检测点作为预设检测点。

作为一种实施方式，不同视频播放界面的视频播放区域的边界长度可能不同，在边界长度不同时，为保证检测视频播放区域是否往同一方向移动的准确性，可以根据边界长度来确定预设检测点的数量。具体地，电子设备从所述每条边界上获取至少一个边界检测点作为预设检测点，可以包括：

获取所述每条边界的边界长度；

基于所述边界长度，从所述每条边界所在的边界区域中获取目标数量的边界检测点作为预设检测点，其中，所述每条边界所在的边界区域中的边界检测点的数量与所述边界长度呈正相关。

在该实施方式中，边界的边界长度可以由边界上的像素点的数量确定，在像素点的数量越多时，边界长度也越长，像素点的数量越少时，边界长度也越短。电子设备基于确定的边界长度，可以从每条边界上获取目标数量的边界检测点作为预设检测点。其中，目标数量与边界长度呈正相关，也就是说，在边界长度较长时，则该边界上的预设检测点的数量也越多。

可选的，可以将边界长度划分为多个长度范围，长度越大的长度范围则对应的边界检测点的数量也越多。例如，划分为三个长度范围，包括第一长度范围、第二长度范围以及第三长度范围，其中，第一长度范围中的最大边界长度小于第二长度范围中的最小边界长度，第二边界范围中的最大边界长度小于第三长度范围中的最大边界长度，第一长度范围对应的边界检测点的数量可以为2，第二长度范围对应的检测点的数量可以为3，第三长度范围对应的检测点的数量可以为4。

可选的，每条边界上的边界检测点可以均匀分布于该边界。例如，请参阅图4，在视频播放区域A1的四个角落分别确定预设检测点，后续检测四个预设检测点的运动矢量，每个角落的预设检测点作为相邻两条边界的共有检测点，每条边界上的预设检测点的运动矢量可以代表整条边界的运动矢量。

可选的，还可以在边界检测点的基础上，于视频播放区域的中间区域确定一个或多个预设检测点，以使得检测视频播放区域进行整体位移的情况更为准确。例如，请参阅图5，可以于视频播放区域A1的中间区域确定一个预设检测点，并在四个角落分别确定一个边界检测点作为预设检测点。

当然，预设检测点在边界上的分布可以不作为限定，例如，请参阅图6，每条边界上的预设检测点也可以不分布于视频播放区域的角落，也可以处于中间位置。

在一些可能的方式中，当视频播放区域出现位移，在视频播放界面中由当前视频的视频播放区域逐渐移动，而出现下一视频的视频播放区域时，也可以同时在两个视频播放区域中确定预设检测点。例如，请参阅图7，当视频1对应的视频播放区域往图中所示的方向移动，即往上移动，待播放视频的视频播放区域也往上移动时，则可以在该两个视频播放区域中同时确定预设检测点，以提升检测视频播放区域进行整体位移的情况的准确性。

作为另一种实施方式，电子设备从所述每条边界上获取至少一个边界检测点作为预设检测点，也可以包括：

从所述每条边界上获取对比度大于指定对比度的区域中的至少一个像素点，作为预设检测点。

可以理解地，当视频播放区域的边界上出现对比度较高的区域时，可以从该区域中选取一个或多个像素点作为预设检测点，如此可以提升检测视频播放区域进行整体位移的情况的准确性。

作为又一种实施方式，电子设备根据所述视频播放区域，获取多个边界检测点作为预设检测点，也可以包括：

从所述视频播放区域中获取至少一条边界所在的边界区域的所有边缘检测点作为预设检测点。

在该实施方式中，电子设备可以获取整条边界所在的边界区域的运动矢量，即边运动矢量，此时，电子设备可以将边界上的所有边缘检测点作为预设检测点。其中，边界区域可以参考前述的边界区域的内容。后续在进行运动矢量是否相同的判断时，可以先根据每条边界所在的边界区域上的所有像素点的运动矢量，确定每条边界的边运动矢量；然后确定每条边界的边运动矢量是否相互匹配，在相互匹配时，则可以确定每个预设检测点的运动矢量是否相互匹配。其中，根据每条边界上的所有像素点的运动矢量，确定每条边界的边运动矢量，可以在确定出所有像素点的运动矢量的方向相同，且运动大小之间的差值不超过预设值时，再根据所有像素点的运动矢量确定边运动矢量。例如，可以将边界上的所有像素点的运动矢量求取平均值，进而确定出边运动矢量；又例如，可以将边界上的所有像素点的运动矢量进行加权求和，获得边运动矢量。

例如，请参阅图8，可以以视频播放区域A1中的四条边界A3上的所有像素点作为预设检测点；又例如，请参阅图9，在由视频2切换为待播放视频时，视频播放界面中同时出现视频2的视频播放区域，以及待播放视频的视频播放区域，均往上移动，此时可以同时将视频2的视频播放区域以及待播放视频的视频播放区域的所有边界上的所有像素点作为预设检测点；当然，视频播放区域也可能为左右进行移动，例如，请参阅图10，在由3切换为待播放视频时，视频播放界面中同时出现视频3的视频播放区域，以及待播放视频的视频播放区域，均往左或者往右移动，此时可以同时将视频3的视频播放区域以及待播放视频的视频播放区域的所有边界上的所有像素点作为预设检测点。通过如此，可以有效检测视频播放界面中所有视频播放区域的边界的变化，以确定视频播放区域进行整体移动的情况，例如，请参阅图11，当视频播放区域A1为椭圆形时，可以以其左半部分的边缘以及右半部分的边缘的所有像素点作为预设检测点。

需要说明的是，以上实施方式也可以进行结合，例如，在边界上有对比度大于指定对比度的像素点时，则可以直接以该相似点作为边界像素点；而在无大于指定对比度的像素点时，可以以第一种实施方式或者第三种实施方式确定预设检测点。

在一些实施方式中，视频播放区域随着视频播放界面的整体位移，当前视频的视频播放区域在上述视频播放界面的占比逐渐减小，待播放视频的视频播放区域在上述视频播放界面的占比逐渐增大，在当前视频的视频播放区域消失时，则可以重新确定预设检测点，如此，可以保证实时视频播放区域进行位移的情况，不会出现间断。

步骤S240：检测每个所述预设检测点的运动矢量。

在本申请实施例中，电子设备在确定出预设检测点之后，则可以检测每个预设检测点的运动矢量，以便确定视频播放区域进行整体位移的情况。

步骤S250：在所述每个预设检测点的运动矢量相互匹配时，暂停对所述视频播放区域中播放的视频进行插帧处理。

在本申请实施例中，步骤S250可以参阅前述实施例的内容，在此不再赘述。

本申请实施例提供的视频处理方法，通过在播放视频的过程中，对播放的视频进行插帧处理，检测视频播放界面的视频播放区域中每个预设检测点的运动矢量，在每个预设检测点的运动矢量相互匹配时，暂停对视频播放区域中播放的视频进行插帧处理，从而可以在视频播放时进行插帧的过程中，有效检测出视频播放区域切换时的状态，并且暂停插帧处理，避免视频播放时出现界面显示异常，提升视频的播放效果。另外，预设检测点根据实际的视频播放界面中的视频播放区域确定，提升了检测视频播放区域切换时的状态的准确性，进而更为准确地控制插帧处理暂停，提升视频播放效果。

请参阅图12，图12示出了本申请又一个实施例提供的视频处理方法的流程示意图。该视频处理方法应用于上述电子设备，下面将针对图12所示的流程进行详细的阐述，所述视频处理方法具体可以包括以下步骤：

步骤S310：在播放视频的过程中，对播放的视频进行插帧处理。

在本申请实施例中，电子设备在对播放的视频进行插帧处理之前，可以先确定插帧功能是否启动。

作为一种方式，电子设备在播放视频的过程中，确定视频播放界面的视频播放区域占显示界面的显示比例；在所述显示比例大于指定比例时，执行所述对播放的视频进行插帧处理。

在该实施方式中，电子设备可以在视频播放区域占显示界面的比例较大时，才开启插帧处理，也就是将插帧功能配置为开启状态，进而执行对播放的视频进行插帧处理。而在视频播放区域占显示界面的显示比例较小时，则此时进行插帧处理的播放效果并不明显，因此可以不进行插帧处理。

作为另一种方式，电子设备是否开启插帧处理，可以根据电子设备的剩余资源来确定，其中，剩余资源可以为处理资源，也可以为电量。可以理解地，电子设备在播放视频时，对视频进行插帧，那么则需要消耗处理器的处理资源，若在电子设备当前剩余的处理资源较为紧张的情况下，依然进行开启插帧功能，对播放的视频进行插帧处理，则会有可能会增加电子设备的负担，进而会造成电子设备卡顿。类似的，电子设备在对播放的视频进行插帧的过程中，也需要消耗电子设备的电量，若在电量剩余的量较低的情况下，依然开启插帧功能，则可能会使得电子设备的电量消耗过快。

因此，在一些实施方式中，电子设备可以检测剩余的处理资源是否大于资源阈值，若高于资源阈值则可以将插帧功能配置为处于开启状态，对应的，当检测到剩余的处理资源不大于资源阈值，则可以将插帧功能配置为处于关闭状态。

其中，该资源阈值可以包括关于处理资源的第一阈值和/或关于电量的第二阈值。若资源阈值仅包括关于处理资源的第一阈值，则电子设备检测到当前剩余的处理资源大于该第一阈值的情况下触发开启插帧功能，否则关闭插帧功能。若资源阈值仅包括关于电量的第二阈值，则电子设备可以在检测到当前剩余的电量大于第二阈值的情况下，触发开启插帧功能，否则关闭插帧功能。该资源阈值既包括关于处理资源的第一阈值，又包括关于电量的第二阈值，则电子设备检测到当前剩余的处理资源大于该第一阈值，且当前剩余的电量大于第二阈值的情况下触发开启插帧功能，否则关闭插帧功能。

作为又一种方式，可以在电子设备的设置界面配置有插帧功能管理控件，进而用户可以通过对该插帧功能管理控件进行触控来控制开启或者关闭插帧功能，进而电子设备在进行视频播放时，也根据插帧功能是否开启，来确定是否对播放的视频进行插帧处理，也就是说，当前该插帧功能开启时，才对播放的视频进行插帧处理。

步骤S320：检测视频播放界面的视频播放区域中每个预设检测点的运动矢量。

在本申请实施例中，步骤S320可以参阅前述实施例的内容，在此不再赘述。

步骤S330：在连续N次检测到的所述每个预设检测点的运动矢量相互匹配时，暂停对所述视频播放区域中播放的视频进行插帧处理，其中，所述N为正整数。

在本申请实施例中，电子设备在检测各个预设检测点的运动矢量，进而确定视频播放区域进行整体位移的情况，以暂停插帧处理时，可以根据连续检测到的预设检测点的运动矢量，来确定视频播放区域进行整体位移的情况。作为一种方式，电子设备可以对于每帧图像进行一次预设检测点的运动矢量的检测；作为另一种方式，电子设备也可以每间隔M帧图像进行一次预设检测点的运动矢量的检测，在此不做限定。具体地，可以在连续N次检测到的每个预设检测点的运动矢量相互匹配时，确定视频播放区域往同一方向位移，并在此时，暂停插帧处理，进而更为准确地确定出进行位移的情况，避免误判而导致视频播放效果受到影响，例如，在未连续N次检测到每个预设检测点的运动矢量相互匹配时，可能是由于视频图像对应的像素点的自身的运动，导致N次检测中的其中一次或者多次检测到每个预设检测点的运动矢量相互匹配，而此时并非是视频播放区域进行位移的情况，因此可以有效避免误判而导致停止插帧。N可以大于指定值，例如，可以大于2次等，具体大小可以不做限定。

在一些实施方式中，为进一步避免误判，在连续N次检测到的每个预设检测点的运动矢量相同时，还可以确定视频播放区域是否静止；若视频播放区域静止，暂停对视频播放区域中播放的视频进行插帧处理。可以理解地，通常视频播放应用在进行视频切换时，视频播放区域可能会静止，并且连续N次检测到的每个预设检测点的运动矢量相互匹配时，由于可能是视频图像中像素点的变化而导致连续N次检测到每个预设检测点的运动矢量相互匹配，因此为避免误判，可以在连续N次检测到的每个预设检测点的运动矢量相互匹配，还可以进一步确定播放的视频是否静止，在静止时才确定视频播放区域往同一方向进行移动的情况，并暂停插帧处理。

本申请实施例提供的视频处理方法，通过在播放视频的过程中，对播放的视频进行插帧处理，检测视频播放界面的视频播放区域中每个预设检测点的运动矢量，在连续多次检测到每个预设检测点的运动矢量相互匹配时，暂停对视频播放区域中播放的视频进行插帧处理，从而可以在视频播放时进行插帧的过程中，有效检测出视频播放区域切换时的状态，并且暂停插帧处理，避免视频播放时出现界面显示异常，提升视频的播放效果。

请参阅图13，其示出了本申请实施例提供的一种视频处理装置400的结构框图。该视频处理装置400应用上述的电子设备，该视频处理装置400包括：插帧处理模块410、矢量获取模块420以及插帧暂停模块430。其中，所述插帧处理模块410用于在播放视频的过程中，对播放的视频进行插帧处理；所述矢量获取模块420用于检测视频播放界面的视频播放区域中每个预设检测点的运动矢量；所述插帧暂停模块430用于在所述每个预设检测点的运动矢量相互匹配时，暂停对所述视频播放区域中播放的视频进行插帧处理。

在一些实施方式中，矢量获取模块420可以包括：区域确定单元、检测点获取单元以及矢量检测单元。其中，区域确定单元用于确定视频播放界面的视频播放区域；检测点获取单元用于根据所述视频播放区域，获取多个边界检测点作为预设检测点；矢量检测单元用于检测每个所述预设检测点的运动矢量。

在该实施方式中，检测点获取单元可以具体用于：确定所述视频播放区域的每条边界所在边界区域；从所述边界区域中获取至少一个边界检测点作为预设检测点。

作为一种实施方式，检测点获取单元从所述边界区域中获取至少一个边界检测点作为预设检测点，可以包括：获取所述每条边界的边界长度；基于所述边界长度，从所述每条边界所在的边界区域中获取目标数量的边界检测点作为预设检测点，其中，所述每条边界所在的边界区域中的边界检测点的数量与所述边界长度呈正相关。

作为另一种实施方式，检测点获取单元从所述每条边界上获取至少一个边界检测点作为预设检测点，可以包括：从所述每条边界上获取对比度大于指定对比度的区域中的至少一个像素点，作为预设检测点。

作为又一种实施方式，检测点获取单元从所述每条边界上获取至少一个边界检测点作为预设检测点，可以包括：从所述视频播放区域中获取至少一条边界所在的边界区域的所有边缘检测点作为预设检测点。

在一些实施方式中，插帧暂停模块430可以具体用于：在连续N次检测到的所述每个预设检测点的运动矢量相互匹配时，暂停对所述视频播放区域中播放的视频进行插帧处理，其中，所述N为正整数。

在该实施方式中，插帧暂停模块430在连续N次检测到的所述每个预设检测点的运动矢量相互匹配时，暂停对所述视频播放区域中播放的视频进行插帧处理，可以包括：在连续N次检测到的所述每个预设检测点的运动矢量相互匹配时，确定所述视频播放区域是否静止；若所述视频播放区域静止，暂停对所述视频播放区域中播放的视频进行插帧处理。

在一些实施方式中，插帧处理模块410可以包括：显示比例获取单元以及插帧执行单元。其中，显示比例获取单元用于在播放视频的过程中，确定视频播放界面的视频播放区域占显示界面的显示比例；插帧执行单元用于在所述显示比例大于指定比例时，执行所述对播放的视频进行插帧处理。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述装置和模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

在本申请所提供的几个实施例中，模块相互之间的耦合可以是电性，机械或其它形式的耦合。

另外，在本申请各个实施例中的各功能模块可以集成在一个处理模块中，也可以是各个模块单独物理存在，也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。

综上所述，本申请提供的方案，通过在播放视频的过程中，对播放的视频进行插帧处理，检测视频播放界面的视频播放区域中每个预设检测点的运动矢量，在每个预设检测点的运动矢量相互匹配时，暂停对视频播放区域中播放的视频进行插帧处理，从而可以在视频播放时进行插帧的过程中，有效检测出视频播放区域切换时的状态，并且暂停插帧处理，避免视频播放时出现界面显示异常，提升视频的播放效果。

请参考图14，其示出了本申请实施例提供的一种电子设备的结构框图。该电子设备100可以是智能手机、平板电脑、智能手表、笔记本电脑等能够运行应用程序的电子设备。本申请中的电子设备100可以包括一个或多个如下部件：处理器110、存储器120、以及一个或多个应用程序，其中一个或多个应用程序可以被存储在存储器120中并被配置为由一个或多个处理器110执行，一个或多个程序配置用于执行如前述方法实施例所描述的方法。其中，处理器110以及存储器12也可以指前述实施例中提到的插帧芯片中设置的模块。

处理器110可以包括一个或者多个处理核。处理器110利用各种接口和线路连接整个电子设备100内的各个部分，通过运行或执行存储在存储器120内的指令、程序、代码集或指令集，以及调用存储在存储器120内的数据，执行电子设备100的各种功能和处理数据。可选地，处理器110可以采用数字信号处理(Digital Signal Processing，DSP)、现场可编程门阵列(Field－Programmable Gate Array，FPGA)、可编程逻辑阵列(Programmable LogicArray，PLA)中的至少一种硬件形式来实现。处理器110可集成中央处理器(CentralProcessing Unit，CPU)、图像处理器(Graphics Processing Unit，GPU)和调制解调器等中的一种或几种的组合。其中，CPU主要处理操作系统、用户界面和应用程序等；GPU用于负责显示内容的渲染和绘制；调制解调器用于处理无线通信。可以理解的是，上述调制解调器也可以不集成到处理器110中，单独通过一块通信芯片进行实现。

存储器120可以包括随机存储器(Random Access Memory，RAM)，也可以包括只读存储器(Read-Only Memory)。存储器120可用于存储指令、程序、代码、代码集或指令集。存储器120可包括存储程序区和存储数据区，其中，存储程序区可存储用于实现操作系统的指令、用于实现至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现下述各个方法实施例的指令等。存储数据区还可以存储电子设备100在使用中所创建的数据(比如电话本、音视频数据、聊天记录数据)等。

请参考图15，其示出了本申请实施例提供的一种计算机可读存储介质的结构框图。该计算机可读介质800中存储有程序代码，所述程序代码可被处理器调用执行上述方法实施例中所描述的方法。

计算机可读存储介质800可以是诸如闪存、EEPROM(电可擦除可编程只读存储器)、EPROM、硬盘或者ROM之类的电子存储器。可选地，计算机可读存储介质800包括非易失性计算机可读介质(non-transitory computer-readable storage medium)。计算机可读存储介质800具有执行上述方法中的任何方法步骤的程序代码810的存储空间。这些程序代码可以从一个或者多个计算机程序产品中读出或者写入到这一个或者多个计算机程序产品中。程序代码810可以例如以适当形式进行压缩。

最后应说明的是：以上实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不驱使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (12)

1.一种视频处理方法，其特征在于，所述方法包括：

在播放视频的过程中，对播放的视频进行插帧处理；

检测视频播放界面的视频播放区域中每个预设检测点的运动矢量；

在所述每个预设检测点的运动矢量相互匹配时，暂停对所述视频播放区域中播放的视频进行插帧处理。

2.根据权利要求1所述的方法，其特征在于，所述检测所述视频播放界面的视频播放区域中每个预设检测点的运动矢量，包括：

确定视频播放界面的视频播放区域；

根据所述视频播放区域，获取所述视频播放区域中的多个边界检测点作为预设检测点；

检测每个所述预设检测点的运动矢量。

3.根据权利要求2所述的方法，其特征在于，所述根据所述视频播放区域，获取多个边界检测点作为预设检测点，包括：

确定所述视频播放区域的每条边界所在边界区域；

从所述边界区域中获取至少一个边界检测点作为预设检测点。

4.根据权利要求3所述的方法，其特征在于，所述从所述边界区域中获取至少一个边界检测点作为预设检测点，包括：

获取所述每条边界的边界长度；

基于所述边界长度，从所述每条边界所在的边界区域中获取目标数量的边界检测点作为预设检测点，其中，所述每条边界所在的边界区域中的边界检测点的数量与所述边界长度呈正相关。

5.根据权利要求3所述的方法，其特征在于，所述从所述每条边界上获取至少一个边界检测点作为预设检测点，包括：

从所述每条边界上获取对比度大于指定对比度的区域中的至少一个像素点，作为预设检测点。

6.根据权利要求3所述的方法，其特征在于，所述根据所述视频播放区域，获取多个边界检测点作为预设检测点，包括：

从所述视频播放区域中获取至少一条边界所在的边界区域的所有边缘检测点作为预设检测点。

7.根据权利要求1-6任一项所述的方法，其特征在于，所述在所述每个预设检测点的运动矢量相互匹配时，暂停对所述视频播放区域中播放的视频进行插帧处理，包括：

在连续N次检测到的所述每个预设检测点的运动矢量相互匹配时，暂停对所述视频播放区域中播放的视频进行插帧处理，其中，所述N为正整数。

8.根据权利要求7所述的方法，其特征在于，所述在连续N次检测到的所述每个预设检测点的运动矢量相互匹配时，暂停对所述视频播放区域中播放的视频进行插帧处理，包括：

在连续N次检测到的所述每个预设检测点的运动矢量相互匹配时，确定所述视频播放区域是否静止；

若所述视频播放区域静止，暂停对所述视频播放区域中播放的视频进行插帧处理。

9.根据权利要求1-6任一项所述的方法，其特征在于，在所述对播放的视频进行插帧处理之前，所述方法还包括：

在播放视频的过程中，确定视频播放界面的视频播放区域占显示界面的显示比例；

在所述显示比例大于指定比例时，执行所述对播放的视频进行插帧处理。

10.一种视频处理装置，其特征在于，所述装置包括：插帧处理模块、矢量获取模块以及插帧暂停模块，其中，

所述插帧处理模块用于在播放视频的过程中，对播放的视频进行插帧处理；

所述矢量获取模块用于检测视频播放界面的视频播放区域中每个预设检测点的运动矢量；

所述插帧暂停模块用于在所述每个预设检测点的运动矢量相互匹配时，暂停对所述视频播放区域中播放的视频进行插帧处理。

11.一种电子设备，其特征在于，包括：

一个或多个处理器；

存储器；

一个或多个应用程序，其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行，所述一个或多个程序配置用于执行如权利要求1-9任一项所述的方法。

12.一种计算机可读取存储介质，其特征在于，所述计算机可读取存储介质中存储有程序代码，所述程序代码可被处理器调用执行如权利要求1-9任一项所述的方法。

Images