CN112449243B - 一种视频处理方法、装置、设备及存储介质 - Google Patents

Abstract

本申请提供一种视频处理方法、装置、设备及存储介质，涉及视频处理技术领域，用于在视频输入帧率和输出帧率不同的情况下，快速并稳定的显示视频。该方法包括：可以根据输入视频的输入帧率与输出视频的输出帧率之间的帧率比值，从帧率转换关系集合中获取帧率比值对应的目标帧率转换关系；其中，帧率转换关系集合包括多个帧率比值所对应的帧率转换关系，且每一个帧率转换关系是根据输入帧和输出帧的序号比值以及相应帧率比值得到的；进而根据目标帧率转换关系，确定输出视频的每个输出帧位置在输入视频中所对应的输入帧；进而根据各个输出帧位置对应的输入帧获得输出视频。

Description

一种视频处理方法、装置、设备及存储介质

技术领域

本申请涉及视频处理技术领域，提供一种视频处理方法、装置、设备及存储介质。

背景技术

随着科技的发展，视频监控以及视频通信变得越来普及，如在安防领域中，常采用网络摄像机（IP-Camera，IPC）、数字视频录像机（Digital Video Recorder，DVR）以及网络数字硬盘录像机（Network Video Recorder，NVR）等设备进行视频监控，但由于进行视频显示设备的显示帧率与视频采集设备的采集帧率可能不同，使得视频显示可能会出现不流畅或者明显卡顿的问题。此外，在视频会议等行业中，常常会进行多人视频会议，即，会有多个摄像机同时接入到视频会议终端中，因此，会议终端会收到来自多个摄像机的视频流，进而在会议终端上会显示出多个视频流的融合画面，而该画面的输出帧率可能与输入的多个视频流中的大部分视频流的帧率不同，因而在视频显示时也可能造成严重的视频卡顿的问题。

因此，如何在视频输入帧率和输出帧率不同的情况下，快速并稳定的显示视频是一个亟待解决的技术问题。

发明内容

本申请实施例提供一种视频处理方法、装置、设备及存储介质，用于在视频输入帧率和输出帧率不同的情况下，快速并稳定的显示视频。

一方面，提供一种视频处理方法，所述方法包括：

根据输入视频的输入帧率与输出视频的输出帧率之间的帧率比值，从帧率转换关系集合中获取所述帧率比值对应的目标帧率转换关系；其中，所述帧率转换关系集合包括多个帧率比值所对应的帧率转换关系，且每一个帧率转换关系是根据输入帧和输出帧的序号比值以及相应帧率比值得到的；

根据所述目标帧率转换关系，确定所述输出视频的每个输出帧位置在所述输入视频中所对应的输入帧；

根据各个输出帧位置对应的输入帧获得所述输出视频。

一方面，提供一种视频处理装置，所述装置包括：

第一获取单元，用于根据输入视频的输入帧率与输出视频的输出帧率之间的帧率比值，从帧率转换关系集合中获取所述帧率比值对应的目标帧率转换关系；其中，所述帧率转换关系集合包括多个帧率比值所对应的帧率转换关系，且每一个帧率转换关系是根据输入帧和输出帧的序号比值以及相应帧率比值得到的；

转换单元，用于根据所述目标帧率转换关系，确定所述输出视频的每个输出帧位置在所述输入视频中所对应的输入帧；

第二获取单元，用于根据各个输出帧位置对应的输入帧获得所述输出视频。

可选的，所述转换单元，还用于：

根据所述输入帧率确定单位输入视频片段长度，并根据所述单位输入视频长度将所述输入视频划分为多个输入视频片段；

针对所述每一输出帧位置，确定所述每一输出帧位置所在的目标输出视频片段对应的目标输入视频片段；

根据所述帧率转换关系，确定所述目标输入视频片段中与所述每一输出帧位置对应的输入帧。

可选的，所述装置还包括确定单元，用于：

确定输出帧的输出时钟周期；

则所述转换单元，具体用于在一个输出时钟周期到达时，确定当前输出帧位置在所述输入视频中的输入帧；

显示当前输出帧位置所对应的输入帧。

可选的，所述装置还包括第三获取单元，用于：

确定所述第一帧率对应的单位输入视频片段长度以及所述第二帧率对应的单位输出视频片段长度；

根据所述单位输入视频片段长度对应的输入帧位置集合与所述单位输出视频片段长度对应的输出帧位置集合，确定对所述输入帧位置集合中每一输入帧位置对应输入帧的处理方式；其中，所述输入帧位置集合的每一个位置对应一个输入帧，所述输出帧位置集合中的每一个位置对应一个输出帧；或者，

根据所述单位输入视频片段长度对应的输入帧位置集合与所述单位输出视频片段长度对应的输出帧位置集合，确定所述输出帧位置集合中每一输出帧位置对应的输出帧。

可选的，所述第三获取单元，还用于：

当所述第一帧率大于所述第二帧率时，根据所述单位输入视频片段长度对应的输入帧位置集合与所述单位输出视频片段长度对应的输出帧位置集合，确定对所述输入帧位置集合中每一输入帧位置对应输入帧的处理方式，包括：

从所述输入帧位置集合中序号最大的输入帧位置开始，依次确定所述输入帧位置集合中各个输入帧位置对应输入帧的处理方式；

其中，每一输入帧位置对应输入帧的处理方式的确定过程，包括：

获取所述每一输入帧位置的序号与相应输出帧位置的序号之间的序号比值；所述相应输出帧位置为所述输出帧位置集合中未存在对应的输出帧且序号最大的输出帧位置；

确定所述序号比值是否大于所述第一帧率与所述第二帧率的帧率比值；

在确定所述序号比值不大于所述帧率比值时，将所述每一输入帧位置对应的输入帧确定为所述最大序号对应的输出帧；或者，

在确定所述序号比值大于所述帧率比值时，丢弃所述每一输入帧位置对应的输入帧。

可选的，所述第三获取单元，还用于：

当所述第一帧率小于所述第二帧率时，根据所述单位输入视频片段长度对应的输入帧位置集合与所述单位输出视频片段长度对应的输出帧位置集合，确定所述输出帧位置集合中每一输出帧位置对应的输出帧，包括：

从所述输出帧位置集合中序号最小的输出帧位置开始，依次确定所述输出帧位置集合中各个输出帧位置对应的输出帧；

其中，每一输出帧位置对应的输出帧的确定过程，包括：

获取当前输入帧位置的序号与所述每一输出帧位置的序号之间的序号比值；

确定所述序号比值是否小于所述第一帧率与所述第二帧率的帧率比值；

在确定所述序号比值不小于所述帧率比值时，将所述当前输入帧位置对应的输入帧确定为所述每一输出帧位置对应的输出帧；或者，

在确定所述序号比值小于所述帧率比值时，将所述当前输入帧位置的下一个输入帧确定为所述每一输出帧位置对应的输出帧，并将所述当前输入帧位置的序号更新为下一个输入帧位置的序号。

可选的，

所述输入帧位置集合中的输入帧位置与所述输出帧位置集合中的输出帧位置的最小序号为1。

一方面，提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述方面所述的方法的步骤。

一方面，提供一种计算机存储介质，其上存储有计算机程序指令，该计算机程序指令被处理器执行时实现上述方面所述的方法的步骤。

本申请实施例中，可以根据输入视频的输入帧率与输出视频的输出帧率之间的帧率比值，从已确定好的帧率转换关系集合中获取帧率比值对应的目标帧率转换关系；进而根据目标帧率转换关系，确定出输出视频的每个输出帧位置在输入视频中所对应的输入帧；并根据各个输出帧位置对应的输入帧获得输出视频。因此，本申请实施例，通过预先建立帧率转换关系集合，在输入视频的输入帧率与输出视频的输出帧率不同时，可直接从建立好的帧率转换关系集合中选择出对应的目标帧率转换关系，进而通过对该目标帧率转换关系进行查询获得输入视频的每一视频帧对应的处理方式，从而得到输出视频，以达到快速并稳定的显示视频的目的。此外，帧率转换关系是根据输入帧和输出帧的序号比值以及相应帧率比值得到的，也就是说，针对特定的输入帧率和输出帧率，通过输入视频中各个输入帧的序号与输出视频中输出帧的序号之间的序号比值，与输入帧率与输出帧率之间的帧率比值进行比较，从而得到相应的帧率转换关系，即得到每一个输入帧的处理方式，因而与相关技术中直接连续丢帧的方法相比，所得到的输出视频的视觉效果更佳。

附图说明

为了更清楚地说明本申请实施例或相关技术中的技术方案，下面将对实施例或相关技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。

图1为本申请实施例提供的一种应用场景示意图；

图2为本申请实施例提供的视频处理方法的一种流程示意图；

图3为本申请实施例提供的输入帧率大于输出帧率时帧率转换关系的建立过程示意图；

图4为本申请实施例提供的输入帧率小于输出帧率时帧率转换关系的建立过程示意图；

图5为本申请实施例提供的不同帧率的输出时钟周期的对比示意图；

图6为本申请实施例提供的视频处理装置的示意图；

图7为本申请实施例提供的计算机设备的一种示意图。

具体实施方式

为使本申请的目的、技术方案和优点更加清楚明白，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互任意组合。并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。

目前，因视频播放的设备的输出帧率与采集视频的帧率可能存在不同，也会使得视频的播放出现不流畅或者明显卡顿的问题。

基于此，本申请实施例中，可以根据输入视频的输入帧率与输出视频的输出帧率之间的帧率比值，从已确定好的帧率转换关系集合中获取帧率比值对应的目标帧率转换关系；进而根据目标帧率转换关系，确定出输出视频的每个输出帧位置在输入视频中所对应的输入帧；并根据各个输出帧位置对应的输入帧获得输出视频。因此，本申请实施例，通过预先建立帧率转换关系集合，在输入视频的输入帧率与输出视频的输出帧率不同时，可直接从建立好的帧率转换关系集合中选择出对应的目标帧率转换关系，进而通过对该目标帧率转换关系进行查询获得输入视频的每一视频帧对应的处理方式，从而得到输出视频，以达到快速并稳定的显示视频的目的。此外，帧率转换关系是根据输入帧和输出帧的序号比值以及相应帧率比值得到的，也就是说，针对特定的输入帧率和输出帧率，通过输入视频中各个输入帧的序号与输出视频中输出帧的序号之间的序号比值，与输入帧率与输出帧率之间的帧率比值进行比较，从而得到相应的帧率转换关系，即得到每一个输入帧的处理方式，因而与相关技术中直接连续丢帧的方法相比，所得到的输出视频的视觉效果更佳。

在介绍完本申请实施例的设计思想之后，下面对本申请实施例的技术方案能够适用的应用场景做一些简单介绍，需要说明的是，以下介绍的应用场景仅用于说明本申请实施例而非限定。在具体实施过程中，可以根据实际需要灵活地应用本申请实施例提供的技术方案。

如图1所示，为本申请实施例提供的一种应用场景示意图，其中，该视频处理的应用场景可以包括视频处理设备10、视频采集设备11以及视频显示设备12。

视频采集设备11可以为具有视频摄像功能的设备，例如可以为具有视频摄像功能的手机、视频监控设备以及带有摄像头的笔记本电脑等。视频显示设备12可以为具有视频显示功能的设备，例如可以为电脑显示器、手机等。

视频处理设备10是具有一定处理能力的计算机设备，例如可以为个人计算机（personal computer，PC）、笔记本电脑或者服务器等。服务器可以是独立的物理服务器，也可以是多个物理服务器构成的服务器集群或者分布式系统，还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN、以及大数据和人工智能平台等基础云计算服务的云服务器，但并不局限于此。

视频处理设备10包括一个或多个处理器101、存储器102以及与其他设备交互的I/O接口103等。此外，视频处理设备10还可以配置数据库104，数据库104可以用于存储本申请实施例提供的方案中涉及到的获取到的帧率转换关系表以及视频帧处理数据等数据。其中，视频处理设备10的存储器102中可以存储本申请实施例提供的视频处理方法的程序指令，这些程序指令被处理器101执行时能够用以实现本申请实施例提供的视频处理方法的步骤，以使视频帧快速并稳定的显示。

在本申请实施例中，当视频采集设备11进行视频采集之后，会将采集到视频输入至视频处理设备10，当视频处理设备10检测到视频采集设备11输入的输入视频的输入帧率与输出到视频显示设备12上进行显示的输出视频的输出帧率不同时，视频处理设备10会根据输入视频的输入帧率与输出视频的输出帧率之间的帧率比值，从帧率转换关系集合中获取帧率比值对应的目标帧率转换关系，进而，视频处理设备10会根据查询目标帧率转换关系对输入的每一视频帧进行处理，以得到输出视频，并将得到的输出视频输出至视频显示设备12上进行显示。

例如，视频采集设备11以12帧/s的帧率进行视频采集，即将输入帧率为12帧/s的输入视频输入至视频处理设备10，而输出至视频显示设备12上进行显示的输出帧率又为5帧/s。所以视频处理设备10会检测到输入帧率与输出帧率不同，因此，视频处理设备10会根据12/5=2.4的帧率比值2.4，从帧率转换关系集合中选择出帧率比值2.4对应的帧率转换关系，进而，通过查询该帧率转换关系，以得到帧率为5帧/s的输出视频，且会将该帧率为5帧/s的输出视频输出至视频显示设备12上进行显示。

在实际应用中，上述的视频处理设备10与视频显示设备12可以为不同的设备，也可以为同一设备，那么视频处理设备10在完成视频帧率转换时，则可以将视频输出显示。其中，视频处理设备10显示输出视频可以是实时的，例如在视频处理设备处理完一帧视频或者一段视频之后则输出显示，也可以是在完成整个视频的转换之后进行显示，具体可以实际需求进行设定。

当然，本申请实施例提供的方法并不限用于图1所示的应用场景中，还可以用于其他可能的应用场景，本申请实施例并不进行限制。对于图1所示的应用场景的各个设备所能实现的功能将在后续的方法实施例中一并进行描述，在此先不过多赘述。下面，将结合附图对本申请实施例的方法进行介绍。

如图2所示，为本申请实施例的视频处理方法的流程示意图，该方法可以通过图1中的视频处理设备10来执行，该方法的流程介绍如下。

步骤201：建立帧率转换关系集合。

在通常情况下，由于输入视频的输入帧率的取值范围一般为1帧/s~60帧/s，而输出视频的输出帧率的取值范围一般也为1帧/s~60帧/s，所以，在实际进行视频显示时，输入帧率与输出帧率之间的帧率转换搭配可以有60×60=3600种。因此，在本申请实施例中，为了缩短帧率转换的时长，会先获取各种帧率转换搭配对应的帧率转换关系，进而在实际使用时，可直接通过查询对应的帧率转换关系进行帧率转换，以获取对应的输出视频，从而减少视频帧率转换时所需的处理负担，视频帧率转换速度更快，视频显示更为流畅。

在本申请实施例中，帧率转换关系集合中可以包括输入帧率为第一帧率且输出帧率为第二帧率对应的帧率转换关系，第一帧率与第二帧率均可以为任意帧率，则第一帧率与第二帧率对应的帧率转换关系的获取过程包括如下过程：

可以先确定出第一帧率对应的单位输入视频片段长度以及第二帧率对应的单位输出视频片段长度，如，当输入帧率为12帧/s时，则第一帧率对应的单位输入视频片段长度为12帧，当输出帧率为5帧/s时，则第二帧率对应的单位输出视频片段长度为5帧。

此外，当一对输入帧率、输出帧率与另一对输入帧率、输出帧率之间存在最大公约数时，这两对输入帧率、输出帧率就存在相同的单位输入视频片段长度与单位输出视频片段长度，如，输入帧率为60帧/s，输出帧率为25帧/s，与输入帧率为12帧/s，输出帧率为5帧/s存在相同的单位输入视频片段长度为12帧与单位输出视频片段长度5帧，因此可见，当帧率比值相同时，其对应的单位输入视频片段长度与单位输出视频片段长度可以是相同的，且为了简化算法和减少实际运算时所使用的内存空间，单位输入视频片段长度与单位输出视频片段长度可以为可选值中的最小值，例如输入帧率为60帧/s，输出帧率为25帧/s，其对应的输入视频片段长度与输出视频片段长度可以为60和25，也可以为12和5，那么可以将12和5作为单位输入视频片段长度与单位输出视频片段长度。

由于输入帧率与输出帧率的大小关系不同时，对于输入视频中各个视频帧的处理方式是不同的，因而可以根据不同的大小关系进行帧率转换关系的建立。

在输入帧率大于输出帧率时，可以根据单位输入视频片段长度对应的输入帧位置集合与单位输出视频片段长度对应的输出帧位置集合，确定对输入帧位置集合中每一输入帧位置对应输入帧的处理方式，如每一输入帧位置对应输入帧处理方式为显示，或者处理方式为丢弃。其中，输入帧位置集合的每一个位置对应一个输入帧，输出帧位置集合中的每一个位置对应一个输出帧。

而在输入帧率小于输出帧率时，可以根据单位输入视频片段长度对应的输入帧位置集合与单位输出视频片段长度对应的输出帧位置集合，确定输出帧位置集合中每一输出帧位置对应的输出帧。

在一种可能的实施例中，当第一帧率大于第二帧率时，可以根据单位输入视频片段长度对应的输入帧位置集合与单位输出视频片段长度对应的输出帧位置集合，从输入帧位置集合中序号最大的输入帧位置开始，依次确定输入帧位置集合中各个输入帧位置对应输入帧的处理方式，如，以单位输入视频片段长度为12帧对应的输入帧位置集合，以及单位输出视频片段长度为5帧对应的输出帧位置集合为例，可以从输入帧位置集合的第12帧位置开始进行确定，且第一帧率与第二帧率的帧率比值为12/5=2.4，后续可以将帧率比值2.4作为阈值确定每一个输入帧位置对应输入帧的处理方式。

如图3所示，为输入帧率大于输出帧率时帧率转换关系的建立过程示意图。在图3所示的过程中，以输入帧位置A为例进行介绍，其中，输入帧位置A可以为输入帧位置集合中的任一输入帧位置。

S201a1：获取输入帧位置A的序号与相应输出帧位置的序号之间的序号比值。

其中，相应输出帧位置为输出帧位置集合中未存在对应的输出帧且序号最大的输出帧位置，例如，当输出帧位置包括5个输出帧位置时，且当序号为5的输出帧位置已确定了其对应的输入帧，那么当前还未确定其对应的输入帧则为4、3、2和1，那么相应输出帧位置则为4。

例如，当输入帧位置的序号为11，相应输出帧位置的序号为4时，则它们之间的序号比值为11/4=2.75。

S201a2：确定序号比值是否大于第一帧率与第二帧率的帧率比值。

S201a3：在确定序号比值不大于帧率比值时，将每一输入帧位置对应的输入帧确定为最大序号对应的输出帧。

例如，以输入帧位置的序号为4，相应输出帧位置的序号为2为例，可知它们之间的序号比值为2，将该序号比值2与帧率比值2.4相比，可知2＜2.4，即序号比值＜帧率比值，所以可以将该输入帧位置的序号为4对应的输入帧确定输出帧位置的序号为2对应的输出帧，也就是说序号为4的输入帧位置对应的输入帧的处理方式为显示。

S201a4：在确定序号比值大于帧率比值时，丢弃每一输入帧位置对应的输入帧。

例如，以输入帧位置的序号为11，相应输出帧位置的序号为4为例，可知它们之间的序号比值为2.75，将该序号比值2.75与帧率比值2.4相比，可知2.75＞2.4，即序号比值＞帧率比值，则丢弃该输入帧位置的序号为11对应的输入帧，即，不对序号为11的输入帧位置对应的输入帧进行显示。

如表1所示，为本申请实施例提供的第一帧率为12帧/s，第二帧率为5帧/s时的帧率转换关系表。

表1

其中，正常显示表示的含义为输入帧位置上的输入帧会进行显示；丢弃表示的含义为输入帧位置上的输入帧不会进行显示。

如表1所示，在第一帧率为12帧/s，第二帧率为5帧/s情况时，在单位输入视频片段长度内，输入帧位置集合中的第2输入帧位置、第4输入帧位置、第7输入帧位置、第9输入帧位置以及第12输入帧位置这5个输入帧位置对应的输入帧可以进行显示，而剩余的7个输入帧位置对应的输入帧不进行显示。其中，上述表1中输出帧位置序号为0表征帧率转换关系的确定过程结束。

在另一种可能的实施例中，当第一帧率小于第二帧率时，可以根据单位输入视频片段长度对应的输入帧位置集合与单位输出视频片段长度对应的输出帧位置集合，从输出帧位置集合中序号最小的输出帧位置开始，依次确定输出帧位置集合中各个输出帧位置对应的输出帧，如，以单位输入视频片段长度为5帧对应的输入帧位置集合，以及单位输出视频片段长度为12帧对应的输出帧位置集合为例，可以从输出帧位置集合的第1帧位置开始进行确定，且第一帧率与第二帧率的帧率比值为5/12≈0.416667，后续可以将帧率比值0.416667作为阈值确定每一个输入帧位置对应输入帧的处理方式。

在本申请实施例中，输入帧位置集合中的输入帧位置与输出帧位置集合中的输出帧位置的最小序号为1。

如图4所示，为输入帧率小于输出帧率时帧率转换关系的建立过程示意图。在图4所示的过程中，以输入帧位置B为例进行介绍，其中，输入帧位置B可以为输入帧位置集合中的任一输入帧位置。

S201b1：获取当前输入帧位置的序号与输出帧位置B的序号之间的序号比值。

例如，在当前输入帧位置的序号为1，输出帧位置的序号为2时，则它们之间的序号比值为1/2=0.5。

S201b2：确定序号比值是否小于第一帧率与第二帧率的帧率比值。

S201b3：在确定序号比值不小于帧率比值时，将当前输入帧位置对应的输入帧确定为每一输出帧位置对应的输出帧。

沿用上述的例子，将该序号比值0.5与帧率比值0.416667相比，可知0.5＞0.416667，即序号比值＞帧率比值，所以可以将当前输入帧位置的序号为1对应的输入帧确定为输出帧位置的序号为2对应的输出帧，也就是说序号为2的输出帧位置对应的输出帧为序号为1的当前输入帧位置的输入帧。

S201b4：在确定序号比值小于帧率比值时，将当前输入帧位置的下一个输入帧确定为每一输出帧位置对应的输出帧，并将当前输入帧位置的序号更新为下一个输入帧位置的序号。

例如，以当前输入帧位置的序号为1，输出帧位置的序号为3为例，可知它们之间的序号比值为1/3≈0.333333，将该序号比值0.333333与帧率比值0.416667相比，可知0.333333＜0.416667，即序号比值＜帧率比值，则可以将序号为1的当前输入帧位置的下一个输入帧确定为输出帧位置的序号为3的输出帧，即，将序号为2的输入帧位置对应的输入帧确定为输出帧位置的序号为3的输出帧，并将当前输入帧位置的序号2更新为序号3。

如表2所示，为本申请实施例提供的第一帧率为5帧/s，第二帧率为12帧/s时的帧率转换关系表。

表2

其中，正常显示表示的含义为输出帧位置上会显示对应输入帧位置上的输入帧；造假显示表示的含义为输出帧位置上会进行输入帧显示，但是该显示的输入帧为该输出帧位置的上一输出帧位置显示的输入帧，相当于将上一输入帧复制到当前输出帧位置，再显示了一次；丢弃表示的含义为输出帧位置对应的输入帧停止显示，并显示其下一帧的内容。

如表2所示，在第一帧率为5帧/s，第二帧率为12帧/s情况时，在单位输出视频片段长度内，第1、2输出帧位置都显示第1输入帧位置对应的视频帧，第3、4输出帧位置都显示第2输入帧位置对应的视频帧，第5、6、7输出帧位置都显示第3输入帧位置对应的视频帧，第8、9输出帧位置都显示第4输入帧位置对应的视频帧，第10、11、12输出帧位置都显示第5输入帧位置对应的视频帧。则，可将表2所示的帧率转换关系进一步简化为表3所示的形式。

表3

通过上述步骤对各种输入帧率与输出帧率之间的帧率转换搭配进行帧率转换关系的获取，就可以得到包含有输入帧率取值范围为1帧/s~60帧/s，输出帧率的取值范围也为1帧/s~60帧/s的各种帧率转换搭配的帧率转换关系集合，当然，也可以扩展至任意帧率的转换。

步骤202：根据输入视频的输入帧率与输出视频的输出帧率之间的帧率比值，从帧率转换关系集合中获取帧率比值对应的目标帧率转换关系。

在本申请实施例中，帧率转换关系集合包括多个帧率比值所对应的帧率转换关系，且每一个帧率转换关系是根据输入帧和输出帧的序号比值以及相应帧率比值得到的。

在实际应用时，以输入帧率为12帧/s，输出帧率为5帧/s为例，它们之间的帧率比值2.4，则可以从已经建立好的帧率转换关系集合中选择出帧率比值为2.4的目标帧率转换关系。

步骤203：根据目标帧率转换关系，确定输出视频的每个输出帧位置在输入视频中所对应的输入帧。

根据目标帧率转换关系，则可以确定需要输出的每一个输出帧位置所对应的输入帧。例如在一个帧率为12帧/s的输入视频需要转换为5帧/s的输出视频时，可以将输入视频按照每12帧为一个处理循环，即先对第一个12帧进行转换，得到相应输出的第一个5帧，根据如表1所示的关系，则可以知道，第一个5帧依次为第一个12帧中的第2帧、第4帧、第7帧、第9帧、第12帧。

上述视频帧率转换的过程可以是预先对输入视频转换完成后再进行视频显示，也可以是在视频显示时实时进行的。例如，在进行视频会议时，对接收到的会议视频进行转换后实时显示。

在通常情况下，视频中的图像帧进行显示时，通常是按照设定的输出时钟周期进行显示的，在一个输出时钟周期内，显示同一帧图像，直至下一个输出时钟周期开始，如图5所示，为不同帧率的输出时钟周期的对比示意图。在输出帧率为12帧/s时，第1帧图像会从0毫秒一直显示到83.3毫秒，第2帧图像会从83.3毫秒一直显示到166.6毫秒，依次类推。

因此，当对输入视频进行转换并实时显示时，可以在每一个输出时钟周期到达时，触发一个视频帧的转换。那么，首先需要确定输出视频的输出时钟周期，继而在一个输出时钟周期到达时，可以确定当前输出帧位置所对应的输入视频中的输入帧，进而显示当前输出帧位置所对应的输入帧。

其中，输出时钟周期与帧率有关，如图5所示，在输入帧率为5帧/s，相应的输入时钟周期为200毫秒，在输出帧率为12帧/s时，相应的输出时钟周期为83.3毫秒。

由于在进行视频帧率转换时是将一个输入视频片段转换为相应的输出视频片段，因此输入视频与输出视频的片段之间具有对应关系。在实际处理时，可以根据输入帧率与输出帧率确定对应关系中包括的单位输入视频片段长度与单位输出视频片段，同样的，为了简化算法和减少实际运算时所使用的内存空间，单位输入视频片段长度与单位输出视频片段长度可以为可选值中的最小值，例如输入帧率为60帧/s，输出帧率为25帧/s，其对应的输入视频片段长度与输出视频片段长度可以为60和25，也可以为12和5，那么可以将12和5作为单位输入视频片段长度与单位输出视频片段长度。

进而，可以根据输入帧率确定单位输入视频片段长度，并根据单位输入视频长度将输入视频划分为多个输入视频片段。例如，输入帧率为12帧/s，那么单位输入视频长度就为12帧，因此，就可以按照一个输入视频片段包含12帧来对输入视频划分，进而，就可以获得多个长度为12帧的输入视频片段。

进而，针对每一输出帧位置，在确定每一输出帧位置所在的目标输出视频片段对应的目标输入视频片段之后，就可以根据帧率转换关系，确定目标输入视频片段中与每一输出帧位置对应的输入帧了。如图5所示，在输入帧率为12帧/s，输出帧率为5帧/s时，第1输出帧位置对应的输出帧为第1输入帧位置对应的输入帧，第2输出帧位置对应的输出帧为第1输入帧位置对应的输入帧，第3输出帧位置对应的输出帧为第3输入帧位置对应的输入帧，根据帧率转换关系，依次进行确定。

步骤204：根据各个输出帧位置对应的输入帧获得输出视频。

在本申请实施例中，在根据帧率转换关系，确定出每一输入视频片段中与每一输出帧位置对应的输入帧之后，就可以根据各个输出帧位置得到相应的输出视频片段，进而将各个输出视频片段按照顺序联合起来则可以得到输出视频。

综上所述，本申请实施例中，通过预先建立帧率转换关系集合，在输入视频的输入帧率与输出视频的输出帧率不同时，可直接从建立好的帧率转换关系集合中选择出对应的目标帧率转换关系，进而通过对该目标帧率转换关系进行查询获得输入视频的每一视频帧对应的处理方式，从而得到输出视频，以达到快速并稳定的显示视频的目的。此外，帧率转换关系是根据输入帧和输出帧的序号比值以及相应帧率比值得到的，也就是说，针对特定的输入帧率和输出帧率，通过输入视频中各个输入帧的序号与输出视频中输出帧的序号之间的序号比值，与输入帧率与输出帧率之间的帧率比值进行比较，从而得到相应的帧率转换关系，即得到每一个输入帧的处理方式，因而与相关技术中直接连续丢帧的方法相比，所得到的输出视频的视觉效果更佳。

如图6所示，基于同一发明构思，本申请实施例提供一种视频处理装置60，该装置包括：

第一获取单元601，用于根据输入视频的输入帧率与输出视频的输出帧率之间的帧率比值，从帧率转换关系集合中获取帧率比值对应的目标帧率转换关系；其中，帧率转换关系集合包括多个帧率比值所对应的帧率转换关系，且每一个帧率转换关系是根据输入帧和输出帧的序号比值以及相应帧率比值得到的；

转换单元602，用于根据目标帧率转换关系，确定输出视频的每个输出帧位置在输入视频中所对应的输入帧；

第二获取单元603，用于根据各个输出帧位置对应的输入帧获得输出视频。

可选的，转换单元602，还用于：

根据输入帧率确定单位输入视频片段长度，并根据单位输入视频长度将输入视频划分为多个输入视频片段；

针对每一输出帧位置，确定每一输出帧位置所在的目标输出视频片段对应的目标输入视频片段；

根据帧率转换关系，确定目标输入视频片段中与每一输出帧位置对应的输入帧。

可选的，该装置，还包括确定单元604，用于：

确定输出帧的输出时钟周期；

则所述转换单元602，具体用于在一个输出时钟周期到达时，确定当前输出帧位置在输入视频中的输入帧；

显示当前输出帧位置所对应的输入帧。

可选的，该装置，还包括第三获取单元605，用于：

确定第一帧率对应的单位输入视频片段长度以及第二帧率对应的单位输出视频片段长度；

根据单位输入视频片段长度对应的输入帧位置集合与单位输出视频片段长度对应的输出帧位置集合，确定对输入帧位置集合中每一输入帧位置对应输入帧的处理方式；其中，输入帧位置集合的每一个位置对应一个输入帧，输出帧位置集合中的每一个位置对应一个输出帧；或者，

根据单位输入视频片段长度对应的输入帧位置集合与单位输出视频片段长度对应的输出帧位置集合，确定输出帧位置集合中每一输出帧位置对应的输出帧。

可选的，第三获取单元605，还用于：

当第一帧率大于第二帧率时，根据单位输入视频片段长度对应的输入帧位置集合与单位输出视频片段长度对应的输出帧位置集合，确定对输入帧位置集合中每一输入帧位置对应输入帧的处理方式，包括：

从输入帧位置集合中序号最大的输入帧位置开始，依次确定输入帧位置集合中各个输入帧位置对应输入帧的处理方式；

其中，每一输入帧位置对应输入帧的处理方式的确定过程，包括：

获取每一输入帧位置的序号与相应输出帧位置的序号之间的序号比值；相应输出帧位置为输出帧位置集合中未存在对应的输出帧且序号最大的输出帧位置；

确定序号比值是否大于第一帧率与第二帧率的帧率比值；

在确定序号比值不大于帧率比值时，将每一输入帧位置对应的输入帧确定为最大序号对应的输出帧；或者，

在确定序号比值大于帧率比值时，丢弃每一输入帧位置对应的输入帧。

可选的，第三获取单元605，还用于：

当第一帧率小于第二帧率时，根据单位输入视频片段长度对应的输入帧位置集合与单位输出视频片段长度对应的输出帧位置集合，确定输出帧位置集合中每一输出帧位置对应的输出帧，包括：

从输出帧位置集合中序号最小的输出帧位置开始，依次确定输出帧位置集合中各个输出帧位置对应的输出帧；

其中，每一输出帧位置对应的输出帧的确定过程，包括：

获取当前输入帧位置的序号与每一输出帧位置的序号之间的序号比值；

确定序号比值是否小于第一帧率与第二帧率的帧率比值；

在确定序号比值不小于帧率比值时，将当前输入帧位置对应的输入帧确定为每一输出帧位置对应的输出帧；或者，

在确定序号比值小于帧率比值时，将当前输入帧位置的下一个输入帧确定为每一输出帧位置对应的输出帧，并将当前输入帧位置的序号更新为下一个输入帧位置的序号。

该装置可以用于执行图2~图5所示的实施例中所述的方法，因此，对于该装置的各功能模块所能够实现的功能等可参考图2~图5所示的实施例的描述，不多赘述。需要说明的是，确定单元604与第三获取单元605并不是必选的功能单元，因此在图6中以虚线进行示出。

请参见图7，基于同一技术构思，本申请实施例还提供了一种计算机设备70，可以包括存储器701和处理器702。

所述存储器701，用于存储处理器702执行的计算机程序。存储器701可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序等；存储数据区可存储根据计算机设备的使用所创建的数据等。处理器702，可以是一个中央处理单元（central processing unit， CPU），或者为数字处理单元等等。本申请实施例中不限定上述存储器701和处理器702之间的具体连接介质。本申请实施例在图7中以存储器701和处理器702之间通过总线703连接，总线703在图7中以粗线表示，其它部件之间的连接方式，仅是进行示意性说明，并不引以为限。所述总线703可以分为地址总线、数据总线、控制总线等。为便于表示，图7中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。

存储器701可以是易失性存储器（volatile memory），例如随机存取存储器（random-access memory，RAM）；存储器701也可以是非易失性存储器（non-volatilememory），例如只读存储器，快闪存储器（flash memory），硬盘（hard disk drive，HDD）或固态硬盘（solid-state drive，SSD）、或者存储器701是能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质，但不限于此。存储器701可以是上述存储器的组合。

处理器702，用于调用所述存储器701中存储的计算机程序时执行如图2~图5所示的实施例中设备所执行的方法。

在一些可能的实施方式中，本申请提供的方法的各个方面还可以实现为一种程序产品的形式，其包括程序代码，当所述程序产品在计算机设备上运行时，所述程序代码用于使所述计算机设备执行本说明书上述描述的根据本申请各种示例性实施方式的方法中的步骤，例如，所述计算机设备可以执行如图2~图5所示的实施例中所述的方法。

本领域普通技术人员可以理解：实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成，前述的程序可以存储于一计算机可读取存储介质中，该程序在执行时，执行包括上述方法实施例的步骤；而前述的存储介质包括：移动存储设备、只读存储器（ROM，Read-Only Memory）、随机存取存储器（RAM，Random Access Memory）、磁碟或者光盘等各种可以存储程序代码的介质。或者，本发明上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备（可以是个人计算机、服务器、或者网络设备等）执行本发明各个实施例所述方法的全部或部分。而前述的存储介质包括：移动存储设备、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。

尽管已描述了本申请的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例做出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本申请范围的所有变更和修改。

显然，本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样，倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内，则本申请也意图包含这些改动和变型在内。

Claims (10)

1.一种视频处理方法，其特征在于，所述方法包括：

根据输入视频的输入帧率与输出视频的输出帧率之间的帧率比值，从帧率转换关系集合中获取所述帧率比值对应的目标帧率转换关系；其中，所述帧率转换关系集合包括多个帧率比值所对应的帧率转换关系；在获得每一个帧率转换关系的过程中，确定每一输入帧位置的序号与相应输出帧位置的序号之间的序号比值，当所述输入帧率大于所述输出帧率时，从输入帧位置集合中序号最大的输入帧位置开始，将所述序号比值不大于所述帧率比值的输入帧确定为输出帧，或者，丢弃所述序号比值大于所述帧率比值的输入帧；当所述输入帧率小于所述输出帧率时，从输出帧位置集合中序号最小的输出帧位置开始，将所述序号比值不小于所述帧率比值的输入帧确定为所述相应输出帧位置的输出帧，或者，将所述序号比值小于所述帧率比值的输入帧位置的下一个输入帧确定为所述相应输出帧位置的输出帧；

根据所述目标帧率转换关系，确定所述输出视频的每个输出帧位置在所述输入视频中所对应的输入帧；

根据各个输出帧位置对应的输入帧获得所述输出视频。

2.如权利要求1所述的方法，其特征在于，根据所述目标帧率转换关系，确定所述输出视频的每个输出帧位置在所述输入视频中所对应的输入帧，包括：

根据所述输入帧率确定单位输入视频片段长度，并根据所述单位输入视频长度将所述输入视频划分为多个输入视频片段；

针对每一输出帧位置，确定所述每一输出帧位置所在的目标输出视频片段对应的目标输入视频片段；

根据所述帧率转换关系，确定所述目标输入视频片段中与所述每一输出帧位置对应的输入帧。

3.如权利要求1所述的方法，其特征在于，在根据所述目标帧率转换关系，确定所述输出视频的每个输出帧位置在所述输入视频中所对应的输入帧之前，所述方法还包括：

确定输出帧的输出时钟周期；

则根据所述目标帧率转换关系，确定所述输出视频的每个输出帧位置在所述输入视频中所对应的输入帧，包括：

在一个输出时钟周期到达时，确定当前输出帧位置在所述输入视频中的输入帧；

显示当前输出帧位置所对应的输入帧。

4.如权利要求1所述的方法，其特征在于，所述帧率转换关系集合中包括输入帧率为第一帧率且输出帧率为第二帧率对应的帧率转换关系，则所述第一帧率与所述第二帧率对应的帧率转换关系的获取过程包括：

确定所述第一帧率对应的单位输入视频片段长度以及所述第二帧率对应的单位输出视频片段长度；

根据所述单位输入视频片段长度对应的输入帧位置集合与所述单位输出视频片段长度对应的输出帧位置集合，确定对所述输入帧位置集合中每一输入帧位置对应输入帧的处理方式；其中，所述输入帧位置集合的每一个位置对应一个输入帧，所述输出帧位置集合中的每一个位置对应一个输出帧；或者，

根据所述单位输入视频片段长度对应的输入帧位置集合与所述单位输出视频片段长度对应的输出帧位置集合，确定所述输出帧位置集合中每一输出帧位置对应的输出帧。

5.如权利要求4所述的方法，其特征在于，当所述第一帧率大于所述第二帧率时，根据所述单位输入视频片段长度对应的输入帧位置集合与所述单位输出视频片段长度对应的输出帧位置集合，确定对所述输入帧位置集合中每一输入帧位置对应输入帧的处理方式，包括：

从所述输入帧位置集合中序号最大的输入帧位置开始，依次确定所述输入帧位置集合中各个输入帧位置对应输入帧的处理方式；

其中，每一输入帧位置对应输入帧的处理方式的确定过程，包括：

获取所述每一输入帧位置的序号与相应输出帧位置的序号之间的序号比值；所述相应输出帧位置为所述输出帧位置集合中未存在对应的输出帧且序号最大的输出帧位置；

确定所述序号比值是否大于所述第一帧率与所述第二帧率的帧率比值；

在确定所述序号比值不大于所述帧率比值时，将所述每一输入帧位置对应的输入帧确定为所述相应输出帧位置对应的输出帧；或者，

在确定所述序号比值大于所述帧率比值时，丢弃所述每一输入帧位置对应的输入帧。

6.如权利要求4所述的方法，其特征在于，当所述第一帧率小于所述第二帧率，根据所述单位输入视频片段长度对应的输入帧位置集合与所述单位输出视频片段长度对应的输出帧位置集合，确定所述输出帧位置集合中每一输出帧位置对应的输出帧，包括：

从所述输出帧位置集合中序号最小的输出帧位置开始，依次确定所述输出帧位置集合中各个输出帧位置对应的输出帧；

其中，每一输出帧位置对应的输出帧的确定过程，包括：

获取当前输入帧位置的序号与所述每一输出帧位置的序号之间的序号比值；

确定所述序号比值是否小于所述第一帧率与所述第二帧率的帧率比值；

在确定所述序号比值不小于所述帧率比值时，将所述当前输入帧位置对应的输入帧确定为所述每一输出帧位置对应的输出帧；或者，

在确定所述序号比值小于所述帧率比值时，将所述当前输入帧位置的下一个输入帧确定为所述每一输出帧位置对应的输出帧，并将所述当前输入帧位置的序号更新为下一个输入帧位置的序号。

7.如权利要求6所述的方法，其特征在于，所述输入帧位置集合中的输入帧位置与所述输出帧位置集合中的输出帧位置的最小序号为1。

8.一种视频处理装置，其特征在于，所述装置包括：

第一获取单元，用于根据输入视频的输入帧率与输出视频的输出帧率之间的帧率比值，从帧率转换关系集合中获取所述帧率比值对应的目标帧率转换关系；其中，所述帧率转换关系集合包括多个帧率比值所对应的帧率转换关系；在获得每一个帧率转换关系的过程中，确定每一输入帧位置的序号与相应输出帧位置的序号之间的序号比值，当所述输入帧率大于所述输出帧率时，从输入帧位置集合中序号最大的输入帧位置开始，将所述序号比值不大于所述帧率比值的输入帧确定为输出帧，或者，丢弃所述序号比值大于所述帧率比值的输入帧；当所述输入帧率小于所述输出帧率时，从输出帧位置集合中序号最小的输出帧位置开始，将所述序号比值不小于所述帧率比值的输入帧确定为所述相应输出帧位置的输出帧，或者，将所述序号比值小于所述帧率比值的输入帧位置的下一个输入帧确定为所述相应输出帧位置的输出帧；

转换单元，用于根据所述目标帧率转换关系，确定所述输出视频的每个输出帧位置在所述输入视频中所对应的输入帧；

第二获取单元，用于根据各个输出帧位置对应的输入帧获得所述输出视频。

9.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，

所述处理器执行所述计算机程序时实现权利要求1至7任一项所述方法的步骤。

10.一种计算机存储介质，其上存储有计算机程序指令，其特征在于，

该计算机程序指令被处理器执行时实现权利要求1至7任一项所述方法的步骤。

Images