CN111327908A - 一种视频处理方法及相关装置 - Google Patents

一种视频处理方法及相关装置 Download PDF

Info

Publication number
CN111327908A
CN111327908A CN202010149268.7A CN202010149268A CN111327908A CN 111327908 A CN111327908 A CN 111327908A CN 202010149268 A CN202010149268 A CN 202010149268A CN 111327908 A CN111327908 A CN 111327908A
Authority
CN
China
Prior art keywords
group
video
frame images
adjacent frame
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010149268.7A
Other languages
English (en)
Other versions
CN111327908B (zh
Inventor
胡杰
林文真
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN202010149268.7A priority Critical patent/CN111327908B/zh
Publication of CN111327908A publication Critical patent/CN111327908A/zh
Application granted granted Critical
Publication of CN111327908B publication Critical patent/CN111327908B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/56—Motion estimation with initialisation of the vector search, e.g. estimating a good candidate to initiate a search
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请实施例公开了一种视频处理方法及其相关装置，所述方法包括：获取待处理视频；根据所述待处理视频的图层确定所述待处理视频中需要做插帧处理的至少一组相邻帧图像；确定所述每组相邻帧图像的至少一帧待插入图像；将所述至少一帧待插入图像插入所述每组相邻帧图像中，得到目标视频；向显示屏发送所述目标视频。本申请实施例提供视频插帧条件对待处理视频进行视频插帧，提高了视频插帧的效率，提高了视频质量。

Description

一种视频处理方法及相关装置
技术领域
本申请涉及电子技术领域，具体涉及一种视频处理方法及相关装置。
背景技术
随着科学技术的不断发展，人们对观看视频质量要求越来越高。手机等终端设备的显示屏的每秒播放的帧数越来越高，在一些摄像设备或者是一些终端设备的相机应用的录制时每秒录制的帧数比显示屏的每秒播放的帧数低，视频质量较低，目前，在传输的过程中录制的视频由于传输的损耗导致原视频出现跳帧，视频画面出现空洞的问题，而这些问题还有待解决。
发明内容
本申请实施例提供了一种视频处理方法及相关装置，解决视频画面出现空洞的问题，以提高视频质量。
第一方面，本申请实施例提供一种视频处理方法，所述方法包括：
获取待处理视频；
根据所述待处理视频的图层确定所述待处理视频中需要做插帧处理的至少一组相邻帧图像，所述至少一组相邻帧图像中每组相邻帧图像包括相邻的两帧图像；
确定所述每组相邻帧图像的至少一帧待插入图像；
将所述至少一帧待插入图像插入所述每组相邻帧图像中，得到目标视频；
向显示屏发送所述目标视频。
第二方面，本申请实施例提供一种视频处理装置，其特征在于，所述装置包括：
处理单元，用于通过通信单元获取待处理视频；以及用于根据所述待处理视频的图层确定所述待处理视频中需要做插帧处理的至少一组相邻帧图像，所述至少一组相邻帧图像中每组相邻帧图像包括相邻的两帧图像；以及用于确定所述每组相邻帧图像的至少一帧待插入图像；以及用于将所述至少一帧待插入图像插入所述每组相邻帧图像中，得到目标视频；以及用于向显示屏发送所述目标视频。
第三方面，本申请实施例提供了一种电子设备，包括处理器、存储器、通信接口以及一个或多个程序，其中，上述一个或多个程序被存储在上述存储器中，并且被配置由上述处理器执行，上述程序包括用于执行本申请实施例第一方面任一方法中的步骤的指令。
第四方面，本申请实施例提供了一种计算机可读存储介质，其中，上述计算机可读存储介质存储用于电子数据交换的计算机程序，其中，上述计算机程序使得计算机执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤。
第五方面，本申请实施例提供了一种计算机程序产品，其中，上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，上述计算机程序可操作来使计算机执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。
可以看出，本申请实施例通过获取待处理视频；根据所述待处理视频的图层确定所述待处理视频中需要做插帧处理的至少一组相邻帧图像，所述至少一组相邻帧图像中每组相邻帧图像包括相邻的两帧图像；确定所述每组相邻帧图像的至少一帧待插入图像；将所述至少一帧待插入图像插入所述每组相邻帧图像中，得到目标视频；向显示屏发送所述目标视频。提高视频画面的流畅度，提高视频质量。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种视频处理中的视频插帧的示意图；
图2a是本申请实施例提供的一种视频处理方法的流程示意图；
图2b是本申请实施例提供的一种软件框图的示意图；
图2c是本申请实施例提供的一种硬件框图的示意图；
图3是本申请实施例提供的一种视频处理方法的流程示意图；
图4是本申请实施例提供的一种电子设备的结构示意图；
图5是本申请实施例提供的一种视频处理装置的功能单元组成框图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别不同对象，而不是用于描述特定顺序。此外，术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。
在本文中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本文所描述的实施例可以与其它实施例相结合。
目前，在传输的过程中录制的视频由于传输的损耗导致原视频出现跳帧，视频画面出现空洞的问题，在现有的插帧技术是利用运动估计运动补偿(Motion Estimate andMotion Compensation，MEMC)算法对视频进行视频插帧处理。但运动估计运动补偿MEMC算法的分块运动补偿的块效应较为严重，解码时看起来有马赛克一样的效果，严重影响视频的质量。
请参阅图1，图1是本申请实施例提供的一种视频插帧的示意图，如图1所示，在视频的相邻的前后两帧之间插入新的视频帧，上述新的视频帧的帧数为Q，所述数量Q为正整数，其中图1中给出的新的视频的帧数Q为1，图1中110为待插入新的视频帧的相邻的前后两帧中的前帧，130为带插入新的视频帧的相邻的前后帧中的后帧，120为待插入的新的视频帧。
下面对本申请实施例进行详细介绍。
为了解决上述分块运动补偿的块效应严重问题，本申请实施例提供一种视频处理方法，具体如图2a所示，该方法可以包括但不限于如下步骤：
S201、电子设备获取待处理视频。
其中，上述电子设备可以是具备通信能力的电子设备，该电子设备可以包括各种具有无线通信功能的手持设备、车载设备、可穿戴设备、计算设备或连接到无线调制解调器的其他处理设备，以及各种形式的用户设备(User Equipment，UE)，移动台(MobileStation，MS)，终端设备(terminal device)等等。其中，终端设备包括手机、平板电脑、笔记本电脑、智能穿戴设备等。
其中，所述电子设备获取待处理视频的的频率可以是按预设周期获取，可以是按照预设的多个不同的时间间隔获取。
具体实现中，所述待处理视频可以是上述电子设备内存中存储的，可以是上述电子设备从相机应用中获取的视频，可以是从网络服务器获取的视频，或者是来自另一个电子设备的视频，等等。
具体实现中，所述待处理视频可以是来自上述电子设备的相机应用的视频；可以是上述电子设备的图层分离视频应用的视频；可以是上述电子设备的图层叠合视频应用的视频。
具体实现中，所述待处理视频可以是通过三原色RGB数据管道获取；可以是通过颜色编码YUV数据管道获取。
其中，所述待处理视频可以是静态视频，可以是动态视频。其中，所述待处理视频的数量可以是一个，或者是多个。
S202、所述电子设备根据所述待处理视频的图层确定所述待处理视频中需要做插帧处理的至少一组相邻帧图像，所述至少一组相邻帧图像中每组相邻帧图像包括相邻的两帧图像。
其中，所述待处理视频的图层可以是一层，可以是两层。
具体实现中，所述根据所述待处理视频的图层确定所述待处理视频中需要做插帧处理的至少一组相邻帧图像，可以是根据单层图层的待处理视频确定所述待处理视频中需要做插帧处理的至少一组相邻帧图像，可以是根据两层图层的待处理视频确定所述待处理视频中需要做插帧处理的至少一组相邻帧图像。
在一种可能的实施方式中，在根据所述待处理视频的图层确定所述待处理视频中需要做插帧处理的至少一组相邻帧图像之前，所述电子设备可以是根据预设帧率确定所述待处理视频中需要做插帧处理的至少一组相邻帧图像，所述预设帧率可以是根据显示屏最大刷新率设置，可以是固定的一个帧率。
在一种可能的实施方式中，在根据所述待处理视频的图层确定所述待处理视频中需要做插帧处理的至少一组相邻帧图像之前，所述电子设备可以是根据上述待处理视频出现弹框，确定所述待处理视频中需要做插帧处理的至少一组相邻帧图像。
举例说明，在所述待处理视频中出现弹框情况下，根据所述待处理视频的单层图层确定所述待处理视频中需要做插帧处理的至少一组相邻帧图像，其中，所述至少一组相邻帧图像中每组相邻帧图像包括的两帧图像中任意一帧图像中有弹框。
在一种可能的实施方式中，在根据所述待处理视频的图层确定所述待处理视频中需要做插帧处理的至少一组相邻帧图像之前，所述电子设备可以是根据预设帧率和所述待处理视频出现弹框，确定所述待处理视频中需要做插帧处理的至少一组相邻帧图像。
例如，图2b为本申请实施例中提供的一种软件框图。如图2b所示，在所述待处理视频的具体实施步骤可以是：通过名单和前端策略和视频筛选条件，其中视频筛选的条件包括所述待处理视频的第一帧率小于或者等于预设帧率和所述待处理视频出现弹框，对所述待处理视频进行视频筛选；再通过管理设备服务器的服务代码，对下透明操作一个显示设备(Display Device)；再经过控制显示的中间件代码，判断有无分层，根据有无分层对下实一个或两个显示设备，最后通过显示驱动，得到所述预处理视频。
在一种可能的实施方式中，图2c为本申请实施例中提供的一种硬件框图。如图2c所示，所述预处理视频通过视频互通网关(video interworking gateway，VIG)进入交叉开关矩阵(Crossbar)，得到第一视频；上述第一视频通过图层混合器(Layer Mixer，LM),得到第二视频；上述第二视频通过局部色调映射器(local Tone Mapping,LTM)，得到第三视频；上述第三视频通过显示图层后处理单元DSPP，再通过显示流压缩(Display StreamCompression，DSC)、Crossbar、显示通信接口(Display Serial Interface，DSI)，得到第四视频；上述第四视频通过图像显示芯片确定所述每组相邻帧图像的至少一帧待插入图像。
其中，需要进一步解释的是,上述第四视频视频通过图像显示芯片(PixelWorks)确定所述每组相邻帧图像的至少一帧待插入图像的具体步骤可以是：通过运动估计运动补偿MEMC算法对所述第四视频进行插帧处理。图为本申请实施例中提供的一种视频插帧的示意图。
其中，需要进一步解释的是，所述运动估计运动补偿(Motion Estimate andMotion Compensation，MEMC)算法中运动估计的算法包括匹配搜寻算法、以下至少一种：基于流光方程的方法，块匹配法(Block Matching Algorithm，BMA)，像素递归法(PixelRecursiveAlgorithm，PRA)，贝叶斯法。其中，BMA算法包括以下至少一种：二位对数搜索法、三步搜索法、四步搜索法、菱形搜索法、六边形搜索法。
S203、所述电子设备确定所述每组相邻帧图像的至少一帧待插入图像。
具体实现中，确定所述每组相邻帧图像的至少一帧待插入图像可以是：根据检测到所述待处理视频的图层有分层，确定所述每组相邻帧图像的至少一帧待插入图像。
具体实现中，确定所述每组相邻帧图像的至少一帧待插入图像可以是：根据检测到所述待处理视频的图层无分层，确定所述每组相邻帧图像的至少一帧待插入图像。
具体实现中，确定所述每组相邻帧图像的至少一帧待插入图像可以是：根据检测到所述待处理视频出现弹框，确定所述每组相邻帧图像的至少一帧待插入图像，其中所述至少一帧待插入图像中的每帧图像与所述每组相邻帧图像中两帧图像中的任意一帧相同。例如，在一组相邻帧图像中第一帧图像出现弹框，在该组相邻帧图像之间。
S204、所述电子设备将所述至少一帧待插入图像插入所述每组相邻帧图像中，得到目标视频。
具体实现中，所述电子设备将所述至少一帧待插入图像插入所述每组相邻帧图像中，得到目标视频的具体步骤可以是：确定所述至少一帧待插入图像中每帧图像的插入的序号；根据所述序号将所述至少一帧待插入图像插入所述每组相邻帧图像中，得到目标视频。
具体实现中，将所述至少一帧待插入图像插入所述每组相邻帧图像中，得到目标视频的具体步骤可以是：确定所述至少一帧待插入图像的帧数和每帧待插入图像的序号，根据所述帧数和所述序号将至少一帧待插入图像插入每组相邻帧图像中，得到目标视频。
S205、所述电子设备向显示屏发送所述目标视频。
其中，所述目标视频可以是静态视频，可以是动态视频。其中，所述目标视频包括视频(video)和图标。其中，所述图标包括屏上显示物体(On-Screen Display，OSD)，所述图标可以是静态图标，或者是动态图标。
可以看出，本申请实施例通过根据所述待处理视频的图层确定所述待处理视频中需要做插帧处理的至少一组相邻帧图像，所述至少一组相邻帧图像中每组相邻帧图像包括相邻的两帧图像；确定所述每组相邻帧图像的至少一帧待插入图像；将所述至少一帧待插入图像插入所述每组相邻帧图像中，得到目标视频；向显示屏发送所述目标视频。本示例中通过根据视频插帧条件对所述待处理视频进行视频插帧，提高视频画面的流畅度，提高视频质量。
在一个可能的示例中，所述根据所述待处理视频的图层确定所述待处理视频中需要做插帧处理的至少一组相邻帧图像，包括：检测到所述待处理视频的图层有分层，则确定所述至少一组相邻帧图像中的至少一帧待插入图像，其中，所述待处理视频的图层包括第一格式的第一图层和第二格式的第二图层，所述至少一组相邻帧图像为所述待处理视频中的所述第一格式的第一图层中的第一视频中的图像。
其中，第一格式的第一图层可以是YCBCR_420的视频层，第二格式的第二图层可以是OSD。上述OSD可以是图标、应用功能调节进度条、应用特效等。
具体实现中，检测到所述待处理视频的图层有分层，则确定所述至少一组相邻帧图像中的至少一帧待插入图像的具体步骤可以是：检测到所述待处理视频的图层为YCBCR_420的视频层和用户界面层，则确定所述至少一组相邻帧图像中的至少一帧待插入图像。
可以看出，本申请实施例中，通过检测到所述待处理视频的图层有分层，则确定所述至少一组相邻帧图像中的至少一帧待插入图像。提高视频的插帧效率，提高视频画面的流畅度，提高视频质量。
在一个可能的示例中，所述检测到所述待处理视频的图层有分层，则确定所述至少一组相邻帧图像中的至少一帧待插入图像，包括：确定所述至少一组相邻帧图像的场景，所述场景包括静态场景和动态场景，所述静态场景包括静止场景和相对静止场景，所述动态场景包括运动场景和相对运动场景；根据所述场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像。
其中，所述动态场景为运动场景或为相对运动场景，其中，所述运动场景包括高速运动场景、常态运动场景和慢速运动场景，所述相对运动场景包括相对高速运动场景、相对常态运动场景和相对慢速运动场景。所述静态场景为静止场景或为相对静止场景，其中相对静止场景包括高速运动状态下的相对静止场景、慢速运动状态下的相对静止场景。
其中，具体实现中，所述运动场景中的高速运动场景、常态运动场景和慢速运动场景，可以是由以下具体步骤确定：根据所述待处理视频确定物体的运动速度，根据所述运动速度、第一预设速度和第二预设速度，判断所述运动场景为以下运动场景：高速运动场景、常态运动场景和慢速运动场景中的一种。
具体实现中，所述运动场景中的高速运动场景、常态运动场景和慢速运动场景，可以是由以下具体步骤确定：根据所述待处理视频确定运动物体；根据聚类算法、形状模型和颜色模型，计算每组相邻帧图像的运动物体的运动向量，根据所述运动向量和第一运动向量，判断所述运动场景为以下运动场景：高速运动场景、常态运动场景和慢速运动场景中的一种。
其中，第一运动向量可以是预设的向量值，可以是由所述电子设备设置的向量值。
具体实现中，所述静态场景中的高速运动状态下的相对静止场景、慢速运动状态下的相对静止场景，可以是由以下具体步骤确定：根据所述待处理视频确定物体的相对运动速度，根据所述相对运动速度和第三预设速度，判断所述运动场景为以下运动场景中的任意一种：高速运动状态下的相对静止场景、慢速运动状态下的相对静止场景。
具体实现中，可以是确定所述待处理视频中的场景；在所述场景为动态场景的情况下，根据所述动态场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像。
举例说明，若所述场景为动态场景，且为动态场景中的高速运动场景，由于物体的运动速度过快，视频对其运动的轨迹难以捕捉，则将所述待处理视频中的每组相邻帧图像之间插入中间帧，对所述高速运动的物体的运动轨迹进行预判，确定所述高速运动物体的运动轨迹，确定中间帧图像的内容，然后将所述中间帧插入所述相邻的前后两帧中。
具体实现中，可以是确定所述待处理视频中的场景；在所述场景为静态场景的情况下，根据所述静态场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像。
可以看出，本申请实施例通过确定所述至少一组相邻帧图像的场景；根据所述场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像。提高视频插帧的效率，提高视频画面的流畅度，提高视频质量。
在一个可能的示例中，所述场景为所述动态场景；所述根据所述场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像，包括：根据所述动态场景确定所述至少一组相邻帧图像中的每组相邻帧图像中的运动物体和所述运动物体的运动轨迹；根据所述运动物体和所述运动物体的运动轨迹，确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像。
其中，所述运动轨迹包括直线运动轨迹、曲线运动轨迹。
其中，确定所述至少一组相邻帧图像中的每组相邻帧图像中的运动物体的具体实施方法可以是：通过形状模型确定每组相邻帧图像中的运动物体；可以是通过颜色模型确定每组相邻帧图像中的运动物体。
具体实现中，所述根据所述动态场景确定所述至少一组相邻帧图像中的每组相邻帧图像中的运动物体和所述运动物体的运动轨迹的具体步骤包括：根据所述动态场景确定所述视频的运动物体的数量、大小，确定所述运动物体的运动轨迹是直线运动轨迹还是曲线运动轨迹。其中，所述每组相邻帧图像中的运动物体与所述运动轨迹一一对应。
需要进一步解释的是，所述根据所述动态场景确定每组相邻帧图像中的运动物体和所述运动物体的运动轨迹的具体实施步骤可以是：通过训练好的神经网络确定所述每组相邻帧图像中的运动物体和所述运动物体的运动轨迹，根据所述运动物体将所述相邻的前后两帧运动物体划分成M个图像块，确定所述M个图像块的大小，其中M为正整数；根据所述运动轨迹计算出所述M个图像块的M运动矢量；根据所述M个运动矢量，确定所述M个图像块在至少一帧待插入图像中的位置。
可以看出，本申请实施例通过根据所述动态场景确定所述至少一组相邻帧图像中的每组相邻帧图像中的运动物体和所述运动物体的运动轨迹；根据所述运动物体和所述运动物体的运动轨迹，确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像。本示例中通过根据所述动态场景确定视频的运动物体和所述运动物体的运动轨迹；根据所述运动物体和所述运动物体的运动轨迹，对所述待处理视频进行视频插帧，提高视频画面的流畅度，提高视频质量。
在一个可能的示例中，所述场景为所述静态场景；所述根据所述场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像，包括：根据所述静态场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像为所述每组相邻帧图像的相邻的两帧图像中任意一帧图像。
在一个可能的示例中，所述根据所述待处理视频的图层确定所述待处理视频中需要做插帧处理的至少一组相邻帧图像，包括：检测到所述待处理视频的图层无分层，则根据所述待处理视频中至少一组相邻帧图像确定至少一帧待插入图像。
具体实现中，检测到所述待处理视频的图层无分层，则根据所述待处理视频中至少一组相邻帧图像确定至少一帧待插入图像的具体步骤可以是：确定至少一组相邻帧图像中每组相邻帧图像的待插入图像的帧数和该待插入图像的插入每组相邻帧图像的序号；确定至少一组相邻帧图像中每组相邻帧图像的至少一帧待插入图像的图像内容；根据上述待插入图像的帧数、该待插入图像的插入每组相邻帧图像的序号，和上述至少一帧待插入图像的图像内容，确定至少一帧待插入图像。
其中，需要进一步解释的是，确定至少一组相邻帧图像中每组相邻帧图像的至少一帧待插入图像的图像内容，可以是通过形状模型或者颜色模型计算每组相邻帧图像中物体的运动矢量，根据上述运动矢量确定每组相邻帧图像中至少一帧待插入图像的图像内容。
可以看出，本申请实施例中通过检测到所述待处理视频的图层无分层，则根据所述待处理视频中至少一组相邻帧图像确定至少一帧待插入图像。本示例中通过所述待处理视频的图层无分层对待处理视频分类处理，提高视频画面的流畅度，提高视频质量。
在一个可能的示例中，所述检测到所述待处理视频的图层无分层，则根据所述待处理视频中至少一组相邻帧图像确定至少一帧待插入图像，包括：确定所述待处理视频中至少一组相邻帧图像的场景，所述场景包括：静态场景和动态场景，所述静态场景包括静止场景和相对静止场景，所述动态场景包括运动场景和相对运动场景；根据所述场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像。
具体实现中，根据所述场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像的具体步骤可以是：根据动态场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像。
具体实现中，根据所述场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像的具体步骤可以是：根据静态场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像。
其中，需要进一步解释的是，根据静态场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像的具体步骤为：在待处理视频为静态场景的情况下，确定上述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像，其中，上述至少一帧待插入图像为上述每组相邻帧图像中两帧图像中的任意一帧。
可以看出，本申请实施例中确定所述待处理视频中至少一组相邻帧图像的场景；根据所述场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像。本示例中通过所述场景确定至少一帧待插入图像，提高视频画面的流畅度，提高视频质量。
在一个可能的示例中，所述场景为所述动态场景；所述根据所述场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像，包括：根据所述动态场景确定所述待处理视频的运动物体和所述运动物体的运动轨迹；根据运动物体和所述运动物体的运动轨迹，确定所述运动物体的运动向量；根据所述运动向量确定所述待处理视频中所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像。
其中，所述运动轨迹包括直线运动轨迹、曲线运动轨迹。
具体实现中，所述根据所述动态场景确定所述待处理视频的运动物体和所述运动物体的运动轨迹的具体步骤包括：根据所述动态场景确定所述待处理视频的的运动物体的数量、大小，确定所述运动物体的运动轨迹是直线运动轨迹还是曲线运动轨迹。其中，所述视频的运动物体与所述运动轨迹一一对应。
需要进一步解释的是，所述根据所述动态场景确定所述待处理视频的运动物体和所述运动物体的运动轨迹的具体实施步骤可以是：通过训练好的神经网络确定所述待处理视频的运动物体和所述运动物体的运动轨迹，根据所述视频的运动物体将所述每组相邻帧图像的运动物体划分成M个图像块，确定所述M个图像块的大小，其中M为正整数；根据所述运动轨迹计算出所述M个图像块的M运动矢量；根据所述M个运动矢量，确定所述M个图像块在至少一帧待插入图像中每帧图像中的位置。
具体实现中，根据所述运动向量确定所述待处理视频中所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像的具体步骤包括：根据每组相邻的前后两帧图像中所述运动物体和所述运动物体的运动轨迹，对至少一帧待插入图像进行所述运动物体的运动轨迹的预判，确定所述待插入图像的所述运动物体的运动轨迹；然后确定所述待处理视频中所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像。
可以看出，本申请实施例中通过根据所述动态场景确定所述待处理视频的运动物体和所述运动物体的运动轨迹；根据运动物体和所述运动物体的运动轨迹，确定所述运动物体的运动向量；根据所述运动向量确定所述待处理视频中所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像。本示例中通过根据所述运动向量确定所述待处理视频中至少一帧待插入图像，提高视频画面的流畅度，提高视频质量。
在一个可能的示例中，所述将所述至少一帧待插入图像插入所述每组相邻帧图像中，得到目标视频，包括：获取显示屏的最大刷新率；根据所述待处理视频的第一帧率和所述显示屏的最大刷新率，确定所述待处理视频至少一组相邻帧图像中每组相邻帧图像的所述至少一帧待插入图像的第一帧数；根据所述第一帧数确定所述至少一帧待插入图像中的第一类待插入帧的第二帧数和第二类待插入帧的第三帧数，其中，所述第一类待插入帧的图像为与所述待处理视频中的至少一组相邻帧图像的每组相邻帧图像中的相邻的两帧图像中的任意一个图像相同的至少一帧图像，所述第二类待插入帧的图像为根据所述待处理视频中的至少一组相邻帧图像的每组相邻帧图像中相邻的两帧图像处理得到的至少一帧图像；根据所述第二帧数和所述第三帧数，对所述待处理视频中的至少一组相邻帧图像的每组相邻帧图像插入与所述第二帧数或所述第三帧数对应的待插入图像。
其中，所述第二类待插入帧的图像的确定步骤为：根据所述待处理视频中的至少一组相邻帧图像的每组相邻帧图像中相邻的两帧图像处理得到的至少一帧图像，所述第二类待插入帧的图像的确定步骤可以是上述可能的示例中的步骤，此处不再过多赘述。
具体实现中，根据所述待处理视频的第一帧率和所述显示屏的最大刷新率，确定所述待处理视频至少一组相邻帧图像中每组相邻帧图像的所述至少一帧待插入图像的第一帧数的具体步骤可以是：计算上述最大刷新率和上述第一帧率的第一帧率差值，在该第一帧率差值大于或等于所述第一预设帧率差值且该第一帧率差值小于所述第一预设帧率差值的情况下则确定待插入图像的帧数为第一预设帧数；在该第一帧率差值大于或等于第二预设帧率差值则确定待插入图像的帧数为第二预设帧数，其中，所述第二预设帧率差值大于或等于所述第一预设帧率差值。
例如，所述显示屏的最大刷新率为120fps，所述待处理视频的第一帧率为60fps，第一预设帧率差值为20fps，第二预设帧率差值为40fps，则计算第一帧率差值为60fps，第一帧率差值大于或等于第二预设帧率差值，则根据与第二预设帧率差值对应的待插入图像的帧数。
具体实现中，根据所述待处理视频的第一帧率和所述显示屏的最大刷新率，确定所述待处理视频至少一组相邻帧图像中每组相邻帧图像的所述至少一帧待插入图像的第一帧数的具体步骤可以是：设置所述目标视频的第二帧率为最大刷新率；根据所述第一帧率和所述第二帧率，确定所述每组相邻帧图像中待插入图像的帧数。
可以看出，本申请实施例中通过根据所述待处理视频的第一帧率和所述显示屏的最大刷新率，确定所述待处理视频至少一组相邻帧图像中每组相邻帧图像的所述至少一帧待插入图像的第一帧数；根据所述第一帧数将所述至少一帧待插入图像插入所述每组相邻帧图像中。本示例中通过确定不同的待插入图像的帧数，提高了插帧的效率，提高视频画面的流畅度，提高视频质量。
与上述图2a所示的实施例一致，请参阅图3，图3是本申请实施例提供的一种视频处理方法的流程示意图，所述视频处理方法包括：
S301、获取待处理视频。
S302、根据所述待处理视频的图层确定所述至少一组相邻帧图像的场景为动态场景。
S303、根据所述动态场景确定所述至少一组相邻帧图像中的每组相邻帧图像中的运动物体和所述运动物体的运动轨迹。
S304、根据所述运动物体和所述运动物体的运动轨迹，确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像。
S305、确定所述每组相邻帧图像的至少一帧待插入图像。
S306、将所述至少一帧待插入图像插入所述每组相邻帧图像中，得到目标视频。
S307、向显示屏发送所述目标视频。
可以看出，本申请实施例通过根据所述待处理视频的图层确定所述至少一组相邻帧图像的场景为动态场景；根据所述动态场景确定所述至少一组相邻帧图像中的每组相邻帧图像中的运动物体和所述运动物体的运动轨迹；根据所述运动物体和所述运动物体的运动轨迹，确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像；确定所述每组相邻帧图像的至少一帧待插入图像；将所述至少一帧待插入图像插入所述每组相邻帧图像中，得到目标视频。本示例提高视频画面的流畅度，提高视频质量。
在一个可能的示例中，请参阅图4，图4是本申请实施例提供的一种电子设备400的结构示意图，如图所示，所述电子设备400包括应用处理器410、存储器420、通信接口430以及一个或多个程序421，其中，所述一个或多个程序421被存储在上述存储器420中，并且被配置由上述应用处理器410执行，所述一个或多个程序421包括用于执行以下步骤：
获取待处理视频；
根据所述待处理视频的图层确定所述待处理视频中需要做插帧处理的至少一组相邻帧图像，所述至少一组相邻帧图像中每组相邻帧图像包括相邻的两帧图像；
确定所述每组相邻帧图像的至少一帧待插入图像；
将所述至少一帧待插入图像插入所述每组相邻帧图像中，得到目标视频；
向显示屏发送所述目标视频。
在一个可能的示例中，在所述确定所述每组相邻帧图像的至少一帧待插入图像方面，所述一个或多个程序421具体用于执行以下步骤：检测到所述待处理视频的图层有分层，则确定所述至少一组相邻帧图像中的至少一帧待插入图像，其中，所述待处理视频的图层包括第一格式的第一图层和第二格式的第二图层，所述至少一组相邻帧图像为所述待处理视频中的所述第一格式的第一图层中的第一视频中的图像。
在一个可能的示例中，在所述检测到所述待处理视频的图层有分层，则确定所述至少一组相邻帧图像中的至少一帧待插入图像方面，所述一个或多个程序421具体用于执行以下步骤：确定所述至少一组相邻帧图像的场景，所述场景包括静态场景和动态场景，所述静态场景包括静止场景和相对静止场景，所述动态场景包括运动场景和相对运动场景；根据所述场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像。
在一个可能的示例中，所述场景为所述动态场景；在所述根据所述场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像方面，所述一个或多个程序421具体用于执行以下步骤：根据所述动态场景确定所述至少一组相邻帧图像中的每组相邻帧图像中的运动物体和所述运动物体的运动轨迹；根据所述运动物体和所述运动物体的运动轨迹，确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像。
在一个可能的示例中，所述场景为所述静态场景；在所述根据所述场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像方面，所述一个或多个程序421具体用于执行以下步骤：根据所述静态场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像为所述每组相邻帧图像的相邻的两帧图像中任意一帧图像。
在一个可能的示例中，在所述确定所述每组相邻帧图像的至少一帧待插入图像方面，所述一个或多个程序421具体用于执行以下步骤：检测到所述待处理视频的图层无分层，则根据所述待处理视频中至少一组相邻帧图像确定至少一帧待插入图像。
在一个可能的示例中，在所述检测到所述待处理视频的图层无分层，则根据所述待处理视频中至少一组相邻帧图像确定至少一帧待插入图像方面，所述一个或多个程序421具体用于执行以下步骤：确定所述待处理视频中至少一组相邻帧图像的场景，所述场景包括：静态场景和动态场景，所述静态场景包括静止场景和相对静止场景，所述动态场景包括运动场景和相对运动场景；根据所述场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像。
在一个可能的示例中，所述场景为所述动态场景；在所述根据所述场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像方面，所述一个或多个程序421具体用于执行以下步骤：根据所述动态场景确定所述待处理视频的运动物体和所述运动物体的运动轨迹；根据运动物体和所述运动物体的运动轨迹，确定所述运动物体的运动向量；根据所述运动向量确定所述待处理视频中所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像。
在一个可能的示例中，在所述将所述至少一帧待插入图像插入所述每组相邻帧图像中，得到目标视频方面，所述一个或多个程序421具体用于执行以下步骤：获取显示屏的最大刷新率；根据所述待处理视频的第一帧率和所述显示屏的最大刷新率，确定所述待处理视频至少一组相邻帧图像中每组相邻帧图像的所述至少一帧待插入图像的第一帧数；根据所述第一帧数确定所述至少一帧待插入图像中的第一类待插入帧的第二帧数和第二类待插入帧的第三帧数，其中，所述第一类待插入帧的图像为与所述待处理视频中的至少一组相邻帧图像的每组相邻帧图像中的相邻的两帧图像中的任意一个图像相同的至少一帧图像，所述第二类待插入帧的图像为根据所述待处理视频中的至少一组相邻帧图像的每组相邻帧图像中相邻的两帧图像处理得到的至少一帧图像；根据所述第二帧数和所述第三帧数，对所述待处理视频中的至少一组相邻帧图像的每组相邻帧图像插入与所述第二帧数或所述第三帧数对应的待插入图像。
可以看出，本申请实施例通过获取待处理视频；根据所述待处理视频的图层确定所述待处理视频中需要做插帧处理的至少一组相邻帧图像，所述至少一组相邻帧图像中每组相邻帧图像包括相邻的两帧图像；确定所述每组相邻帧图像的至少一帧待插入图像；将所述至少一帧待插入图像插入所述每组相邻帧图像中，得到目标视频；向显示屏发送所述目标视频。本示例中通过根据视频插帧条件对所述待处理视频进行视频插帧，提高视频画面的流畅度，提高视频质量。
上述主要从方法侧执行过程的角度对本申请实施例的方案进行了介绍。可以理解的是，电子设备为了实现上述功能，其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到，结合本文中所提供的实施例描述的各示例的单元及算法步骤，本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
本申请实施例可以根据上述方法示例对电子设备进行功能单元的划分，例如，可以对应各个功能划分各个功能单元，也可以将两个或两个以上的功能集成在一个处理单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。需要说明的是，本申请实施例中对单元的划分是示意性的，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式。
图5是本申请实施例中所涉及的视频处理装置500的功能单元组成框图。该视频处理装置500包括：处理单元501和通信单元502。
其中，所述处理单元501，用于通过所述通信单元502获取待处理视频；以及用于根据所述待处理视频的图层确定所述待处理视频中需要做插帧处理的至少一组相邻帧图像，所述至少一组相邻帧图像中每组相邻帧图像包括相邻的两帧图像；以及用于确定所述每组相邻帧图像的至少一帧待插入图像；以及用于将所述至少一帧待插入图像插入所述每组相邻帧图像中，得到目标视频；以及用于向显示屏发送所述目标视频。
其中，所述视频处理装置500还可以包括存储单元503，用于存储电子设备的程序代码和数据。所述处理单元501可以是处理器，所述通信单元502可以是触控显示屏或者收发器，存储单元503可以是存储器。
在一个可能的示例中，在所述确定所述每组相邻帧图像的至少一帧待插入图像方面，所述处理单元具体用于：检测到所述待处理视频的图层有分层，则确定所述至少一组相邻帧图像中的至少一帧待插入图像，其中，所述待处理视频的图层包括第一格式的第一图层和第二格式的第二图层，所述至少一组相邻帧图像为所述待处理视频中的所述第一格式的第一图层中的第一视频中的图像。
在一个可能的示例中，在所述检测到所述待处理视频的图层有分层，则确定所述至少一组相邻帧图像中的至少一帧待插入图像方面，所述处理单元具体用于：确定所述至少一组相邻帧图像的场景，所述场景包括静态场景和动态场景，所述静态场景包括静止场景和相对静止场景，所述动态场景包括运动场景和相对运动场景；根据所述场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像。
在一个可能的示例中，所述场景为所述动态场景；在所述根据所述场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像方面，所述处理单元具体用于：根据所述动态场景确定所述至少一组相邻帧图像中的每组相邻帧图像中的运动物体和所述运动物体的运动轨迹；根据所述运动物体和所述运动物体的运动轨迹，确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像。
在一个可能的示例中，所述场景为所述静态场景；在所述根据所述场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像方面，所述处理单元具体用于：根据所述静态场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像为所述每组相邻帧图像的相邻的两帧图像中任意一帧图像。
在一个可能的示例中，在所述确定所述每组相邻帧图像的至少一帧待插入图像方面，所述处理单元具体用于：检测到所述待处理视频的图层无分层，则根据所述待处理视频中至少一组相邻帧图像确定至少一帧待插入图像。
在一个可能的示例中，在所述检测到所述待处理视频的图层无分层，则根据所述待处理视频中至少一组相邻帧图像确定至少一帧待插入图像方面，所述处理单元具体用于：确定所述待处理视频中至少一组相邻帧图像的场景，所述场景包括：静态场景和动态场景，所述静态场景包括静止场景和相对静止场景，所述动态场景包括运动场景和相对运动场景；根据所述场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像。
在一个可能的示例中，所述场景为所述动态场景；在所述根据所述场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像方面，所述处理单元具体用于：根据所述动态场景确定所述待处理视频的运动物体和所述运动物体的运动轨迹；根据运动物体和所述运动物体的运动轨迹，确定所述运动物体的运动向量；根据所述运动向量确定所述待处理视频中所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像。
在一个可能的示例中，在所述将所述至少一帧待插入图像插入所述每组相邻帧图像中，得到目标视频方面，所述处理单元具体用于：获取显示屏的最大刷新率；根据所述待处理视频的第一帧率和所述显示屏的最大刷新率，确定所述待处理视频至少一组相邻帧图像中每组相邻帧图像的所述至少一帧待插入图像的第一帧数；根据所述第一帧数确定所述至少一帧待插入图像中的第一类待插入帧的第二帧数和第二类待插入帧的第三帧数，其中，所述第一类待插入帧的图像为与所述待处理视频中的至少一组相邻帧图像的每组相邻帧图像中的相邻的两帧图像中的任意一个图像相同的至少一帧图像，所述第二类待插入帧的图像为根据所述待处理视频中的至少一组相邻帧图像的每组相邻帧图像中相邻的两帧图像处理得到的至少一帧图像；根据所述第二帧数和所述第三帧数，对所述待处理视频中的至少一组相邻帧图像的每组相邻帧图像插入与所述第二帧数或所述第三帧数对应的待插入图像。
本申请实施例还提供一种计算机存储介质，其中，该计算机存储介质存储用于电子数据交换的计算机程序，该计算机程序使得计算机执行如上述方法实施例中记载的任一方法的部分或全部步骤，上述计算机包括电子设备。
本申请实施例还提供一种计算机程序产品，上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，上述计算机程序可操作来使计算机执行如上述方法实施例中记载的任一方法的部分或全部步骤。该计算机程序产品可以为一个软件安装包，上述计算机包括电子设备。
需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本申请并不受所描述的动作顺序的限制，因为依据本申请，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本申请所必须的。
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中，应该理解到，所揭露的装置，可通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如上述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性或其它的形式。
上述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
上述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储器中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储器中，包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本申请各个实施例上述方法的全部或部分步骤。而前述的存储器包括：U盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储器中，存储器可以包括：闪存盘、只读存储器(英文：Read-Only Memory，简称：ROM)、随机存取器(英文：Random Access Memory，简称：RAM)、磁盘或光盘等。
以上对本申请实施例进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的一般技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。

Claims (12)

1.一种视频处理方法，其特征在于，所述方法包括：
获取待处理视频；
根据所述待处理视频的图层确定所述待处理视频中需要做插帧处理的至少一组相邻帧图像，所述至少一组相邻帧图像中每组相邻帧图像包括相邻的两帧图像；
确定所述每组相邻帧图像的至少一帧待插入图像；
将所述至少一帧待插入图像插入所述每组相邻帧图像中，得到目标视频；
向显示屏发送所述目标视频。
2.根据权利要求1所述的方法，其特征在于，所述确定所述每组相邻帧图像的至少一帧待插入图像，包括：
检测到所述待处理视频的图层有分层，则确定所述每组相邻帧图像的至少一帧待插入图像，其中，所述待处理视频的图层包括第一格式的第一图层和第二格式的第二图层，所述至少一组相邻帧图像为所述待处理视频中的所述第一格式的第一图层中的第一视频中的图像。
3.根据权利要求2所述的方法，其特征在于，所述检测到所述待处理视频的图层有分层，则确定所述至少一组相邻帧图像中的至少一帧待插入图像，包括：
确定所述至少一组相邻帧图像的场景，所述场景包括静态场景和动态场景，所述静态场景包括静止场景和相对静止场景，所述动态场景包括运动场景和相对运动场景；
根据所述场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像。
4.根据权利要求3所述的方法，其特征在于，所述场景为所述动态场景；
所述根据所述场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像，包括：
根据所述动态场景确定所述至少一组相邻帧图像中的每组相邻帧图像中的运动物体和所述运动物体的运动轨迹；
根据所述运动物体和所述运动物体的运动轨迹，确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像。
5.根据权利要求3所述的方法，其特征在于，所述场景为所述静态场景；
所述根据所述场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像，包括：
根据所述静态场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像为所述每组相邻帧图像的相邻的两帧图像中任意一帧图像。
6.根据权利要求1所述的方法，其特征在于，所述确定所述每组相邻帧图像的至少一帧待插入图像，包括：
检测到所述待处理视频的图层无分层，则根据所述待处理视频中至少一组相邻帧图像确定至少一帧待插入图像。
7.根据权利要求6所述的方法，其特征在于，所述检测到所述待处理视频的图层无分层，则根据所述待处理视频中至少一组相邻帧图像确定至少一帧待插入图像，包括：
确定所述待处理视频中至少一组相邻帧图像的场景，所述场景包括：静态场景和动态场景，所述静态场景包括静止场景和相对静止场景，所述动态场景包括运动场景和相对运动场景；
根据所述场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像。
8.根据权利要求7所述的方法，其特征在于，所述场景为所述动态场景；
所述根据所述场景确定所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像，包括：
根据所述动态场景确定所述待处理视频的运动物体和所述运动物体的运动轨迹；
根据运动物体和所述运动物体的运动轨迹，确定所述运动物体的运动向量；
根据所述运动向量确定所述待处理视频中所述至少一组相邻帧图像中的每组相邻帧图像的至少一帧待插入图像。
9.根据权利要求1所述的方法，其特征在于，所述将所述至少一帧待插入图像插入所述每组相邻帧图像中，得到目标视频，包括：
获取显示屏的最大刷新率；
根据所述待处理视频的第一帧率和所述显示屏的最大刷新率，确定所述待处理视频至少一组相邻帧图像中每组相邻帧图像的所述至少一帧待插入图像的第一帧数；
根据所述第一帧数确定所述至少一帧待插入图像中的第一类待插入帧的第二帧数和第二类待插入帧的第三帧数，其中，所述第一类待插入帧的图像为与所述待处理视频中的至少一组相邻帧图像的每组相邻帧图像中的相邻的两帧图像中的任意一个图像相同的至少一帧图像，所述第二类待插入帧的图像为根据所述待处理视频中的至少一组相邻帧图像的每组相邻帧图像中相邻的两帧图像处理得到的至少一帧图像；
根据所述第二帧数和所述第三帧数，对所述待处理视频中的至少一组相邻帧图像的每组相邻帧图像插入与所述第二帧数或所述第三帧数对应的待插入图像。
10.一种视频处理装置，其特征在于，所述装置包括：
处理单元，用于通过通信单元获取待处理视频；以及用于根据所述待处理视频的图层确定所述待处理视频中需要做插帧处理的至少一组相邻帧图像，所述至少一组相邻帧图像中每组相邻帧图像包括相邻的两帧图像；以及用于确定所述每组相邻帧图像的至少一帧待插入图像；以及用于将所述至少一帧待插入图像插入所述每组相邻帧图像中，得到目标视频；以及用于向显示屏发送所述目标视频。
11.一种电子设备，其特征在于，包括处理器、存储器、通信接口，以及一个或多个程序，所述一个或多个程序被存储在所述存储器中，并且被配置由所述处理器执行，所述程序包括用于执行如权利要求1-9任一项所述的方法中的步骤的指令。
12.一种计算机可读存储介质，其特征在于，存储用于电子数据交换的计算机程序，其中，所述计算机程序使得计算机执行如权利要求1-9任一项所述的方法。
CN202010149268.7A 2020-03-05 2020-03-05 一种视频处理方法及相关装置 Active CN111327908B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010149268.7A CN111327908B (zh) 2020-03-05 2020-03-05 一种视频处理方法及相关装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010149268.7A CN111327908B (zh) 2020-03-05 2020-03-05 一种视频处理方法及相关装置

Publications (2)

Publication Number Publication Date
CN111327908A true CN111327908A (zh) 2020-06-23
CN111327908B CN111327908B (zh) 2022-11-11

Family

ID=71173165

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010149268.7A Active CN111327908B (zh) 2020-03-05 2020-03-05 一种视频处理方法及相关装置

Country Status (1)

Country Link
CN (1) CN111327908B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111741266A (zh) * 2020-06-24 2020-10-02 北京梧桐车联科技有限责任公司 图像显示方法、装置、车载设备及存储介质
CN112351287A (zh) * 2020-09-30 2021-02-09 深圳市为汉科技有限公司 一种多媒体数据处理方法及其相关产品
CN112584234A (zh) * 2020-12-09 2021-03-30 广州虎牙科技有限公司 视频图像的补帧方法及相关装置
CN113225546A (zh) * 2021-04-25 2021-08-06 Oppo广东移动通信有限公司 色温调整方法及装置、电子设备、计算机可读存储介质
CN116156250A (zh) * 2023-02-21 2023-05-23 维沃移动通信有限公司 视频处理方法及其装置
WO2023125314A1 (zh) * 2021-12-28 2023-07-06 维沃移动通信有限公司 插帧方法、装置及电子设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2999223A1 (en) * 2013-06-05 2016-03-23 Huawei Technologies Co., Ltd. Method for determining region of small object, and method and apparatus for interpolating frame between video frames
CN109803175A (zh) * 2019-03-12 2019-05-24 京东方科技集团股份有限公司 视频处理方法及装置、设备、存储介质
WO2019120012A1 (zh) * 2017-12-20 2019-06-27 深圳岚锋创视网络科技有限公司 一种视频解码的方法及相机

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2999223A1 (en) * 2013-06-05 2016-03-23 Huawei Technologies Co., Ltd. Method for determining region of small object, and method and apparatus for interpolating frame between video frames
WO2019120012A1 (zh) * 2017-12-20 2019-06-27 深圳岚锋创视网络科技有限公司 一种视频解码的方法及相机
CN109803175A (zh) * 2019-03-12 2019-05-24 京东方科技集团股份有限公司 视频处理方法及装置、设备、存储介质

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111741266A (zh) * 2020-06-24 2020-10-02 北京梧桐车联科技有限责任公司 图像显示方法、装置、车载设备及存储介质
CN112351287A (zh) * 2020-09-30 2021-02-09 深圳市为汉科技有限公司 一种多媒体数据处理方法及其相关产品
CN112351287B (zh) * 2020-09-30 2022-10-14 深圳市为汉科技有限公司 一种多媒体数据处理方法、装置、电子设备及计算机可读存储介质
CN112584234A (zh) * 2020-12-09 2021-03-30 广州虎牙科技有限公司 视频图像的补帧方法及相关装置
CN113225546A (zh) * 2021-04-25 2021-08-06 Oppo广东移动通信有限公司 色温调整方法及装置、电子设备、计算机可读存储介质
WO2023125314A1 (zh) * 2021-12-28 2023-07-06 维沃移动通信有限公司 插帧方法、装置及电子设备
CN116156250A (zh) * 2023-02-21 2023-05-23 维沃移动通信有限公司 视频处理方法及其装置

Also Published As

Publication number Publication date
CN111327908B (zh) 2022-11-11

Similar Documents

Publication Publication Date Title
CN111327908B (zh) 一种视频处理方法及相关装置
CN111277779B (zh) 一种视频处理方法及相关装置
CN111356026B (zh) 图像数据处理方法及相关装置
JP5539313B2 (ja) テレビジョン受像機および方法
EP1979908A2 (en) Extracting key frame candidates from video clip
CN111405339B (zh) 一种分屏显示方法、电子设备及存储介质
US20120224748A1 (en) Method for intelligently displaying sports game video for multimedia mobile terminal
JP2014139681A (ja) 適応的なビデオ呈示のための方法および装置
JP4985201B2 (ja) 電子機器、動きベクトル検出方法及びプログラム
CN106603885B (zh) 视频图像处理方法和装置
CN108200470A (zh) 一种视频码率调整方法及设备
CN111654747B (zh) 弹幕显示方法及装置
KR20170080496A (ko) 프레임 레이트 변환 방법 및 장치
CN110503042A (zh) 图像处理方法、装置以及电子设备
CN110941413B (zh) 显示画面的生成方法及相关装置
CN113542760A (zh) 一种视频传输方法、视频播放方法、设备以及存储介质
CN113613024A (zh) 视频预处理方法及设备
CN114567778B (zh) 一种视频编码方法及系统
US11930207B2 (en) Display device, signal processing device, and signal processing method
US11037599B2 (en) Automatic slow motion video recording
CN116347009B (zh) 视频生成方法及电子设备
CN117176979B (zh) 多源异构视频的内容帧提取方法、装置、设备及存储介质
CN111836055B (zh) 图像处理装置及memc基于图像内容的图像块匹配方法
JP2003250160A (ja) 映像コマ数削減装置および映像コマ数削減方法
CN105376461A (zh) 用于发送数据的系统和方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant