CN114938461A - 视频处理方法、装置、设备及可读存储介质 - Google Patents

视频处理方法、装置、设备及可读存储介质 Download PDF

Info

Publication number
CN114938461A
CN114938461A CN202210349214.4A CN202210349214A CN114938461A CN 114938461 A CN114938461 A CN 114938461A CN 202210349214 A CN202210349214 A CN 202210349214A CN 114938461 A CN114938461 A CN 114938461A
Authority
CN
China
Prior art keywords
frame
frames
image
video
group
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210349214.4A
Other languages
English (en)
Inventor
余养强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wangsu Science and Technology Co Ltd
Original Assignee
Wangsu Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wangsu Science and Technology Co Ltd filed Critical Wangsu Science and Technology Co Ltd
Priority to CN202210349214.4A priority Critical patent/CN114938461A/zh
Publication of CN114938461A publication Critical patent/CN114938461A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234381—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the temporal resolution, e.g. decreasing the frame rate by frame skipping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440281—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Systems (AREA)

Abstract

本申请公开了一种视频处理方法、装置、设备及可读存储介质，电子设备确定出源视频的插帧方式为非整数倍插帧方式时，根据源视频的第一帧率对源视频包含的图像帧进行分组，以得到多个分组。然后，电子设备对每个分组分别进行插帧从而得到目标视频并输出。采用该种方案，支持非整数倍插帧方式，不受限于整数倍插帧，灵活性高、适用范围广，实现提高帧率并增强视觉质量的目的。

Description

视频处理方法、装置、设备及可读存储介质
技术领域
本申请涉及视频处理技术领域，特别涉及一种视频处理方法、装置、设备及可读存储介质。
背景技术
随着视频技术以及互联网技术的发展，用户在个人计算机、手机、平板等电子设备上观看视频已经成为一种普遍的现象，各类视频的数量正在飞速增长。
与此同时，用户对视频的需求越来越多样化，针对一些视频，需要进行修改后再播放。图像帧率提升是一种将低帧率视频转换为高帧率视频的视频后处理方法，该方法根据从相邻两图像帧的对应像素中学习到的知识生成一个新的中间帧，并将该中间帧插入相邻两个图像帧之间，从而达到增加帧率的目的。例如，将图像帧率从30帧每秒(frames persecond，FPS)提升至60FPS。
然而，现有的插帧方法只能实现2的次方倍的插帧，灵活性差、局限性高、效果差。
发明内容
本申请提供一种视频处理方法、装置、设备及可读存储介质，通过支持非整数倍的插帧，灵活性高、适用范围广且提高视频处理效果。
第一方面，本申请实施例提供一种视频处理方法，包括：
确定源视频的插帧方式；
当所述插帧方式为非整数倍插帧方式时，根据所述源视频的第一帧率对所述源视频包含的图像帧分组，以得到多个分组，所述多个分组中的每个分组包含连续的多个图像帧，所述非整数倍插帧方式用于指示将所述第一帧率提升2的非整数倍以得到目标视频的插帧方式；
对所述多个分组中的每个分组进行插帧，以得到所述目标视频；
输出所述目标视频。
第二方面，本申请实施例提供一种是处理装置，包括：
确定模块，用于确定源视频的插帧方式；
处理模块，用于当所述插帧方式为非整数倍插帧方式时，根据所述源视频的第一帧率对所述源视频包含的图像帧分组，以得到多个分组，所述多个分组中的每个分组包含连续的多个图像帧，所述非整数倍插帧方式用于指示将所述第一帧率提升2的非整数倍以得到目标视频的插帧方式；
插帧模块，用于对所述多个分组中的每个分组进行插帧，以得到所述目标视频；
输出模块，用于输出所述目标视频。
第三方面，本申请实施例提供一种电子设备，包括：处理器、存储器及存储在所述存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时使得所述电子设备实现如上第一方面或第一方面各种可能的实现方式所述的方法。
第四方面，本申请实施例提供一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机指令，所述计算机指令在被处理器执行时用于实现如上第一方面或第一方面各种可能的实现方式所述的方法。
第五方面，本申请实施例提供一种包含计算程序的计算机程序产品，所述计算机程序被处理器执行时实现如上第一方面或第一方面各种可能的实现方式所述的方法。
本申请实施例提供的视频处理方法、装置、设备及可读存储介质，电子设备确定出源视频的插帧方式为非整数倍插帧方式时，根据源视频的第一帧率对源视频包含的图像帧进行分组，以得到多个分组。然后，电子设备对每个分组分别进行插帧从而得到目标视频并输出。采用该种方案，支持非整数倍插帧方式，不受限于整数倍插帧，灵活性高、适用范围，实现提高帧率并增强视觉质量的目的。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的视频处理方法所适用的网络架构示意图；
图2是本申请实施例提供的一种视频处理方法的流程图；
图3是本申请实施例提供的视频处理方法中非整数倍插帧的过程示意图；
图4是本申请实施例提供的视频处理方法中的一个插帧过程示意图；
图5是本申请实施例提供的视频处理方法中的另一个插帧过程示意图；
图6是本申请实施例提供的视频处理方法中对目标分组进行插帧的过程示意图；
图7是本申请实施例提供的视频处理方法中在第1帧和第2帧之间插帧的过程示意图；
图8是本申请实施例提供的视频处理方法的另一个流程图；
图9为本申请实施例提供的一种视频处理装置的示意图；
图10为本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请实施方式作进一步地详细描述。
随着互联网的飞速发展，视频越来越多，用户对视频的质量，包括清晰度、流畅度、色彩饱和度等提出更高的要求。帧率提升是提高视频流畅度的常见方法。高帧率视频极大程度上提升了用户的观看体验，为了要用户观看到丝滑般顺畅的视频，通过对摄像头硬件进行改进，摄像头拍摄视频的帧率从25FPS提高到60FPS，再到240FPS甚至更高。但是，如果仅靠硬件迭代来提升帧率，则成本较高。为此，视频插帧技术应用而生，视频插帧的目的就是根据低帧率的视频生成高帧率的视频。
目前，通过视频插帧技术来提升帧率的场景越来越多。例如，用户期望将一些老旧的、当初处理不够完善的低帧率视频转换为高帧率视频。再如，在信道带宽受限的条件下，编码端发送的低帧率的视频，只传输一部分的视频内容，解码端根据视频插帧技术恢复出完整的视频内容，实现提升信道带宽的利用率的同时，保证视频质量满足用户观看需求。又如，不同媒体产品支持的帧率不同，比如，一个影片的帧率是24FPS，适用于电影播放。但是，电视播放的帧率是30FPS，为了在电视上播放影片并获得高质量的视觉质量，必须对影片进行视频插帧，以得到帧率为30FPS的影片。
现有的视频插帧方式为2的次方倍插帧方式，该种方式也称之为整数倍插帧方式、二倍帧率提升方式、整数倍帧率提升、2的次方倍插帧等，通过将帧率提升2的整数倍以得到高帧率视频，实现提高视觉质量、增加视频逼真感和流畅感的目的。假设源视频的第一帧率为M，目标视频的第二帧率为N，N/M＝k，则k一定是2的倍数。
但是，有时候用户期望的目标视频的第二帧率并非是源视频的第一帧率的2的整数倍。例如，源视频的第一帧率为24FPS，目标视频的第二帧率为30FPS，N/M＝5/4；再如，源视频的第一帧率为25FPS，目标视频的第二帧率为60FPS，N/M＝12/5。而且，现有的插帧方法具有速度慢、对高速运动的视频产生伪影的弊端。
基于此，本申请实施例提供一种视频处理方法、装置、设备及可读存储介质，通过支持非整数倍的插帧，灵活性高、适用范围广且提高视频处理效果。
图1是本申请实施例提供的视频处理方法所适用的网络架构示意图。请参照图1，该网络架构包括：服务器11和终端设备12，终端设备12和服务器11之间建立网络连接，该网络连接可以是有线通信连接、无线通信连接或者光纤电缆等。
服务器11具有巨大的计算能力、存储能力等，能够向终端设备12提供服务。服务器11可以是硬件也可以是软件。当服务器11为硬件时，该服务器11为单个服务器或多个服务器组成的分布式服务器集群。当服务器11为软件时，可以为多个软件模块或单个软件模块等，本申请实施例并不限制。
服务器11上能够对源视频包含的适配帧进行分组，针对各分组生成中间帧并对分组进行插帧。视频插帧(Video Frame Interpolation，VFI)旨在合成连续的两个图像帧之间的中间帧，广泛用于提高帧率和增强视觉质量。服务器11上部署基于深度学习得到的插帧模型，如深度感知视频帧插值(Depth-Aware Video Frame Interpolation，DAIN)模型、Super-Slomo、二次方(Quadratic)模型、视频帧插值的实时中间流估计(Real-TimeIntermediate Flow Estimation for Video Frame Interpolation，RIFE)模型等，向插帧模型输入相邻的两个视频帧，插帧模型对这两帧视频的对应像素进行学习，生成一个中间帧。当插帧模型为RIFE模型时，生成中间帧的速度快。
终端设备12可以是硬件也可以是软件。当终端设备12为硬件时，终端设备12例如为手机、平板电脑、电子书阅读器、膝上型便携电脑、台式计算机等。当终端设备12为软件时，其可以安装在上述列举的硬件设备中，此时，终端设备12例如为多个软件模块或单个软件模块等，本申请实施例并不限制。
视频处理过程中，用户在终端设备12上选中源视频，向服务器12发送指示信息，该指示信息用于指示源视频，同时，指示插帧倍数或目标视频的第二帧率。服务器11接收到指示信息后，获取源视频并对源视频进行插帧处理以得到目标视频。
本申请实施例中，除了通过插帧将低帧率的视频转换为高帧率的视频外，还可以利用插帧生成慢动作、视频压缩、生成训练数据等。其中，训练数据用于训练出去模糊模型。训练好去模糊模型后，输入模糊的运动视频后得到清晰的运动视频；或者，向去模糊模型输入模糊图像，能够得到清晰的图像。本申请实施例提供的视频处理方法，以实时速度运行在高分辨率视频上，能使得播放器播放更高帧率的视频、为用户提供视频编辑服务等。
需要说明的，虽然图1所示架构中，是服务器11对源视频进行视频插帧。然而，本申请实施例并不以此为限制，其他可行的实现方式中，也可以将插帧模型等部署在终端设备12上，终端设备12无需向服务器11指示源视频，无需向服务器12指示插帧倍数或目标视频的第二帧率，而是根据用户输入的指示信息，在本地对第一帧率的源视频进行插帧处理以得到第二帧率的目标视频。
下面，基于图1所示架构，对本申请实施例所述的视频处理方法进行详细说明。示例性的，请参照图2，图2是本申请实施例提供的一种视频处理方法的流程图。本实施例的执行主体是电子设备，电子设备可以是图1中的终端设备或服务器，本实施例包括：
201、确定源视频的插帧方式。
本申请实施例中，插帧方式包括非整数倍插帧方式和整数倍插帧方式。非整数倍插帧方式是指：将所述第一帧率提升2的非整数倍以得到目标视频的插帧方式，例如，源视频的第一帧率为24FPS，目标视频的第二帧率为30FPS，表示将源视频的第一帧率提升5/4倍以得到目标视频。再如，源视频的第一帧率为25FPS，目标视频的第二帧率为60FPS，表示将源视频的第一帧率提升12/5倍以得到目标视频。又如，源视频的第一帧率为25FPS，目标视频的第二帧率为75FPS，表示将源视频的第一帧率提升3倍以得到目标视频。
整数倍插帧方式是指：将第一帧率提升2的整数倍以得到目标视频的插帧方式。例如，源视频的第一帧率为10FPS，目标视频的第二帧率为20FPS，表示将源视频的第一帧率提升2倍以得到目标视频。再如，源视频的第一帧率为25FPS，目标视频的第二帧率为100FPS，表示将源视频的第一帧率提升4倍以得到目标视频。
本申请实施例中，电子设备可灵活地确定出插帧方式。一种方式中，预先设置默认插帧方式，电子设备根据默认值确定出插帧方式。另一种方式中，电子设备为终端设备时，终端设备显示用界面，用户在用户界面上输入插帧倍数或第二帧率。
当用户输入插帧倍数时，终端设备确定插帧方式为整数倍插帧。例如，用户输入2，则表示对源视频进行2倍插帧，插帧过程中，电子设备根据源视频每相邻的两个图像帧生成一个中间帧，并将该中间帧插入相邻的两个图像帧之间。以第一帧率为24PFS、长度为1小时的视频为例，则源视频包含86400(24×60×60＝86400)个图像帧，通过在每相邻的两个图像帧之间插入1个中间帧，得到目标视频，该目标视频的第二帧率为48FPS。需要说明的是，由于根据源视频能生成86399个图像帧，目标视频少了一帧，但是，由于图像帧的数量比较庞大，因此，可以忽略目标视频少一个图像帧。
再如，用户输入4，表示对源视频进行4倍插帧，插帧过程中，电子设备根据源视频每相邻的两个图像帧生成一个中间帧，从而得到3个连续的图像帧，然后，根据3个连续的图像帧中每相邻的两个图像帧生成中间帧并插入。
当用户输入第二帧率时，终端设备确定插帧方式为非整数倍插帧。例如，第一帧率为24FPS，用户输入的第二帧率为60FPS，则表示非整数倍插帧。又如，第一帧率为25FPS，用户输入的第二帧率为75FPS，则表示非整数倍插帧。以下为方便起见，用第一帧率→第二帧率，表示对第一帧率的源视频进行非整数倍插帧得到第二帧率的目标视频。比如，24FPS→50FPS，表示对第一帧率为24FPS的源视频进行非整数倍插帧以得到第二帧率为50FPS的目标视频。
又一种方式中，电子设备为上述的服务器，用户在终端设备的用户界面上输入插帧倍数或第二帧率。终端设备向服务器发送指示信息。相应的，服务器接收指示信息，当指示信息指示第二帧率时，服务器确定出插帧方式为非整数倍插帧方式；当指示信息指示插帧倍数时，服务器确定插帧方式为整数倍插帧方式。采用该种方案，实现灵活指定插帧方式的目的。
202、当所述插帧方式为非整数倍插帧方式时，根据所述源视频的第一帧率对所述源视频包含的图像帧分组，以得到多个分组，所述多个分组中的每个分组包含连续的多个图像帧，所述非整数倍插帧方式用于指示将所述第一帧率提升2的整数倍以得到目标视频的插帧方式。
本申请实施例中，图像帧是组成视频的最小单位，一个图像帧是一幅静止的图片。基于人类眼睛的视觉暂留效应，将多个图像帧按顺序快速播放从而形成视频。电子设备利用视频处理软件将源视频切割为多个图像帧。
电子设备将源视频切割为多个图像帧后，对这些图像帧进行分组，从而得到多个分组，每个分组包含连续的多个图像帧。例如，源视频的第一帧率为24FPS、长度为1小时，则源视频包含86400个图像帧。第一种分组方式中，电子设备将每4个图像帧分为一组，从而得到21600个分组，这种分组方式中，任意两个分组没有交集，即不存在同时属于俩个分组的图像帧。
第二种分组方式中，多个分组中相邻的两个分组分别为第一分组和第二分组，则第一分组的最后一个图像帧为所述第二分组的首个图像帧。也就是说，相邻两个分组存在交集。例如，源视频的第一帧率为24FPS，前25帧的编号为第0帧至第24帧，则一共分为8个分组，第一个分组为第0帧-第3帧、第二个分组为第3帧-第6帧、第三个分组为第6帧-第9帧、第四个分组为第9帧-第12帧、第五个分组为第12帧-第15帧、第六个分组为第15帧-第18帧、第七个分组为第18帧-第21帧、第八个分组为第21帧-第24帧。采用该种方案，相邻两个分组存在公共的图像帧，能够确保经过插帧处理得到的目标视频的流畅度更高。
203、对所述多个分组中的每个分组进行插帧，以得到所述目标视频。
示例性的，电子设备基于深度学习等方法
针对每个分组，电子设备确定该分组中需要插帧的第一数量、插帧的位置等，进而根据第一数量生成中间帧，并将中间帧插入合适的位置，从而得到目标视频。生成中间帧的过程中，电子设备基于深度学习的方法，对于每个插帧位置，即相邻的两个图像帧之间，根据该相邻的两个图像帧学习出中间帧并插入。
204、输出所述目标视频。
本申请实施例中，第二帧率高于第一帧率，电子设备生成目标视频后输出，供用户点击播放等，使得用户能观看流畅度更高的目标视频。
本申请实施例提供的视频处理方法，电子设备确定出源视频的插帧方式为非整数倍插帧方式时，根据源视频的第一帧率对源视频包含的图像帧进行分组，以得到多个分组。然后，电子设备对每个分组分别进行插帧从而得到目标视频并输出。采用该种方案，支持非整数倍插帧方式，不受限于整数倍插帧，灵活性高、适用范围，实现提高帧率并增强视觉质量的目的。
可选的，上述实施例中，当所述插帧方式为非整数倍插帧方式时，若第一帧率为24FPS，则电子设备将源视频包含的图像帧每4帧分为一组，以得到多个分组。例如，24FPS→30FSP、24FPS→60FPS、24FPS→120FPS等场景中，电子设备将源视频包含的图像帧每4帧分为一组，以得到多个分组。
若第一帧率为25FPS，则电子设备将源视频包含的图像帧每5帧分为一组，以得到多个分组。例如，25FPS→30FSP、25FPS→60FPS、50FPS→60FPS等场景中，电子设备将源视频包含的图像帧每5帧分为一组，以得到多个分组。
采用该种方案，通过对源视频进行合理分组，实现准确插帧的目的。
图3是本申请实施例提供的视频处理方法中非整数倍插帧的过程示意图。
请参照图3，本实施例包括：
301、电子设备确定所述多个分组中每个分组需要插帧的第一数量。
示例性的，电子设备根据分组个数、第一帧率、第二帧率等确定每个分组中需要插帧的数量。例如，第一帧率为24FPS、第二帧率为60FPS，则对于第1秒的源视频，需要插帧的数量为36(60-24＝36)帧。假设采用上述的第一种分组方式，每4个图像帧一组，相邻两个分组不存在交集，总共分为6个分组，则每个分组需要插入6个中间帧。
假设采用上述的第二中分组方式，每4个图像帧一组，相邻两个分组存在交集，总共分为8个分组，其中，最后一个分组中仅有3个图像帧，用第2秒的源视频中的图像帧补齐，则每个分组需要插入5个中间帧。
302、电子设备根据所述第一数量确定每个分组内每相邻两个图像帧之间需要插帧的第二数量。
其中，所述第二数量至少为两个，所述每个分组包含第一子组和第二子组，所述第一子组包含两个相邻的图像帧，所述第二子组包含另外两个相邻的图像帧，所述第一子组对应的第二数量大于所述第二子组对应的第二数量。
示例性的，由于是非整数倍插帧，则第一子组和第二子组中插入的中间帧的数量不同。
303、根据所述第二数量，对所述多个分组中每个分组进行插帧，以得到所述目标视频。
图4是本申请实施例提供的视频处理方法中的一个插帧过程示意图。图4中，基于第一种分组方式对源视频进行分组。
请参照图4，假设24个图像帧依次为第0帧至第23帧，第一个分组包括第0帧、第1帧、第2帧和第3帧。图4中仅示意出第一个分组。插帧过程中，电子设备确定出每个分组要插入6个中间帧。第一个分组内，第一子组为第1帧和第二帧，第二数量为3。第二子组有两个，分别为第0帧和第1帧，以及第2帧和第3帧，第二数量分别为2和1。
初始时，第一个分组中仅包含图中白色填充的图像帧。电子设备根据第0帧和第1帧，生成第0.5帧；根据第1帧和第2帧；生成第1.5帧，根据第2帧和第3帧，生成第2.5帧。如图中斜线填充的中间帧所示。
对于第0帧和第1帧，由于该第二子组对应的第二数量为2，因此，电子设备根据第0.5帧和第1帧生成第0.75帧，或者，根据第0帧和第0.5帧生成第0.25帧，从而在第0帧和第1帧之间插入2个中间帧。如图中竖线填充的中间帧所示。
对于第1帧和第2帧，由于该对相邻帧是第一子组，第二数量为3，则电子设备根据第1帧和第1.5帧生成第1.25帧，根据第1.5帧和第2帧生成第1.75帧，从而在第1帧和第2帧之间插入3个中间帧。如图中竖线填充的中间帧所示。
图5是本申请实施例提供的视频处理方法中的另一个插帧过程示意图。图5中，基于第二种分组方式对源视频进行分组。
请参照图5，继续沿用24FPS→60FPS的例子，基于图5中仅示意出第一个分组。插帧过程中，电子设备确定出每个分组要插入5个中间帧。第一个分组内，第一子组为第1帧和第二帧，第二数量为3。第二子组有两个，分别为第0帧和第1帧，以及第2帧和第3帧，第二数量均为1。
初始时，第一个分组中仅包含图中白色填充的图像帧。电子设备根据第0帧和第1帧，生成第0.5帧；根据第1帧和第2帧；生成第1.5帧，根据第2帧和第3帧，生成第2.5帧。
对于第1帧和第2帧，由于该对相邻帧是第一子组，第二数量为3，则电子设备根据第1帧和第1.5帧生成第1.25帧，根据第1.5帧和第2帧生成第1.75帧，从而在第1帧和第2帧之间插入3个中间帧。
采用该种方案，电子设备确定出每个分组需要插帧的第一数量和每个分组内每相邻两个图像帧之间需要插帧的第二数量后，对该分组进行插帧，从而尽可能做到均匀插帧，提高目标视频的质量。
可选的，上述实施例中，电子设备可以指定每个分组中第一子组的位置。例如，将每个分组中第2个和第3个图像作为第一子组，即图5中的第1帧和第2帧，在第1帧和第2帧之间做4倍插帧，在其余位置做2倍插帧。或者，电子设备随机从所述每个分组中确定出相邻的两个图像帧，以得到所述第一子组，将所述每个分组中除所述第一子组外的图像帧形成的子组作为第二子组。例如，第一个分组中，第1子组包括第1帧和第2帧；第二个分组包含第3帧、第4帧、第5帧和第6帧，随机将第5帧和第6帧作为第一子组，在第5帧和第6帧之间做4倍插帧，在其余位置做2倍插帧。
采用该种方案，通过随机在每个分组中产生一个第一分组，即随机产生一个特殊位置，在该特殊位置多做一轮插帧，实现快速、准确地进行非整数倍插帧的目的。
可选的，上述实施例中，当对第一子组进行插帧时，第一子组对应的第二数量为2n-1，n≥2且为整数，当对第一子组进行4倍插帧时，n＝2，第二数量为3；当对第一子组进行8倍插帧时，n＝3，第二数量为7……以此类推。插帧过程中，电子设备根据所述第一子组中相邻的两个视频帧生成中间帧，得到连续的3个图像帧后，继续在所述3个图像帧中每两个连续的图像帧之间进行插帧，直到所述第一子组内中间帧的数量为所述第二数量。采用该种方案，通过在相邻两个视频帧之间均匀的生成中间帧并插入，实现提高目标视频的质量的目的。
图6是本申请实施例提供的视频处理方法中对目标分组进行插帧的过程示意图。请参照图6，本实施例包括：
601、对于多个分组中的目标分组，电子设备读取所述目标分组中的第一图像帧并缓存。其中，目标分组是所述多个分组中当前正在插帧的分组。
电子设备上部署基于光流的插帧模型，如RIFE模型等，运用模型结构和加速工具等压缩图像帧的处理时长，加快处理速度的同时，不影响插帧效果。
本申请实施例中，目标分组是多个分组中的任意一个分组，目标分组中任意相邻的两个图像帧称之为第一图像帧和第二图像帧，且第一图像帧位于第二图像帧之前。
电子设备对第一图像帧和第二图像帧插值时，先读取第一图像帧，读取到第一图像帧后并不调用插帧模型，而是缓存第一图像帧。之后，电子设备读取第二图像帧。
602、电子设备读取所述目标分组中的第二图像帧，所述第一图像帧和所述第二图像帧是所述目标分组中相邻的两个图像帧，且所述第一图像帧位于所述第二图像帧之前。
603、电子设备根据所述第一图像帧和所述第二图像帧对应的第二数量，对所述第一图像帧和所述第二图像帧进行插帧。
电子设备读取到第二图像帧后，确定第一图像帧和第二图像帧对应的第二数量，进而确定出在第一图像帧和第二图像帧之间做几倍插帧。以第二数量为3时，在第一图像帧和第二图像帧之间做4倍插帧，调用3轮模型，生成3个新的中间帧。
请参照图5，假设第一图像帧为第1帧，第二图像帧为第2帧，第一轮调用插帧模型时，输入第1帧和第2帧，得到第1.5帧。第二轮调用插帧模型时，输出第1帧和第1.5帧，得到第1.25帧。第三轮调用插帧模型时，输入第1.5帧和第2帧，得到第1.75帧。之后，将第1.25帧、第1.5帧和第1.75帧按顺序插入第1帧和第2帧之间，从而在第1帧和第2帧之间完成4倍插帧。
采用该种方案，电子设备通过边读边处理的方式进行插帧，提高插帧效率。
可选的，上述实施例中，电子设备执行上述的步骤603时，按顺序依次输出第一图像帧、第二数量的中间帧，该第二数量的中间帧是对第一图像帧和所述第二图像帧进行插帧生成的图像帧。之后，缓存第二图像帧，接着读取与第二图像帧相邻的、位于第二图像帧之后的图像帧，继续生产中间帧的同时，编码第一图像帧和第二数量的中间帧。
继续沿用上述的例子，电子设备输出第1帧、第1.25帧、第1.5帧和1.75帧。之后，缓存第2帧，读取第3帧，根据第二数量判断在第2帧和第3帧之间做几倍插帧，比如，第二数量为1，n＝2，在第2帧和第3帧之间做2倍插帧，则将第2帧和第3帧输入插帧模型得到第2.5帧，输出第2帧和第2.5帧，缓存第3帧，继续读取第4帧，直到插帧完毕。缓存第3帧的同时，编码第2帧和第2.5帧。
采用该种方案，电子设备通过边读边处理边缓存边编码的方式进行插帧，提高插帧效率
可选的，上述实施例中，当插帧方式为整数倍插帧方式时，电子设备根据插帧倍数对所述源视频每相邻两帧之间进行插帧，所述整数倍插帧方式用于指示将所述第一帧率提升2的整数倍以得到所述目标视频的插帧方式。
示例性的，假设用户指示2倍插帧，则电子设备根据每相邻的两个图形帧生成中间帧，并将中间帧插入。若用户指示4倍插帧，则每相邻的两个图像帧之间插入3个中间帧，电子设备根据每相邻的两个图形帧生成中间帧，得到3个连续的图像帧，再针对每两个图像帧生成中间帧并插入。同理，8倍插帧时，每相邻的两个图像帧之间插入7个中间帧。
以第一帧率为24FPS，用户指示4倍插帧。假设24个图像帧依次为第0帧至第23帧，则电子设备在每两个相邻帧之间插入3个中间帧，最终得到目标视频。图7是本申请实施例提供的视频处理方法中整数倍插帧的过程示意图。图7是本申请实施例提供的视频处理方法中在第1帧和第2帧之间插帧的过程示意图。
请参照图7，初始时，仅存在白色填充的图像帧，即第1帧和第2帧。电子设备读取第1帧之后，暂不调用插帧模型，而是缓存第1帧，并读取第2帧，调用插帧模型，将第1帧和第2帧输入插帧模型得到第1.5帧，如图中斜线填充的图像帧。接着，电子设备第2轮调用插帧模型，输入第1帧和第1.5帧，得到第1.25帧。如图中竖线填充部分所示。之后，电子设备再调用第3轮插帧模型，输入第1.5帧和第2帧，得到第1.75帧。如图中竖线填充部分所示。最后，输出第1帧、第1.25帧、第1.5帧和第1.75帧，对这些图像帧进行编码处理。同时，电子设备缓存第2帧，读取第3帧，直到对源视频所有相邻帧都进行插帧。
由此可见，本申请实施例提供的视频处理方法，不光能支持整数倍的插帧，还支持常见的目标帧率的插帧，解决了伪影问题，同时整数倍插帧过程中边读边处理边缓存边编码，实现提高整数倍插帧的效率的目的。
图8是本申请实施例提供的视频处理方法的另一个流程图。本实施例包括：
801、用户选中源视频并输入指示信息。
示例性的，电子设备提供用户界面，用户通过用户界面选中源视频并输入指示信息。
802、电子设备确定源视频的第一帧率。
803、电子设备确定插帧方式，当插帧方式为整数倍插帧方式时，执行步骤804；当插帧方式为非整数倍插帧方式时，执行步骤805。
804、对于2n倍插帧，根据n的大小进行整数倍插帧。
示例性的，当n＝1时，按顺序在每相邻的两个图像帧之间插入一个中间帧，这两个图像帧为原始的图像帧。当n＞1且为整数时，按顺序在每相邻的两个图像帧之间插入一个中间帧得到连续的3帧图像，再在每两帧之间插入一个中间帧……，直到原始的两个图像帧中间插入2n-1个中间帧。
805、电子设备对源视频包含的图像帧分组，每组中存在一个特殊位置，在该特殊位置比其他位置多做一轮插帧。
例如，24FPS→60FPS，将源视频中的每4个图像帧分为一组，该组中存在3个插帧位置。以第一分组包含第0帧、第1帧、第2帧和第3帧，3个插帧位置分别为第0帧和第1帧之间、第1帧和第2帧之间、第2帧和第3帧之间。这三个位置中，有一个位置做4倍插帧，另外两个位置做2倍插帧，从而在该分组中插入5个中间帧，具体可参见图5，此处不再赘述。
806、电子设备边生成中间帧边依次对各帧进行编码并输出，从而得到目标视频。
下述为本申请装置实施例，可以用于执行本申请方法实施例。对于本申请装置实施例中未披露的细节，请参照本申请方法实施例。
图9为本申请实施例提供的一种视频处理装置的示意图。该视频处理装置900包括：确定模块91、处理模块92、插帧模块93和输出模块93。
确定模块91，用于确定源视频的插帧方式；
处理模块92，用于当所述插帧方式为非整数倍插帧方式时，根据所述源视频的第一帧率对所述源视频包含的图像帧分组，以得到多个分组，所述多个分组中的每个分组包含连续的多个图像帧，所述非整数倍插帧方式用于指示将所述第一帧率提升2的非整数倍以得到目标视频的插帧方式；
插帧模块93，用于对所述多个分组中的每个分组进行插帧，以得到所述目标视频；
输出模块94，用于输出所述目标视频。
一种可行的实现方式中，所述插帧模块93，用于确定所述多个分组中每个分组需要插帧的第一数量，根据所述第一数量确定每个分组内每相邻两个图像帧之间需要插帧的第二数量，所述第二数量至少为两个，所述每个分组包含第一子组和第二子组，所述第一子组包含两个相邻的图像帧，所述第二子组包含另外两个相邻的图像帧，所述第一子组对应的第二数量大于所述第二子组对应的第二数量；根据所述第二数量，对所述多个分组中每个分组进行插帧，以得到所述目标视频。
一种可行的实现方式中，所述插帧模块93根据所述第一数量确定每个分组内每相邻两个图像帧之间需要插帧的第二数量之前，还用于随机从所述每个分组中确定出相邻的两个图像帧，以得到所述第一子组，将所述每个分组中除所述第一子组外的图像帧形成的子组作为第二子组。
一种可行的实现方式中，所述插帧模块93根据所述第二数量，对所述多个分组中每个分组进行插帧，以得到所述目标视频时，用于对于所述多个分组中的第一子组，当所述第一子组对应的第二数量为2n-1，n≥2且为整数时，根据所述第一子组中相邻的两个视频生成中间帧，得到连续的3个图像帧后，继续在所述3个图像帧中每两个连续的图像帧之间进行插帧，直到所述第一子组内中间帧的数量为所述第二数量。
一种可行的实现方式中，所述多个分组中相邻的两个分组分别为第一分组和第二分组，所述第一分组的最后一个图像帧为所述第二分组的首个图像帧。
一种可行的实现方式中，所述插帧模块93根据所述第二数量，对所述多个分组中对应分组进行插帧，以得到所述目标视频时，用于对于所述多个分组中的目标分组，读取所述目标分组中的第一图像帧并缓存，所述目标分组是所述多个分组中当前正在插帧的分组；读取所述目标分组中的第二图像帧，所述第一图像帧和所述第二图像帧是所述目标分组中相邻的两个图像帧，且所述第一图像帧位于所述第二图像帧之前；根据所述第一图像帧和所述第二图像帧对应的第二数量，对所述第一图像帧和所述第二图像帧进行插帧。
一种可行的实现方式中，所述处理模块92在所述插帧模块93根据所述第一图像帧和所述第二图像帧对应的第二数量，对所述第一图像帧和所述第二图像帧进行插帧之后还用于按顺序输出所述第一图像帧、所述第二数量的中间帧，所述中间帧是对所述第一图像帧和所述第二图像帧进行插帧生成的图像帧；缓存所述第二图像帧；编码所述第一图像帧和所述第二数量的中间帧。
一种可行的实现方式中，所述确定模块91，用于识别指示信息；当所述指示信息指示所述目标视频的第二帧率时，确定所述插帧方式为非整数倍插帧方式；当所述指示信息指示插帧倍数时，确定所述插帧方式为整数倍插帧方式。
一种可行的实现方式中，所述处理模块92，用于当所述第一帧率为24FPS时，将所述源视频包含的图像帧每4帧分为一组，以得到多个分组；当所述第一帧率为25FPS时，将所述源视频包含的图像帧每5帧分为一组，以得到多个分组。
一种可行的实现方式中，所述插帧模块93，还用于当所述插帧方式为整数倍插帧方式时，根据插帧倍数对所述源视频每相邻两帧之间进行插帧，所述整数倍插帧方式用于指示将所述第一帧率提升2的整数倍以得到所述目标视频的插帧方式。
本申请实施例提供的视频处理装置，可以执行上述实施例中电子设备的动作，其实现原理和技术效果类似，在此不再赘述。
图10为本申请实施例提供的一种电子设备的结构示意图。如图10所示，该电子设备1000包括：
处理器101和存储器102；
所述存储器102存储计算机指令；
所述处理器101执行所述存储器102存储的计算机指令，使得所述处理器101执行如上所述的视频处理方法。
处理器101的具体实现过程可参见上述方法实施例，其实现原理和技术效果类似，本实施例此处不再赘述。
可选地，该电子设备1000还包括通信部件103。其中，处理器101、存储器102以及通信部件103可以通过总线104连接。
本申请实施例还提供一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机指令，所述计算机指令被处理器执行时用于实现如上所述的视频处理方法。
本申请实施例还提供一种计算机程序产品，该计算机程序产品包含计算机程序，计算机程序被处理器执行时实现如上所述的视频处理方法。
本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本申请的其它实施方案。本申请旨在涵盖本申请的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本申请未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本申请的真正范围和精神由下面的权利要求书指出。
应当理解的是，本申请并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本申请的范围仅由所附的权利要求书来限制。

Claims (13)

1.一种视频处理方法，其特征在于，包括：
确定源视频的插帧方式；
当所述插帧方式为非整数倍插帧方式时，根据所述源视频的第一帧率对所述源视频包含的图像帧分组，以得到多个分组，所述多个分组中的每个分组包含连续的多个图像帧，所述非整数倍插帧方式用于指示将所述第一帧率提升2的非整数倍以得到目标视频的插帧方式；
对所述多个分组中的每个分组进行插帧，以得到所述目标视频；
输出所述目标视频。
2.根据权利要求1所述的方法，其特征在于，所述对所述多个分组中的每个分组进行插帧，以得到所述目标视频，包括：
确定所述多个分组中每个分组需要插帧的第一数量；
根据所述第一数量确定每个分组内每相邻两个图像帧之间需要插帧的第二数量，所述第二数量至少为两个，所述每个分组包含第一子组和第二子组，所述第一子组包含两个相邻的图像帧，所述第二子组包含另外两个相邻的图像帧，所述第一子组对应的第二数量大于所述第二子组对应的第二数量；
根据所述第二数量，对所述多个分组中每个分组进行插帧，以得到所述目标视频。
3.根据权利要求2所述的方法，其特征在于，所述根据所述第一数量确定每个分组内每相邻两个图像帧之间需要插帧的第二数量之前，还包括：
随机从所述每个分组中确定出相邻的两个图像帧，以得到所述第一子组，将所述每个分组中除所述第一子组外的图像帧形成的子组作为第二子组。
4.根据权利要求2所述的方法，其特征在于，所述根据所述第二数量，对所述多个分组中每个分组进行插帧，以得到所述目标视频，包括：
对于所述多个分组中的第一子组，当所述第一子组对应的第二数量为2n-1，n≥2且为整数时，根据所述第一子组中相邻的两个视频生成中间帧，得到连续的3个图像帧后，继续在所述3个图像帧中每两个连续的图像帧之间进行插帧，直到所述第一子组内中间帧的数量为所述第二数量。
5.根据权利要求2所述的方法，其特征在于，
所述多个分组中相邻的两个分组分别为第一分组和第二分组，所述第一分组的最后一个图像帧为所述第二分组的首个图像帧。
6.根据权利要求2所述的方法，其特征在于，所述根据所述第二数量，对所述多个分组中对应分组进行插帧，以得到所述目标视频，包括：
对于所述多个分组中的目标分组，读取所述目标分组中的第一图像帧并缓存，所述目标分组是所述多个分组中当前正在插帧的分组；
读取所述目标分组中的第二图像帧，所述第一图像帧和所述第二图像帧是所述目标分组中相邻的两个图像帧，且所述第一图像帧位于所述第二图像帧之前；
根据所述第一图像帧和所述第二图像帧对应的第二数量，对所述第一图像帧和所述第二图像帧进行插帧。
7.根据权利要求6所述的方法，其特征在于，所述根据所述第一图像帧和所述第二图像帧对应的第二数量，对所述第一图像帧和所述第二图像帧进行插帧之后，还包括：
按顺序输出所述第一图像帧、所述第二数量的中间帧，所述中间帧是对所述第一图像帧和所述第二图像帧进行插帧生成的图像帧；
缓存所述第二图像帧；
编码所述第一图像帧和所述第二数量的中间帧。
8.根据权利要求1-7任一项所述的方法，其特征在于，所述确定插帧方式，包括：
识别指示信息；
当所述指示信息指示所述目标视频的第二帧率时，确定所述插帧方式为非整数倍插帧方式；
当所述指示信息指示插帧倍数时，确定所述插帧方式为整数倍插帧方式。
9.根据权利要求1-7任一项所述的方法，其特征在于，所述当所述插帧方式为非整数倍插帧方式时，根据所述源视频的第一帧率对所述源视频包含的图像帧分组，以得到多个分组，包括：
当所述第一帧率为24FPS时，将所述源视频包含的图像帧每4帧分为一组，以得到多个分组；
当所述第一帧率为25FPS时，将所述源视频包含的图像帧每5帧分为一组，以得到多个分组。
10.根据权利要求1-7任一项所述的方法，其特征在于，还包括：
当所述插帧方式为整数倍插帧方式时，根据插帧倍数对所述源视频每相邻两帧之间进行插帧，所述整数倍插帧方式用于指示将所述第一帧率提升2的整数倍以得到所述目标视频的插帧方式。
11.一种视频处理装置，其特征在于，包括：
确定模块，用于确定源视频的插帧方式；
处理模块，用于当所述插帧方式为非整数倍插帧方式时，根据所述源视频的第一帧率对所述源视频包含的图像帧分组，以得到多个分组，所述多个分组中的每个分组包含连续的多个图像帧，所述非整数倍插帧方式用于指示将所述第一帧率提升2的非整数倍以得到目标视频的插帧方式；
插帧模块，用于对所述多个分组中的每个分组进行插帧，以得到所述目标视频；
输出模块，用于输出所述目标视频。
12.一种电子设备，包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时使得所述电子设备实现如权利要求1至10任一所述的方法。
13.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至10任一所述的方法。
CN202210349214.4A 2022-04-01 2022-04-01 视频处理方法、装置、设备及可读存储介质 Pending CN114938461A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210349214.4A CN114938461A (zh) 2022-04-01 2022-04-01 视频处理方法、装置、设备及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210349214.4A CN114938461A (zh) 2022-04-01 2022-04-01 视频处理方法、装置、设备及可读存储介质

Publications (1)

Publication Number Publication Date
CN114938461A true CN114938461A (zh) 2022-08-23

Family

ID=82862650

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210349214.4A Pending CN114938461A (zh) 2022-04-01 2022-04-01 视频处理方法、装置、设备及可读存储介质

Country Status (1)

Country Link
CN (1) CN114938461A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116886961A (zh) * 2023-09-06 2023-10-13 中移（杭州）信息技术有限公司 一种分布式直播视频插帧方法、设备、系统及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009100236A (ja) * 2007-10-16 2009-05-07 Toshiba Corp 映像信号処理方法および映像信号処理装置
CN105828106A (zh) * 2016-04-15 2016-08-03 山东大学苏州研究院 一种基于运动信息的非整数倍帧率提升方法
JP2017092851A (ja) * 2015-11-16 2017-05-25 日本放送協会 内挿比決定装置及びプログラム
US20210021783A1 (en) * 2019-07-17 2021-01-21 Home Box Office, Inc. Video frame pulldown based on frame analysis
CN112532907A (zh) * 2020-11-30 2021-03-19 湖南国科微电子股份有限公司 一种视频帧频提升方法、装置、设备及介质
CN113099237A (zh) * 2021-04-02 2021-07-09 深圳市帧彩影视科技有限公司 视频处理方法和装置
CN113691834A (zh) * 2021-07-26 2021-11-23 浙江大华技术股份有限公司 视频码流的处理方法、视频编码装置以及可读存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009100236A (ja) * 2007-10-16 2009-05-07 Toshiba Corp 映像信号処理方法および映像信号処理装置
JP2017092851A (ja) * 2015-11-16 2017-05-25 日本放送協会 内挿比決定装置及びプログラム
CN105828106A (zh) * 2016-04-15 2016-08-03 山东大学苏州研究院 一种基于运动信息的非整数倍帧率提升方法
US20210021783A1 (en) * 2019-07-17 2021-01-21 Home Box Office, Inc. Video frame pulldown based on frame analysis
CN112532907A (zh) * 2020-11-30 2021-03-19 湖南国科微电子股份有限公司 一种视频帧频提升方法、装置、设备及介质
CN113099237A (zh) * 2021-04-02 2021-07-09 深圳市帧彩影视科技有限公司 视频处理方法和装置
CN113691834A (zh) * 2021-07-26 2021-11-23 浙江大华技术股份有限公司 视频码流的处理方法、视频编码装置以及可读存储介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
何天琦;蒋兴浩;孙锬锋;: "视频帧率上转换检测技术综述", 网络与信息安全学报, vol. 4, no. 10, pages 1 - 11 *
曲爱喜: "基于运动信息的视频帧率提升方法研究", 中国优秀硕士学位论文全文数据库 信息科技辑, pages 138 - 1290 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116886961A (zh) * 2023-09-06 2023-10-13 中移（杭州）信息技术有限公司 一种分布式直播视频插帧方法、设备、系统及存储介质
CN116886961B (zh) * 2023-09-06 2023-12-26 中移（杭州）信息技术有限公司 一种分布式直播视频插帧方法、设备、系统及存储介质

Similar Documents

Publication Publication Date Title
CN109803175B (zh) 视频处理方法及装置、设备、存储介质
CN113015021B (zh) 云游戏的实现方法、装置、介质及电子设备
US20180192063A1 (en) Method and System for Virtual Reality (VR) Video Transcode By Extracting Residual From Different Resolutions
CN109510990B (zh) 图像处理方法及装置、计算机可读存储介质、电子设备
CN102625106B (zh) 场景自适应的屏幕编码码率控制方法及其系统
CN110267098B (zh) 一种视频处理方法及终端
US6804295B1 (en) Conversion of video and audio to a streaming slide show
EP1237370A2 (en) A frame-interpolated variable-rate motion imaging system
CN110139113B (zh) 视频资源的传输参数分发方法及装置
CN106713889B (zh) 3d画面的渲染方法和系统、及移动终端
CN112272327B (zh) 数据处理方法、装置、存储介质及设备
JP2014183353A (ja) 映像処理装置、映像再生装置、映像処理方法、映像再生方法及び映像処理システム
KR20200062189A (ko) 비디오 데이터 처리 방법 및 비디오 데이터 처리 장치
CN110827380A (zh) 图像的渲染方法、装置、电子设备及计算机可读介质
JP2002290876A (ja) 動画シーケンスの表示方法
CN114938461A (zh) 视频处理方法、装置、设备及可读存储介质
WO2021179954A1 (zh) 视频处理方法、装置、设备及存储介质
CN113747242A (zh) 图像处理方法、装置、电子设备及存储介质
CN110572677A (zh) 视频编解码方法和装置、存储介质及电子装置
CN113596450B (zh) 视频图像压缩方法、解压缩方法、处理方法及装置、设备
CN106027991B (zh) 一种医疗视频影像直播一体机
US20180063551A1 (en) Apparatus and methods for frame interpolation
US8107525B1 (en) Variable bit rate video CODEC using adaptive tracking for video conferencing
CN117291810B (zh) 视频帧的处理方法、装置、设备及存储介质
CN114827662B (zh) 视频分辨率自适应调节方法、装置、设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination