CN114363700A - 数据处理方法、装置、存储介质及计算机设备 - Google Patents
数据处理方法、装置、存储介质及计算机设备 Download PDFInfo
- Publication number
- CN114363700A CN114363700A CN202011086021.1A CN202011086021A CN114363700A CN 114363700 A CN114363700 A CN 114363700A CN 202011086021 A CN202011086021 A CN 202011086021A CN 114363700 A CN114363700 A CN 114363700A
- Authority
- CN
- China
- Prior art keywords
- frame
- video data
- intermediate frame
- frames
- determining
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 40
- 238000003672 processing method Methods 0.000 title claims abstract description 39
- 230000007547 defect Effects 0.000 claims abstract description 80
- 238000000034 method Methods 0.000 claims abstract description 41
- 238000003780 insertion Methods 0.000 claims description 106
- 230000037431 insertion Effects 0.000 claims description 106
- 238000001514 detection method Methods 0.000 claims description 98
- 230000002950 deficient Effects 0.000 claims description 32
- 230000015654 memory Effects 0.000 claims description 32
- 230000007704 transition Effects 0.000 claims description 16
- 238000004590 computer program Methods 0.000 claims description 7
- 238000005516 engineering process Methods 0.000 abstract description 9
- 238000010586 diagram Methods 0.000 description 19
- 238000004422 calculation algorithm Methods 0.000 description 13
- 238000011156 evaluation Methods 0.000 description 12
- 230000005540 biological transmission Effects 0.000 description 8
- 230000000694 effects Effects 0.000 description 8
- 230000003287 optical effect Effects 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000005034 decoration Methods 0.000 description 2
- 238000013135 deep learning Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 241000208340 Araliaceae Species 0.000 description 1
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 description 1
- 235000003140 Panax quinquefolius Nutrition 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 235000008434 ginseng Nutrition 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Images
Landscapes
- Television Systems (AREA)
Abstract
本发明公开了一种数据处理方法、装置、存储介质及计算机设备。其中，该方法包括：获取视频数据，视频数据包括第一帧、第二帧和第三帧，视频数据包括参考帧；在第一帧和第二帧之间，插入第一中间帧；在第二帧和第三帧之间，插入第二中间帧；在第一中间帧和第二中间帧之间，插入二次中间帧；计算二次中间帧与参考帧之间的差异值；如果差异值满足预设条件，确定中间帧为目标数据，其中，中间帧包括：第一中间帧和/或第二中间帧。本发明解决了相关技术中如何实现准确高效地对插帧瑕疵进行检测的技术问题。
Description
技术领域
本发明涉及计算机领域，具体而言，涉及一种数据处理方法、装置、存储介质及计算机设备。
背景技术
随着5G覆盖和大宽带的推进，4K超高清数字媒体得到大力推广。高帧率是4K超高清视频的基础标准之一，但是相关技术中大量存在的视频并不能满足4K超高清视频标准，这就包括帧率。4K超高清要求视频帧率达50或以上，而现有视频的帧率绝大多数是25或者30。为了解决这一问题，人工完成难度大，耗时多，因此需要使用算法对视频进行插帧。因此，为了将现存的低清视频转化成超高清视频，算法插帧是必需的步骤。随着深度学习的快速发展，基于深度学习的视频插帧算法越来越多，也取得了越来越好的效果。但是,在相关技术中，插帧算法或显式或隐式的是通过预测光流来实现的，但是光流检测准确率低，特别是存在大位移、遮挡、复杂非刚体运动时，同时对于过渡、转场等情况，不存在中间状态，以上都意味着算法插帧将带来不可避免的瑕疵。对于这些瑕疵，人工的审核需要耗费大量人力，因此如何实现准确高效地对插帧瑕疵进行检测，成为了亟待解决的问题。
针对上述的问题，目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种数据处理方法、装置、存储介质及计算机设备，以至少解决相关技术中如何实现准确高效地对插帧瑕疵进行检测的技术问题。
根据本发明实施例的一个方面，提供了一种数据处理方法，包括：获取视频数据，所述视频数据包括第一帧、第二帧和第三帧，所述视频数据包括参考帧；在所述第一帧和所述第二帧之间，插入第一中间帧；在所述第二帧和所述第三帧之间，插入第二中间帧；在所述第一中间帧和所述第二中间帧之间，插入二次中间帧；计算所述二次中间帧与所述参考帧之间的差异值；如果所述差异值满足预设条件，确定中间帧为目标数据，其中，所述中间帧包括：所述第一中间帧和/或所述第二中间帧。
根据本发明实施例的另一个方面，提供了一种数据处理方法，包括：在视频数据中的帧与帧间插入中间帧，并在所述中间帧与中间帧之间插入二次中间帧；检测所述二次中间帧与所述视频数据中的参考帧之间的差异值是否超过预定阈值；在检测结果为是的情况下，确定所述中间帧存在瑕疵。
根据本发明实施例的又一方面，提供了一种数据处理方法，包括：在4K数字电视视频数据中的帧与帧间插入中间帧，并在所述中间帧与中间帧之间插入二次中间帧；检测所述二次中间帧与所述视频数据中的参考帧之间的差异值是否超过预定阈值；在检测结果为否的情况下，播放插入了中间帧的4K数字电视视频数据。
根据本发明实施例的还一方面，提供了一种数据处理方法，包括：在直播视频数据中的帧与帧间插入中间帧，并在所述中间帧与中间帧之间插入二次中间帧；检测所述二次中间帧与所述视频数据中的参考帧之间的差异值是否超过预定阈值；在检测结果为否的情况下，展示插入了中间帧的直播视频数据。
根据本发明实施例的一方面，提供了一种数据处理装置，包括：获取模块，用于获取视频数据，所述视频数据包括第一帧、第二帧和第三帧，所述视频数据包括参考帧；第一插入模块，用于在所述第一帧和所述第二帧之间，插入第一中间帧；在所述第二帧和所述第三帧之间，插入第二中间帧；在所述第一中间帧和所述第二中间帧之间，插入二次中间帧；计算模块，用于计算所述二次中间帧与所述参考帧之间的差异值；第一确定模块，用于如果所述差异值满足预设条件，确定中间帧为目标数据，其中，所述中间帧包括：所述第一中间帧和/或所述第二中间帧。
根据本发明实施例的另一方面，提供了一种数据处理装置，包括：第二插入模块，用于在视频数据中的帧与帧间插入中间帧，并在所述中间帧与中间帧之间插入二次中间帧；第一检测模块，用于检测所述二次中间帧与所述视频数据中的参考帧之间的差异值是否超过预定阈值；第二确定模块，用于在第一检测模块的检测结果为是的情况下，确定所述中间帧存在瑕疵。
根据本发明实施例的又一方面，提供了一种数据处理装置，包括：第三插入模块，用于在4K数字电视视频数据中的帧与帧间插入中间帧，并在所述中间帧与中间帧之间插入二次中间帧；第二检测模块，用于检测所述二次中间帧与所述视频数据中的参考帧之间的差异值是否超过预定阈值；播放模块，用于在第二检测模块的检测结果为否的情况下，播放插入了中间帧的4K数字电视视频数据。
根据本发明实施例的还一方面，提供了一种数据处理装置，包括：第四插入模块，用于在直播视频数据中的帧与帧间插入中间帧，并在所述中间帧与中间帧之间插入二次中间帧；第三检测模块，用于检测所述二次中间帧与所述视频数据中的参考帧之间的差异值是否超过预定阈值；展示模块，用于在检测结果为否的情况下，展示插入了中间帧的直播视频数据。
根据本发明实施例的一方面，还提供了一种存储介质，所述存储介质包括存储的程序，其中，在所述程序运行时控制所述存储介质所在设备执行上述任意一项所述的数据处理方法。
根据本发明实施例的另一方面，还提供了一种计算机设备，包括：存储器和处理器，所述存储器存储有计算机程序；所述处理器，用于执行所述存储器中存储的计算机程序，所述计算机程序运行时使得所述处理器执行上述任意一项所述的数据处理方法。
在本发明实施例中，采用在帧与帧间插入的中间帧间插入二次中间帧的方式，通过比较二次中间帧与视频数据中的参考帧(视频数据中的原帧或者已经确定为无瑕疵的帧)，达到了确定中间帧是否为目标数据，即中间帧是否存在瑕疵的目的，从而实现了高效准确地检测插帧是否存在瑕疵的技术效果，进而解决了相关技术中如何实现准确高效地对插帧瑕疵进行检测的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：
图1示出了一种用于实现数据处理方法的计算机终端的硬件结构框图；
图2是根据本发明实施例1的数据处理方法一的流程图；
图3是根据本发明实施例1的数据处理方法二的流程图；
图4是根据本发明实施例1的数据处理方法三的流程图；
图5是根据本发明实施例1的数据处理方法四的流程图；
图6是根据本发明可选实施方式提供的有参评价的插帧瑕疵检测方案的示意图；
图7是根据本发明可选实施方式提供的采用有参评价的插帧瑕疵检测方案检测出转场的示意图；
图8是根据本发明实施例2的数据处理装置一的结构框图；
图9是根据本发明实施例2的数据处理装置二的结构框图；
图10是根据本发明实施例2的数据处理装置三的结构框图；
图11是根据本发明实施例2的数据处理装置四的结构框图；
图12是根据本发明实施例的一种计算机终端的结构框图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。
需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
首先，在对本申请实施例进行描述的过程中出现的部分名词或术语适用于如下解释：
4K：是一种视频分辨率标准，指水平方向每行像素值达到或者接近4096个。
帧率：视频每秒播放的帧数。
插帧算法：对于连续运动过程中的任意输入的两个时刻的状态图片，通过算法获取其中间状态的图片。
有参评价：根据参考对象，对事物进行质量等方面的评价。
实施例1
根据本发明实施例，还提供了一种数据处理方法的方法实施例，需要说明的是，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。
本申请实施例1所提供的方法实施例可以在移动终端、计算机终端或者类似的运算装置中执行。图1示出了一种用于实现数据处理方法的计算机终端的硬件结构框图。如图1所示，计算机终端10(或移动设备10)可以包括一个或多个(图中采用102a、102b，……，102n来示出)处理器102(处理器102可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置)、用于存储数据的存储器104、以及用于通信功能的传输装置。除此以外，还可以包括：显示器、输入/输出接口(I/O接口)、通用串行总线(USB)端口(可以作为BUS总线的端口中的一个端口被包括)、网络接口、电源和/或相机。本领域普通技术人员可以理解，图1所示的结构仅为示意，其并不对上述电子装置的结构造成限定。例如，计算机终端10还可包括比图1中所示更多或者更少的组件，或者具有与图1所示不同的配置。
应当注意到的是上述一个或多个处理器102和/或其他数据处理电路在本文中通常可以被称为“数据处理电路”。该数据处理电路可以全部或部分的体现为软件、硬件、固件或其他任意组合。此外，数据处理电路可为单个独立的处理模块，或全部或部分的结合到计算机终端10(或移动设备)中的其他元件中的任意一个内。如本申请实施例中所涉及到的，该数据处理电路作为一种处理器控制(例如与接口连接的可变电阻终端路径的选择)。
存储器104可用于存储应用软件的软件程序以及模块，如本发明实施例中的数据处理方法对应的程序指令/数据存储装置，处理器102通过运行存储在存储器104内的软件程序以及模块，从而执行各种功能应用以及数据处理，即实现上述的应用程序的漏洞检测方法。存储器104可包括高速随机存储器，还可包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中，存储器104可进一步包括相对于处理器102远程设置的存储器，这些远程存储器可以通过网络连接至计算机终端10。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
传输装置用于经由一个网络接收或者发送数据。上述的网络具体实例可包括计算机终端10的通信供应商提供的无线网络。在一个实例中，传输装置包括一个网络适配器(Network Interface Controller，NIC)，其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中，传输装置可以为射频(Radio Frequency，RF)模块，其用于通过无线方式与互联网进行通讯。
显示器可以例如触摸屏式的液晶显示器(LCD)，该液晶显示器可使得用户能够与计算机终端10(或移动设备)的用户界面进行交互。
此处需要说明的是，在一些可选实施例中，上述图1所示的计算机设备(或移动设备)可以包括硬件元件(包括电路)、软件元件(包括存储在计算机可读介质上的计算机代码)、或硬件元件和软件元件两者的结合。应当指出的是，图1仅为特定具体实例的一个实例，并且旨在示出可存在于上述计算机设备(或移动设备)中的部件的类型。
在上述运行环境下，本申请提供了如图2所示的数据处理方法。图2是根据本发明实施例1的数据处理方法一的流程图，如图2所示，该流程包括如下步骤：
步骤S202,获取视频数据，视频数据包括第一帧、第二帧和第三帧，视频数据包括参考帧；需要说明的是，该视频数据可以包括多种，例如，可以包括以下至少之一：电视视频数据，网络录播视频数据，直播视频数据，短视频数据。
步骤S204,在第一帧和第二帧之间，插入第一中间帧；
步骤S206,在第二帧和第三帧之间，插入第二中间帧；
步骤S208,在第一中间帧和第二中间帧之间，插入二次中间帧；
步骤S210,计算二次中间帧与参考帧之间的差异值；
步骤S212,如果差异值满足预设条件，确定中间帧为目标数据，其中，中间帧包括：第一中间帧和/或第二中间帧。
通过上述步骤，采用在帧与帧间插入的中间帧间插入二次中间帧的方式，通过比较二次中间帧与视频数据中的参考帧(视频数据中的原帧或者已经确定为无瑕疵的帧)，达到了确定中间帧是否为目标数据，即中间帧是否存在瑕疵的目的，从而实现了高效准确地检测插帧是否存在瑕疵的技术效果，进而解决了相关技术中如何实现准确高效地对插帧瑕疵进行检测的技术问题。
需要说明的是，上述参考帧作为一种参考标准，是准确，没有问题的帧。该参考帧可以包括多种形式，例如，可以是视频数据中的一个原始帧，也可以是插帧过程中已经确定过无问题的帧，即无瑕疵的帧。作为上述第一中间帧和第二中间帧的参考标准，该参考帧可以是上述第二帧。
作为一种可选的实施例，如果差异值满足预设条件，确定中间帧为目标数据，可以包括：如果差异值超过预定阈值，确定中间帧为瑕疵帧，其中，瑕疵帧为目标数据。即在二次中间帧与参考帧之间的差异值超过预定阈值时，确定作为中间帧的第一中间帧和/或第二中间帧作为目标数据，即作为瑕疵帧，从而实现对瑕疵帧作为目标数据的高效检测。
本申请还提供了如图3所示的数据处理方法。图3是根据本发明实施例1的数据处理方法二的流程图，如图3所示，该流程包括如下步骤：
步骤S302,在视频数据中的帧与帧间插入中间帧，并在中间帧与中间帧之间插入二次中间帧；需要说明的是，该视频数据可以包括多种，例如，可以包括以下至少之一：电视视频数据，网络录播视频数据，直播视频数据，短视频数据。
步骤S304,检测二次中间帧与视频数据中的参考帧之间的差异值是否超过预定阈值；
步骤S306,在检测结果为是的情况下，确定中间帧存在瑕疵。
通过上述步骤，采用在帧与帧间插入的中间帧间插入二次中间帧的方式，通过比较二次中间帧与视频数据中的参考帧(视频数据中的原帧或者已经确定为无瑕疵的帧)，达到了确定中间帧是否存在瑕疵的目的，从而实现了高效准确地检测插帧是否存在瑕疵的技术效果，进而解决了相关技术中如何实现准确高效地对插帧瑕疵进行检测的技术问题。
作为一种可选的实施例，上述步骤的执行主体可以是单机，也可以联网的网络设备，或者是后台执行视频数据处理的服务器等。依据待执行处理的视频数据所在的位置或者实现的场景不同而不同。
作为一种可选的实施例，在检测二次中间帧与视频数据中的参考帧之间的差异值是否超过预定阈值之后，还可以包括：在检测结果为否的情况下，确定中间帧不存在瑕疵；将不存在瑕疵的中间帧当作视频数据中的原帧进行插帧操作，并重复执行瑕疵检测操作。即在确定中间帧不存在瑕疵时，可以将该中间帧作为视频数据中的原帧，重复执行插帧和瑕疵检测的操作，重复执行的次数越多，实现插帧的精度也越高。需要说明的是，此处所指的重复执行的瑕疵检测操作可以是上述所描述的步骤：在视频数据中的帧与帧间插入中间帧，并在中间帧与中间帧之间插入二次中间帧；检测二次中间帧与视频数据中的参考帧之间的差异值是否超过预定阈值；在检测结果为是的情况下，确定中间帧存在瑕疵。
需要说明的是，在视频数据中的帧与帧间插入中间帧可以是插入一个中间帧，也可以是插入多个中间帧，但不管插入一个中间帧还是插入多个中间帧，对插入的中间帧进行瑕疵检测都可以采用上述阈值比较的方法。
考虑实现方式的简单，以及便于对本发明实施例进行理解，在本可选实施例中，以在视频数据中的帧与帧间插入一个中间帧为例进行说明。
作为一种可选的实施例，在视频数据中的帧与帧间插入中间帧包括：在视频数据中相邻的第一帧和第二帧之间插入第一插入帧，在相邻的第二帧与第三帧之间插入第二插入帧，其中，中间帧包括：第一插入帧和第二插入帧；对应地，在中间帧与中间帧之间插入二次中间帧包括：在第一插入帧与第二插入帧之间插入第三插入帧，二次中间帧包括：第三插入帧；对应地，检测二次中间帧与视频数据中的参考帧之间的差异值是否超过预定阈值包括：检测第三插入帧与第二帧之间的差异值是否超过预定阈值，其中，参考帧包括：第二帧；对应地，在检测结果为是的情况下，确定中间帧存在瑕疵包括：在检测到第三插入帧与第二帧之间的差异值超过预定阈值的情况下，确定第一插入帧和第二插入帧中存在瑕疵帧。
在本可选实施例中，第一帧，第二帧，第三帧为该视频数据的原帧，第一插入帧和第二插入帧为一次插入帧，第三插入帧为二次中间帧，通过检测第三插入帧与第二帧之间的差异值是否超过预定阈值，确定作为一次插入帧的第一插入帧和第二插入帧是否存在瑕疵帧。
作为一种可选的实施例，在检测到第三插入帧与第二帧之间的差异值超过预定阈值的情况下，确定第一插入帧和第二插入帧中存在瑕疵帧时，为确定到底是第一插入帧还是第二插入帧存在瑕疵，可以采用多种方式，例如，可以采用以下方式来实现：在视频数据中相邻的第零帧和第一帧之间插入第四插入帧，以及在第四插入帧和第一插入帧之间插入第五插入帧；检测第五插入帧与第一帧之间的差异值是否超过预定阈值；在检测结果为否的情况下，确定第二插入帧为瑕疵帧。采用上述处理，即判断具体哪个插入帧存在瑕疵时，在插帧时，可以按照一定的插帧顺序来执行。例如，在第一帧的前一帧与第一帧之间插入第四插入帧，在第四插入帧和第一插入帧之间插入第五插入帧；检测第五插入帧与第一帧之间的差异值是否超过预定阈值；在检测结果为否的情况下，确定第二插入帧为瑕疵帧。即在前一帧相关的插入帧不存在瑕疵的情况下，而本帧的相关插入帧存在瑕疵，则可以确定存在瑕疵的插入帧为靠后的插入帧。
作为一种可选的实施例，在检测到第三插入帧与第二帧之间的差异值超过预定阈值的情况下，确定第一插入帧和第二插入帧中存在瑕疵帧包括：在视频数据中相邻的第三帧和第四帧之间插入第六插入帧，在第四帧和第五帧之间插入第七插入帧，在第六插入帧和第七插入帧之间插入第八插入帧；检测第八插入帧与第四帧之间的差异值是否超过预定阈值；在检测结果为否的情况下，确定第二插入帧为瑕疵帧。基于上述类似的原理，在后一帧相关的插入帧不存在瑕疵的情况下，而本帧的相关插入帧存在瑕疵，则可以确定存在瑕疵的插入帧为靠前的插入帧。
作为一种可选的实施例，检测二次中间帧与视频数据中的参考帧之间的差异值是否超过预定阈值包括：确定用于检测的图像参数，其中，图像参数包括以下至少之一：峰值信噪比(Peak Signal to Noise Ratio，简称为PSNR)、结构相似性(StructuralSimilarity，简称为SSIM)；比较二次中间帧的图像参数与参考帧的图像参数之间的差异值是否超过图像参数阈值，其中，预定阈值包括图像参数阈值。通过上述处理，采用具体图像参数差值与图像参数阈值比较的方式，能够定量地确定图像的相似性，从而较高准确性地确定中间帧是否存在瑕疵。
作为一种可选的实施例，在确定中间帧存在瑕疵之后，还包括：确定存在瑕疵的中间帧的瑕疵量；检测瑕疵量是否超过预定瑕疵量；在检测结果为是的情况下，确定在中间帧对应的两原帧间出现转场。采用上述处理，在确定中间帧存在瑕疵时，可以进一步地确定视频数据在此时刻是否出现转场。因为出现转场时，对应地中间帧肯定会出现瑕疵。因此，在中间帧出现瑕疵时，结合出现瑕疵的大小即可判定原帧是否出现转场。比如，在中间帧的瑕疵量大于预定阈值时，则可确定该中间帧对应的原帧间出现转场。
本申请提供了如图4所示的数据处理方法。图4是根据本发明实施例1的数据处理方法三的流程图，如图4所示，该流程包括如下步骤：
步骤S402,在4K数字电视视频数据中的帧与帧间插入中间帧，并在中间帧与中间帧之间插入二次中间帧；
步骤S404,检测二次中间帧与视频数据中的参考帧之间的差异值是否超过预定阈值；
步骤S406,在检测结果为否的情况下，播放插入了中间帧的4K数字电视视频数据。
通过上述步骤，采用在4K数字电视视频数据的帧与帧间插入的中间帧间插入二次中间帧的方式，通过比较二次中间帧与视频数据中的参考帧(4K数字电视视频数据中的原帧或者已经确定为无瑕疵的帧)，达到了确定中间帧是否存在瑕疵的目的，从而实现了高效准确地检测4K数字电视视频数据中的插帧是否存在瑕疵的技术效果，进而解决了相关技术中如何实现准确高效地对插帧瑕疵进行检测的技术问题。
作为一种可选的实施例，在播放插入了中间帧的4K数字电视视频数据之前，还包括：在检测结果为否的情况下，确定中间帧不存在瑕疵；将不存在瑕疵的中间帧当作视频数据中的原帧进行插帧操作，重复执行瑕疵检测操作，并在检测结果为否的情况下，进入4K数字电视视频数据待播放状态。
本申请提供了如图5所示的数据处理方法。图5是根据本发明实施例1的数据处理方法四的流程图，如图5所示，该流程包括如下步骤：
步骤S502,在直播视频数据中的帧与帧间插入中间帧，并在中间帧与中间帧之间插入二次中间帧；
步骤S504,检测二次中间帧与视频数据中的参考帧之间的差异值是否超过预定阈值；
步骤S506,在检测结果为否的情况下，展示插入了中间帧的直播视频数据。
通过上述步骤，采用直播视频数据的帧与帧间插入的中间帧间插入二次中间帧的方式，通过比较二次中间帧与视频数据中的参考帧(直播视频数据中的原帧或者已经确定为无瑕疵的帧)，达到了确定中间帧是否存在瑕疵的目的，从而实现了高效准确地检测直播视频数据中的插帧是否存在瑕疵的技术效果，进而解决了相关技术中如何实现准确高效地对插帧瑕疵进行检测的技术问题。
基于上述实施例及可选实施例，本可选实施方式还提供了一种有参评价的插帧瑕疵检测方案。
在相关技术中，利用插帧的结果或者中间状态做瑕疵的判断，因为缺乏比较的参考对象，是一种无参评价；另外，因为真实场景的复杂性以及运动的复杂性，这类无参评价方式无法覆盖所有可能的情况，存在不准确及可靠性低的问题。
另外，在相关技术中，通过对插帧模型的改进或者训练数据的增广，例如考虑多尺度信息、多帧信息、边缘信息等，虽然能够普改善部分场景的插帧效果，但是依然无法保证全无瑕疵，即不能从根本上避免插帧瑕疵，同时无法避免不准确的镜头检测。例如，特别是一些存在大运动、遮挡、过渡以及复杂非刚体运动的场景。同时对于视频中的转场，理论上不存在中间帧，但是算法模型无法判断，因此需要辅助以镜头检测，但是镜头的检测需要额外的耗时，同时也存在严重的准确性问题。
针对上述问题，在本可选实施方式中，提供了一种有参评价的插帧瑕疵检测方案。图6是根据本发明可选实施方式提供的有参评价的插帧瑕疵检测方案的示意图，如图6所示，最左边框的图是原始视频数据输入帧，插帧算法需要在每相邻两帧之间插入一帧，也就是图6中中间部分边框包裹的图，但是因为场景的复杂性以及插帧算法的不准确性，中间部分边框的插帧结果有明显的瑕疵，需要对这些有明显瑕疵的插帧结果进行检测和过滤。在本可选实施例中，利用这两个相邻的插帧结果再进行一次插帧得到上图中最右边框的图，理论上，如果插帧算法完全正确和稳定，最右边框的图应该与最左边中间的边框图完全一致，因此可以通过PSNR、SSIM等指标对结果进行有参评价，根据评价的结果，再对中间部分边框的插帧结果做瑕疵判定，最终实现全自动的插帧瑕疵检测。图7是根据本发明可选实施方式提供的采用有参评价的插帧瑕疵检测方案检测出转场的示意图，如图7所示，采用图6所示的可选实施方式，在图7中演示了该方案同样可以自适应的判断出转场，因此可以避免不准确的镜头检测。
需要说明的是，在本可选实施例的有参评价中，主要采用了PSNR，但是其它任意的有参评价都可以，包括SSIM等。另外，本方案支持任意的插帧算法，例如，典型的插帧算法，包括Super SloMo、DAIN、AdaCoF、QVI等都可以自然的嵌入本方案。
因此，本可选实施方式提出的基于有参评价的插帧瑕疵检测方案可以支持任意的插帧算法，通过控制阈值可以实现任意精度的插帧瑕疵全自动检测，同时因为转场处的插帧会导致明显瑕疵，根据该方案可以准确的定位到转场，从而避免了不准确的镜头检测。
需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明并不受所描述的动作顺序的限制，因为依据本发明，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本发明所必须的。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本发明各个实施例的方法。
实施例2
根据本发明实施例，还提供了一种用于实施上述数据处理方法一的装置，图8是根据本发明实施例2的数据处理装置一的结构框图，如图8所示，该装置包括：获取模块82，第一插入模块84,计算模块86和第一确定模块88，下面对该装置进行说明。
获取模块82，用于获取视频数据，视频数据包括第一帧、第二帧和第三帧，视频数据包括参考帧；第一插入模块84，连接至上述获取模块82，用于在第一帧和第二帧之间，插入第一中间帧；在第二帧和第三帧之间，插入第二中间帧；在第一中间帧和第二中间帧之间，插入二次中间帧；计算模块86，连接至上述第一插入模块84，用于计算二次中间帧与参考帧之间的差异值；第一确定模块88，连接至上述计算模块86，用于如果差异值满足预设条件，确定中间帧为目标数据，其中，中间帧包括：第一中间帧和/或第二中间帧。
此处需要说明的是，上述获取模块82，第一插入模块84,计算模块86和第一确定88模块对应于实施例1中的步骤S202至步骤S212，上述模块与对应的步骤所实现的实例和应用场景相同，但不限于上述实施例1所公开的内容。需要说明的是，上述模块作为装置的一部分可以运行在实施例1提供的计算机终端10中。
根据本发明实施例，还提供了一种用于实施上述数据处理方法二的装置，图9是根据本发明实施例2的数据处理装置二的结构框图，如图9所示，该装置包括：第二插入模块92，第一检测模块94和第二确定模块96，下面对该装置进行说明。
第二插入模块92，用于在视频数据中的帧与帧间插入中间帧，并在中间帧与中间帧之间插入二次中间帧；第一检测模块94，连接至上述第二插入模块92，用于检测二次中间帧与视频数据中的参考帧之间的差异值是否超过预定阈值；第二确定模块96，连接至上述第一检测模块94，用于在第一检测模块的检测结果为是的情况下，确定中间帧存在瑕疵。
此处需要说明的是，上述第二插入模块92，第一检测模块94和第二确定模块96对应于实施例1中的步骤S302至步骤S306，上述模块与对应的步骤所实现的实例和应用场景相同，但不限于上述实施例1所公开的内容。需要说明的是，上述模块作为装置的一部分可以运行在实施例1提供的计算机终端10中。
根据本发明实施例，还提供了一种用于实施上述数据处理方法三的装置，图10是根据本发明实施例2的数据处理装置三的结构框图，如图10所示，该装置包括：第三插入模块102，第二检测模块104和播放模块106，下面对该装置进行说明。
第三插入模块102，用于在4K数字电视视频数据中的帧与帧间插入中间帧，并在中间帧与中间帧之间插入二次中间帧；第二检测模块104，连接至上述第三插入模块102，用于检测二次中间帧与视频数据中的参考帧之间的差异值是否超过预定阈值；播放模块106，连接至上述第二检测模块104，用于在第二检测模块的检测结果为否的情况下，播放插入了中间帧的4K数字电视视频数据。
此处需要说明的是，上述第三插入模块102，第二检测模块104和播放模块106对应于实施例1中的步骤S402至步骤S406，上述模块与对应的步骤所实现的实例和应用场景相同，但不限于上述实施例1所公开的内容。需要说明的是，上述模块作为装置的一部分可以运行在实施例1提供的计算机终端10中。
根据本发明实施例，还提供了一种用于实施上述数据处理方法四的装置，图11是根据本发明实施例2的数据处理装置四的结构框图，如图11所示，该装置包括：第四插入模块112，第三检测模块114和展示模块116，下面对该装置进行说明。
第四插入模块112，用于在直播视频数据中的帧与帧间插入中间帧，并在中间帧与中间帧之间插入二次中间帧；第三检测模块114，连接至上述第四插入模块112，用于检测二次中间帧与视频数据中的参考帧之间的差异值是否超过预定阈值；展示模块116，连接至上述第三检测模块114，用于在检测结果为否的情况下，展示插入了中间帧的直播视频数据。
此处需要说明的是，上述第四插入模块112，第三检测模块114和展示模块116对应于实施例1中的步骤S502至步骤S506，上述模块与对应的步骤所实现的实例和应用场景相同，但不限于上述实施例1所公开的内容。需要说明的是，上述模块作为装置的一部分可以运行在实施例1提供的计算机终端10中。
实施例3
本发明的实施例可以提供一种计算机终端，该计算机终端可以是计算机终端群中的任意一个计算机终端设备。可选地，在本实施例中，上述计算机终端也可以替换为移动终端等终端设备。
可选地，在本实施例中，上述计算机终端可以位于计算机网络的多个网络设备中的至少一个网络设备。
在本实施例中，上述计算机终端可以执行应用程序的漏洞检测方法中以下步骤的程序代码：获取视频数据，视频数据包括第一帧、第二帧和第三帧，视频数据包括参考帧；在第一帧和第二帧之间，插入第一中间帧；在第二帧和第三帧之间，插入第二中间帧；在第一中间帧和第二中间帧之间，插入二次中间帧；计算二次中间帧与参考帧之间的差异值；如果差异值满足预设条件，确定中间帧为目标数据，其中，中间帧包括：第一中间帧和/或第二中间帧。
可选地，图12是根据本发明实施例的一种计算机终端的结构框图。如图12所示，该计算机终端可以包括：一个或多个(图中仅示出一个)处理器122、存储器124等。
其中，存储器可用于存储软件程序以及模块，如本发明实施例中的数据处理方法和装置对应的程序指令/模块，处理器通过运行存储在存储器内的软件程序以及模块，从而执行各种功能应用以及数据处理，即实现上述的数据处理方法。存储器可包括高速随机存储器，还可以包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中，存储器可进一步包括相对于处理器远程设置的存储器，这些远程存储器可以通过网络连接至计算机终端。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
处理器可以通过传输装置调用存储器存储的信息及应用程序，以执行下述步骤：获取视频数据，视频数据包括第一帧、第二帧和第三帧，视频数据包括参考帧；在第一帧和第二帧之间，插入第一中间帧；在第二帧和第三帧之间，插入第二中间帧；在第一中间帧和第二中间帧之间，插入二次中间帧；计算二次中间帧与参考帧之间的差异值；如果差异值满足预设条件，确定中间帧为目标数据，其中，中间帧包括：第一中间帧和/或第二中间帧。
可选的，上述处理器还可以执行如下步骤的程序代码：参考帧包括第二帧。
可选的，上述处理器还可以执行如下步骤的程序代码：如果差异值满足预设条件，确定中间帧为目标数据，包括：如果差异值超过预定阈值，确定中间帧为瑕疵帧，其中，瑕疵帧为目标数据。
处理器可以通过传输装置调用存储器存储的信息及应用程序，以执行下述步骤：在视频数据中的帧与帧间插入中间帧，并在中间帧与中间帧之间插入二次中间帧；检测二次中间帧与视频数据中的参考帧之间的差异值是否超过预定阈值；在检测结果为是的情况下，确定中间帧存在瑕疵。
可选的，上述处理器还可以执行如下步骤的程序代码：在检测二次中间帧与视频数据中的参考帧之间的差异值是否超过预定阈值之后，还包括：在检测结果为否的情况下，确定中间帧不存在瑕疵；将不存在瑕疵的中间帧当作视频数据中的原帧进行插帧操作，并重复执行瑕疵检测操作。
可选的，上述处理器还可以执行如下步骤的程序代码：在视频数据中的帧与帧间插入中间帧包括：在视频数据中相邻的第一帧和第二帧之间插入第一插入帧，在相邻的第二帧与第三帧之间插入第二插入帧，其中，中间帧包括：第一插入帧和第二插入帧；在中间帧与中间帧之间插入二次中间帧包括：在第一插入帧与第二插入帧之间插入第三插入帧，二次中间帧包括：第三插入帧；检测二次中间帧与视频数据中的参考帧之间的差异值是否超过预定阈值包括：检测第三插入帧与第二帧之间的差异值是否超过预定阈值，其中，参考帧包括：第二帧；在检测结果为是的情况下，确定中间帧存在瑕疵包括：在检测到第三插入帧与第二帧之间的差异值超过预定阈值的情况下，确定第一插入帧和第二插入帧中存在瑕疵帧。
可选的，上述处理器还可以执行如下步骤的程序代码：在检测到第三插入帧与第二帧之间的差异值超过预定阈值的情况下，确定第一插入帧和第二插入帧中存在瑕疵帧包括：在视频数据中相邻的第零帧和第一帧之间插入第四插入帧，以及在第四插入帧和第一插入帧之间插入第五插入帧；检测第五插入帧与第一帧之间的差异值是否超过预定阈值；在检测结果为否的情况下，确定第二插入帧为瑕疵帧。
可选的，上述处理器还可以执行如下步骤的程序代码：在检测到第三插入帧与第二帧之间的差异值超过预定阈值的情况下，确定第一插入帧和第二插入帧中存在瑕疵帧包括：在视频数据中相邻的第三帧和第四帧之间插入第六插入帧，在第四帧和第五帧之间插入第七插入帧，在第六插入帧和第七插入帧之间插入第八插入帧；检测第八插入帧与第四帧之间的差异值是否超过预定阈值；在检测结果为否的情况下，确定第二插入帧为瑕疵帧。
可选的，上述处理器还可以执行如下步骤的程序代码：检测二次中间帧与视频数据中的参考帧之间的差异值是否超过预定阈值包括：确定用于检测的图像参数，其中，图像参数包括以下至少之一：PSNR、SSIM；比较二次中间帧的图像参数与参考帧的图像参数之间的差异值是否超过图像参数阈值，其中，预定阈值包括图像参数阈值。
可选的，上述处理器还可以执行如下步骤的程序代码：在确定中间帧存在瑕疵之后，还包括：确定存在瑕疵的中间帧的瑕疵量；检测瑕疵量是否超过预定瑕疵量；在检测结果为是的情况下，确定在中间帧对应的两原帧间出现转场。
可选的，上述处理器还可以执行如下步骤的程序代码：视频数据包括以下至少之一：电视视频数据，网络录播视频数据，直播视频数据，短视频数据。
处理器可以通过传输装置调用存储器存储的信息及应用程序，以执行下述步骤：在4K数字电视视频数据中的帧与帧间插入中间帧，并在中间帧与中间帧之间插入二次中间帧；检测二次中间帧与视频数据中的参考帧之间的差异值是否超过预定阈值；在检测结果为否的情况下，播放插入了中间帧的4K数字电视视频数据。
可选的，上述处理器还可以执行如下步骤的程序代码：在播放插入了中间帧的4K数字电视视频数据之前，还包括：在检测结果为否的情况下，确定中间帧不存在瑕疵；将不存在瑕疵的中间帧当作视频数据中的原帧进行插帧操作，重复执行瑕疵检测操作，并在检测结果为否的情况下，进入4K数字电视视频数据待播放状态。
处理器可以通过传输装置调用存储器存储的信息及应用程序，以执行下述步骤：在直播视频数据中的帧与帧间插入中间帧，并在中间帧与中间帧之间插入二次中间帧；检测二次中间帧与视频数据中的参考帧之间的差异值是否超过预定阈值；在检测结果为否的情况下，展示插入了中间帧的直播视频数据。
采用本发明实施例，采用在帧与帧间插入的中间帧间插入二次中间帧的方式，通过比较二次中间帧与视频数据中的参考帧(视频数据中的原帧或者已经确定为无瑕疵的帧)，达到了确定中间帧是否存在瑕疵的目的，从而实现了高效准确地检测插帧是否存在瑕疵的技术效果，进而解决了相关技术中如何实现准确高效地对插帧瑕疵进行检测的技术问题。
本领域普通技术人员可以理解，图12所示的结构仅为示意，计算机终端也可以是智能手机(如Android手机、iOS手机等)、平板电脑、掌声电脑以及移动互联网设备(MobileInternet Devices，MID)、PAD等终端设备。图12其并不对上述电子装置的结构造成限定。例如，计算机终端还可包括比图12中所示更多或者更少的组件(如网络接口、显示装置等)，或者具有与图12所示不同的配置。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令终端设备相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质可以包括：闪存盘、只读存储器(Read-Only Memory，ROM)、随机存取器(RandomAccess Memory，RAM)、磁盘或光盘等。
实施例4
本发明的实施例还提供了一种存储介质。可选地，在本实施例中，上述存储介质可以用于保存上述实施例1所提供的数据处理方法所执行的程序代码。
可选地，在本实施例中，上述存储介质可以位于计算机网络中计算机终端群中的任意一个计算机终端中，或者位于移动终端群中的任意一个移动终端中。
可选地，在本实施例中，存储介质被设置为存储用于执行以下步骤的程序代码：获取视频数据，视频数据包括第一帧、第二帧和第三帧，视频数据包括参考帧；在第一帧和第二帧之间，插入第一中间帧；在第二帧和第三帧之间，插入第二中间帧；在第一中间帧和第二中间帧之间，插入二次中间帧；计算二次中间帧与参考帧之间的差异值；如果差异值满足预设条件，确定中间帧为目标数据，其中，中间帧包括：第一中间帧和/或第二中间帧。
可选地，在本实施例中，存储介质还被设置为存储用于执行以下步骤的程序代码：参考帧包括第二帧。
可选地，在本实施例中，存储介质还被设置为存储用于执行以下步骤的程序代码：如果差异值满足预设条件，确定中间帧为目标数据，包括：如果差异值超过预定阈值，确定中间帧为瑕疵帧，其中，瑕疵帧为目标数据。
可选地，在本实施例中，存储介质被设置为存储用于执行以下步骤的程序代码：在视频数据中的帧与帧间插入中间帧，并在中间帧与中间帧之间插入二次中间帧；检测二次中间帧与视频数据中的参考帧之间的差异值是否超过预定阈值；在检测结果为是的情况下，确定中间帧存在瑕疵。
可选地，在本实施例中，存储介质还被设置为存储用于执行以下步骤的程序代码：在检测二次中间帧与视频数据中的参考帧之间的差异值是否超过预定阈值之后，还包括：在检测结果为否的情况下，确定中间帧不存在瑕疵；将不存在瑕疵的中间帧当作视频数据中的原帧进行插帧操作，并重复执行瑕疵检测操作。
可选地，在本实施例中，存储介质还被设置为存储用于执行以下步骤的程序代码：在视频数据中的帧与帧间插入中间帧包括：在视频数据中相邻的第一帧和第二帧之间插入第一插入帧，在相邻的第二帧与第三帧之间插入第二插入帧，其中，中间帧包括：第一插入帧和第二插入帧；在中间帧与中间帧之间插入二次中间帧包括：在第一插入帧与第二插入帧之间插入第三插入帧，二次中间帧包括：第三插入帧；检测二次中间帧与视频数据中的参考帧之间的差异值是否超过预定阈值包括：检测第三插入帧与第二帧之间的差异值是否超过预定阈值，其中，参考帧包括：第二帧；在检测结果为是的情况下，确定中间帧存在瑕疵包括：在检测到第三插入帧与第二帧之间的差异值超过预定阈值的情况下，确定第一插入帧和第二插入帧中存在瑕疵帧。
可选地，在本实施例中，存储介质还被设置为存储用于执行以下步骤的程序代码：在检测到第三插入帧与第二帧之间的差异值超过预定阈值的情况下，确定第一插入帧和第二插入帧中存在瑕疵帧包括：在视频数据中相邻的第零帧和第一帧之间插入第四插入帧，以及在第四插入帧和第一插入帧之间插入第五插入帧；检测第五插入帧与第一帧之间的差异值是否超过预定阈值；在检测结果为否的情况下，确定第二插入帧为瑕疵帧。
可选地，在本实施例中，存储介质还被设置为存储用于执行以下步骤的程序代码：在检测到第三插入帧与第二帧之间的差异值超过预定阈值的情况下，确定第一插入帧和第二插入帧中存在瑕疵帧包括：在视频数据中相邻的第三帧和第四帧之间插入第六插入帧，在第四帧和第五帧之间插入第七插入帧，在第六插入帧和第七插入帧之间插入第八插入帧；检测第八插入帧与第四帧之间的差异值是否超过预定阈值；在检测结果为否的情况下，确定第二插入帧为瑕疵帧。
可选地，在本实施例中，存储介质还被设置为存储用于执行以下步骤的程序代码：检测二次中间帧与视频数据中的参考帧之间的差异值是否超过预定阈值包括：确定用于检测的图像参数，其中，图像参数包括以下至少之一：PSNR、SSIM；比较二次中间帧的图像参数与参考帧的图像参数之间的差异值是否超过图像参数阈值，其中，预定阈值包括图像参数阈值。
可选地，在本实施例中，存储介质还被设置为存储用于执行以下步骤的程序代码：在确定中间帧存在瑕疵之后，还包括：确定存在瑕疵的中间帧的瑕疵量；检测瑕疵量是否超过预定瑕疵量；在检测结果为是的情况下，确定在中间帧对应的两原帧间出现转场。
可选地，在本实施例中，存储介质还被设置为存储用于执行以下步骤的程序代码：视频数据包括以下至少之一：电视视频数据，网络录播视频数据，直播视频数据，短视频数据。
可选地，在本实施例中，存储介质被设置为存储用于执行以下步骤的程序代码：在4K数字电视视频数据中的帧与帧间插入中间帧，并在中间帧与中间帧之间插入二次中间帧；检测二次中间帧与视频数据中的参考帧之间的差异值是否超过预定阈值；在检测结果为否的情况下，播放插入了中间帧的4K数字电视视频数据。
可选地，在本实施例中，存储介质还被设置为存储用于执行以下步骤的程序代码：在播放插入了中间帧的4K数字电视视频数据之前，还包括：在检测结果为否的情况下，确定中间帧不存在瑕疵；将不存在瑕疵的中间帧当作视频数据中的原帧进行插帧操作，重复执行瑕疵检测操作，并在检测结果为否的情况下，进入4K数字电视视频数据待播放状态。
可选地，在本实施例中，存储介质被设置为存储用于执行以下步骤的程序代码：在直播视频数据中的帧与帧间插入中间帧，并在中间帧与中间帧之间插入二次中间帧；检测二次中间帧与视频数据中的参考帧之间的差异值是否超过预定阈值；在检测结果为否的情况下，展示插入了中间帧的直播视频数据。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
在本发明的上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中，应该理解到，所揭露的技术内容，可通过其它的方式实现。其中，以上所描述的装置实施例仅仅是示意性的，例如所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，单元或模块的间接耦合或通信连接，可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。
Claims (20)
1.一种数据处理方法，包括：
获取视频数据，所述视频数据包括第一帧、第二帧和第三帧，所述视频数据包括参考帧；
在所述第一帧和所述第二帧之间，插入第一中间帧；
在所述第二帧和所述第三帧之间，插入第二中间帧；
在所述第一中间帧和所述第二中间帧之间，插入二次中间帧；
计算所述二次中间帧与所述参考帧之间的差异值；
如果所述差异值满足预设条件，确定中间帧为目标数据，其中，所述中间帧包括：所述第一中间帧和/或所述第二中间帧。
2.根据权利要求1所述的方法，其特征在于，所述参考帧包括所述第二帧。
3.根据权利要求1所述的方法，其特征在于，如果所述差异值满足预设条件，确定中间帧为目标数据，包括：
如果所述差异值超过预定阈值，确定所述中间帧为瑕疵帧，其中，所述瑕疵帧为所述目标数据。
4.一种数据处理方法，其特征在于，包括：
在视频数据中的帧与帧间插入中间帧，并在所述中间帧与中间帧之间插入二次中间帧；
检测所述二次中间帧与所述视频数据中的参考帧之间的差异值是否超过预定阈值；
在检测结果为是的情况下，确定所述中间帧存在瑕疵。
5.根据权利要求4所述的方法，其特征在于，在检测所述二次中间帧与所述视频数据中的参考帧之间的差异值是否超过预定阈值之后，还包括：
在检测结果为否的情况下，确定所述中间帧不存在瑕疵；
将不存在瑕疵的中间帧当作所述视频数据中的原帧进行插帧操作，并重复执行瑕疵检测操作。
6.根据权利要求4所述的方法，其特征在于，
在视频数据中的帧与帧间插入中间帧包括：在所述视频数据中相邻的第一帧和第二帧之间插入第一插入帧，在相邻的第二帧与第三帧之间插入第二插入帧，其中，所述中间帧包括：所述第一插入帧和所述第二插入帧；
在所述中间帧与中间帧之间插入二次中间帧包括：在所述第一插入帧与所述第二插入帧之间插入第三插入帧，所述二次中间帧包括：第三插入帧；
检测所述二次中间帧与所述视频数据中的参考帧之间的差异值是否超过预定阈值包括：检测所述第三插入帧与所述第二帧之间的差异值是否超过预定阈值，其中，所述参考帧包括：所述第二帧；
在检测结果为是的情况下，确定所述中间帧存在瑕疵包括：在检测到所述第三插入帧与所述第二帧之间的差异值超过所述预定阈值的情况下，确定所述第一插入帧和所述第二插入帧中存在瑕疵帧。
7.根据权利要求6所述的方法，其特征在于，在检测到所述第三插入帧与所述第二帧之间的差异值超过所述预定阈值的情况下，确定所述第一插入帧和所述第二插入帧中存在瑕疵帧包括：
在所述视频数据中相邻的第零帧和所述第一帧之间插入第四插入帧，以及在所述第四插入帧和所述第一插入帧之间插入第五插入帧；
检测所述第五插入帧与所述第一帧之间的差异值是否超过所述预定阈值；
在检测结果为否的情况下，确定所述第二插入帧为所述瑕疵帧。
8.根据权利要求6所述的方法，其特征在于，在检测到所述第三插入帧与所述第二帧之间的差异值超过所述预定阈值的情况下，确定所述第一插入帧和所述第二插入帧中存在瑕疵帧包括：
在所述视频数据中相邻的第三帧和第四帧之间插入第六插入帧，在所述第四帧和第五帧之间插入第七插入帧，在所述第六插入帧和所述第七插入帧之间插入第八插入帧；
检测所述第八插入帧与所述第四帧之间的差异值是否超过所述预定阈值；
在检测结果为否的情况下，确定所述第二插入帧为所述瑕疵帧。
9.根据权利要求4所述的方法，其特征在于，检测所述二次中间帧与所述视频数据中的参考帧之间的差异值是否超过预定阈值包括：
确定用于检测的图像参数，其中，所述图像参数包括以下至少之一：PSNR、SSIM；
比较所述二次中间帧的图像参数与所述参考帧的图像参数之间的差异值是否超过图像参数阈值，其中，所述预定阈值包括所述图像参数阈值。
10.根据权利要求4至9中任一项所述的方法，其特征在于，在确定所述中间帧存在瑕疵之后，还包括：
确定存在瑕疵的所述中间帧的瑕疵量；
检测所述瑕疵量是否超过预定瑕疵量；
在检测结果为是的情况下，确定在所述中间帧对应的两原帧间出现转场。
11.根据权利要求10所述的方法，其特征在于，所述视频数据包括以下至少之一：电视视频数据，网络录播视频数据，直播视频数据，短视频数据。
12.一种数据处理方法，其特征在于，包括：
在4K数字电视视频数据中的帧与帧间插入中间帧，并在所述中间帧与中间帧之间插入二次中间帧；
检测所述二次中间帧与所述视频数据中的参考帧之间的差异值是否超过预定阈值；
在检测结果为否的情况下，播放插入了中间帧的4K数字电视视频数据。
13.根据权利要求12所述的方法，其特征在于，在播放插入了中间帧的4K数字电视视频数据之前，还包括：
在检测结果为否的情况下，确定所述中间帧不存在瑕疵；
将不存在瑕疵的中间帧当作所述视频数据中的原帧进行插帧操作，重复执行瑕疵检测操作，并在检测结果为否的情况下，进入4K数字电视视频数据待播放状态。
14.一种数据处理方法，其特征在于，包括：
在直播视频数据中的帧与帧间插入中间帧，并在所述中间帧与中间帧之间插入二次中间帧；
检测所述二次中间帧与所述视频数据中的参考帧之间的差异值是否超过预定阈值；
在检测结果为否的情况下，展示插入了中间帧的直播视频数据。
15.一种数据处理装置，包括：
获取模块，用于获取视频数据，所述视频数据包括第一帧、第二帧和第三帧，所述视频数据包括参考帧；
第一插入模块，用于在所述第一帧和所述第二帧之间，插入第一中间帧；在所述第二帧和所述第三帧之间，插入第二中间帧；在所述第一中间帧和所述第二中间帧之间，插入二次中间帧；
计算模块，用于计算所述二次中间帧与所述参考帧之间的差异值；
第一确定模块，用于如果所述差异值满足预设条件，确定中间帧为目标数据，其中，所述中间帧包括：所述第一中间帧和/或所述第二中间帧。
16.一种数据处理装置，其特征在于，包括：
第二插入模块，用于在视频数据中的帧与帧间插入中间帧，并在所述中间帧与中间帧之间插入二次中间帧；
第一检测模块，用于检测所述二次中间帧与所述视频数据中的参考帧之间的差异值是否超过预定阈值；
第二确定模块，用于在第一检测模块的检测结果为是的情况下，确定所述中间帧存在瑕疵。
17.一种数据处理装置，其特征在于，包括：
第三插入模块，用于在4K数字电视视频数据中的帧与帧间插入中间帧，并在所述中间帧与中间帧之间插入二次中间帧；
第二检测模块，用于检测所述二次中间帧与所述视频数据中的参考帧之间的差异值是否超过预定阈值；
播放模块，用于在第二检测模块的检测结果为否的情况下，播放插入了中间帧的4K数字电视视频数据。
18.一种数据处理装置，其特征在于，包括：
第四插入模块，用于在直播视频数据中的帧与帧间插入中间帧，并在所述中间帧与中间帧之间插入二次中间帧；
第三检测模块，用于检测所述二次中间帧与所述视频数据中的参考帧之间的差异值是否超过预定阈值；
展示模块，用于在检测结果为否的情况下，展示插入了中间帧的直播视频数据。
19.一种存储介质，其特征在于，所述存储介质包括存储的程序，其中，在所述程序运行时控制所述存储介质所在设备执行权利要求1至14中任意一项所述的数据处理方法。
20.一种计算机设备，其特征在于，包括：存储器和处理器，
所述存储器存储有计算机程序；
所述处理器，用于执行所述存储器中存储的计算机程序，所述计算机程序运行时使得所述处理器执行权利要求1至14中任意一项所述的数据处理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011086021.1A CN114363700A (zh) | 2020-10-12 | 2020-10-12 | 数据处理方法、装置、存储介质及计算机设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011086021.1A CN114363700A (zh) | 2020-10-12 | 2020-10-12 | 数据处理方法、装置、存储介质及计算机设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN114363700A true CN114363700A (zh) | 2022-04-15 |
Family
ID=81089850
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011086021.1A Pending CN114363700A (zh) | 2020-10-12 | 2020-10-12 | 数据处理方法、装置、存储介质及计算机设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114363700A (zh) |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008311946A (ja) * | 2007-06-14 | 2008-12-25 | Panasonic Corp | 多地点映像監視装置 |
| CN105872556A (zh) * | 2016-04-11 | 2016-08-17 | 华为技术有限公司 | 视频编码方法和装置 |
| CN110996171A (zh) * | 2019-12-12 | 2020-04-10 | 北京金山云网络技术有限公司 | 视频类任务的训练数据生成方法、装置及服务器 |
| CN111277779A (zh) * | 2020-03-05 | 2020-06-12 | Oppo广东移动通信有限公司 | 一种视频处理方法及相关装置 |
| CN111277895A (zh) * | 2018-12-05 | 2020-06-12 | 阿里巴巴集团控股有限公司 | 一种视频插帧方法和装置 |
| CN111526370A (zh) * | 2020-04-17 | 2020-08-11 | Oppo广东移动通信有限公司 | 视频编码、解码方法及装置和电子设备 |
| US10769442B1 (en) * | 2017-09-11 | 2020-09-08 | Amazon Technologies, Inc. | Scene change detection in image data |
-
2020
- 2020-10-12 CN CN202011086021.1A patent/CN114363700A/zh active Pending
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008311946A (ja) * | 2007-06-14 | 2008-12-25 | Panasonic Corp | 多地点映像監視装置 |
| CN105872556A (zh) * | 2016-04-11 | 2016-08-17 | 华为技术有限公司 | 视频编码方法和装置 |
| WO2017177675A1 (zh) * | 2016-04-11 | 2017-10-19 | 华为技术有限公司 | 视频编码方法和装置 |
| US10769442B1 (en) * | 2017-09-11 | 2020-09-08 | Amazon Technologies, Inc. | Scene change detection in image data |
| CN111277895A (zh) * | 2018-12-05 | 2020-06-12 | 阿里巴巴集团控股有限公司 | 一种视频插帧方法和装置 |
| CN110996171A (zh) * | 2019-12-12 | 2020-04-10 | 北京金山云网络技术有限公司 | 视频类任务的训练数据生成方法、装置及服务器 |
| CN111277779A (zh) * | 2020-03-05 | 2020-06-12 | Oppo广东移动通信有限公司 | 一种视频处理方法及相关装置 |
| CN111526370A (zh) * | 2020-04-17 | 2020-08-11 | Oppo广东移动通信有限公司 | 视频编码、解码方法及装置和电子设备 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP2384584B1 (en) | Coding of depth maps | |
| CN107509107B (zh) | 视频播放故障的检测方法、装置及设备、可读介质 | |
| CN102497489B (zh) | 图像压缩方法、图像压缩装置和移动终端 | |
| WO2022257759A1 (zh) | 一种图像带状伪影去除方法、装置、设备和介质 | |
| US20160100161A1 (en) | Decoder, encoder, decoding method, encoding method, and codec system | |
| CN112788329A (zh) | 视频静帧检测方法、装置、电视及存储介质 | |
| CN112165621A (zh) | 场景切换帧的检测方法及装置、存储介质、电子设备 | |
| CN110120039B (zh) | 一种花屏检测方法、检测装置、电子设备及可读存储介质 | |
| CN115396705A (zh) | 投屏操作验证方法、平台及系统 | |
| CN112073718B (zh) | 一种电视机花屏检测方法、装置、计算机设备及储存介质 | |
| CN111160340B (zh) | 一种运动目标检测方法、装置、存储介质及终端设备 | |
| US20120224749A1 (en) | Block matching method | |
| CN110430424B (zh) | Fov的测试方法、装置、存储介质及电子设备 | |
| CN114363700A (zh) | 数据处理方法、装置、存储介质及计算机设备 | |
| CN108307191B (zh) | 图像数据的对齐方法及装置 | |
| CN104219529B (zh) | 图像缩放方法、系统及装置 | |
| CN110677692B (zh) | 视频解码方法及装置、视频编码方法及装置 | |
| CN112770080B (zh) | 一种抄表方法、抄表装置及电子设备 | |
| CN114827754B (zh) | 视频首帧时间检测方法及装置 | |
| CN105554587A (zh) | 一种显示控制方法、装置及显示装置 | |
| CN113628121A (zh) | 数据处理、训练多媒体数据的方法和装置 | |
| CN112118439B (zh) | 视频品质检测方法与影像处理电路 | |
| CN112672159B (zh) | 视频质量的比较方法及装置、存储介质、电子设备 | |
| CN107105155B (zh) | 一种基于鱼眼摄像头录制的全景视频的自动标定方法 | |
| CN114821381A (zh) | 视频插帧方法和装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |