CN111476803B - 视频处理方法及相关设备 - Google Patents
视频处理方法及相关设备 Download PDFInfo
- Publication number
- CN111476803B CN111476803B CN202010292746.XA CN202010292746A CN111476803B CN 111476803 B CN111476803 B CN 111476803B CN 202010292746 A CN202010292746 A CN 202010292746A CN 111476803 B CN111476803 B CN 111476803B
- Authority
- CN
- China
- Prior art keywords
- image block
- field
- image
- homogeneous
- difference value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明实施例公开一种视频处理方法及相关设备，本发明实施例中，根据预设尺寸对隔行视频流的每帧图像进行分割，得到多个图像块；再针对多个图像块中至少一个图像块中每个图像块进行如下处理：确定当前处理的图像块是否包含单场数据，以及单场数据的存在场；存在场为图像块的所属场时，以图像块为参考，进行空域预测得到图像块在同一时刻的非同类场图像块；存在场为图像块的非同类场时，以图像块的一相邻时刻图像块为参考，进行空域预测得到图像块在同一时刻的非同类场图像块，相邻时刻图像块为时域上图像块的前一时刻图像块或后一时刻图像块；可以实现对存在单场数据的图像块进行去交错处理，并且可以确保去交错后不丢失单场数据的信息。
Description
技术领域
本发明涉及视频技术领域，尤其涉及一种视频处理方法及相关设备。
背景技术
在带宽或者设备处理速度限制下，广播电视系统采用隔行扫描方式减少传送的数据量。隔行扫描时，每次只扫描一帧中的奇数行或偶数行(以“行”为单位，将每帧图像进行“交错”排列，可将每帧图像分为两场，一个由奇数行构成，为奇场，而另一个由偶数行构成，为偶场)，从而得到时域连续的奇/偶场交替的隔行视频流，其在传输过程中可有效节省带宽，但由于隔行视频流只具有一半有效信息，在显示端显示时会产生严重的闪烁现象，称之为隔行效应。为了降低隔行效应的影响，需要在显示前把隔行视频流转换为逐行视频流，这一处理过程为去交错，去交错是根据已知场信息，重建同一时刻的非同类场(把奇场和奇场、偶场和偶场称为同类场(Same Kind of Field,SKF)，把奇场和偶场称为非同类场(Different Kind of Field,DKF))，然后把两场数据合成完整的一帧送往显示端。
现有技术中，如图1a、图1b、图1c所示，图1a、图1b为DVD测试片源，图1a为奇场数据，图1b为其时域相邻的偶场数据。从该DVD测试片源中可以看出，字母“O”只存在于奇场，“K”只存在于偶场，奇场和偶场数据只有一半的有效信息，字母“O”和“K”由于均只在单个场出现，称之为单场数据。图1c是采用yadif(Yet Another DeInterlacing Filter)算法去交错的效果，可以看出，由于yadif算法默认以奇场数据为参考，对其偶场数据进行预测和插值，对图1a进行去交错处理后，对于只存在于偶场的“K”，在经过算法处理后几乎消失。可见，现有去交错方法对于只存在于单场的数据，经过去交错后可能导致单场数据的信息丢失。
发明内容
本发明实施例提供了一种视频处理方法及相关设备，可以实现去交错后不丢失单场数据。
第一方面，本发明实施例提供了一种视频处理方法，包括：
根据预设尺寸对隔行视频流的每帧图像进行分割，得到多个图像块；
针对所述多个图像块中至少一个图像块中每个图像块进行如下处理：
确定当前处理的图像块是否包含单场数据，以及所述单场数据的存在场；
所述存在场为所述图像块的所属场时，以所述图像块为参考，进行空域预测得到所述图像块在同一时刻的非同类场图像块；
所述存在场为所述图像块的非同类场时，以所述图像块的一相邻时刻图像块为参考，进行空域预测得到所述图像块在同一时刻的非同类场图像块，所述相邻时刻图像块为时域上所述图像块的前一时刻图像块或后一时刻图像块。
可选地，确定所述当前处理的图像块包含单场数据后，所述方法还包括：
复制所述图像块的一相邻时刻图像块，得到所述图像块在同一时刻的非同类场图像块。
可选地，确定所述当前处理的图像块不包含单场数据后，所述方法还包括：
以所述图像块和所述图像块的一相邻时刻图像块为参考，进行空域预测得到所述图像块在同一时刻的非同类场图像块。
可选地，确定当前处理的图像块是否包含单场数据，包括：
确定所述图像块的非同类场差异值、第一同类场差异值和第二同类场差异值，所述非同类场差异值为所述图像块和所述图像块的一相邻时刻图像块的平均像素差值，所述第一同类场差异值为所述图像块的相邻时刻图像块的平均像素差值，所述第二同类场差异值为所述图像块和所述图像块的一相邻同类图像块的平均像素差值，所述相邻同类图像块为时域上所述图像块的前两时刻图像块或后两时刻图像块；
根据所述非同类场差异值、所述第一同类场差异值、所述第二同类场差异值、第一差异阈值和第二差异阈值，确定所述图像块是否包含单场数据，
所述非同类场差异值大于所述第一差异阈值，且所述第一同类场差异值、所述第二同类场差异值均小于第二差异阈值时，所述图像块包含单场数据；反之，所述图像块不包含单场数据。
可选地，确定所述单场数据的存在场，包括：
确定所述图像块的第一像素均值、第二像素均值和垂直像素差总和，所述第一像素均值为所述图像块和所述图像块的一相邻时刻图像块的像素均值，所述第二像素均值为所述图像块的像素均值，所述垂直像素差总和为所述图像块在垂直方向上相邻像素点的像素差值的和；
根据所述第一像素均值、所述第二像素均值和垂直像素差总和确定单场数据的存在场，所述第二像素均值小于所述第一像素均值，且所述垂直像素差总和大于零时；或者，所述第二像素均值大于或等于所述第一像素均值，且所述垂直像素差总和小于零时，所述存在场为所述图像块的非同类场；反之，所述存在场为所述图像块的所属场。
第二方面，本发明实施例提供了一种视频处理装置，包括：
分割模块，用于根据预设尺寸对隔行视频流的每帧图像进行分割，得到多个图像块；
处理模块，用于针对所述多个图像块中至少一个图像块中每个图像块进行如下处理：
确定当前处理的图像块是否包含单场数据，以及所述单场数据的存在场；
所述存在场为所述图像块的所属场时，以所述图像块为参考，进行空域预测得到所述图像块在同一时刻的非同类场图像块；
所述存在场为所述图像块的非同类场时，以所述图像块的一相邻时刻图像块为参考，进行空域预测得到所述图像块在同一时刻的非同类场图像块，所述相邻时刻图像块为时域上所述图像块的前一时刻图像块或后一时刻图像块。
可选地，所述处理模块，还用于所述当前处理的图像块包含单场数据时，复制所述图像块的一相邻时刻图像块，得到所述图像块在同一时刻的非同类场图像块。
可选地，所述处理模块，还用于所述当前处理的图像块不包含单场数据时，以所述图像块和所述图像块的一相邻时刻图像块为参考，进行空域预测得到所述图像块在同一时刻的非同类场图像块。
第三方面，本发明实施例提供了一种视频处理设备，包括：处理器和存储器；
所述处理器和存储器相连，其中，所述存储器用于存储程序代码，所述处理器用于调用所述程序代码，以执行如第一方面所述的视频处理方法。
第四方面，本发明实施例提供了一种计算机存储介质，所述计算机存储介质存储有计算机程序，所述计算机程序包括程序指令，所述程序指令当被处理器执行时，执行如第一方面所述的视频处理方法。
本发明实施例中，根据预设尺寸对隔行视频流的每帧图像进行分割，得到多个图像块；再针对多个图像块中至少一个图像块中每个图像块进行如下处理：确定当前处理的图像块是否包含单场数据，以及单场数据的存在场；存在场为图像块的所属场时，以图像块为参考，进行空域预测得到图像块在同一时刻的非同类场图像块；存在场为图像块的非同类场时，以图像块的一相邻时刻图像块为参考，进行空域预测得到图像块在同一时刻的非同类场图像块，相邻时刻图像块为时域上图像块的前一时刻图像块或后一时刻图像块；可以实现对存在单场数据的图像块进行去交错处理，并且可以确保去交错后不丢失单场数据的信息，有效提高视频质量，保障视觉效果。
附图说明
为了更清楚地说明本发明实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1a、图1b、图1c是现有技术中利用yadif算法去交错的图像示意图；
图2是本发明实施例提供的一种视频处理方法的流程示意图；
图3本发明实施例提供的一种视频处理装置的结构示意图；
图4是本发明实施例提供的一种视频处理设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述。
应当理解，本申请的说明书和权利要求书及附图中的术语“第一”、“第二”等是用于区别不同对象，而不是用于描述特定顺序。此外，术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
在本发明中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本发明的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本发明所描述的实施例可以与其它实施例相结合。
本申请中，隔行视频流是指对每一帧图像进行隔行扫描后得到的视频数据，每次只扫描图像的奇数行像素或偶数行像素，可以是以先扫描奇数行，再扫描偶数行这样的扫描顺序，例如，对第一帧图像扫描奇数行(得到奇场)，对第二帧图像扫描偶数行(得到偶场)，对第三帧图像扫描奇数行，对第四帧图像扫描偶数行，如此反复进行扫描。同样地，也可以是以先扫描偶数行，再扫描奇数行的扫描顺序对图像进行隔行扫描。每次只扫描一半的像素，可见，隔行视频流只具有一半的有效信息。而逐行视频流是对每一帧图像进行逐行扫描后得到的视频数据，逐行扫描也称为非交错扫描，通过扫描每行像素，在电子显示屏上“绘制”视频图像，每一帧图像由电子束顺序地一行接着一行连续扫描而成。
单场数据是指视频流中只存在于单个场(奇场或偶场)的数据，数据形式包括文字或图形，例如水印、logo等。例如图1a中的“O”(只存在奇场)和图1b中的“K”(只存在偶场)。
单场数据的存在场，包括图像块的所属场和图像块的非同类场两种，假设当前的图像块为奇场，则图像块的所属场为奇场，图像块的非同类场为偶场；假设当前的图像块为偶场，则图像块的所属场为偶场，图像块的非同类场为奇场。
非同类场图像块，是指同一时刻，对应当前的图像块的非同类场图像。由于隔行扫描视频流的每一个图像块只具有一半的有效消息，通过去交错处理得到另一半的有效信息，携带这另一半的有效信息的图像即为该图像块的非同类场图像块。例如，假设当前的图像块为奇场，则去交错得到的非同类场图像块为偶场。
现有技术中，将隔行扫描得到隔行视频流进行去交错处理得到逐行视频流时，处理后容易丢失单场数据，造成视频信息不全，视频质量无法保证。因此，本申请提出一种视频处理方法，通过把隔行视频流分割成固定大小的图像块，以图像块为单位进行处理；对图像块进行单场数据检测以确定是否存在单场数据，在确定图像块存在单场数据后，以存在单场数据的场作为参考场，以进行去交错处理，得到每一个图像块对应的非同类场图像块；确保单场数据不丢失，保证视频质量和视觉效果。
特别地，隔行视频流包括多个通道的数据时，例如Y/U/V通道或R/G/B通道，需要利用本实施例的方法对隔行视频流的各个通道进行处理，以将隔行视频流转换成逐行视频流。
请参见图2，是本发明实施例提供的一种视频处理方法的流程示意图；视频处理方法，包括：
201、根据预设尺寸对隔行视频流的每帧图像进行分割，得到多个图像块；
具体地，预设尺寸可以根据需要进行设置，尺寸包括图像块的宽度和高度。另外，隔行视频流为通过隔行扫描得到的奇场、偶场交替的视频数据。根据设置好的尺寸将隔行视频流的每帧图像进行分割，一帧图像可以划分成多个相同尺寸的图像块。对隔行视频流进行分割处理后可以得到多个图像块，
202、针对多个图像块中至少一个图像块中每个图像块进行如下处理：
确定当前处理的图像块是否包含单场数据，以及单场数据的存在场；
存在场为图像块的所属场时，以图像块为参考，进行空域预测得到图像块在同一时刻的非同类场图像块；
存在场为图像块的非同类场时，以图像块的一相邻时刻图像块为参考，进行空域预测得到图像块在同一时刻的非同类场图像块，相邻时刻图像块为时域上图像块的前一时刻图像块或后一时刻图像块。
具体地，本实施例中，对多个图像块中的每个图像块都进行相同的处理。首先，对每一个图像块都进行如下判断：判断当前处理的图像块是否包含单场数据，以及在图像块包含单场数据时，确定单场数据的存在场。其中单场数据的存在场为两种，第一种为图像块的所属场，第二种为图像块的非同类场。例如，当前图像块为奇场的图像块，则图像块的所属场为奇场，即单场数据存在于当前图像块中；而图像块的非同类场为偶场，即单场数据存在于当前数据库的非同类场图像块中。
由于隔行视频流只有视频一半的有效信息，因此，需要通过去交错处理得到另一半的信息，即根据奇场得到同一时刻对应的偶场，或者，根据偶场得到同一时刻对应的奇场。单场数据存在于当前图像块时，对图像块进行去交错时，以当前图像块为参考进行空域预测，得到当前图像块在同一时刻的非同类场图像块。例如，假设当前图像块为奇场的图像块，则以该图像块为参考进行空域预测，即可以得到该图像块对应的偶场图像块，即同一时刻的非同类场图像块。
单场数据存在于图像块的非同类场时，可以图像块的一个相邻时刻图像块为参考进行空域预测，以得到图像块在同一时刻的非同类场图像块。其中，相邻时刻图像块为时域上图像块的前一时刻图像块或后一时刻图像块，例如，隔行扫描得到的隔行视频流分别为奇场1、偶场1、奇场2、偶场2、奇场3的视频数据，假设当前图像块为奇场2对应的图像块，判断单场数据存在于奇场2的非同类场，即偶场时，可以以相邻的偶场1或偶场2的图像块为参考，进行空域预测，得到奇场2的图像块的非同类场图像块。
可见，利用图2的方法，可以实现对存在单场数据的图像块进行去交错处理，并且由于是以单场数据的存在场的图像块为参考进行空域预测，可以确保去交错后不丢失单场数据的信息，有效提高视频质量，保障视觉效果。
在一个可能的实施例中，步骤202中，确定当前处理的图像块是否包含单场数据，包括：
2021、确定图像块的非同类场差异值、第一同类场差异值和第二同类场差异值，非同类场差异值为图像块和图像块的一相邻时刻图像块的平均像素差值，第一同类场差异值为图像块的相邻时刻图像块的平均像素差值，第二同类场差异值为图像块和图像块的一相邻同类图像块的平均像素差值，相邻同类图像块为时域上图像块的前两时刻图像块或后两时刻图像块；
具体地，非同类场差异值可以是图像块和时域上在图像块的前一时刻的图像块的平均像素差值，也可以是图像块和时域上图像块的后一时刻图像块的平均像素差值，两种情况的计算方式相同，以非同类场差异值可以是图像块和时域上在图像块的前一时刻的图像块的平均像素差值为例，此时的计算公式为公式(1)。
其中，w为图像块的宽度；h为图像块的高度；m为图像块的横坐标；n为图像块的纵坐标；t表示当前图像块所处时刻，p为像素点的像素。
由于隔行视频流中，属于同类场的像素块的间距都为2个时刻，因此，同类场差异值的计算公式为公式(2)。
对于图像块的第一同类场差异值，图像块的所处时刻为t，则图像块的相邻时刻图像块为t-1和t+1时刻的图像块，第一同类场差异值为根据t-1和t+1时刻的图像块，以及公式(2)计算得到的平均像素差值。
而对于图像块的第二同类场差异值，图像块的所处时刻为t，则图像块的相邻同类图像块为t-2和t+2时刻的图像块，第二同类场差异值为根据t-2和t时刻的图像块，以及公式(2)计算得到的平均像素差值，或者是根据t和t+2时刻的图像块，以及公式(2)计算得到的平均像素差值。
2022、根据非同类场差异值、第一同类场差异值、第二同类场差异值、第一差异阈值和第二差异阈值，确定图像块是否包含单场数据，非同类场差异值大于第一差异阈值，且第一同类场差异值、第二同类场差异值均小于第二差异阈值时，图像块包含单场数据；反之，图像块不包含单场数据。
具体地，第一差异阈值和第二差异阈值的具体数值可以根据需要进行设置，可以根据实验数据进行设定，例如利用图1a和图1b的DVD测试片源进行图像块划分后，分别计算每个存在单场数据的图像块的非同类场差异值、第一同类场差异值和第二同类场差异值，由于DVD测试片源在哪一个图像块存在单场数据是已知的，因此，通过观察存在单场数据的图像块对应的非同类场差异值、第一同类场差异值和第二同类场差异值，可以确定用于判断图像块是否包含单场数据的第一差异阈值和第二差异阈值的具体大小。
当一个图像块的非同类场差异值大于第一差异阈值，且图像块的第一同类场差异值、第二同类场差异值均小于第二差异阈值时，可以判定该图像块包含单场数据；反之，该图像块不包含单场数据。
利用步骤2021和步骤2022可以快速判断图像块是否包含单场数据。
在一个可能的实施例中，步骤202中，确定单场数据的存在场，包括：
2023、确定图像块的第一像素均值、第二像素均值和垂直像素差总和，第一像素均值为图像块和图像块的一相邻时刻图像块的像素均值，第二像素均值为图像块的像素均值，垂直像素差总和为图像块在垂直方向上相邻像素点的像素差值的和；
具体地，因为同类场间具有强相关性，可以用图像块的一个相邻时刻图像块的像素值表征该图像块缺失的那部分像素值，以此实现图像块的第一像素均值的计算。例如，图像块为奇场的图像块，此时图像块只具有奇数行的像素点，而图像块缺失的是偶数行的像素点，由于同类场间的强相关性，本实施例中，用时域上图像块的前一时刻或后一时刻的图像块的像素值来表征缺失的偶数行的像素值，此时可以用“完整”的图像块的像素点的像素值来计算第一像素均值。以用时域上图像块的前一时刻的图像块的像素值表征图像块缺失的像素值为例，此时第一像素均值的计算如公式(3)。
而图像块的第二像素均值为图像块本身的像素点的像素均值。图像块的垂直像素差总和为图像块在垂直方向上相邻像素点的像素差值的和，计算公式为公式(4)。
2024、根据第一像素均值、第二像素均值和垂直像素差总和确定单场数据的存在场，第二像素均值小于第一像素均值，且垂直像素差总和大于零时；或者，第二像素均值大于或等于第一像素均值，且垂直像素差总和小于零时，存在场为图像块的非同类场；反之，存在场为图像块的所属场。
具体地，第二像素均值小于第一像素均值，且垂直像素差总和大于零时，可以判定单场数据的存在场为图像块的非同类场；或者，第二像素均值大于或等于第一像素均值，且垂直像素差总和小于零时，可以判定单场数据的存在场为图像块的非同类场。而其余的情况，可以判定单场数据的存在场为图像块的所属场。
可见，利用步骤2023和步骤2024可以快速判定单场数据的存在场，以便后续去交错处理，提高去交错处理的速度。
本实施例中，确定图像块存在单场数据后，根据单场数据的存在场确定用于空域预测的参考图像块。即参考图像块为图像块本身或图像块的一相邻时刻图像块，利用空域预测算法进行去交错处理，得到图像块的非同类场图像块。其中，空域预测算法包括Yadif、nnedi3、Tdeint等算法，Yadif算法是采用基于边缘的插值算法对缺失场进行预测和重建，并使用空间预测来防止运动伪影。nnedi，全称叫做Neural Network Edge DirectedInterpolation，是一种插值放大算法。而Tdeint算法是一个双向的，尖锐的，运动自适应去隔行化算法。
利用本实施例的方法，可以有效检测单场数据，并且在去交错后避免有效数据丢失，能够显著提升视觉效果。
特别指出的是，步骤2023和步骤2024中，如果无法判断单场数据的存在场时，证明按照步骤201的预设尺寸划分得到的图像块中同时存在两种单场数据，参考图1a和图1b，例如此时的图像块同时包含“O”和“K”，由于字母“O”只存在于奇场，而字母“K”只存在于偶场，此时无法判断单场数据存在于哪一个场，需要继续对当前的图像块进行进一步划分，直到得到单独包含“O”的图像块和单独包含“K”的图像块，再根据进一步划分后的图像块进行存在场判断和后续去交错处理。
在一个可能的实施例中，确定当前处理的图像块包含单场数据后，方法还包括：
复制图像块的一相邻时刻图像块，得到图像块在同一时刻的非同类场图像块。
具体地，确定当前图像块包含单场数据后，不需要确定单场数据的存在场，可以直接复制图像块的一个相邻时刻图像块，以将复制的图像块作为该图像块在同一时刻的非同类场图像块，
在一个可能的实施例中，确定当前处理的图像块不包含单场数据后，方法还包括：
以图像块和图像块的一相邻时刻图像块为参考，进行空域预测得到图像块在同一时刻的非同类场图像块。
具体地，确定当前图像块不包含单场数据后，可以该图像块和该图像块的一个相邻时刻图像块为参考，进行空域预测得到该图像块的非同类场图像块。
利用上述实施例的方法，可以在去交错处理后，完整保留单场数据的信息，提高视频质量和视觉效果，并且对于存在运动对象(如动画)的隔行视频流，去交错后运动对象不会产生重影。
基于上述视频处理方法实施例的描述，本发明实施例还公开了一种视频处理装置，参考图3，图3是本发明实施例提供的一种视频处理装置的结构示意图，视频处理装置包括：
分割模块301，用于根据预设尺寸对隔行视频流的每帧图像进行分割，得到多个图像块；
处理模块302，用于针对多个图像块中至少一个图像块中每个图像块进行如下处理：
确定当前处理的图像块是否包含单场数据，以及单场数据的存在场；
存在场为图像块的所属场时，以图像块为参考，进行空域预测得到图像块在同一时刻的非同类场图像块；
存在场为图像块的非同类场时，以图像块的一相邻时刻图像块为参考，进行空域预测得到图像块在同一时刻的非同类场图像块，相邻时刻图像块为时域上图像块的前一时刻图像块或后一时刻图像块。
在一个可能的实施例中，处理模块包括：
第一子模块，用于确定图像块的非同类场差异值、第一同类场差异值和第二同类场差异值，非同类场差异值为图像块和图像块的一相邻时刻图像块的平均像素差值，第一同类场差异值为图像块的相邻时刻图像块的平均像素差值，第二同类场差异值为图像块和图像块的一相邻同类图像块的平均像素差值，相邻同类图像块为时域上图像块的前两时刻图像块或后两时刻图像块；
第二子模块，用于根据非同类场差异值、第一同类场差异值、第二同类场差异值、第一差异阈值和第二差异阈值，确定图像块是否包含单场数据，非同类场差异值大于第一差异阈值，且第一同类场差异值、第二同类场差异值均小于第二差异阈值时，图像块包含单场数据；反之，图像块不包含单场数据。
在一个可能的实施例中，处理模块还包括：
第三子模块，用于确定图像块的第一像素均值、第二像素均值和垂直像素差总和，第一像素均值为图像块和图像块的一相邻时刻图像块的像素均值，第二像素均值为图像块的像素均值，垂直像素差总和为图像块在垂直方向上相邻像素点的像素差值的和；
第四子模块，用于根据第一像素均值、第二像素均值和垂直像素差总和确定单场数据的存在场，第二像素均值小于第一像素均值，且垂直像素差总和大于零时；或者，第二像素均值大于或等于第一像素均值，且垂直像素差总和小于零时，存在场为图像块的非同类场；反之，存在场为图像块的所属场。
在一个可能的实施例中，处理模块，还用于当前处理的图像块包含单场数据时，复制图像块的一相邻时刻图像块，得到图像块在同一时刻的非同类场图像块。
在一个可能的实施例中，处理模块，还用于当前处理的图像块不包含单场数据时，以图像块和图像块的一相邻时刻图像块为参考，进行空域预测得到图像块在同一时刻的非同类场图像块。
值得指出的是，其中，视频处理装置的具体功能实现方式可以参见上述视频处理方法的描述，这里不再进行赘述。所述的视频处理装置中的各个单元或模块可以分别或全部合并为一个或若干个另外的单元或模块来构成，或者其中的某个(些)单元或模块还可以再拆分为功能上更小的多个单元或模块来构成，这可以实现同样的操作，而不影响本发明的实施例的技术效果的实现。上述单元或模块是基于逻辑功能划分的，在实际应用中，一个单元(或模块)的功能也可以由多个单元(或模块)来实现，或者多个单元(或模块)的功能由一个单元(或模块)实现。
基于上述方法实施例以及装置实施例的描述，本发明实施例还提供一种视频处理设备。
请参见图4，是本发明实施例提供的一种视频处理设备的结构示意图。如图4所示，上述的视频处理装置可以应用于所述视频处理设备400，所述视频处理设备400可以包括：处理器401，网络接口404和存储器405，此外，所述视频处理设备400还可以包括：用户接口403，和至少一个通信总线402。其中，通信总线402用于实现这些组件之间的连接通信。其中，用户接口403可以包括显示屏(Display)、键盘(Keyboard)，可选用户接口403还可以包括标准的有线接口、无线接口。网络接口404可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器405可以是高速RAM存储器，也可以是非不稳定的存储器(non-volatilememory)，例如至少一个磁盘存储器。存储器405可选的还可以是至少一个位于远离前述处理器401的存储装置。如图4所示，作为一种计算机存储介质的存储器405中可以包括操作系统、网络通信模块、用户接口模块以及设备控制应用程序。
在图4所示的视频处理设备400中，网络接口404可提供网络通讯功能；而用户接口403主要用于为用户提供输入的接口；而处理器401可以用于调用存储器405中存储的设备控制应用程序，以实现上述视频处理方法的步骤。
应当理解，本发明实施例中所描述的视频处理设备400可执行前文所述视频处理方法，也可执行前文所述视频处理装置的描述，在此不再赘述。另外，对采用相同方法的有益效果描述，也不再进行赘述。
此外，这里需要指出的是：本发明实施例还提供了一种计算机存储介质，且所述计算机存储介质中存储有前文提及的视频处理装置所执行的计算机程序，且所述计算机程序包括程序指令，当所述处理器执行所述程序指令时，能够执行前文所述视频处理方法的描述，因此，这里将不再进行赘述。另外，对采用相同方法的有益效果描述，也不再进行赘述。对于本发明所涉及的计算机存储介质实施例中未披露的技术细节，请参照本发明方法实施例的描述。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)或随机存储记忆体(Random AccessMemory，RAM)等。
以上所揭露的仅为本发明较佳实施例而已，当然不能以此来限定本发明之权利范围，因此依本发明权利要求所作的等同变化，仍属本发明所涵盖的范围。
Claims (10)
1.一种视频处理方法，其特征在于，包括：
根据预设尺寸对隔行视频流的每帧图像进行分割，得到多个图像块；
针对所述多个图像块中至少一个图像块中每个图像块进行如下处理：
确定当前处理的图像块是否包含单场数据，以及所述单场数据的存在场；
所述存在场为所述图像块的所属场时，以所述图像块为参考，进行空域预测得到所述图像块在同一时刻的非同类场图像块；
所述存在场为所述图像块的非同类场时，以所述图像块的一相邻时刻图像块为参考，进行空域预测得到所述图像块在同一时刻的非同类场图像块，所述相邻时刻图像块为时域上所述图像块的前一时刻图像块或后一时刻图像块。
2.根据权利要求1所述的方法，其特征在于，确定所述当前处理的图像块包含单场数据后，所述方法还包括：
不确定所述单场数据的存在场，直接复制所述图像块的一相邻时刻图像块，得到所述图像块在同一时刻的非同类场图像块。
3.根据权利要求1所述的方法，其特征在于，确定所述当前处理的图像块不包含单场数据后，所述方法还包括：
以所述图像块和所述图像块的一相邻时刻图像块为参考，进行空域预测得到所述图像块在同一时刻的非同类场图像块。
4.根据权利要求1至3任一项所述的方法，其特征在于，确定当前处理的图像块是否包含单场数据，包括：
确定所述图像块的非同类场差异值、第一同类场差异值和第二同类场差异值，所述非同类场差异值为所述图像块和所述图像块的一相邻时刻图像块的平均像素差值，所述第一同类场差异值为所述图像块的相邻时刻图像块的平均像素差值，所述第二同类场差异值为所述图像块和所述图像块的一相邻同类图像块的平均像素差值，所述相邻同类图像块为时域上所述图像块的前两时刻图像块或后两时刻图像块；
根据所述非同类场差异值、所述第一同类场差异值、所述第二同类场差异值、第一差异阈值和第二差异阈值，确定所述图像块是否包含单场数据，
所述非同类场差异值大于所述第一差异阈值，且所述第一同类场差异值、所述第二同类场差异值均小于第二差异阈值时，所述图像块包含单场数据；反之，所述图像块不包含单场数据。
5.根据权利要求1至3任一项所述的方法，其特征在于，确定所述单场数据的存在场，包括：
确定所述图像块的第一像素均值、第二像素均值和垂直像素差总和，所述第一像素均值为所述图像块和所述图像块的一相邻时刻图像块的像素均值，所述第二像素均值为所述图像块的像素均值，所述垂直像素差总和为所述图像块在垂直方向上相邻像素点的像素差值的和；
根据所述第一像素均值、所述第二像素均值和垂直像素差总和确定单场数据的存在场，所述第二像素均值小于所述第一像素均值，且所述垂直像素差总和大于零时；或者，所述第二像素均值大于或等于所述第一像素均值，且所述垂直像素差总和小于零时，所述存在场为所述图像块的非同类场；反之，所述存在场为所述图像块的所属场。
6.一种视频处理装置，其特征在于，包括：
分割模块，用于根据预设尺寸对隔行视频流的每帧图像进行分割，得到多个图像块；
处理模块，用于针对所述多个图像块中至少一个图像块中每个图像块进行如下处理：
确定当前处理的图像块是否包含单场数据，以及所述单场数据的存在场；
所述存在场为所述图像块的所属场时，以所述图像块为参考，进行空域预测得到所述图像块在同一时刻的非同类场图像块；
所述存在场为所述图像块的非同类场时，以所述图像块的一相邻时刻图像块为参考，进行空域预测得到所述图像块在同一时刻的非同类场图像块，所述相邻时刻图像块为时域上所述图像块的前一时刻图像块或后一时刻图像块。
7.根据权利要求6所述的装置，其特征在于，
所述处理模块，还用于所述当前处理的图像块包含单场数据时，不确定所述单场数据的存在场，直接复制所述图像块的一相邻时刻图像块，得到所述图像块在同一时刻的非同类场图像块。
8.根据权利要求6或7所述的装置，其特征在于，
所述处理模块，还用于所述当前处理的图像块不包含单场数据时，以所述图像块和所述图像块的一相邻时刻图像块为参考，进行空域预测得到所述图像块在同一时刻的非同类场图像块。
9.一种视频处理设备，其特征在于，包括：处理器和存储器；
所述处理器和存储器相连，其中，所述存储器用于存储程序代码，所述处理器用于调用所述程序代码，以执行如权利要求1-5任一项所述的视频处理方法。
10.一种计算机存储介质，其特征在于，所述计算机存储介质存储有计算机程序，所述计算机程序包括程序指令，所述程序指令当被处理器执行时，执行如权利要求1-5任一项所述的视频处理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010292746.XA CN111476803B (zh) | 2020-04-14 | 2020-04-14 | 视频处理方法及相关设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010292746.XA CN111476803B (zh) | 2020-04-14 | 2020-04-14 | 视频处理方法及相关设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111476803A CN111476803A (zh) | 2020-07-31 |
| CN111476803B true CN111476803B (zh) | 2022-08-26 |
Family
ID=71752038
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010292746.XA Active CN111476803B (zh) | 2020-04-14 | 2020-04-14 | 视频处理方法及相关设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111476803B (zh) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104580978A (zh) * | 2015-02-11 | 2015-04-29 | 北京海尔集成电路设计有限公司 | 一种视频检测及处理方法、装置 |
| CN105898179A (zh) * | 2015-12-14 | 2016-08-24 | 乐视云计算有限公司 | 一种隔行视频的去隔行方法及装置 |
| CN107026998A (zh) * | 2016-02-01 | 2017-08-08 | 北京数码视讯科技股份有限公司 | 一种去隔行方法及设备 |
| CN109951713A (zh) * | 2019-03-11 | 2019-06-28 | 深圳信息职业技术学院 | 一种用于视频去隔行的运动估计补偿电路及方法 |
-
2020
- 2020-04-14 CN CN202010292746.XA patent/CN111476803B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104580978A (zh) * | 2015-02-11 | 2015-04-29 | 北京海尔集成电路设计有限公司 | 一种视频检测及处理方法、装置 |
| CN105898179A (zh) * | 2015-12-14 | 2016-08-24 | 乐视云计算有限公司 | 一种隔行视频的去隔行方法及装置 |
| CN107026998A (zh) * | 2016-02-01 | 2017-08-08 | 北京数码视讯科技股份有限公司 | 一种去隔行方法及设备 |
| CN109951713A (zh) * | 2019-03-11 | 2019-06-28 | 深圳信息职业技术学院 | 一种用于视频去隔行的运动估计补偿电路及方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111476803A (zh) | 2020-07-31 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR100393066B1 (ko) | 적응 움직임 보상형 디-인터레이싱 장치 및 그 방법 | |
| US6269484B1 (en) | Method and apparatus for de-interlacing interlaced content using motion vectors in compressed video streams | |
| JP4847040B2 (ja) | ビデオシーケンスでのティッカー処理 | |
| US8526502B2 (en) | Method and apparatus for line based vertical motion estimation and compensation | |
| KR100902315B1 (ko) | 디인터레이싱장치 및 방법 | |
| US8259228B2 (en) | Method and apparatus for high quality video motion adaptive edge-directional deinterlacing | |
| US6118488A (en) | Method and apparatus for adaptive edge-based scan line interpolation using 1-D pixel array motion detection | |
| EP1515543A2 (en) | Method and de-interlacing apparatus that employs recursively generated motion history maps | |
| JP2004312680A (ja) | スクロールされるテキストまたはグラフィックデータの検出が可能な動き推定装置および方法 | |
| US8497937B2 (en) | Converting device and converting method of video signals | |
| EP1164792A2 (en) | Format converter using bidirectional motion vector and method thereof | |
| WO2001067742A1 (en) | Detection of progressive frames in a video field sequence | |
| JP2004518341A (ja) | 単一のテレビジョン信号フィールド中で並行して生ずるフィルム及びビデオオブジェクトの認識 | |
| US10440318B2 (en) | Motion adaptive de-interlacing and advanced film mode detection | |
| EP1646228B1 (en) | Image processing apparatus and method | |
| JP2005318623A (ja) | フィルムモード外挿方法及びフィルムモード検出器並びに動き補償器 | |
| US8704945B1 (en) | Motion adaptive deinterlacer | |
| CN111476803B (zh) | 视频处理方法及相关设备 | |
| Tai et al. | A motion and edge adaptive deinterlacing algorithm | |
| EP1418754B1 (en) | Progressive conversion of interlaced video based on coded bitstream analysis | |
| JP2005102191A (ja) | 画像処理装置及び方法 | |
| US8233085B1 (en) | Method and system for interpolating a pixel value of a pixel located at an on-screen display | |
| JP2009521168A (ja) | 表示画像における圧縮アーチファクトの低減 | |
| CN115035151B (zh) | 梳状失真的检测方法、装置、计算机设备及存储介质 | |
| JP4551343B2 (ja) | 映像処理装置、及び映像処理方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |